SE の雑記

月次で公開されている SQL Server 2019 の新しい Preview ですが、CTP (Community Technical Preview) から RC (Release Candidate : 製品候補版) に変わり、First RC となる RC1 が公開されました。

アナウンスはこちらから

• SQL Server 2019 release candidate is now available
• What’s new for SQL Server 2019 Analysis Services RC1

ドキュメントはこちらから

• What’s new in SQL Server 2019
• SQL Server 2019 preview release notes

本日時点では、Big Data Cluster (BDC) については、CTP 3.2 となっており、RC 版は後日の公開となっているようです。

• Release notes for big data clusters on SQL Server

Read the rest of this entry »

公式でアナウンスが出ていますが、SQL Server 2019 CTP 3.2 がリリースされています。

• SQL Server 2019 community technology preview 3.2 is now available

細かな内容はこちらから。

• SQL Server 2019 preview release notes
• What’s new in SQL Server 2019 preview
• Release notes for big data clusters on SQL Server

Read the rest of this entry »

SQL Server 2019 CTP 3.1 のデータベースエンジンの新機能として「OPTIMIZE_FOR_SEQUENTIAL_KEY」というインデックスのオプションが追加されました。

このオプションは、インデックスへの挿入を行う際に発生する Last page insert によるページラッチの競合を改善する効果のあるオプションとなっています。

詳細については、CREATE INDEX のヘルプの Sequential Keys に記載されています。

Read the rest of this entry »

投稿を書いている時点ではモジュールはまだ公開されていないようですが、SQL Server 2019 CTP 3.1 のリリースノートが公開されていました。

追記

公式アナウンスありました。
SQL Server 2019 community technology preview 3.1 is now availabl

• SQL Server 2019 preview release notes (CTP 3.1)
• What’s new in SQL Server 2019 preview (CTP 3.1 June 2019)
• Release notes for big data clusters on SQL Server (CTP 3.1 (June))

データベースエンジンとしては、次のような機能が追加されているようです。

データベースエンジン

• 暗号化列にインデックスを付与
  • Always Encrypted with Secure Enclaves でランダム暗号化した列に対して、非クラスター化インデックスを作成することができるようになり検索の効率が向上しているようです。
  • Indexes on Enclave-enabled Columns using Randomized Encryption
• セットアップ時に最大 / 最小メモリを設定可能
• 従来までの SQL Server では、セットアップ後に最大 / 最小メモリを設定していましたが、今回からセットアップ時に設定ができるようになったようです。
  MAXDOP についても設定ができるようになったようです。
• tempdb のように推奨オプションが指定される形で手動変更も可能という設定となったようですね。
• Setting the memory options manually
• グラフテーブルの最短パス用の関数の追加
• グラフテーブルで任意のノード間の最短パスを見つけるための関数 (SHORTEST_PATH) が追加されたようです。
• Public Preview of Shortest Path on SQL Server 2019
• グラフテーブルのパーティションテーブル / インデックスのサポート
• グラフテーブルでパーティショニングが使用できるようになったようです。
• 最終ページ挿入を改善するための新しいインデックスオプション
• インデックスに OPTIMIZE_FOR_SEQUENTIAL_KEY オプションが新しく追加されました。
• ID や現在の日付時刻が設定されている場合、複数スレッドによる最終ページのへの INSERT によって、PAGELATCH_EX の競合が発生することがあります。
  この競合を解消することができるオプションとして OPTIMIZE_FOR_SEQUENTIAL_KEY オプションが追加されたようです。
• SQL Server on Linux の tempdb の自動的な分割
• 2017 の SQL Server on Linux では、tempdb の自動的な分割は行われなかったのですが、2019 CTP 3.1 から分割されるようです。

Big Data Cluster

ビッグデータクラスター周りは例のごとく、かなり変更が加わっています。

• mssqlctl コマンドの変更
  • 新しい CTP のリリースごとにコマンド体系が変わる mssqlctl ですが、今回も変わりました。
  • mssqlctl cluster → mssqlctl bdc に変更
    • クラスターのステータスを確認するためのコマンドとして mssqlctl bdc status が追加されているようです。
    • これに伴いまさかの管理ポータルの廃止が…。
      • Kibana / Grafana のダッシュボードは個別にエンドポイントがあるようなので、そこから状況は確認できるようですが。
• Spark コンピューティングプール
  • 今までの Big Data Cluster は、ストレージプールの HDFS は Spark と相乗りだったのですが、Spark 部分を切り離して、個別にスケールできるようになったようです。
  • Configure storage without spark
• MSSQL Spark コネクタ
  • データプールの外部テーブルに読み取りだけでなく、書き込みもできるようになったようです。
• MLeap を使用した機械学習
  • Spark の MLeap と SQL Server の Java 拡張を使用した機械学習の仕組みの実装ができるようです。
  • Create, export, and score Spark machine learning models on SQL Server big data clusters

SQL Server 2019 CTP 3.0 から、tempdb のメタデータをメモリ最適化テーブルを使用することができるようになりました。

• データベース エンジン
• メモリ最適化 tempdb メタデータ (In-Memory Database)
• メモリ最適化 tempdb メタデータ (tempdb)

Hekatonized Tempdb と呼んでいる方もいるようですね。

Read the rest of this entry »

先日、登壇させていただいた de:code 2019 の SQL Server 2019 Big Data Cluster 入門の資料を Github で公開させていただきました。

https://github.com/MasayukiOzawa/decode-2019

こちらにスライドの PDF も公開してあります。

今回のデモは Azure Data Studio の Notebook を使用して実施しましたので、Github 上のデモ用コンテンツも実行済みの Notebook の形でアップロードしてあります。

どんなことができるか、どんな動作になるかはそのまま確認していただけるかと。

月次でリリースされている SQL Server 2019 の Preview の CTP 3.0 がリリースされました。
de:code の 1 週間前にリリースされたので、「俺のセッションに影響はないのか!?」と、ちょっと焦りましたがなんとかなりそうです。

アナウンスはこちら。

• SQL Server 2019 community technology preview 3.0 is now available
• What’s new for SQL Server 2019 Analysis Services CTP 3.0

詳細についてはリリースノートや What’s New で確認できます。

• SQL Server 2019 preview release notes
• What’s new in SQL Server 2019 preview

ざっくりとした内容は次のようなものです。

Read the rest of this entry »

SQL Server 2019 では PolyBase の機能が進化し「データ仮想化」が一つのキーワードとなっています。

• What is PolyBase?

PolyBase は、SQL Server 2016 から実装された機能だったはずですが、SQL Server 2016 / 2017 では、Hadoop と Azure BLOB Storage の接続のみをサポートしており、オブジェクトストレージ上のデータに対してクエリを実行するための機能としての利用でした。

• PolyBase features and limitations

SQL Server 2019 になり、オブジェクトストレージの他に「ODBC 汎用コネクタ」がサポートされるようになり、アクセスできるデータソースが大幅に増加しました。

• Configure PolyBase to access external data in SQL Server

標準で、SQL Server / Oracle / Teradata / MongoDB へのアクセスもできるようになっているのですが、これらについては、「標準で導入されている ODBC ドライバー」となっており、実装については ODBC と同様です。

SQL Server 2019 のセミナーを毎月実施させていただいている中で「PolyBase とリンクサーバーの違い」について質問されることがあります。

これらの違いについては、次のドキュメントで解説が行われています。

• Frequently asked questions

Read the rest of this entry »

SQL Server 2019 CTP 2.5 と SSMS 18.0 が公開されました。
SSMS 18.0 は今回のタイミングで GA となり、正式版です。

Build 2019 で新しい CTP 出るのかなと思っていたのですが、4 月内に新しい Preview 出てきましたね。
Build では新しい発表あるのでしょうか？？

公式のアナウンスとしては以下になります。

• SQL Server 2019 community technology preview 2.5 is now available
• SQL Server Management Studio (SSMS) 18.0 released for general availability

Read the rest of this entry »

SQL Server は製品のバージョンアップや更新プログラムによってクエリ情報を取得するための「クエリプロファイリング」の機能が向上しています。

クエリ プロファイリング インフラストラクチャ というドキュメントで、詳細はまとめられているのですが、自分の言葉で書く機会が少なかったのと、SQL Server 2019 CTP 2.4 でも取得できる情報が増えていますので、この機会にまとめておこうと思います。

Read the rest of this entry »