SE の雑記

SQL Server の情報をメインに Microsoft 製品の勉強内容を日々投稿

Archive for the ‘SQL Server 2019’ tag

SQL Server 2019 の新機能の ハイブリッドバッファープールを試してみる

leave a comment

SQL Server 2019 では新機能として、ハイブリッド バッファー プール (Hybrid Buffer Pool) という機能が新しく追加されます。

ドキュメントベースではなんとなく動作を理解できていたのですが、実際の動作を確認できていなかったので、軽くではありますが動作を試してみました。
Read the rest of this entry »

Written by Masayuki.Ozawa

2月 21st, 2019 at 11:52 pm

Posted in SQL Server

Tagged with ,

SQL Server 2019 CTP 2.2 の Big Data Cluster を支えるソフトウェア

leave a comment

SQL Server 2019 の新機能である Big Data Cluster は Kubernetes 上に展開された SQL Server on Linux をインタフェースとして、Hadoop のエコシステムを活用することができるデータ分析基盤になります。
いままで触ってこなかったソフトウェアが大量に含まれていたので、軽くまとめた一覧を。
コンポーネントが多いので、HDInsight のように、まとまった情報が欲しいですね。

役割

ソフト

バージョン

URL

実行基盤

Kubernetes

1.10 以降

https://kubernetes.io/

リバースプ
プロキシ

nginx

nginx version: nginx/1.10.3 (Ubuntu)

https://nginx.org/en/

https://nginx.org/en/docs/

データ
分析基盤

Apache Hadoop

Hadoop 2.9.1
(HDP :
2.6.4.0-91)

https://hadoop.apache.org/

http://hadoop.apache.org/docs/current/

 

Apache Hive

1.2.1

https://hive.apache.org/

https://cwiki.apache.org/confluence/display/Hive/LanguageManual

 

Apache Livy

0.5.0

https://livy.incubator.apache.org/

 

Apache Spark

2.3.1

https://spark.apache.org/
https://spark.apache.org/docs/latest/

認証
セキュリティ

Apache Knox

1.1.0

https://knox.apache.org/

https://knox.apache.org/books/knox-1-1-0/user-guide.html

 

Apache Ranger

0.7.0.2.6.4.0-9

https://ranger.apache.org/

ログ収集
分析基盤

Fluent Bit

Fluent-Bit v0.13.5

https://fluentbit.io/

https://docs.fluentbit.io/manual/

 

Kibana

6.3.1

https://www.elastic.co/jp/products/kibana

https://www.elastic.co/guide/en/kibana/current/index.html

 

Elastic Search

6.3.2

https://www.elastic.co/jp/products/elasticsearch

https://www.elastic.co/guide/en/elasticsearch/reference/current/index.html

 

Grafana

Version 5.2.2
(commit: aeaf7b2)

https://grafana.com/

http://docs.grafana.org/

 

InfluxDB

1.5.3

https://www.influxdata.com/

https://docs.influxdata.com/influxdb/

 

Telegraf

1.6.0

https://www.influxdata.com/
https://docs.influxdata.com/telegraf/

 

Collectd

5.5.1

https://collectd.org/

https://collectd.org/documentation.shtml

プロセス
コントロール

Supervisor

3.2.0

http://supervisord.org/

Written by Masayuki.Ozawa

1月 24th, 2019 at 9:40 am

Posted in SQL Server

Tagged with ,

SSMS 18.0 Preview 5 で追加された新しい機能について

leave a comment

SSMS 18.0 Preview 5 で、二つほど大きめの機能が追加されているのでご紹介まで。
このバージョンから 次の二つの機能 が追加されています。

  • 静的データマスク (Static Data Masking)
  • クエリチューニングアシスタント (クエリ調整アシスタント / Query Tuning Assistant : QTA)

Read the rest of this entry »

Written by Masayuki.Ozawa

12月 9th, 2018 at 7:13 pm

Posted in SQL Server

Tagged with , ,

SQL Server 2019 の Big Data Cluster に Cognitive Services in containers を組み込んでみる

leave a comment

SQL Server 2019 の Big Data Cluster は Kubernetes 上に構築されたデータ分析基盤となります。
image
このデータ分析基盤の上に、Cognitive Serivces in containers を組み込む場合、どのような作業が必要になるのかを、軽く検証してみました。
今回は、NUC 上に構築した k8s 上に展開しています。
Read the rest of this entry »

Written by Masayuki.Ozawa

11月 21st, 2018 at 10:28 pm

SQL Server Management Studio 18.0 Preview 5 がリリースされました

leave a comment

SSMS 18.0 Preview 5 がリリースされました。

詳細はこちら

この SSMS を使用することで、SQL Server 2019 CTP 2.1 で追加された静的データマスキングが利用できるようになります。

この機能自体は SSMS の拡張機能ですので、SQL Server 2019 以外でも利用することが可能です。
他にも新しい機能として、Query Tuning Assistant (クエリ調整アシスタント) が追加されているようですね。

Written by Masayuki.Ozawa

11月 16th, 2018 at 7:43 am

Posted in SQL Server

Tagged with ,

SQL Server 2019 CTP 2.1 で実装された Big Data Cluster のアプリケーションの展開を試してみる

leave a comment

SQL Server 2019 では、R / Python のアプリケーションを展開するための機能が新しく追加されました。
How to deploy an app on SQL Server 2019 big data cluster (preview)
このアプリケーションがどういうものなのかドキュメントを見ながら試してみました。
Read the rest of this entry »

Written by Masayuki.Ozawa

11月 10th, 2018 at 6:02 pm

Posted in SQL Server

Tagged with ,

SQL Server 2019 CTP 2.1 がリリースされました

leave a comment

SQL Server 2019 CTP 2.1 がリリースされました。
PASS Summit 2018 の開催に合わせて、新しい Preview をリリースした形でしょうか。
モジュールの入手は こちら から。
image
追加された機能については、What’s new in SQL Server 2019 と SQL Server 2019 preview release notes に記載されています。
CTP 2.1 の追加内容は次のようなものがあるようです。
Read the rest of this entry »

Written by Masayuki.Ozawa

11月 8th, 2018 at 12:38 am

Posted in SQL Server

Tagged with ,

SQL Server 2019 の PolyBase の ODBC を使用した接続のドキュメントが公開されました

leave a comment

SQL Server 2019 の新しくなった PolyBase では、次のデータソースにネイティブに接続ができるようになっています。

これ以外に汎用的に ODBC を使用して外部データソースに接続し、データ仮想化を実施することができるようになっています。
リリース直後のドキュメントでは、ODBC 経由での接続方法の情報が公開されていなかったのですが、先日、ドキュメントの公開が行われました。
Configure PolyBase to access external data in SQL Server
これにより、上記に記載したデータソース以外についても ODBC ドライバーを使用することで、接続が可能となりました。
(PolyBase は、64 bit のプロセスなので、64 bit の ODBC ドライバーが必要になるかと)
Read the rest of this entry »

Written by Masayuki.Ozawa

10月 27th, 2018 at 5:36 pm

Posted in SQL Server

Tagged with ,

SQL Server 2019 の新しくなった PolyBase を使用したデータ仮想化のメモ

leave a comment

SQL Server 2019 では、PolyBase が機能強化され、新機能のキーワードとして「データ仮想化」「データハブ」があります。
What is PolyBase? も随時更新されているようで、一度読んだ後も改めて確認するといろいろな更新がかかっているように見受けられます。
複数のデータソースに接続をしてみたので、軽くまとめて置こうかと。
Read the rest of this entry »

Written by Masayuki.Ozawa

10月 21st, 2018 at 12:23 am

Posted in SQL Server

Tagged with ,

2018/10/23 に SQL Server 2019 の内容を含むセミナーを担当させていただきます

leave a comment

毎月、日本マイクロソフト様で SQL Server 丸わかり一日セミナーというセミナーでお話をさせていただいています。

今月は 10/23 (火) に開催させていただくのですが、Ignite 2018 で SQL Server 2019 の情報が公開されましたので、今回からは SQL Server 2019 の内容を含めさせていただくことになりました。
SQL Server 2019 には Big Data Cluster をはじめとして様々な機能が追加されています。
本セミナーではどのような機能が追加されているのかを 1 時間という限られた時間の中で可能な限りご紹介させていただきます。
他にも Managed Instance (MI) や SQL Server へのマイグレーションについての内容をもお話しさせていただきます。
この 2 つについては、先月以前もお話させていただいたものではありますが、Ignite 2018 で発表された内容を加えています。
まだお席には余裕がありますので、興味のある方がいらっしゃいましたらご参加いただければ幸いです。
休憩時間を含めて、4時間30の 4 セッション構成となっているのですが、そのうち 3 セッションは私が対応させていただきます m(_ _)m
[オンサイト] <最新アップデート>SQL Sever 丸わかり1日セミナー
この丸わかり 1 日セミナーは毎月実施しており、セッションの大枠は毎回同じではあるのですが、「開催タイミングの最新の情報」をお届けするようにしております。
参加していただいた方からのアンケートでのフィードバックもあり、可能な限り、内容は毎回アップデートするようにしておりますので、以前に参加された方も再度ご参加いただけると、新しい発見があるかと。
コミュニティではなく、通常のセミナーの形式ですので、自社のまだ参加されていないメンバーの方にご参加いただくのがよいかもしれませんね。
(私のセッションについては、参加された方には、その回で使用したセッション資料を、可能な範囲で PDF で DL できるようにしておりますので、後日、電子媒体での確認もできます)

Written by Masayuki.Ozawa

10月 10th, 2018 at 8:10 am