都内で働くSEの技術的なひとりごと / Technical soliloquy of System Engineer working in Tokyo

都内でサラリーマンやってます。SQL Server を中心とした (2023年からは Azure も。) マイクロソフト系(たまに、OSS系などマイクロソフト以外の技術も...)の技術的なことについて書いています。日々の仕事の中で、気になったことを技術要素関係なく気まぐれに選んでいるので記事内容は開発言語、インフラ等ばらばらです。なお、当ブログで発信、発言は私個人のものであり、所属する組織、企業、団体等とは何のかかわりもございません。ブログの内容もきちんと検証して使用してください。英語の勉強のため、英語の

The Big Deal about Big Data from Windows IT Pro

 Windows IT Pro でビックデータに関する記事を見つけました。HDInsight に関する記事があったので少し読んでみました。前半部分は、ビックデータの定義とかなぜビックデータという考えが注目されるようになったかとか、可能になったかなどの記事なのでちょっと割愛します。個人的に注目すべきはここの部分かな。

 

--------

You can get started with Big Data in a number of ways. Microsoft’s HDInsight provides both an on-premise Windows-based Hadoop implementation, as well as an Azure service which can allow organizations access to a Big Data services without needing to buy, configure, or manage the Hadoop infrastructure. You can also connect SQL Server to the HDInsight Server or Service using Microsoft’s SQL Server Connector for Apache Hadoop. Perhaps Microsoft’s upcoming Polybase technology is even more interesting. Polybase will provide a bridge to Big Data from SQL Server allowing SQL Server T-SQL queries to be run against data stored in a Hadoop cluster and to return the data as standard SQL results. Polybase will initially be released with the next release of Microsoft’s Parallel Data Warehouse (PDW).

--------

 

  • SQL Server to the HDInsight Server .... とあるが、SQL Server から直接 HDInsight Server へ接続する手段があるんだな。ちょっと前に幾つか HDInsight に関する検証をしましたが、知りませんでした。ちょっと調べてみるかな。
  • Service using Microsoft’s SQL Server Connector for Apache Hadoop. うん、こちらは検証済みです。
  • Polybase will provide a bridge to Big Data from SQL Server allowing SQL Server T-SQL queries to be run against data stored in a Hadoop cluster and to return the data as standard SQL results. おお、HDFS に格納されたデータをT-SQL で読み込めるようになるのか。しかも、SQL の結果としてみれるんですね。これはいい!
  • Polybase will initially be released with the next release of Microsoft’s Parallel Data Warehouse (PDW). ということは、SQL Server 2015 or 2016? でリリース?

SQL Server 周辺はこれからもどんどん面白くなりますね!