[DI07] あらゆるデータに価値がある! アンチ断捨離ストのための Azure Data Lakede:code 2017
「既に起こったことをレポートする」ことから、「これから起こりそうなことを予測する」方向へ。この要件を満たすためにどのようなデータを収集すべきか、前もって決めるのは困難です。ならば、あらゆる種類のデータを貯めておいて、必要になった時に取り出せばいい。それがデータ レイクの基本的な発想です。Azure Data Lake は、あらゆる形式のデータを無尽蔵に貯めておけるストレージであり、アプリケーションの要件に合わせて柔軟にデータを取り出せる Query as a Service です。
本セッションでは、 Azure Data Lake を活用したアプリケーションの設計と開発について説明します。
関連リソース 1: Azure Data Lake Analytics (https://azure.microsoft.com/ja-jp/services/data-lake-analytics/)
関連リソース 2: Azure Data Lake Store (https://azure.microsoft.com/ja-jp/services/data-lake-store/)
関連リソース 3: [DI12] あらゆるデータをビジネスに活用! Azure Data Lake を中心としたビックデータ処理基盤のアーキテクチャと実装 (https://www.microsoft.com/ja-jp/events/decode/2017/sessions.aspx#DI12)
製品/テクノロジ: Microsoft Azure/アーキテクチャ/クラウド/ビッグ データ
野村 一行
日本マイクロソフト株式会社
デベロッパー エバンジェリズム統括本部
エバンジェリスト
[DI07] あらゆるデータに価値がある! アンチ断捨離ストのための Azure Data Lakede:code 2017
「既に起こったことをレポートする」ことから、「これから起こりそうなことを予測する」方向へ。この要件を満たすためにどのようなデータを収集すべきか、前もって決めるのは困難です。ならば、あらゆる種類のデータを貯めておいて、必要になった時に取り出せばいい。それがデータ レイクの基本的な発想です。Azure Data Lake は、あらゆる形式のデータを無尽蔵に貯めておけるストレージであり、アプリケーションの要件に合わせて柔軟にデータを取り出せる Query as a Service です。
本セッションでは、 Azure Data Lake を活用したアプリケーションの設計と開発について説明します。
関連リソース 1: Azure Data Lake Analytics (https://azure.microsoft.com/ja-jp/services/data-lake-analytics/)
関連リソース 2: Azure Data Lake Store (https://azure.microsoft.com/ja-jp/services/data-lake-store/)
関連リソース 3: [DI12] あらゆるデータをビジネスに活用! Azure Data Lake を中心としたビックデータ処理基盤のアーキテクチャと実装 (https://www.microsoft.com/ja-jp/events/decode/2017/sessions.aspx#DI12)
製品/テクノロジ: Microsoft Azure/アーキテクチャ/クラウド/ビッグ データ
野村 一行
日本マイクロソフト株式会社
デベロッパー エバンジェリズム統括本部
エバンジェリスト
【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [概要編]Hideo Takagi
2018/2/15【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [概要編]
https://info.microsoft.com/JA-AABD-WBNR-FY18-02Feb-15-AzureDataLake-MCW0002857_02OnDemandRegistration-ForminBody.html
【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [実践編]Hideo Takagi
2018/3/8【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [実践編]
https://info.microsoft.com/JA-AABD-WBNR-FY18-03Mar-08-BigdatainfrastructuresupportingAI-MCW0002861_01Registration-ForminBody.html?ls=Website&lsd=AzureWebsite
データサイエンティストのための
Spark 入門
昨今、データサイエンティストの間で「Spark」の人気が高まっています。データをインメモリで高速に処理できるSparkを使うと、大規模なデータを扱う際にもストレスなく分析できます。
今回の第3回 Big Data University - 東京ミートアップでは、RStudioで作ったプログラムを Spark上で実行してみる方法を解説します。
また、合わせて、Rや Sparkとの対話環境である Data Scientist Workbench の使い方を紹介します。
こちらは前半資料となります。
Microsoft Search - Microsoft Graph connector と Search Federation の概要Ai Hirano
Microsoft 365 上での包括的な検索機能を提供するのが Microsoft Search です。SharePoint, OneDrive, Microsoft Teams, Yammer, Power BIなど を検索できるだけでなく独自の QnA やバナーなどを提供します。これに加え、Microsoft 365 以外の外部ソースを Microsoft 365 上から一元的に検索するための仕組みとして Microsoft Graph connector や Microsoft Search Federation などがあります。 Microsoft Search Federation は現在、Private preview でありまだ概要しか公開されていませんが、Azure Cognitive Services との連携などもできるようになります。本セッションでは、各機能の利点を解説しながら、開発者としてどう備えていくと良いかをコンパクトにお伝えします。
【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [概要編]Hideo Takagi
2018/2/15【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [概要編]
https://info.microsoft.com/JA-AABD-WBNR-FY18-02Feb-15-AzureDataLake-MCW0002857_02OnDemandRegistration-ForminBody.html
【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [実践編]Hideo Takagi
2018/3/8【ウェブ セミナー】AI / アナリティクスを支えるビッグデータ基盤 Azure Data Lake [実践編]
https://info.microsoft.com/JA-AABD-WBNR-FY18-03Mar-08-BigdatainfrastructuresupportingAI-MCW0002861_01Registration-ForminBody.html?ls=Website&lsd=AzureWebsite
データサイエンティストのための
Spark 入門
昨今、データサイエンティストの間で「Spark」の人気が高まっています。データをインメモリで高速に処理できるSparkを使うと、大規模なデータを扱う際にもストレスなく分析できます。
今回の第3回 Big Data University - 東京ミートアップでは、RStudioで作ったプログラムを Spark上で実行してみる方法を解説します。
また、合わせて、Rや Sparkとの対話環境である Data Scientist Workbench の使い方を紹介します。
こちらは前半資料となります。
Microsoft Search - Microsoft Graph connector と Search Federation の概要Ai Hirano
Microsoft 365 上での包括的な検索機能を提供するのが Microsoft Search です。SharePoint, OneDrive, Microsoft Teams, Yammer, Power BIなど を検索できるだけでなく独自の QnA やバナーなどを提供します。これに加え、Microsoft 365 以外の外部ソースを Microsoft 365 上から一元的に検索するための仕組みとして Microsoft Graph connector や Microsoft Search Federation などがあります。 Microsoft Search Federation は現在、Private preview でありまだ概要しか公開されていませんが、Azure Cognitive Services との連携などもできるようになります。本セッションでは、各機能の利点を解説しながら、開発者としてどう備えていくと良いかをコンパクトにお伝えします。
PDF版 世界中のゲーム分析をしてきたPlayFabが大進化!一緒に裏側の最新データ探索の仕組みを覗いてみよう Db tech showcase2020Daisuke Masubuchi
世界中のオンラインゲームやスマフォアプリの分析をしてきたPlayFab。最近、従来のイベント分析に加えて様々なテレメトリーを包含したクラウド分析機能が備わりました。今回は、その裏の Azure Data Explorer a.k.a Kusto での構成や仕組みをご紹介します。Windowsのテレメトリー分析やAzureのログ解析基盤の裏側と共通した仕掛けが含まれているのでお楽しみに!ゲーム業界に限らず、ビックデータ運用を考えている大規模なSaaS事業やIoT事業にもご参考いただけたら幸いです。
at db tech showcase ONLINE 2020 https://db-tech-showcase.com/dbts/2020/online #dbts2020 #gamestackjp
*本資料は 2020年11月11日に開催された DB Tech Showcase イベントにてお話させていただいた、同タイトルのセッション資料となります
【de:code 2020】 Microsoft Azure データ関連サービスの紹介日本マイクロソフト株式会社
Microsoft Azure には多種多様なデータ関連サービスが存在し、用途やデータの種類によって利用するサービスが異なります。本セッションでは、Azure のデータ関連サービスを紹介します。初めて、Azure でデータベースを構築したり、分析基盤を構築されようとされている方など向けの入門編のセッションです。