Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Tech Summit 2018 Azure Data Factory 入門ハンズオン

233 views

Published on

Tech Summit 2018 Day3(11/7) に行った Azure Data Factory の入門ハンズオン資料です。
https://blog.isao.co.jp/techsummit-2018-datafactory-handson

Published in: Engineering
  • Be the first to comment

  • Be the first to like this

Tech Summit 2018 Azure Data Factory 入門ハンズオン

  1. 1. データ可視化のインフラ インテグレーション ~ 50 分でわかる Azure Data Factory 入門 秋山 康平 株式会社ISAO MSP DA65 原 裕一郎 株式会社ISAO MSP 渡邊 千裕 株式会社ISAO Web
  2. 2. データ可視化のインフラインテグレーション 50分でわかる Data Factory 入門 秋山 康平 株式会社ISAO DA65 3
  3. 3. 自己紹介 4
  4. 4. ISAO 紹介 G04ブース番号 ※Expo Area 2 です 5
  5. 5. • Data Factory がどんなサービスなのかを理解する 本日のゴール 6
  6. 6. 想定するストーリー • Blob Storage 上のログを分析・可視化するために SQL Database に取り込む 本セッションのスコープ 7
  7. 7. ここからハンズオン
  8. 8. 構成図 – 最終形 Data Factory Pipeline Linked Service Data Set Activity 9
  9. 9. ハンズオンの流れ 10
  10. 10. ハンズオン - Azure ポータルにログイン 11
  11. 11. セットアップ – Blob(確認のみ) 13
  12. 12. セットアップ - Blob(確認のみ) 14
  13. 13. セットアップ – SQL DB 15
  14. 14. セットアップ – SQL DB 16
  15. 15. セットアップ – SQL DB http://bit.ly/2OmZcTf 17
  16. 16. Data Factory を作成 18
  17. 17. Data Factory を作成 19
  18. 18. Data Factory でパイプラインを作成 20
  19. 19. Data Factory でパイプラインを作成 21
  20. 20. 構成図 – 途中経過 Data Factory Pipeline Linked Service Data Set Activity 22
  21. 21. 補足:Data Factory の概念 https://docs.microsoft.com/ja-jp/azure/data-factory/concepts-datasets-linked-services 23
  22. 22. Data Factory - Blob Storage のデータセットを設定 24
  23. 23. Data Factory - Blob Storage のデータセットを設定 25
  24. 24. Data Factory - Blob Storage のデータセットを設定 26
  25. 25. Data Factory - Blob Storage のデータセットを設定 27
  26. 26. Data Factory - Blob Storage のデータセットを設定 28
  27. 27. Data Factory - Blob Storage のデータセットを設定 29
  28. 28. 構成図 – 途中経過 Data Factory Pipeline Linked Service Data Set Activity 30
  29. 29. Data Factory - SQL Database のデータセットを設定 31
  30. 30. Data Factory - SQL Database のデータセットを設定 32
  31. 31. Data Factory - SQL Database のデータセットを設定 33
  32. 32. Data Factory - SQL Database のデータセットを設定 34
  33. 33. Data Factory - SQL Database のデータセットを設定 35
  34. 34. Data Factory - SQL Database のデータセットを設定 36
  35. 35. 構成図 – 途中経過 Data Factory Pipeline Linked Service Data Set Activity 37
  36. 36. Data Factory -データコピーのアクティビティを作成 38
  37. 37. Data Factory -データコピーのアクティビティを作成 39
  38. 38. Data Factory -データコピーのアクティビティを作成 40
  39. 39. Data Factory - デバッグ実行 41
  40. 40. Data Factory – 手動トリガーでパイプラインの実行 42
  41. 41. Data Factory – スケジュールトリガーでパイプラインの実行 43
  42. 42. Data Factory – スケジュールトリガーでパイプラインの実行 44
  43. 43. Data Factory – 実行結果の確認 45
  44. 44. ここまでハンズオン
  45. 45. Appendix
  46. 46. 増分コピーの例 48
  47. 47. オンプレミスの場合の構成 オンプレミス Azure Azure 49
  48. 48. ISAO事例 - de:code2018 より 50
  49. 49. ISAO事例 - de:code2018 より 51https://kuramane.isao.co.jp/works/toyota-d/
  50. 50. くらまね紹介 G04ブース番号 ※ Expo Area 2 です 52
  51. 51. 参考資料 https://docs.microsoft.com/ja-jp/azure/data-factory/tutorial- copy-data-portal https://docs.microsoft.com/ja-jp/azure/data-factory/tutorial- incremental-copy-portal https://docs.microsoft.com/ja-jp/azure/data-factory/create- self-hosted-integration-runtime 53
  52. 52. © 2018 ISAO Corporation. All rights reserved. 本情報の内容(添付文書、リンク先などを含む)は、作成日時点でのものであり、予告なく変更される場合があります。
  53. 53. セッションアンケートにご協力ください。 公式イベントアプリで、「Microsoft Tech Summit 2018 参加者アンケート(必須)」と 「各セッションアンケート( 5 つ以上)」、合わせて 6 つ以上のアンケートにご回答ください。 もれなくオリジナルグッズを贈呈いたします。 Information Twitter のご案内 本セッションに関するご質問やご感想は、 #mstsjp18 と セッション ID の ハッシュタグで、ご投稿をお願いします。 #mstsjp18

×