Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

ここがつらいよAws batch

9,067 views

Published on

AWS Batchを使い始める時のつまづきポイントを紹介します。

山田 雄(株式会社リクルートライフスタイル)

Published in: Technology
  • Hi there! I just wanted to share a list of sites that helped me a lot during my studies: .................................................................................................................................... www.EssayWrite.best - Write an essay .................................................................................................................................... www.LitReview.xyz - Summary of books .................................................................................................................................... www.Coursework.best - Online coursework .................................................................................................................................... www.Dissertations.me - proquest dissertations .................................................................................................................................... www.ReMovie.club - Movies reviews .................................................................................................................................... www.WebSlides.vip - Best powerpoint presentations .................................................................................................................................... www.WritePaper.info - Write a research paper .................................................................................................................................... www.EddyHelp.com - Homework help online .................................................................................................................................... www.MyResumeHelp.net - Professional resume writing service .................................................................................................................................. www.HelpWriting.net - Help with writing any papers ......................................................................................................................................... Save so as not to lose
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Dating direct: ♥♥♥ http://bit.ly/2Q98JRS ♥♥♥
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Follow the link, new dating source: ♥♥♥ http://bit.ly/369VOVb ♥♥♥
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Dating for everyone is here: ❶❶❶ http://bit.ly/369VOVb ❶❶❶
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Be the first to like this

ここがつらいよAws batch

  1. 1. ここがつらいよ AWSBatch Serverless Meetup Tokyo 2017 09/06/2017 山田 雄 ネットビジネス本部 データ基盤チーム
  2. 2. ■山田 雄(ヤマダ ユウ) 株式会社 リクルートライフスタイル ネットビジネス本部 データ基盤T Twitter:@nii_yan GitHub:https://github.com/yu-yamada ・以前はメールマーケティング用基盤の作成からデータ分析まで関わる 現在はリクルートライフスタイルの共通分析基盤の開発、運用全般を担当 ビックデータ、Ruby、ビール、カップ焼きそばが好き。 自己紹介
  3. 3. AWS Batchとは? フルマネージド型バッチ処理 CPUとメモリを指定すれば、Dockerイメージをよしなに実 行してくれる。
  4. 4. AWS Batch実行手順 1. 実行するイメージを選択 2. イメージで使用するCPUとMemoryを選択 3. 実行環境を選択(MinimumCPU,MaxCPUなど) 4. Jobキューを作成 5. JobをSubmit
  5. 5. Jobのステータスがわかりにくい!
  6. 6. どのstatusがどういう状態なんだか・・・
  7. 7. StatusがRUNNABLEから変わらない!
  8. 8. CPUとMemoryを指定出来るが、その組み合わせのタイプのEC2がないと動かな い。 また、EC2の上限数制限に引っかかっても動かない。 さらにはFAILEDに行かないでRUNNABLEで固まる。
  9. 9. 料金の見積もりが出来ない!
  10. 10. どのタイプのインスタンスが何時間動くのか実際に動かしてみないとわからない。 (事前にインスタンスタイプを指定することは可能。)
  11. 11. 構成管理が出来ない!
  12. 12. terraformが絶賛開発中っぽい・・・
  13. 13. 見ないといけないコンソールが多すぎる!
  14. 14. ログ監視&通知がつらい!
  15. 15. ロググループは「/aws/batch/job」で固定で実行するたびにログストリーム名が 変わる。 ロググループ1つにつき、1つしかサブスクリプションフィルタは作れない・・・ メトリクスフィルタ作ってsns経由でlambdaに飛ばしてもログストリーム名が取れな い・・・
  16. 16. JOB定義を変更も削除も出来ない!
  17. 17. 既存のjob定義を変更は出来ず、ひたすら新しいrivisionを 追加するしかない。 DeregisterしてもINACTIVEには行くが削除は出来ない。
  18. 18. まとめ 辛いとこ色々書きましたが、AWSの新サービスって大体 辛いです。 辛い以上に便利なとこが多いのも確かなので、是非とも 皆さんもAWS Batch使いましょう!
  19. 19. ご清聴ありがとうございました

×