Yahoo!デベロッパーネットワーク, profile picture
Uploaded byYahoo!デベロッパーネットワーク
1,968 views

オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜

2022/3/24に開催した「オンプレML基盤 on Kubernetes」の資料です。オンプレミス環境のKubernetesを使って構築した機械学習基盤の開発、運用の取り組みをご紹介します。 https://ml-kubernetes.connpass.com/event/239859/

Embed presentation

Downloaded 18 times
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜

More Related Content

PDF
続・PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜 #2
byPreferred Networks
 
PDF
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
byPreferred Networks
 
PDF
継続的なモデルモニタリングを実現するKubernetes Operator
byYahoo!デベロッパーネットワーク
 
PDF
オススメのJavaログ管理手法 ～コンテナ編～（Open Source Conference 2022 Online/Spring 発表資料）
byNTT DATA Technology & Innovation
 
PDF
DockerとPodmanの比較
byAkihiro Suda
 
PDF
BuildKitの概要と最近の機能
byKohei Tokunaga
 
PDF
Yahoo! JAPANのIaaSを支えるKubernetesクラスタ、アップデート自動化への挑戦 #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
ヤフーのAIプラットフォーム紹介 ～AIテックカンパニーを支えるデータ基盤～ #yjtc
byYahoo!デベロッパーネットワーク
 
続・PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜 #2
byPreferred Networks
 
PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜
byPreferred Networks
 
継続的なモデルモニタリングを実現するKubernetes Operator
byYahoo!デベロッパーネットワーク
 
オススメのJavaログ管理手法 ～コンテナ編～（Open Source Conference 2022 Online/Spring 発表資料）
byNTT DATA Technology & Innovation
 
DockerとPodmanの比較
byAkihiro Suda
 
BuildKitの概要と最近の機能
byKohei Tokunaga
 
Yahoo! JAPANのIaaSを支えるKubernetesクラスタ、アップデート自動化への挑戦 #yjtc
byYahoo!デベロッパーネットワーク
 
ヤフーのAIプラットフォーム紹介 ～AIテックカンパニーを支えるデータ基盤～ #yjtc
byYahoo!デベロッパーネットワーク
 

What's hot

PPTX
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
byNTT DATA Technology & Innovation
 
PDF
わかる！metadata.managedFields / Kubernetes Meetup Tokyo 48
byPreferred Networks
 
PDF
Kubernetesによる機械学習基盤への挑戦
byPreferred Networks
 
PDF
入門 Kubeflow ～Kubernetesで機械学習をはじめるために～ （NTT Tech Conference #4 講演資料）
byNTT DATA Technology & Innovation
 
PDF
PFNのML/DL基盤を支えるKubernetesにおける自動化 / DevOpsDays Tokyo 2021
byPreferred Networks
 
PDF
Mercari JPのモノリスサービスをKubernetesに移行した話 PHP Conference 2022 9/24
byShin Ohno
 
PDF
Kubernetesのしくみ やさしく学ぶ 内部構造とアーキテクチャー
byToru Makabe
 
PDF
KubeCon + CloudNativeCon Europe 2022 Recap - Batch/HPCの潮流とScheduler拡張事例 / Kub...
byPreferred Networks
 
PDF
マイクロにしすぎた結果がこれだよ！
bymosa siru
 
PDF
Dockerからcontainerdへの移行
byKohei Tokunaga
 
PPTX
分散トレーシングAWS:X-Rayとの上手い付き合い方
byRecruit Lifestyle Co., Ltd.
 
PPTX
Dockerからcontainerdへの移行
byAkihiro Suda
 
PDF
Dockerfile を書くためのベストプラクティス解説編
byMasahito Zembutsu
 
PDF
Pacemakerを使いこなそう
byTakatoshi Matsuo
 
PDF
Python 3.9からの新定番zoneinfoを使いこなそう
byRyuji Tsutsui
 
PDF
【第26回Elasticsearch勉強会】Logstashとともに振り返る、やっちまった事例ごった煮
byHibino Hisashi
 
PDF
LakeTahoe
byYahoo!デベロッパーネットワーク
 
PDF
OpenStack超入門シリーズ Novaのディスク周りあれこれ
byToru Makabe
 
PDF
分散トレーシング技術について（Open tracingやjaeger）
byNTT Communications Technology Development
 
PDF
俺のTerraform CI/CD ライフサイクル
byHonMarkHunt
 
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）
byNTT DATA Technology & Innovation
 
わかる！metadata.managedFields / Kubernetes Meetup Tokyo 48
byPreferred Networks
 
Kubernetesによる機械学習基盤への挑戦
byPreferred Networks
 
入門 Kubeflow ～Kubernetesで機械学習をはじめるために～ （NTT Tech Conference #4 講演資料）
byNTT DATA Technology & Innovation
 
PFNのML/DL基盤を支えるKubernetesにおける自動化 / DevOpsDays Tokyo 2021
byPreferred Networks
 
Mercari JPのモノリスサービスをKubernetesに移行した話 PHP Conference 2022 9/24
byShin Ohno
 
Kubernetesのしくみ やさしく学ぶ 内部構造とアーキテクチャー
byToru Makabe
 
KubeCon + CloudNativeCon Europe 2022 Recap - Batch/HPCの潮流とScheduler拡張事例 / Kub...
byPreferred Networks
 
マイクロにしすぎた結果がこれだよ！
bymosa siru
 
Dockerからcontainerdへの移行
byKohei Tokunaga
 
分散トレーシングAWS:X-Rayとの上手い付き合い方
byRecruit Lifestyle Co., Ltd.
 
Dockerからcontainerdへの移行
byAkihiro Suda
 
Dockerfile を書くためのベストプラクティス解説編
byMasahito Zembutsu
 
Pacemakerを使いこなそう
byTakatoshi Matsuo
 
Python 3.9からの新定番zoneinfoを使いこなそう
byRyuji Tsutsui
 
【第26回Elasticsearch勉強会】Logstashとともに振り返る、やっちまった事例ごった煮
byHibino Hisashi
 
LakeTahoe
byYahoo!デベロッパーネットワーク
 
OpenStack超入門シリーズ Novaのディスク周りあれこれ
byToru Makabe
 
分散トレーシング技術について（Open tracingやjaeger）
byNTT Communications Technology Development
 
俺のTerraform CI/CD ライフサイクル
byHonMarkHunt
 

More from Yahoo!デベロッパーネットワーク

PDF
ゼロから始める転移学習
byYahoo!デベロッパーネットワーク
 
PDF
ヤフーでは開発迅速性と品質のバランスをどう取ってるか
byYahoo!デベロッパーネットワーク
 
PDF
オンプレML基盤on Kubernetes パネルディスカッション
byYahoo!デベロッパーネットワーク
 
PDF
Persistent-memory-native Database High-availability Feature
byYahoo!デベロッパーネットワーク
 
PDF
データの価値を最大化させるためのデザイン～データビジュアライゼーションの方法～ #devsumi 17-E-2
byYahoo!デベロッパーネットワーク
 
PDF
eコマースと実店舗の相互利益を目指したデザイン #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
ヤフーを支えるセキュリティ ～サイバー攻撃を防ぐエンジニアの仕事とは～ #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
ビッグデータから人々のムードを捉える #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
サイエンス領域におけるMLOpsの取り組み #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
Yahoo! JAPAN Tech Conference 2022 Day2 Keynote #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
新技術を使った次世代の商品の見せ方 ～ヤフオク!のマルチビュー機能～ #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
PC版Yahoo!メールリニューアル ～サービスのUI/UX統合と改善プロセス～ #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
モブデザインによる多職種チームのコミュニケーション改善 #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
「新しいおうち探し」のためのAIアシスト検索 #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
ユーザーの地域を考慮した検索入力補助機能の改善の試み #yjtc
byYahoo!デベロッパーネットワーク
 
PDF
The potential of Kubernetes as more than just an infrastructure to deploy
byYahoo!デベロッパーネットワーク
 
PDF
Yahoo! ニュースにおける ドキュメント管理の事例紹介
byYahoo!デベロッパーネットワーク
 
PDF
ライフステージの変化の中で エンジニア管理職として働くコツ #devsumi A-5
byYahoo!デベロッパーネットワーク
 
PDF
ユーザー情報格納基盤におけるApache Pulsarの利用事例
byYahoo!デベロッパーネットワーク
 
PDF
Yahoo! JAPANを支えるログ・メトリクス転送システムのE2Eモニタリングの取り組み
byYahoo!デベロッパーネットワーク
 
ゼロから始める転移学習
byYahoo!デベロッパーネットワーク
 
ヤフーでは開発迅速性と品質のバランスをどう取ってるか
byYahoo!デベロッパーネットワーク
 
オンプレML基盤on Kubernetes パネルディスカッション
byYahoo!デベロッパーネットワーク
 
Persistent-memory-native Database High-availability Feature
byYahoo!デベロッパーネットワーク
 
データの価値を最大化させるためのデザイン～データビジュアライゼーションの方法～ #devsumi 17-E-2
byYahoo!デベロッパーネットワーク
 
eコマースと実店舗の相互利益を目指したデザイン #yjtc
byYahoo!デベロッパーネットワーク
 
ヤフーを支えるセキュリティ ～サイバー攻撃を防ぐエンジニアの仕事とは～ #yjtc
byYahoo!デベロッパーネットワーク
 
ビッグデータから人々のムードを捉える #yjtc
byYahoo!デベロッパーネットワーク
 
サイエンス領域におけるMLOpsの取り組み #yjtc
byYahoo!デベロッパーネットワーク
 
Yahoo! JAPAN Tech Conference 2022 Day2 Keynote #yjtc
byYahoo!デベロッパーネットワーク
 
新技術を使った次世代の商品の見せ方 ～ヤフオク!のマルチビュー機能～ #yjtc
byYahoo!デベロッパーネットワーク
 
PC版Yahoo!メールリニューアル ～サービスのUI/UX統合と改善プロセス～ #yjtc
byYahoo!デベロッパーネットワーク
 
モブデザインによる多職種チームのコミュニケーション改善 #yjtc
byYahoo!デベロッパーネットワーク
 
「新しいおうち探し」のためのAIアシスト検索 #yjtc
byYahoo!デベロッパーネットワーク
 
ユーザーの地域を考慮した検索入力補助機能の改善の試み #yjtc
byYahoo!デベロッパーネットワーク
 
The potential of Kubernetes as more than just an infrastructure to deploy
byYahoo!デベロッパーネットワーク
 
Yahoo! ニュースにおける ドキュメント管理の事例紹介
byYahoo!デベロッパーネットワーク
 
ライフステージの変化の中で エンジニア管理職として働くコツ #devsumi A-5
byYahoo!デベロッパーネットワーク
 
ユーザー情報格納基盤におけるApache Pulsarの利用事例
byYahoo!デベロッパーネットワーク
 
Yahoo! JAPANを支えるログ・メトリクス転送システムのE2Eモニタリングの取り組み
byYahoo!デベロッパーネットワーク
 

Recently uploaded

PDF
UiPath Automation Developer Associate Training Series 2026 - Session 1
byDianaGray10
 
PPTX
Career-Opportunities in Industrial Arts Grade 8 PPT Lesson 2
byFSBTLEDNathanVince
 
PDF
Traditional-Security-Models-No-Longer-Work.pptx (1).pdf
byOhhproJunction
 
PDF
The Enterprise Web3 Landscape - a view from Kaleido based on the past 10 year...
byPeter Broadhurst
 
PPTX
Authority After Search: How AI Systems Reconstruct Trust, Expertise, and Legi...
byJeff Howell
 
PDF
Post-Hackathon-Learnings-Maximizing-Impact-Beyond-the-Event.pdf
byishantyadav1111
 
PPTX
Working Session — Build a Document Understanding Automation Using an OOTB ML ...
byDianaGray10
 
PDF
Safer’s Picks: The 5 FME Transformers You Didn’t Know You Needed
bySafe Software
 
PDF
The Emergence of Empathic XR: AWE Asia 2026 keynote
byMark Billinghurst
 
PDF
Computer-Based Training (CBT) The Backbone of Modern Technical & Defence Trai...
bycomputerbasedtrainin1
 
PDF
Title Installing Windows, Linux, MacOS.pdf
byGeraldAbadajos
 
PDF
ICT500 - CRITICAL AND CREATIVE THINKING FOR INFORMATION TECHNOLOGY SOLUTIONS:...
by2024432452
 
PDF
Understanding Foldable 3-Wheel Electric Scooters for Everyday Use
byTopmate
 
PDF
Advanced SELinux Management - RHCSA (RH134).pdf
byLinuxCert Guru
 
PDF
Designing a Blog Using Wordpress
bymarkzubi50
 
PDF
Track Phone Location via Number (2026)_ What Actually Works, What’s a Scam, a...
byEmily Woods
 
PDF
From DeFi POC to Production MVP - A 12-16 Week Blueprint.pdf
byniahiggins21
 
PDF
Mount File Systems using UUID and Label - RHCSA (RH134).pdf
byLinuxCert Guru
 
PPTX
Introduction to Industrial-Arts Grade 8 ppt Lesson 1
byFSBTLEDNathanVince
 
PDF
Supercharge Your Copilot-Driven Collaboration with Microsoft 365 Agents SDK
byAntti Koskela
 
UiPath Automation Developer Associate Training Series 2026 - Session 1
byDianaGray10
 
Career-Opportunities in Industrial Arts Grade 8 PPT Lesson 2
byFSBTLEDNathanVince
 
Traditional-Security-Models-No-Longer-Work.pptx (1).pdf
byOhhproJunction
 
The Enterprise Web3 Landscape - a view from Kaleido based on the past 10 year...
byPeter Broadhurst
 
Authority After Search: How AI Systems Reconstruct Trust, Expertise, and Legi...
byJeff Howell
 
Post-Hackathon-Learnings-Maximizing-Impact-Beyond-the-Event.pdf
byishantyadav1111
 
Working Session — Build a Document Understanding Automation Using an OOTB ML ...
byDianaGray10
 
Safer’s Picks: The 5 FME Transformers You Didn’t Know You Needed
bySafe Software
 
The Emergence of Empathic XR: AWE Asia 2026 keynote
byMark Billinghurst
 
Computer-Based Training (CBT) The Backbone of Modern Technical & Defence Trai...
bycomputerbasedtrainin1
 
Title Installing Windows, Linux, MacOS.pdf
byGeraldAbadajos
 
ICT500 - CRITICAL AND CREATIVE THINKING FOR INFORMATION TECHNOLOGY SOLUTIONS:...
by2024432452
 
Understanding Foldable 3-Wheel Electric Scooters for Everyday Use
byTopmate
 
Advanced SELinux Management - RHCSA (RH134).pdf
byLinuxCert Guru
 
Designing a Blog Using Wordpress
bymarkzubi50
 
Track Phone Location via Number (2026)_ What Actually Works, What’s a Scam, a...
byEmily Woods
 
From DeFi POC to Production MVP - A 12-16 Week Blueprint.pdf
byniahiggins21
 
Mount File Systems using UUID and Label - RHCSA (RH134).pdf
byLinuxCert Guru
 
Introduction to Industrial-Arts Grade 8 ppt Lesson 1
byFSBTLEDNathanVince
 
Supercharge Your Copilot-Driven Collaboration with Microsoft 365 Agents SDK
byAntti Koskela