Download free for 30 days
Sign in
Upload
Language (EN)
Support
Business
Mobile
Social Media
Marketing
Technology
Art & Photos
Career
Design
Education
Presentations & Public Speaking
Government & Nonprofit
Healthcare
Internet
Law
Leadership & Management
Automotive
Engineering
Software
Recruiting & HR
Retail
Sales
Services
Science
Small Business & Entrepreneurship
Food
Environment
Economy & Finance
Data & Analytics
Investor Relations
Sports
Spiritual
News & Politics
Travel
Self Improvement
Real Estate
Entertainment & Humor
Health & Medicine
Devices & Hardware
Lifestyle
Change Language
Language
English
Español
Português
Français
Deutsche
Cancel
Save
Submit search
EN
Uploaded by
Atsushi Hayakawa
9,094 views
最強のハードディスクはどれだ?
ハードディスクのデータセットに対するデータ解析
Technology
◦
Read more
16
Save
Share
Embed
Embed presentation
Download
Downloaded 28 times
1
/ 26
2
/ 26
3
/ 26
4
/ 26
5
/ 26
6
/ 26
7
/ 26
8
/ 26
9
/ 26
10
/ 26
11
/ 26
12
/ 26
13
/ 26
14
/ 26
15
/ 26
16
/ 26
17
/ 26
18
/ 26
19
/ 26
20
/ 26
21
/ 26
22
/ 26
23
/ 26
24
/ 26
25
/ 26
26
/ 26
More Related Content
PPTX
M5StackをRustで動かす
by
Kenta IDA
PDF
「Japan.R開催のお知らせ」と「Rでワンライナー」
by
Atsushi Hayakawa
PDF
統計的学習の基礎 4.4~
by
Atsushi Hayakawa
PDF
第六回「データ解析のための統計モデリング入門」前半
by
Atsushi Hayakawa
PDF
Trema day 1
by
ykuga
PPTX
ESP32特集の内容紹介
by
Kenta IDA
PDF
20210510 software design
by
Ayachika Kitazaki
PDF
gepuro task views
by
Atsushi Hayakawa
M5StackをRustで動かす
by
Kenta IDA
「Japan.R開催のお知らせ」と「Rでワンライナー」
by
Atsushi Hayakawa
統計的学習の基礎 4.4~
by
Atsushi Hayakawa
第六回「データ解析のための統計モデリング入門」前半
by
Atsushi Hayakawa
Trema day 1
by
ykuga
ESP32特集の内容紹介
by
Kenta IDA
20210510 software design
by
Ayachika Kitazaki
gepuro task views
by
Atsushi Hayakawa
Viewers also liked
PDF
RとStanでクラウドセットアップ時間を分析してみたら #TokyoR
by
Shuyo Nakatani
PDF
R入門(dplyrでデータ加工)-TokyoR42
by
Atsushi Hayakawa
PDF
Tokyor42 ggplot2
by
Yohei Sato
PDF
20150303ぞくパタLT-ゆるふわ構造学習
by
Toru Imai
PDF
20170923 excelユーザーのためのr入門
by
Takashi Kitano
PPTX
データサイエンティスト必見!M-1グランプリ
by
Satoshi Kitajima
PPTX
ggplot2再入門(2015年バージョン)
by
yutannihilation
PDF
20140625 rでのデータ分析(仮) for_tokyor
by
Takashi Kitano
PDF
Rで潜在ランク分析
by
Hiroshi Shimizu
PDF
R を起動するその前に
by
Kosei ABE
PPT
Dummiesパッケージ
by
weda654
PDF
はじパタ11章 後半
by
Atsushi Hayakawa
PDF
Rcppのすすめ
by
Masaki Tsuda
PDF
マルコフ連鎖モンテカルロ法入門-1
by
Nagi Teramo
PPTX
Tokyo r33 beginner
by
Takashi Minoda
PDF
TokyoR42_around_chaining
by
TokorosawaYoshio
PPTX
Tokyo r30 anova
by
Takashi Minoda
PDF
Mxnetで回帰 #TokyoR 53th
by
Akifumi Eguchi
PDF
Rで代数統計 TokyoR #42 LT
by
Toru Imai
PPTX
Tokyor42_r_datamining_18
by
Yohei Sato
RとStanでクラウドセットアップ時間を分析してみたら #TokyoR
by
Shuyo Nakatani
R入門(dplyrでデータ加工)-TokyoR42
by
Atsushi Hayakawa
Tokyor42 ggplot2
by
Yohei Sato
20150303ぞくパタLT-ゆるふわ構造学習
by
Toru Imai
20170923 excelユーザーのためのr入門
by
Takashi Kitano
データサイエンティスト必見!M-1グランプリ
by
Satoshi Kitajima
ggplot2再入門(2015年バージョン)
by
yutannihilation
20140625 rでのデータ分析(仮) for_tokyor
by
Takashi Kitano
Rで潜在ランク分析
by
Hiroshi Shimizu
R を起動するその前に
by
Kosei ABE
Dummiesパッケージ
by
weda654
はじパタ11章 後半
by
Atsushi Hayakawa
Rcppのすすめ
by
Masaki Tsuda
マルコフ連鎖モンテカルロ法入門-1
by
Nagi Teramo
Tokyo r33 beginner
by
Takashi Minoda
TokyoR42_around_chaining
by
TokorosawaYoshio
Tokyo r30 anova
by
Takashi Minoda
Mxnetで回帰 #TokyoR 53th
by
Akifumi Eguchi
Rで代数統計 TokyoR #42 LT
by
Toru Imai
Tokyor42_r_datamining_18
by
Yohei Sato
More from Atsushi Hayakawa
PDF
dataclassとtypehintを使ってますか?
by
Atsushi Hayakawa
PDF
simputatoinで欠損値補完 - Tokyo.R #65
by
Atsushi Hayakawa
PDF
implyを用いたアクセスログの可視化
by
Atsushi Hayakawa
PDF
Zepp play soccerで測ってみた
by
Atsushi Hayakawa
PPTX
バンクーバー旅行記
by
Atsushi Hayakawa
PPTX
Visual Studio CodeでRを使う
by
Atsushi Hayakawa
PDF
nginxのログを非スケーラブルに省メモリな方法で蓄積する
by
Atsushi Hayakawa
PDF
イケてる分析基盤をつくる
by
Atsushi Hayakawa
PPTX
Japan.R 2016の運営
by
Atsushi Hayakawa
PDF
トライアスロンとgepuro task views V2.0 Japan.R 2018
by
Atsushi Hayakawa
PPTX
Rstudio上でのパッケージインストールを便利にするaddin4githubinstall
by
Atsushi Hayakawa
PDF
らずぱいでウィーン!!!!!
by
Atsushi Hayakawa
PDF
最近のクラウドストレージの事情と私情
by
Atsushi Hayakawa
PDF
らずぱいカー
by
Atsushi Hayakawa
PDF
tidyverse.orgの翻訳
by
Atsushi Hayakawa
PDF
Splatoon界での壮絶な戦い&Japan.Rの宣伝
by
Atsushi Hayakawa
PDF
らずぱいラジコン
by
Atsushi Hayakawa
PDF
useR!2017 in Brussels
by
Atsushi Hayakawa
PDF
トライアスロンと僕 - Japan.R 2017
by
Atsushi Hayakawa
PPTX
Analyze The Community Of Tokyo.R
by
Atsushi Hayakawa
dataclassとtypehintを使ってますか?
by
Atsushi Hayakawa
simputatoinで欠損値補完 - Tokyo.R #65
by
Atsushi Hayakawa
implyを用いたアクセスログの可視化
by
Atsushi Hayakawa
Zepp play soccerで測ってみた
by
Atsushi Hayakawa
バンクーバー旅行記
by
Atsushi Hayakawa
Visual Studio CodeでRを使う
by
Atsushi Hayakawa
nginxのログを非スケーラブルに省メモリな方法で蓄積する
by
Atsushi Hayakawa
イケてる分析基盤をつくる
by
Atsushi Hayakawa
Japan.R 2016の運営
by
Atsushi Hayakawa
トライアスロンとgepuro task views V2.0 Japan.R 2018
by
Atsushi Hayakawa
Rstudio上でのパッケージインストールを便利にするaddin4githubinstall
by
Atsushi Hayakawa
らずぱいでウィーン!!!!!
by
Atsushi Hayakawa
最近のクラウドストレージの事情と私情
by
Atsushi Hayakawa
らずぱいカー
by
Atsushi Hayakawa
tidyverse.orgの翻訳
by
Atsushi Hayakawa
Splatoon界での壮絶な戦い&Japan.Rの宣伝
by
Atsushi Hayakawa
らずぱいラジコン
by
Atsushi Hayakawa
useR!2017 in Brussels
by
Atsushi Hayakawa
トライアスロンと僕 - Japan.R 2017
by
Atsushi Hayakawa
Analyze The Community Of Tokyo.R
by
Atsushi Hayakawa
Recently uploaded
PDF
エンジニアが選ぶべきAIエディタ & Antigravity 活用例@ウェビナー「触ってみてどうだった?Google Antigravity 既存IDEと...
by
NorihiroSunada
PPTX
楽々ナレッジベース「楽ナレ」3種比較 - Dify / AWS S3 Vector / Google File Search Tool
by
Kiyohide Yamaguchi
PDF
流行りに乗っかるClaris FileMaker 〜AI関連機能の紹介〜 by 合同会社イボルブ
by
Evolve LLC.
PDF
Machine Tests Benchmark Suite. Explain github.com/alexziskind1/machine_tests #2
by
Tasuku Takahashi
PDF
20251210_MultiDevinForEnterprise on Devin 1st Anniv Meetup
by
Masaki Yamakawa
PDF
Machine Tests Benchmark Suite. Explain github.com/alexziskind1/machine_tests #1
by
Tasuku Takahashi
エンジニアが選ぶべきAIエディタ & Antigravity 活用例@ウェビナー「触ってみてどうだった?Google Antigravity 既存IDEと...
by
NorihiroSunada
楽々ナレッジベース「楽ナレ」3種比較 - Dify / AWS S3 Vector / Google File Search Tool
by
Kiyohide Yamaguchi
流行りに乗っかるClaris FileMaker 〜AI関連機能の紹介〜 by 合同会社イボルブ
by
Evolve LLC.
Machine Tests Benchmark Suite. Explain github.com/alexziskind1/machine_tests #2
by
Tasuku Takahashi
20251210_MultiDevinForEnterprise on Devin 1st Anniv Meetup
by
Masaki Yamakawa
Machine Tests Benchmark Suite. Explain github.com/alexziskind1/machine_tests #1
by
Tasuku Takahashi
最強のハードディスクはどれだ?
1.
最強のハードディスク はどれだ? Tokyo.R #43 1 @gepuro
2.
http://blog.gepuro.net/ 自己紹介 • @gepuro • R言語、Python •
4月からサラリーマン 2
3.
https://www.backblaze.com/hard-drive-test-data.html からダウンロードできる 4万台以上のハードディスクに 関するデータが公開されてる 3
4.
82種のハードディスク 2013年から2014年の2年間の データセット 4 毎日のSMART+故障情報 date serial_number model
capacity_bytes failure 2014/1/1 MJ0351YNG9Z0XA Hitachi HDS5C3030ALA630 -1589157888 0 2014/1/2 MJ0351YNG9Z0XA Hitachi HDS5C3030ALA630 -1589157888 0 2014/1/3 MJ0351YNG9Z0XA Hitachi HDS5C3030ALA630 -1589157888 0 2014/1/4 MJ0351YNG9Z0XA Hitachi HDS5C3030ALA630 -1589157888 0
5.
全部で約4GB gepuro@ubuntu1404$ du -h
2013 740M 2013 gepuro@ubuntu1404$ du -h 2014 2.9G 2014 5
6.
データ解析図 データの扱い方 6 打切り 故障 暦日
7.
ワイブル分布 • 確率密度関数 –𝑓 𝑡
= 𝑚 𝜂 𝑡 𝜂 𝑚−1 exp − 𝑡 𝜂 𝑚 • 累積分布関数 –𝐹 𝑡 = 1 − exp − 𝑡 𝜂 𝑚 7
8.
8 p.d.f. ワイブル分布 𝜂 = 10 𝑚
= 0.5 𝑚 = 1 𝑚 = 1.5 𝑚 = 2 𝑡
9.
9 p.d.f. 𝑡 ワイブル分布 m = 1 𝜂
= 10 𝜂 = 20 𝜂 = 30 𝜂 = 40
10.
http://blog.gepuro.net/archives/118 前処理はブログで 10
11.
ワイブルプロット 11 モデル: ST4000DM000 𝑚 =
0.7875 𝜂 = 35500 モデル: HGST MS5C4040ALE640 𝑚 = 0.7628 𝜂 = 119300
12.
12 確率密度関数 モデル: ST4000DM000 𝑚 =
0.7875 𝜂 = 35500 モデル: HGST MS5C4040ALE640 𝑚 = 0.7628 𝜂 = 119300
13.
13 モデル: ST4000DM000 B1ライフ :
103.1日 モデル: HGST MS5C4040ALE640 B1ライフ: 286.8日 B1ライフ F(t)が1%に達するまでの値 全体の1%が壊れるまでは、何日か。
14.
データ数と故障数 14
15.
15 打切り率
16.
16 ワイブルプロットへの当てはまり
17.
日立のHDDが最強 17 B1ライフ一覧
18.
SMARTも使いたいなあ。 • Power-On Hours •
Temperature • など まとめ • 4万台以上のハードディスクの データが公開 • ワイブル分布でB1ライフを推定 • 日立製のHDDが最強 18
19.
おまけ 19
20.
20 𝒎の一覧
21.
21 𝜼 の一覧
22.
22 𝜼 の一覧(外れ値を抜いた)
23.
ワイブル分布 • 確率密度関数 – 𝑓
𝑡 = 𝑚 𝜂 𝑡 𝜂 𝑚−1 exp − 𝑡 𝜂 𝑚 • 累積分布関数 – 𝐹 𝑡 = 1 − exp − 𝑡 𝜂 𝑚 • 最尤法でパラメータ推定 – 𝐿 𝑚, 𝜂 = 𝑖=1 𝑛 𝑓(𝑡) 𝛿 1 − 𝐹 𝑡 1−𝛿 • 𝛿 = 1なら故障, 𝛿 = 0なら打切り 23
24.
ワイブル確率紙1 • 𝐹 𝑡
= 1 − exp − 𝑡 𝜂 𝑚 • log log 1 1−𝐹(𝑡) = 𝑚 ∗ log 𝑡 − 𝑚 ∗ log 𝜂 • log log 1 1−𝐹 𝑡 ≡ 𝑌 • log 𝑡 ≡ 𝑋, 𝑚 ∗ log 𝜂 ≡ 𝐵 • 𝑌 = 𝑚𝑋 − 𝐵 24
25.
ワイブル確率紙2 • 𝐻 𝑡
= 0 𝑡 𝜆 𝑥 𝑑𝑥 = − log 1 − 𝐹 𝑡 • log 𝐻 𝑡 = log log 1 1−𝐹 𝑡 • 𝜆 𝑡 = 𝑓 𝑡 𝑡 ∞ 𝑓 𝑡 = 𝑓(𝑡) 1−𝐹(𝑡) 25
26.
log 𝐻 𝑡
≡ 𝑌 = 𝑚X − 𝐵による最小二乗法で推定 累積ハザード法による推定 データ𝐭 故障𝜹 順位 逆順位 累積ハザード 𝑯 𝒕 3 0 6 1 6 10 0 5 1 5 23 1 4 1 4 1 4 = 0.25 33 0 3 1 3 35 1 2 1 2 1 4 + 1 2 = 0.75 40 1 1 1 1 1 4 + 1 2 + 1 1 = 1.75 26
Download