Download as PDF, PPTX
![page
宣伝
25
サーバ/インフラエンジニア養成読本
ログ収集∼可視化編 [現場主導のデータ分析環
境を構築!] (Software Design plus)
出版社/メーカー: 技術評論社
定価: 本体1,980円＋税](https://image.slidesharecdn.com/bullethadoopqueryenginepresto-150424064424-conversion-gate01/85/Presto-25-320.jpg)
More Related Content
![[Aurora事例祭り]Amazon Aurora を使いこなすためのベストプラクティス](https://cdn.slidesharecdn.com/ss_thumbnails/amazonauroratips-170307140000-thumbnail.jpg?width=640&height=640&fit=bounds)
爆速クエリエンジン”Presto”を使いたくなる話
- 1.
- 2.
- 4.
- 5.
- 6. page 1. 自己紹介 2. Prestoを使う理由 3.HiveからPrestoへの書換Tips 4. まとめ 本日の流れ 6
- 7.
- 8.
- 9.
- 10. page Prestoのスピード 10 SELECT count(1) FROMaccess WHERE status = … 約150億行のレコードに対して実行 Presto: 36秒 Hive: 12分20秒
- 11.
- 12.
- 13. page WITH句の例 13 WITH t1 AS( SELECT ... FROM ... ), t2 AS ( SELECT ... FROM ... ) SELECT ... FROM t1 INNER JOIN t2 USING(id)
- 14. page WITH句の例 14 WITH t1 AS( SELECT ... FROM ... ) SELECT … FROM t1 WHERE … UNION ALL SELECT … FROM t1 WHERE … UNION ALL SELECT … FROM t1 WHERE …
- 15.
- 16. page HiveからPrestoへの書換Tips 16 正規表現のエスケープ挙動 select regexp_extract('(123)', '^((.+))$',1) Hive: (123) Presto: 123 select regexp_extract('(123)', '^((.+))$', 1) Hive: 123 Presto: ※空文字
- 17. page HiveからPrestoへの書換Tips 17 INT型の割り算で結果がFLOAT/DOUBLE型となるとき select 3 /2 as division Hive: 1.5 Presto: 1 select CAST(3 AS DOUBLE) / 2 as division Hive: 1.5 Presto: 1.5 ※ 全てがINT型とならないようにいずれかをCASTする
- 18. page HiveからPrestoへの書換Tips 18 substr()などでマルチバイト文字列を扱うとき select substr('日本語学校', 1,3) Hive: 日本語 Presto: 日 ! Prestoは文字列をASCIIとして扱うためである UTF-8文字は1文字3バイトとなる
- 19. page HiveからPrestoへの書換Tips 19 length()などでマルチバイト文字列を扱うとき select length('日本語学校') Hive: 5 Presto:15 ! Prestoは文字列をASCIIとして扱うためである UTF-8文字は1文字3バイトとなる
- 20.
- 22.
- 23.
- 24.
- 25. page 宣伝 25 サーバ/インフラエンジニア養成読本 ログ収集∼可視化編 [現場主導のデータ分析環 境を構築!] (SoftwareDesign plus) 出版社/メーカー: 技術評論社 定価: 本体1,980円＋税
- 26.
- 30.