Download to read offline
![[AKIBA.AWS] VGWのルーティング仕様](https://cdn.slidesharecdn.com/ss_thumbnails/akibaaws7-180524115259-thumbnail.jpg?width=640&height=640&fit=bounds)
![[db tech showcase Tokyo 2015] A14:Amazon Redshiftの元となったスケールアウト型カラムナーDB徹底解説 その...](https://cdn.slidesharecdn.com/ss_thumbnails/dbts-tokyo-2015a14actian-matrix-insight-technology-150618094408-lva1-app6891-thumbnail.jpg?width=640&height=640&fit=bounds)
![[db tech showcase Tokyo 2015] A32:Amazon Redshift Deep Dive by アマゾン データ サービス ...](https://cdn.slidesharecdn.com/ss_thumbnails/dbts-tokyo-2015a32amazon-redshiftamazondataservicejapan-150623010123-lva1-app6892-thumbnail.jpg?width=640&height=640&fit=bounds)
![[db tech showcase Tokyo 2015] A33:Amazon DynamoDB Deep Dive by アマゾン データ サービス ...](https://cdn.slidesharecdn.com/ss_thumbnails/dbts-tokyo-2015a33amazon-dynamodbamazondataservicejapan-150623010315-lva1-app6892-thumbnail.jpg?width=640&height=640&fit=bounds)
DynamoDBのテーブル設計手法.pptx
- 1.
- 2.
- 3. 3 初心者 ➡ DynamoDBについて知る 上級者 ➡ 今後、このスライドを見ればいつでも DynamoDBの最適なテーブル設計ができる このフリートークのゴール
- 4. 4 DynamoDBとは テーブル設計の難しさ テーブル設計手法 発展編 目次
- 5. 5 AWSが提供するフルマネージドNoSQLデータベース スキーマが柔軟 新しい列を自由に追加可能 高速なアクセス 一秒あたり数千万回のアクセスも可能 スケーラビリティ レコード数やバイト数の制限なし 耐久性 自動的に複数のAZにまたがる複数サーバにレプリケート DynamoDBとは
- 6. 6 Primary key =Partition key + Sort key Partition key Sort key value1 value2 value3 aaa 1 taro yes ok aaa 2 ichiro no ng bbb 1 hanako yes ok bbb 2 kano yes ng ccc 1 yui no ng ccc 2 kei yes ok DynamoDBとは Primary key Attribute Table Item
- 7. 7 Partition keyごとに物理的にまとめて格納され、 その中でSort keyでソートされている DynamoDBとは Partitionkey=“aaa” Partition key=“bbb” Partition key=“ccc”
- 8. 8 Primary key以外で検索したいならGSI DynamoDBとは Partition keySort key value1 value2 value3 aaa 1 taro yes ok aaa 2 ichiro no ng bbb 1 hanako yes ok bbb 2 kano yes ng ccc 1 yui no ng ccc 2 kei yes ok GSIの Partition key に指定 GSIの Sort keyに 指定 GSI GSI(Global Secondary Index)=第二のインデックス
- 9. 9 テーブルは一つだけにした方がよい DynamoDBのテーブル設計の難しさ Primary Key Attributes Partition Key Sort Key PK SK_G...GSI1SK... GSI2.. GSI3PK 77f... post... Post_... 和田 データ ベース conte nt updated_ at title この 記... NoSQ L... 81f... 77f... Comm... conte nt updated_ at Com … 面白 い 山田 太郎 6b9... 77fc.. Like_2... like_a uthor 山田 太郎
- 10.
- 11.
- 12. 12 モデルごとにテーブル設計 ➡ テーブルを統合 1.RDBのエンティティを定義する 2. アクセスパターンを書き出し、クエリを明らかにする 3. 各モデルのPrimary Keyを決める 4. アクセスパターンのうちPrimary Keyで実現できないもの をGSIとして指定する 5. 複数のモデルを一つのテーブルに統合する テーブル設計手法：全体の流れ
- 13. 13 例にQiitaのようなサービスのテーブル設計を考える 以下の機能を持つとする 投稿一覧が見れる 投稿を作成できる 投稿に対してコメントを作成できる 投稿にいいねができる 特定のユーザーの投稿一覧が見れる 投稿にジャンルを設定できる テーブル設計手法：全体の流れ
- 14. 14 最終的に以下のようなテーブルを設計する テーブル設計手法：全体の流れ Primary Key Attributes Partition KeySort Key PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK GSI2PK GSI3PK 77fcab6b post 2021-12-03T10:06:57.650Z 和田哲也 データベー ス content updated_at title この記事の目的 は... NoSQLの テーブ ル... 81fcab6a Comment_77fc ab6b 2021-12-03T10:11:44.137Z content updated_at comment _author 面白いですね 山田太郎 6b9b9319 Like_77fcab6b 2021-12-03T10:12:45.033Z like_author 山田太郎
- 15.
- 16. 16 アクセスパターンを書き出し 投稿一覧を新しい順で取得する（投稿一覧） 指定されたidの投稿を一件取得する（投稿の個別ページ） 指定されたidの投稿に紐づくコメントを古い順で全て取得する（投稿の コメント表示） 指定されたidの投稿に紐づくいいねを全て取得する（投稿のいいね数 表示） 指定されたユーザが作成した投稿一覧を新しい順で取得する（ユーザ ごとの投稿一覧） 指定されたジャンルの投稿一覧を新しい順で取得する（ジャンルごとの 投稿一覧） テーブル設計手法：アクセスパターンを書き出し、クエリを明らかにする
- 17.
- 18. 18 クエリを明らかにする アクセスパターン Model PartitionKey Sort Key 投稿一覧を新しい順で取得する Post type created_at 指定されたidの投稿を一件取得する Post id 指定されたidの投稿に紐づくコメントを 古い順で全て取得する Comment post_id created_at 指定されたidの投稿に紐づくいいねを全て 取得する Like post_id created_at 指定されたユーザーが作成した投稿一覧を 新しい順で取得する Post author created_at 指定されたジャンルの投稿一覧を新しい順で 取得する Post genre created_at テーブル設計手法：アクセスパターンを書き出し、クエリを明らかにする
- 19. 19 Primary Keyはテーブル内で一意になるようにする 複数の実現方法がある場合はアクセスパターンに登場するものを優先 テーブル設計手法：各モデルのPrimary Keyを決める Post Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key id type title author content genre created_at updated_at 77fcab6b post NoSQLのテーブル... 和田哲也 この記事の目的は...データベース 2021-12-03T10:06:57.650Z Comment Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key id post_id author content created_at updated_at 81fcab6a 77fcab6b 山田太郎 面白いですね 2021-12- 03T10:11:44.137Z Like Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key id post_id author created_at 6b9b9319 77fcab6b 山田太郎 2021-12- 03T10:12:45.033Z Primary Keyで実現できたアクセスパターンは 「指定されたidの投稿を一件取得する」のみ
- 20. 20 テーブル設計手法：アクセスパターンのうちPrimary Keyで実現できないも… Post Primary KeyAttributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key, GSI1PK GSI2PK GSI3PK GSI1SK,GSI2SK,GSI3SK id type title author content genre created_at updated_at 77fcab6b post NoSQLのテーブル... 和田哲也 この記事の目的は...データベース 2021-12-03T10:06:57.650Z Comment Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK id post_id author content created_at updated_at 81fcab6a 77fcab6b 山田太郎 面白いですね 2021-12- 03T10:11:44.137Z Like Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK id post_id author created_at 6b9b9319 77fcab6b 山田太郎 2021-12- 03T10:12:45.033Z アクセスパターンのうちPrimary Keyで実現できない ものをGSIとして指定する
- 21.
- 22. 22 GSIの数だけI/Oのコストが増えるため、GSIの数は 最小限に抑える方がよい テーブル設計手法：複数のモデルを一つのテーブルに統合する Partition key Sortkey value1 value2 value3 aaa 1 taro yes ok aaa 2 ichiro no ng bbb 1 hanako yes ok bbb 2 kano yes ng ccc 1 yui no ng ccc 2 kei yes ok GSIの Partition key に指定 GSIの Sort keyに 指定 GSI GSI(Global Secondary Index)=第二のインデックス
- 23. 23 GSIの実態はPrimary keyを張り替えたテーブル メインのテーブルに対する全ての変更をコピーする テーブル設計手法：複数のモデルを一つのテーブルに統合する Partition keySort key value1 value2 value3 aaa 1 taro yes ok aaa 2 ichiro no ng bbb 1 hanako yes ok bbb 2 kano yes ng Value1 value2 メインテーブル のPartition key メインテーブル のSort key value3 taro yes aaa 1 ok ichiro no aaa 2 ng hanako yes bbb 1 ok kano yes bbb 2 ng メインのテーブル GSIのテーブル
- 24. 24 GSIの実態はPrimary keyを張り替えたテーブル メインのテーブルに対する全ての変更をコピーする テーブル設計手法：複数のモデルを一つのテーブルに統合する Partition keySort key value1 value2 value3 aaa 1 taro yes ok aaa 2 ichiro no ng bbb 1 hanako no ok bbb 2 kano yes ng Value1 value2 メインテーブル のPartition key メインテーブル のSort key value3 taro yes aaa 1 ok ichiro no aaa 2 ng hanako yes bbb 1 ok kano yes bbb 2 ng メインのテーブル GSIのテーブル
- 25. 25 GSIの実態はPrimary keyを張り替えたテーブル メインのテーブルに対する全ての変更をコピーする テーブル設計手法：複数のモデルを一つのテーブルに統合する Partition keySort key value1 value2 value3 aaa 1 taro yes ok aaa 2 ichiro no ng bbb 1 hanako no ok bbb 2 kano yes ng Value1 value2 メインテーブル のPartition key メインテーブル のSort key value3 taro yes aaa 1 ok ichiro no aaa 2 ng hanako no bbb 1 ok kano yes bbb 2 ng メインのテーブル GSIのテーブル writeコストは （GSIの数＋１）倍になる
- 26. 26 分かりやすいようにattributeの順番を入れ替える テーブル設計手法：複数のモデルを一つのテーブルに統合する Post Primary Key AttributesAttributes Attributes Attributes Attributes Attributes Partition Key Sort Key, GSI1PK GSI1SK,GSI2SK,GSI3SK GSI2PK GSI3PK id type created_at author content updated_at title genre 77fcab6b post 2021-12- 03T10:06:57.650Z 和田哲也 この記事の目的は... NoSQLのテーブル... データベース Comment Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK id post_id created_at author content updated_at 81fcab6a 77fcab6b 2021-12- 03T10:11:44.137Z 山田太郎 面白いですね Like Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK id post_id created_at author 6b9b9319 77fcab6b 2021-12- 03T10:12:45.033Z 山田太郎
- 27. 27 attribute名を共通化 テーブル設計手法：複数のモデルを一つのテーブルに統合する Post Primary Key AttributesAttributes Attributes Attributes Attributes Attributes Partition Key Sort Key, GSI1PK GSI1SK,GSI2SK,GSI3SK GSI2PK GSI3PK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK author content updated_at title genre 77fcab6b post 2021-12- 03T10:06:57.650Z 和田哲也 この記事の目的は... NoSQLのテーブル... データベース Comment Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK author content updated_at 81fcab6a 77fcab6b 2021-12- 03T10:11:44.137Z 山田太郎 面白いですね Like Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK author 6b9b9319 77fcab6b 2021-12- 03T10:12:45.033Z 山田太郎
- 28. 28 各アクセスパターンにおいて他のモデルのデータが 混ざらないことを確認する 混ざる可能性がある場合は次のどちらかの対応をする 1. attribute名を別のものにする 2.データにモデルを表す接頭辞をつける 基本的に1の対応をした方が実装コストが少ない。1の対応 をすることでGSIが増えてしまう場合、2の対応をした方が 良いことがある。 テーブル設計手法：複数のモデルを一つのテーブルに統合する
- 29. 29 各アクセスパターンにおいて他のモデルのデータが 混ざらないことを確認する 今回の場合、 a. 指定されたidの投稿に紐づくコメントを古い順で全て 取得する b. 指定されたidの投稿に紐づくいいねを全て取得する c.指定されたユーザーが作成した投稿一覧を新しい順で 取得する の結果が混ざってしまう。 a. , b. は1の対応をするとGSIが増えてしまうため、2の対応を します。c. は1の対応をする。 テーブル設計手法：複数のモデルを一つのテーブルに統合する
- 30. 30 各アクセスパターンにおいて他のモデルのデータが 混ざらないように修正：修正前 テーブル設計手法：複数のモデルを一つのテーブルに統合する Post Primary Key AttributesAttributes Attributes Attributes Attributes Attributes Partition Key Sort Key, GSI1PK GSI1SK,GSI2SK,GSI3SK GSI2PK GSI3PK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK author content updated_at title genre 77fcab6b post 2021-12- 03T10:06:57.650Z 和田哲也 この記事の目的は... NoSQLのテーブル... データベース Comment Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK author content updated_at 81fcab6a 77fcab6b 2021-12- 03T10:11:44.137Z 山田太郎 面白いですね Like Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK author 6b9b9319 77fcab6b 2021-12- 03T10:12:45.033Z 山田太郎
- 31. 31 各アクセスパターンにおいて他のモデルのデータが 混ざらないように修正：修正後 テーブル設計手法：複数のモデルを一つのテーブルに統合する Post Primary Key AttributesAttributes Attributes Attributes Attributes Attributes Partition Key Sort Key, GSI1PK GSI1SK,GSI2SK,GSI3SK GSI2PK GSI3PK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK author content updated_at title genre 77fcab6b post 2021-12- 03T10:06:57.650Z 和田哲也 この記事の目的は... NoSQLのテーブル... データベース Comment Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK content updated_at comment_author 81fcab6a Comment_77fcab 6b 2021-12- 03T10:11:44.137Z 面白いですね 山田太郎 Like Primary Key Attributes Attributes Attributes Attributes Attributes Attributes Partition Key Sort Key,GSI1PK GSI1SK PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK like_author 6b9b9319 Like_77fcab6b 2021-12- 03T10:12:45.033Z 山田太郎
- 32. 32 テーブルを統合 テーブル設計手法：複数のモデルを一つのテーブルに統合する Primary Key Attributes Partition KeySort Key PK SK_GSI1PK GSI1SK_GSI2SK_GSI3SK GSI2PK GSI3PK 77fcab6b post 2021-12-03T10:06:57.650Z 和田哲也 データベー ス content updated_at title この記事の目的 は... NoSQLの テーブ ル... 81fcab6a Comment_77fc ab6b 2021-12-03T10:11:44.137Z content updated_at comment _author 面白いですね 山田太郎 6b9b9319 Like_77fcab6b 2021-12-03T10:12:45.033Z like_author 山田太郎
- 33. 33 DynamoDB Localで試す ローカルなのでどれだけ触っても無料 ブラウザからも操作可能 発展編
- 34. 34 DynamoDBテーブル設計方法を解説しているAWSの ドキュメント https://docs.aws.amazon.com/ja_jp/amazondynamodb/latest/develop erguide/bp-modeling-nosql-B.html スライドと同じ内容の記事（より詳しく書いてます） https://www.ais.cmc.osaka- u.ac.jp/technology/nosql%e3%81%ae%e3%83%86%e3%83%bc%e3% 83%96%e3%83%ab%e8%a8%ad%e8%a8%88%e6%89%8b%e6%b3%9 5/ 参考
Editor's Notes
- #2 ＜録画開始する＞