Submit Search
Upload
20210127 AWS Black Belt Online Seminar Amazon Redshift 運用管理
•
0 likes
•
4,532 views
Amazon Web Services Japan
Follow
AWS 公式オンラインセミナー: https://amzn.to/JPWebinar 過去資料: https://amzn.to/JPArchive
Read less
Read more
Technology
Report
Share
Report
Share
1 of 66
Recommended
20200422 AWS Black Belt Online Seminar Amazon Elastic Container Service (Amaz...
20200422 AWS Black Belt Online Seminar Amazon Elastic Container Service (Amaz...
Amazon Web Services Japan
20200218 AWS Black Belt Online Seminar Next Generation Redshift
20200218 AWS Black Belt Online Seminar Next Generation Redshift
Amazon Web Services Japan
20190806 AWS Black Belt Online Seminar AWS Glue
20190806 AWS Black Belt Online Seminar AWS Glue
Amazon Web Services Japan
20180425 AWS Black Belt Online Seminar Amazon Relational Database Service (Am...
20180425 AWS Black Belt Online Seminar Amazon Relational Database Service (Am...
Amazon Web Services Japan
20210216 AWS Black Belt Online Seminar AWS Database Migration Service
20210216 AWS Black Belt Online Seminar AWS Database Migration Service
Amazon Web Services Japan
SaaS テナント毎のコストを把握するための「AWS Application Cost Profiler」のご紹介
SaaS テナント毎のコストを把握するための「AWS Application Cost Profiler」のご紹介
Amazon Web Services Japan
20191029 AWS Black Belt Online Seminar Elastic Load Balancing (ELB)
20191029 AWS Black Belt Online Seminar Elastic Load Balancing (ELB)
Amazon Web Services Japan
20190424 AWS Black Belt Online Seminar Amazon Aurora MySQL
20190424 AWS Black Belt Online Seminar Amazon Aurora MySQL
Amazon Web Services Japan
Recommended
20200422 AWS Black Belt Online Seminar Amazon Elastic Container Service (Amaz...
20200422 AWS Black Belt Online Seminar Amazon Elastic Container Service (Amaz...
Amazon Web Services Japan
20200218 AWS Black Belt Online Seminar Next Generation Redshift
20200218 AWS Black Belt Online Seminar Next Generation Redshift
Amazon Web Services Japan
20190806 AWS Black Belt Online Seminar AWS Glue
20190806 AWS Black Belt Online Seminar AWS Glue
Amazon Web Services Japan
20180425 AWS Black Belt Online Seminar Amazon Relational Database Service (Am...
20180425 AWS Black Belt Online Seminar Amazon Relational Database Service (Am...
Amazon Web Services Japan
20210216 AWS Black Belt Online Seminar AWS Database Migration Service
20210216 AWS Black Belt Online Seminar AWS Database Migration Service
Amazon Web Services Japan
SaaS テナント毎のコストを把握するための「AWS Application Cost Profiler」のご紹介
SaaS テナント毎のコストを把握するための「AWS Application Cost Profiler」のご紹介
Amazon Web Services Japan
20191029 AWS Black Belt Online Seminar Elastic Load Balancing (ELB)
20191029 AWS Black Belt Online Seminar Elastic Load Balancing (ELB)
Amazon Web Services Japan
20190424 AWS Black Belt Online Seminar Amazon Aurora MySQL
20190424 AWS Black Belt Online Seminar Amazon Aurora MySQL
Amazon Web Services Japan
20180704(20190520 Renewed) AWS Black Belt Online Seminar Amazon Elastic File ...
20180704(20190520 Renewed) AWS Black Belt Online Seminar Amazon Elastic File ...
Amazon Web Services Japan
20200219 AWS Black Belt Online Seminar オンプレミスとAWS間の冗長化接続
20200219 AWS Black Belt Online Seminar オンプレミスとAWS間の冗長化接続
Amazon Web Services Japan
20190220 AWS Black Belt Online Seminar Amazon S3 / Glacier
20190220 AWS Black Belt Online Seminar Amazon S3 / Glacier
Amazon Web Services Japan
20190402 AWS Black Belt Online Seminar Let's Dive Deep into AWS Lambda Part1 ...
20190402 AWS Black Belt Online Seminar Let's Dive Deep into AWS Lambda Part1 ...
Amazon Web Services Japan
AWS BlackBelt AWS上でのDDoS対策
AWS BlackBelt AWS上でのDDoS対策
Amazon Web Services Japan
20191016 AWS Black Belt Online Seminar Amazon Route 53 Resolver
20191016 AWS Black Belt Online Seminar Amazon Route 53 Resolver
Amazon Web Services Japan
AWSのログ管理ベストプラクティス
AWSのログ管理ベストプラクティス
Akihiro Kuwano
20190326 AWS Black Belt Online Seminar Amazon CloudWatch
20190326 AWS Black Belt Online Seminar Amazon CloudWatch
Amazon Web Services Japan
20190814 AWS Black Belt Online Seminar AWS Serverless Application Model
20190814 AWS Black Belt Online Seminar AWS Serverless Application Model
Amazon Web Services Japan
202110 AWS Black Belt Online Seminar AWS Site-to-Site VPN
202110 AWS Black Belt Online Seminar AWS Site-to-Site VPN
Amazon Web Services Japan
20190911 AWS Black Belt Online Seminar AWS Batch
20190911 AWS Black Belt Online Seminar AWS Batch
Amazon Web Services Japan
20200714 AWS Black Belt Online Seminar Amazon Neptune
20200714 AWS Black Belt Online Seminar Amazon Neptune
Amazon Web Services Japan
20190604 AWS Black Belt Online Seminar Amazon Simple Notification Service (SNS)
20190604 AWS Black Belt Online Seminar Amazon Simple Notification Service (SNS)
Amazon Web Services Japan
20200722 AWS Black Belt Online Seminar AWSアカウント シングルサインオンの設計と運用
20200722 AWS Black Belt Online Seminar AWSアカウント シングルサインオンの設計と運用
Amazon Web Services Japan
20200630 AWS Black Belt Online Seminar Amazon Cognito
20200630 AWS Black Belt Online Seminar Amazon Cognito
Amazon Web Services Japan
20190129 AWS Black Belt Online Seminar AWS Identity and Access Management (AW...
20190129 AWS Black Belt Online Seminar AWS Identity and Access Management (AW...
Amazon Web Services Japan
20210526 AWS Expert Online マルチアカウント管理の基本
20210526 AWS Expert Online マルチアカウント管理の基本
Amazon Web Services Japan
20191002 AWS Black Belt Online Seminar Amazon EC2 Auto Scaling and AWS Auto S...
20191002 AWS Black Belt Online Seminar Amazon EC2 Auto Scaling and AWS Auto S...
Amazon Web Services Japan
20190514 AWS Black Belt Online Seminar Amazon API Gateway
20190514 AWS Black Belt Online Seminar Amazon API Gateway
Amazon Web Services Japan
AWS Black Belt Online Seminar 2016 AWS CloudFormation
AWS Black Belt Online Seminar 2016 AWS CloudFormation
Amazon Web Services Japan
AWS Blackbelt 2015シリーズ RDS
AWS Blackbelt 2015シリーズ RDS
Amazon Web Services Japan
RDS詳細 -ほぼ週刊AWSマイスターシリーズ第8回-
RDS詳細 -ほぼ週刊AWSマイスターシリーズ第8回-
SORACOM, INC
More Related Content
What's hot
20180704(20190520 Renewed) AWS Black Belt Online Seminar Amazon Elastic File ...
20180704(20190520 Renewed) AWS Black Belt Online Seminar Amazon Elastic File ...
Amazon Web Services Japan
20200219 AWS Black Belt Online Seminar オンプレミスとAWS間の冗長化接続
20200219 AWS Black Belt Online Seminar オンプレミスとAWS間の冗長化接続
Amazon Web Services Japan
20190220 AWS Black Belt Online Seminar Amazon S3 / Glacier
20190220 AWS Black Belt Online Seminar Amazon S3 / Glacier
Amazon Web Services Japan
20190402 AWS Black Belt Online Seminar Let's Dive Deep into AWS Lambda Part1 ...
20190402 AWS Black Belt Online Seminar Let's Dive Deep into AWS Lambda Part1 ...
Amazon Web Services Japan
AWS BlackBelt AWS上でのDDoS対策
AWS BlackBelt AWS上でのDDoS対策
Amazon Web Services Japan
20191016 AWS Black Belt Online Seminar Amazon Route 53 Resolver
20191016 AWS Black Belt Online Seminar Amazon Route 53 Resolver
Amazon Web Services Japan
AWSのログ管理ベストプラクティス
AWSのログ管理ベストプラクティス
Akihiro Kuwano
20190326 AWS Black Belt Online Seminar Amazon CloudWatch
20190326 AWS Black Belt Online Seminar Amazon CloudWatch
Amazon Web Services Japan
20190814 AWS Black Belt Online Seminar AWS Serverless Application Model
20190814 AWS Black Belt Online Seminar AWS Serverless Application Model
Amazon Web Services Japan
202110 AWS Black Belt Online Seminar AWS Site-to-Site VPN
202110 AWS Black Belt Online Seminar AWS Site-to-Site VPN
Amazon Web Services Japan
20190911 AWS Black Belt Online Seminar AWS Batch
20190911 AWS Black Belt Online Seminar AWS Batch
Amazon Web Services Japan
20200714 AWS Black Belt Online Seminar Amazon Neptune
20200714 AWS Black Belt Online Seminar Amazon Neptune
Amazon Web Services Japan
20190604 AWS Black Belt Online Seminar Amazon Simple Notification Service (SNS)
20190604 AWS Black Belt Online Seminar Amazon Simple Notification Service (SNS)
Amazon Web Services Japan
20200722 AWS Black Belt Online Seminar AWSアカウント シングルサインオンの設計と運用
20200722 AWS Black Belt Online Seminar AWSアカウント シングルサインオンの設計と運用
Amazon Web Services Japan
20200630 AWS Black Belt Online Seminar Amazon Cognito
20200630 AWS Black Belt Online Seminar Amazon Cognito
Amazon Web Services Japan
20190129 AWS Black Belt Online Seminar AWS Identity and Access Management (AW...
20190129 AWS Black Belt Online Seminar AWS Identity and Access Management (AW...
Amazon Web Services Japan
20210526 AWS Expert Online マルチアカウント管理の基本
20210526 AWS Expert Online マルチアカウント管理の基本
Amazon Web Services Japan
20191002 AWS Black Belt Online Seminar Amazon EC2 Auto Scaling and AWS Auto S...
20191002 AWS Black Belt Online Seminar Amazon EC2 Auto Scaling and AWS Auto S...
Amazon Web Services Japan
20190514 AWS Black Belt Online Seminar Amazon API Gateway
20190514 AWS Black Belt Online Seminar Amazon API Gateway
Amazon Web Services Japan
AWS Black Belt Online Seminar 2016 AWS CloudFormation
AWS Black Belt Online Seminar 2016 AWS CloudFormation
Amazon Web Services Japan
What's hot
(20)
20180704(20190520 Renewed) AWS Black Belt Online Seminar Amazon Elastic File ...
20180704(20190520 Renewed) AWS Black Belt Online Seminar Amazon Elastic File ...
20200219 AWS Black Belt Online Seminar オンプレミスとAWS間の冗長化接続
20200219 AWS Black Belt Online Seminar オンプレミスとAWS間の冗長化接続
20190220 AWS Black Belt Online Seminar Amazon S3 / Glacier
20190220 AWS Black Belt Online Seminar Amazon S3 / Glacier
20190402 AWS Black Belt Online Seminar Let's Dive Deep into AWS Lambda Part1 ...
20190402 AWS Black Belt Online Seminar Let's Dive Deep into AWS Lambda Part1 ...
AWS BlackBelt AWS上でのDDoS対策
AWS BlackBelt AWS上でのDDoS対策
20191016 AWS Black Belt Online Seminar Amazon Route 53 Resolver
20191016 AWS Black Belt Online Seminar Amazon Route 53 Resolver
AWSのログ管理ベストプラクティス
AWSのログ管理ベストプラクティス
20190326 AWS Black Belt Online Seminar Amazon CloudWatch
20190326 AWS Black Belt Online Seminar Amazon CloudWatch
20190814 AWS Black Belt Online Seminar AWS Serverless Application Model
20190814 AWS Black Belt Online Seminar AWS Serverless Application Model
202110 AWS Black Belt Online Seminar AWS Site-to-Site VPN
202110 AWS Black Belt Online Seminar AWS Site-to-Site VPN
20190911 AWS Black Belt Online Seminar AWS Batch
20190911 AWS Black Belt Online Seminar AWS Batch
20200714 AWS Black Belt Online Seminar Amazon Neptune
20200714 AWS Black Belt Online Seminar Amazon Neptune
20190604 AWS Black Belt Online Seminar Amazon Simple Notification Service (SNS)
20190604 AWS Black Belt Online Seminar Amazon Simple Notification Service (SNS)
20200722 AWS Black Belt Online Seminar AWSアカウント シングルサインオンの設計と運用
20200722 AWS Black Belt Online Seminar AWSアカウント シングルサインオンの設計と運用
20200630 AWS Black Belt Online Seminar Amazon Cognito
20200630 AWS Black Belt Online Seminar Amazon Cognito
20190129 AWS Black Belt Online Seminar AWS Identity and Access Management (AW...
20190129 AWS Black Belt Online Seminar AWS Identity and Access Management (AW...
20210526 AWS Expert Online マルチアカウント管理の基本
20210526 AWS Expert Online マルチアカウント管理の基本
20191002 AWS Black Belt Online Seminar Amazon EC2 Auto Scaling and AWS Auto S...
20191002 AWS Black Belt Online Seminar Amazon EC2 Auto Scaling and AWS Auto S...
20190514 AWS Black Belt Online Seminar Amazon API Gateway
20190514 AWS Black Belt Online Seminar Amazon API Gateway
AWS Black Belt Online Seminar 2016 AWS CloudFormation
AWS Black Belt Online Seminar 2016 AWS CloudFormation
Similar to 20210127 AWS Black Belt Online Seminar Amazon Redshift 運用管理
AWS Blackbelt 2015シリーズ RDS
AWS Blackbelt 2015シリーズ RDS
Amazon Web Services Japan
RDS詳細 -ほぼ週刊AWSマイスターシリーズ第8回-
RDS詳細 -ほぼ週刊AWSマイスターシリーズ第8回-
SORACOM, INC
AWS初心者向けWebinar RDBのAWSへの移行方法(Oracleを例に)
AWS初心者向けWebinar RDBのAWSへの移行方法(Oracleを例に)
Amazon Web Services Japan
20120409 aws meister-reloaded-dynamo-db
20120409 aws meister-reloaded-dynamo-db
Amazon Web Services Japan
マルチテナント化で知っておきたいデータベースのこと
マルチテナント化で知っておきたいデータベースのこと
Amazon Web Services Japan
20120508 aws meister-rds-public
20120508 aws meister-rds-public
Amazon Web Services Japan
[AWSマイスターシリーズ] Amazon Redshift
[AWSマイスターシリーズ] Amazon Redshift
Amazon Web Services Japan
Effective Data Lakes - ユースケースとデザインパターン
Effective Data Lakes - ユースケースとデザインパターン
Noritaka Sekiyama
Amazon Web Services 最新事例集
Amazon Web Services 最新事例集
SORACOM, INC
2011-04-21 クラウド勉強会
2011-04-21 クラウド勉強会
Koichiro Doi
Modernizing Big Data Workload Using Amazon EMR & AWS Glue
Modernizing Big Data Workload Using Amazon EMR & AWS Glue
Noritaka Sekiyama
AWS Black Belt - AWS Glue
AWS Black Belt - AWS Glue
Amazon Web Services Japan
AWSクラウド利用料算出の参考資料
AWSクラウド利用料算出の参考資料
SORACOM, INC
Architecting on Alibaba Cloud - 超基礎編 -
Architecting on Alibaba Cloud - 超基礎編 -
真吾 吉田
20180508 AWS Black Belt Online Seminar AWS Greengrassで実現するエッジコンピューティング
20180508 AWS Black Belt Online Seminar AWS Greengrassで実現するエッジコンピューティング
Amazon Web Services Japan
Applibot presents Smartphone Game on AWS
Applibot presents Smartphone Game on AWS
Kenta Yasukawa
Ibm クラウドデータベースの使いどころ
Ibm クラウドデータベースの使いどころ
japan_db2
IBMクラウドデータベースの使いどころ
IBMクラウドデータベースの使いどころ
mtanaka0111
Amazon Web Services の本気がみたいか !? スピードと高可用性を両立したゲームインフラの構築と事例
Amazon Web Services の本気がみたいか !? スピードと高可用性を両立したゲームインフラの構築と事例
Amazon Web Services Japan
【IVS CTO Night & Day】AWSにおけるビッグデータ活用
【IVS CTO Night & Day】AWSにおけるビッグデータ活用
Amazon Web Services Japan
Similar to 20210127 AWS Black Belt Online Seminar Amazon Redshift 運用管理
(20)
AWS Blackbelt 2015シリーズ RDS
AWS Blackbelt 2015シリーズ RDS
RDS詳細 -ほぼ週刊AWSマイスターシリーズ第8回-
RDS詳細 -ほぼ週刊AWSマイスターシリーズ第8回-
AWS初心者向けWebinar RDBのAWSへの移行方法(Oracleを例に)
AWS初心者向けWebinar RDBのAWSへの移行方法(Oracleを例に)
20120409 aws meister-reloaded-dynamo-db
20120409 aws meister-reloaded-dynamo-db
マルチテナント化で知っておきたいデータベースのこと
マルチテナント化で知っておきたいデータベースのこと
20120508 aws meister-rds-public
20120508 aws meister-rds-public
[AWSマイスターシリーズ] Amazon Redshift
[AWSマイスターシリーズ] Amazon Redshift
Effective Data Lakes - ユースケースとデザインパターン
Effective Data Lakes - ユースケースとデザインパターン
Amazon Web Services 最新事例集
Amazon Web Services 最新事例集
2011-04-21 クラウド勉強会
2011-04-21 クラウド勉強会
Modernizing Big Data Workload Using Amazon EMR & AWS Glue
Modernizing Big Data Workload Using Amazon EMR & AWS Glue
AWS Black Belt - AWS Glue
AWS Black Belt - AWS Glue
AWSクラウド利用料算出の参考資料
AWSクラウド利用料算出の参考資料
Architecting on Alibaba Cloud - 超基礎編 -
Architecting on Alibaba Cloud - 超基礎編 -
20180508 AWS Black Belt Online Seminar AWS Greengrassで実現するエッジコンピューティング
20180508 AWS Black Belt Online Seminar AWS Greengrassで実現するエッジコンピューティング
Applibot presents Smartphone Game on AWS
Applibot presents Smartphone Game on AWS
Ibm クラウドデータベースの使いどころ
Ibm クラウドデータベースの使いどころ
IBMクラウドデータベースの使いどころ
IBMクラウドデータベースの使いどころ
Amazon Web Services の本気がみたいか !? スピードと高可用性を両立したゲームインフラの構築と事例
Amazon Web Services の本気がみたいか !? スピードと高可用性を両立したゲームインフラの構築と事例
【IVS CTO Night & Day】AWSにおけるビッグデータ活用
【IVS CTO Night & Day】AWSにおけるビッグデータ活用
More from Amazon Web Services Japan
202205 AWS Black Belt Online Seminar Amazon VPC IP Address Manager (IPAM)
202205 AWS Black Belt Online Seminar Amazon VPC IP Address Manager (IPAM)
Amazon Web Services Japan
202205 AWS Black Belt Online Seminar Amazon FSx for OpenZFS
202205 AWS Black Belt Online Seminar Amazon FSx for OpenZFS
Amazon Web Services Japan
202204 AWS Black Belt Online Seminar AWS IoT Device Defender
202204 AWS Black Belt Online Seminar AWS IoT Device Defender
Amazon Web Services Japan
Infrastructure as Code (IaC) 談義 2022
Infrastructure as Code (IaC) 談義 2022
Amazon Web Services Japan
202204 AWS Black Belt Online Seminar Amazon Connect を活用したオンコール対応の実現
202204 AWS Black Belt Online Seminar Amazon Connect を活用したオンコール対応の実現
Amazon Web Services Japan
202204 AWS Black Belt Online Seminar Amazon Connect Salesforce連携(第1回 CTI Adap...
202204 AWS Black Belt Online Seminar Amazon Connect Salesforce連携(第1回 CTI Adap...
Amazon Web Services Japan
Amazon Game Tech Night #25 ゲーム業界向け機械学習最新状況アップデート
Amazon Game Tech Night #25 ゲーム業界向け機械学習最新状況アップデート
Amazon Web Services Japan
20220409 AWS BLEA 開発にあたって検討したこと
20220409 AWS BLEA 開発にあたって検討したこと
Amazon Web Services Japan
202202 AWS Black Belt Online Seminar AWS Managed Rules for AWS WAF の活用
202202 AWS Black Belt Online Seminar AWS Managed Rules for AWS WAF の活用
Amazon Web Services Japan
202203 AWS Black Belt Online Seminar Amazon Connect Tasks.pdf
202203 AWS Black Belt Online Seminar Amazon Connect Tasks.pdf
Amazon Web Services Japan
Amazon QuickSight の組み込み方法をちょっぴりDD
Amazon QuickSight の組み込み方法をちょっぴりDD
Amazon Web Services Japan
機密データとSaaSは共存しうるのか!?セキュリティー重視のユーザー層を取り込む為のネットワーク通信のアプローチ
機密データとSaaSは共存しうるのか!?セキュリティー重視のユーザー層を取り込む為のネットワーク通信のアプローチ
Amazon Web Services Japan
パッケージソフトウェアを簡単にSaaS化!?既存の資産を使ったSaaS化手法のご紹介
パッケージソフトウェアを簡単にSaaS化!?既存の資産を使ったSaaS化手法のご紹介
Amazon Web Services Japan
202202 AWS Black Belt Online Seminar Amazon Connect Customer Profiles
202202 AWS Black Belt Online Seminar Amazon Connect Customer Profiles
Amazon Web Services Japan
Amazon Game Tech Night #24 KPIダッシュボードを最速で用意するために
Amazon Game Tech Night #24 KPIダッシュボードを最速で用意するために
Amazon Web Services Japan
202202 AWS Black Belt Online Seminar AWS SaaS Boost で始めるSaaS開発⼊⾨
202202 AWS Black Belt Online Seminar AWS SaaS Boost で始めるSaaS開発⼊⾨
Amazon Web Services Japan
[20220126] JAWS-UG 2022初頭までに葬ったAWSアンチパターン大紹介
[20220126] JAWS-UG 2022初頭までに葬ったAWSアンチパターン大紹介
Amazon Web Services Japan
202111 AWS Black Belt Online Seminar AWSで構築するSmart Mirrorのご紹介
202111 AWS Black Belt Online Seminar AWSで構築するSmart Mirrorのご紹介
Amazon Web Services Japan
202201 AWS Black Belt Online Seminar Apache Spark Performnace Tuning for AWS ...
202201 AWS Black Belt Online Seminar Apache Spark Performnace Tuning for AWS ...
Amazon Web Services Japan
202112 AWS Black Belt Online Seminar 店内の「今」をお届けする小売業向けリアルタイム配信基盤のレシピ
202112 AWS Black Belt Online Seminar 店内の「今」をお届けする小売業向けリアルタイム配信基盤のレシピ
Amazon Web Services Japan
More from Amazon Web Services Japan
(20)
202205 AWS Black Belt Online Seminar Amazon VPC IP Address Manager (IPAM)
202205 AWS Black Belt Online Seminar Amazon VPC IP Address Manager (IPAM)
202205 AWS Black Belt Online Seminar Amazon FSx for OpenZFS
202205 AWS Black Belt Online Seminar Amazon FSx for OpenZFS
202204 AWS Black Belt Online Seminar AWS IoT Device Defender
202204 AWS Black Belt Online Seminar AWS IoT Device Defender
Infrastructure as Code (IaC) 談義 2022
Infrastructure as Code (IaC) 談義 2022
202204 AWS Black Belt Online Seminar Amazon Connect を活用したオンコール対応の実現
202204 AWS Black Belt Online Seminar Amazon Connect を活用したオンコール対応の実現
202204 AWS Black Belt Online Seminar Amazon Connect Salesforce連携(第1回 CTI Adap...
202204 AWS Black Belt Online Seminar Amazon Connect Salesforce連携(第1回 CTI Adap...
Amazon Game Tech Night #25 ゲーム業界向け機械学習最新状況アップデート
Amazon Game Tech Night #25 ゲーム業界向け機械学習最新状況アップデート
20220409 AWS BLEA 開発にあたって検討したこと
20220409 AWS BLEA 開発にあたって検討したこと
202202 AWS Black Belt Online Seminar AWS Managed Rules for AWS WAF の活用
202202 AWS Black Belt Online Seminar AWS Managed Rules for AWS WAF の活用
202203 AWS Black Belt Online Seminar Amazon Connect Tasks.pdf
202203 AWS Black Belt Online Seminar Amazon Connect Tasks.pdf
Amazon QuickSight の組み込み方法をちょっぴりDD
Amazon QuickSight の組み込み方法をちょっぴりDD
機密データとSaaSは共存しうるのか!?セキュリティー重視のユーザー層を取り込む為のネットワーク通信のアプローチ
機密データとSaaSは共存しうるのか!?セキュリティー重視のユーザー層を取り込む為のネットワーク通信のアプローチ
パッケージソフトウェアを簡単にSaaS化!?既存の資産を使ったSaaS化手法のご紹介
パッケージソフトウェアを簡単にSaaS化!?既存の資産を使ったSaaS化手法のご紹介
202202 AWS Black Belt Online Seminar Amazon Connect Customer Profiles
202202 AWS Black Belt Online Seminar Amazon Connect Customer Profiles
Amazon Game Tech Night #24 KPIダッシュボードを最速で用意するために
Amazon Game Tech Night #24 KPIダッシュボードを最速で用意するために
202202 AWS Black Belt Online Seminar AWS SaaS Boost で始めるSaaS開発⼊⾨
202202 AWS Black Belt Online Seminar AWS SaaS Boost で始めるSaaS開発⼊⾨
[20220126] JAWS-UG 2022初頭までに葬ったAWSアンチパターン大紹介
[20220126] JAWS-UG 2022初頭までに葬ったAWSアンチパターン大紹介
202111 AWS Black Belt Online Seminar AWSで構築するSmart Mirrorのご紹介
202111 AWS Black Belt Online Seminar AWSで構築するSmart Mirrorのご紹介
202201 AWS Black Belt Online Seminar Apache Spark Performnace Tuning for AWS ...
202201 AWS Black Belt Online Seminar Apache Spark Performnace Tuning for AWS ...
202112 AWS Black Belt Online Seminar 店内の「今」をお届けする小売業向けリアルタイム配信基盤のレシピ
202112 AWS Black Belt Online Seminar 店内の「今」をお届けする小売業向けリアルタイム配信基盤のレシピ
Recently uploaded
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
atsushi061452
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
sn679259
Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
WSO2
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
Toru Tamaki
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
CRI Japan, Inc.
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
CRI Japan, Inc.
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Hiroshi Tomioka
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NTT DATA Technology & Innovation
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
Toru Tamaki
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
Recently uploaded
(12)
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
20210127 AWS Black Belt Online Seminar Amazon Redshift 運用管理
1.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 1 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive Solutions Architect 平間 大輔 2021/1/27 Amazon Redshift 運用管理 サービスカットシリーズ [AWS Black Belt Online Seminar]
2.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 2 AWS Black Belt Online Seminar とは 「サービス別」「ソリューション別」「業種別」のそれぞれのテーマに分かれて、アマゾ ン ウェブ サービス ジャパン株式会社が主催するオンラインセミナーシリーズです。 質問を投げることができます! • 書き込んだ質問は、主催者にしか見えません • 今後のロードマップに関するご質問は お答えできませんのでご了承下さい ① 吹き出しをクリック ② 質問を入力 ③ Sendをクリック Twitter ハッシュタグは以下をご利用ください #awsblackbelt
3.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 3 内容についての注意点 本資料では2021 年 1 月 27 日現在のサービス内容および価格についてご説明しています。最新の情 報はAWS公式ウェブサイト(http://aws.amazon.com)にてご確認ください。 資料作成には十分注意しておりますが、資料内の価格とAWS公式ウェブサイト記載の価格に相違が あった場合、AWS公式ウェブサイトの価格を優先とさせていただきます。 価格は税抜表記となっています。日本居住者のお客様には別途消費税をご請求させていただきます。 AWS does not offer binding price quotes. AWS pricing is publicly available and is subject to change in accordance with the AWS Customer Agreement available at http://aws.amazon.com/agreement/. Any pricing information included in this document is provided only as an estimate of usage charges for AWS services based on certain information that you have provided. Monthly charges will be based on your actual use of AWS services, and may vary from the estimates provided.
4.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 4 自己紹介 平間 大輔 アマゾン ウェブ サービス ジャパン ソリューションアーキテクト アナリティクス分野の技術支援を担当 好きなAWSサービス • Amazon Redshift • Amazon QuickSight • AWS Glue
5.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 5 本日のアジェンダ • Amazon Redshiftとは • Amazon Redshiftを使ってみる • 自動化された運用タスク • モニタリングと性能改善 • 利用者の増加に対処する • データ連携はどのように行うか
6.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 6 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive Amazon Redshift とは
7.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 7 7 Amazon Redshift とは DWH BI OLTP ERP CRM LOB デバイス ウェブ センサー ソーシャル ビッグデータ処理 リアルタイム処理 機械学習 データレイク Amazon Redshift 高速、スケーラブルで 費用対効果の高い データウェアハウス およびデータレイク 分析マネージドサービス Amazon S3
8.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 8 Amazon Redshiftは 分析用クエリ実行に特化したRDBMS Amazon Redshift JDBC/ODBC リーダーノード • クエリのエンドポイント • クエリオプティマイザが SQL 処理コードを生成し、 コンピュートノードに展開 コンピュートノード • 高速ローカル SSD キャッシュ +大容量 RAM 搭載 +広帯域ネットワーキング • クエリの並列実行エンジン 広帯域ネットワーキング マネージドストレージ • Redshift 管理 S3 バケット • データの永続ストレージ Redshift 列指向フォーマットデータ 分析ワークロードに特化 • 列指向ストレージ • 並列分散処理 • PostgreSQL互換のSQL 柔軟なクラスタ構成 • コンピュートノードの追加で処理能力をスケール • マネージドストレージにより、データ量増大を ノード追加なく対処可能 自動的にワークロードを最適化 • テーブルメンテナンスの自動化 • 分散、ソートキーの自動設定 • クエリへのリソース割当を自動で最適化 追加の手動チューニングも可能 • 圧縮、分散、ソート、マテリアライズドビュー • クエリの優先度設定 • チューニングのヒントは自動でアドバイス
9.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 9 他の分析サービスとも手軽に連携 - レイクハウスアーキテクチャ - Amazon DynamoDB Amazon SageMaker Amazon Redshift Amazon Elasticsearch Service Amazon EMR Amazon S3 Amazon Aurora Amazon Athena Amazon S3でスケーラブルな データレイクを構築することで、 AWSの他のサービスから生まれ たデータを手軽に分析可能 Amazon Redshiftで分析した データも、S3に保存することで 他のサービスから利用可能 Amazon Redshiftと他のサービ スが直接連携する機能も充実
10.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 10 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive Amazon Redshift を使ってみる
11.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 11 数クリックで手軽にスタート • 1 画面の入力作業ですぐに起動 • ノード数やタイプは後から変更可能 クラスター の詳細設定 クラスターの ノード構成
12.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 12 どのノードタイプを選べば良い? • Amazon Redshiftは、3つのノードファミリーそれぞれに2〜3のサイズがあり、 合計7タイプから選択可能 • ファミリーの違いは主にストレージの種類による • RA3:マネージドストレージ & SSDキャッシュ • DC2:SSD • DS2:HDD vCPU メモリ ストレージ I/O デフォルト スライス数 ノード数 コンピュート 料金 (*1) ストレージ 料金 (*1) RA3 with Redshift Managed Storage(RMS) ra3.xlplus 4 32 GB 32TB RMS 650 MB/s 2 2~16 (*2) $1.278 /h $0.0261 /GB-Month ra3.4xlarge 12 96 GB 128TB RMS 2.0 GB/s 4 2~32 (*2) $3.836 /h ra3.16xlarge 48 384 GB 128TB RMS 8.0 GB/s 16 2~128 $15.347 /h DC2 - Dense Compute dc2.large 2 15 GB 0.16TB SSD 0.6 GB/s 2 1~32 $0.314 /h dc2.8xlarge 32 244 GB 2.56TB SSD 7.5 GB/s 16 2~128 $6.095 /h DS2 – Dense Storage ds2.xlarge 4 31 GB 2TB HDD 0.4 GB/s 2 1~32 $1.190 /h ds2.8xlarge 36 244 GB 16TB HDD 3.3 GB/s 16 2~128 $9.520 /h *1 2021 年 1 月時点での東京リージョンのものです *2 クラスター作成後、Elastic Resizeによりra3.xlplusは32ノード、ra3.4xlargeは64ノードまで拡張可能です
13.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 13 ノードタイプ選定フロー まずはRA3の利用を検討してみる • 少数のノード数で大量のデータを 格納可能 • データ量が急増してもノード追加 なく対応可能 • RA3でだけ利用可能な機能がある • AQUA(クエリ高速化機能) • Data Sharing • クロスAZクラスターリカバリー RA3では性能やコストが 見合わない場合 RA3でだけ利用可能な機能を使わなくて も良いのであれば... • データはそれほど多くなく、とにかく 性能が必要! →DC2を検討 • 大量のデータを偏りなくアクセスする ワークロードが多いため、RA3のSSD キャッシュが効きづらい →DS2を検討
14.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 14 Amazon Redshiftにクエリしてみよう • Amazon Redshiftへの主なアクセス手段 • 管理コンソール内の「クエリエディタ」 • Amazon Redshift ODBC/JDBCを利用した アプリケーション • Amazon Redshift Data API • PostgreSQLへのアクセスをサポートした アプリケーション(※) • データベースへのアクセスにはデータベースユーザーを使う • SQL文「CREATE USER」で作成 • SAML2.0準拠のシングルサインオン(SSO)にも対応 • 利用可能なプロバイダ:ADFS, Okta, PingFederate, Azure AD ※ PostgreSQLのみをサポートしているアプリケーションの場合、必ずしもAmazon Redshiftへの接続が保証されているわけではない ことにご注意ください。
15.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 15 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive 自動化された運用タスク
16.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 16 一般的な DWH の運用タスク • バックアップ • リストア • 監視 (システム/ワークロード) • アクセス監査 • バージョンアップグレード • キャパシティ管理 など
17.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 17 Amazon Redshift で変わる DWH 運用 • バックアップ • リストア • 監視 (システム/ワークロード) • アクセス監査 • バージョンアップグレード • キャパシティ管理 など S3 への自動/手動スナップショット スナップショットからの復元 コンソールや CLI 経由で状況を確認 監査ログを S3 上に自動取得 定期的な自動アップグレード 厳密な管理は必ずしも必要ではない (マネージドストレージで自動スケール) 多くのタスクが自動化・簡易化される
18.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 18 テーブルの物理設計やメンテナンスタスクが 機械学習ベースで自動的に最適化 物理データ配置やその最適化を 自動化 データやワークロードの増加に 応じてピーク性能を最適化 機械学習を活用し、変化する ワークロードに適応 パフォーマンスチューニングの 自動化 Automatic sort keys Automatic vacuum delete Automatic distribution keys Auto workload manager Automatic table sort
19.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 19 Amazon Redshiftの高速化の工夫(1) ゾーンマップとソートキー ゾーンマップ • Amazon Redshiftはカラムごとに「ブロック」単 位でディスクにデータを格納。 1ブロック=1MB • ブロック内の最小値と最大値をメモリに保存 • 不要なブロックを読み飛ばすことが可能 10 | 13 | 14 | 26 |… … | 100 | 245 | 324 375 | 393 | 417… … 512 | 549 | 623 637 | 712 | 809 … … | 834 | 921 | 959 10 324 375 623 637 959 ソートキー • カラムのデータをあらかじめソートしておけば、ゾーンマップによる読み 込みブロックの絞り込みを効果的に行うことが可能 • クエリで頻繁に絞り込みを行う列をソートキーとして指定することで、 データロードやメンテナンス時にデータをソートしておくことができる
20.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 20 Amazon Redshiftの高速化の工夫(2) 分散スタイル 同じキーは同じスライスへ 全てのデータを全ノードへ ラウンドロビンで均等分散 KEY Node 1 Slice 1 Slice 2 Node 2 Slice 3 Slice 4 Node 1 Slice 1 Slice 2 Node 2 Slice 3 Slice 4 EVEN ALL Node 1 Slice 1 Slice 2 Node 2 Slice 3 Slice 4 • 通常は、全ノード・全スライス(並列処理の単位)にデータを均等に分散させ ることで、並列処理を効率的に行い、クエリを高速に実行することが可能 • ただし、テーブルをJOINする場合は、ノード間でネットワークI/Oが多発して 速度が落ちる可能性がある • JOINするレコード同士を同じノード内に置くことで、ネットワークI/Oを削減 することが可能
21.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 21 自動テーブル最適化 • 自動テーブル最適化機能では、Amazon Redshiftがクエ リとテーブルの利用状況を継続的に監視し、ソートキー や分散キーがパフォーマンス向上に寄与すると判断する と、それらを自動設定する • ソートキーや分散スタイルを指定せずに新規作成された テーブルでは、自動テーブル最適化はデフォルトで有効 • 自動テーブル最適化が適用されていないテーブルでも、 ALTER TABLE文であとから有効にすることが可能 Distribution Style Sort Keys ALTER TABLE table_name ALTER SORTKEY AUTO; ALTER TABLE table_name ALTER DISTSTYLE AUTO;
22.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 22 Analyze の自動化 Analyze は、最適なクエリ実行計画 作成のために必要な、 テーブルの統計情報を更新する処理 テーブルデータの変化と クエリの負荷状況に基づいて、 適切なタイミングで自動実行される Amazon Redshift Query planner Table statistics Amazon Redshift Worker Thread Auto Analyze Analyze this table
23.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 23 Vacuum Delete の自動化 Vacuum Delete は Delete や Update 後の削除領域の解放を行う処理 テーブル内の削除済み行数と クエリの負荷状況に基づいて、 適切なタイミングで自動実行される Col1 Col2 Col3 Col1 Col2 Col3 Vacuum Delete
24.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 24 テーブルソートの自動化 テーブルへのデータの追加・更新がされ続け ると、テーブルの未ソート領域が次第に増え ていくため、メンテナンスが必要となる テーブル全体のソートは負荷が高いため、機 械学習によりソートが必要な部分を判断し、 ピンポイントでソートする。このため低負荷 でソートを実行可能 適切なタイミングで自動実行される パフォーマンスやアクセスに影響なし MIN: 01-MAR-2019 MAX: 31-MAR-2019 MIN: 01-APRIL-2019 MAX: 30-APRIL-2019 MIN: 01-MAY-2019 MAX: 31-MAY-2019 MIN: 01-JUNE-2019 MAX: 30-JUNE-2019 Sorted by date Most accessed partition
25.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 25 Amazon Redshiftの高速化の工夫(3) ワークロード管理機能:WLM • Redshift がクエリに対してどのようにリソース(メモリ/CPU/IO)を割り当 てるかを決定づけるしくみ • クエリが実行されると、必ず待ち行列(キュー)にアサインされる。キュー はデフォルトで用意されているが、別途作成して増やすことも可能で、ク エリの種類(ユーザーグループ、クエリグループ)に応じてアサイン先を振 り分けることが可能 • クエリには、キューで利用可能なリソースセット(スロット)が割り当てら れる。スロットが全て割り当てられたら、後続のクエリは実行待ちとなる キュー クエリ1 スロット クエリ1に割り当てられたスロット
26.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 26 ワークロード管理の自動化 – Auto WLM • WLMでの複雑なリソース割当を、 Amazon Redshiftが自動的に行う仕組み • クラスター全体で柔軟にリソースを使用 • クエリの内容に応じて、割り当てるメモ リを適切に調整 • クエリ単体のパフォーマンスとクエリの 同時実行数のバランスを自動的に最適化 クラスターの総メモリ : 40GB WLMについてより詳しい技術情報を知りたい方は、こちらの過去のBlackBelt資料をご覧ください https://d1.awsstatic.com/webinars/jp/pdf/services/20200729_AWS_BlackBelt_RedshiftAdvancedGuide.pdf
27.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 27 • モニタリング機能を内蔵 • GUI(マネジメントコンソール) • API経由で操作も可能 監視・パッチ適用の自動化 • パッチ適用も自動的 • メンテナンスウィンドウで パッチの時間帯を指定可能
28.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 28 クラスターの一時停止と再開でコスト削減 • Redshift を使用しない間(週末等)はクラスターを一時停止(Pause)し、 必要時にクラスターを再開(Resume)することでコスト発生を抑制可能 • スケジュール実行で自動的に一時停止・再開させることも可能
29.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 29 リージョン 1 リージョン 2 Amazon S3 Compute node Compute node Compute node Amazon S3 • Amazon S3に継続的な増分バック アップスナップショットを自動取得 • バックアップ&リストア中もSQLを実 行可能 • リージョン間スナップショットコピー も可能 • ストリーミングリストアにも対応 継続的な自動データバックアップ
30.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 30 AZ障害時はマネージドストレージを使って自動復旧 AZ–1 AZ–2 Redshift マネージドストレージ データロスなしにリカバリー (RPO = 0) スナップショットからのリストアが不要に オンデマンドフェールオーバー クラスターは別の AZ にオンデマンドで作 成されるため、スタンバイレプリカクラス ター不要 RA3 インスタンスでのサポート クロスAZクラスターリカバリー
31.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 31 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive モニタリングと性能改善
32.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 32 Amazon Redshiftの主なモニタリング項目 • クラスターのパフォーマンスメトリクス • Amazon CloudWatchによる監視メトリクスを提供 • 管理コンソールからも確認可能 • クラスターのイベント • クラスターで発生したエラーや、クラスターのメンテナンス予告、パッチ適用 予告などがイベントとして登録される • Amazon SNSを利用して通知することも可能 • システムテーブルとビュー • 個別クエリの実行統計や、テーブルの構成情報などのメタデータを確認可能
33.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 33 アドバイザー機能 Amazon Redshiftがワークロードを自動分析し、パフォーマンス向上や コスト削減につながる推奨事項を表示する機能。こちらにアドバイスが 出ていないかを監視し、出ていれば優先して実行を検討 推奨事項の例: • COPYコマンド実行時の ファイル圧縮・分割 • 未使用クラスターの停止や ダウンサイジング • 設定すべきソートキーや分 散キー(自動テーブル最適 化を使っていない場合には こちらを参照すると便利)
34.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 34 クエリーとクラスターの監視 • マネジメントコンソールの活用 • マネジメントコンソール → Redshift → クラスター → [クラスター名] • 以下の情報を得ることができる クラスターのパフォーマンス CPU、ディスクI/O、ネットワークI/Oなど クエリの履歴 クエリやロードの実行時間やステータスなど データベースパフォーマンス スループット、 レイテンシーなど ワークロードコンカレンシー クエリの同時実行状況 (キュー待ちや実行時間)
35.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 35 システムテーブルとビューによる性能分析 STL STV SVL SVV タイプ テーブル 仮想テーブル ビュー ビュー 生成方法 ディスク上のログ から生成 オンメモリーデータか ら生成 STLへの参照 STVへの参照 主たる用途 過去の実行記録の参照 現在進行中の処理の参 照 STL/STVデータを組み合わせて別軸で分析 • Redshift は 4 種類のシステムテーブル/ビューを保持 • 発生元や用途によって異なる • いずれも DB 領域外に保持されるためスナップショットには含まれない (一時停止/再開や、スナップショットからの復元では残存していない)
36.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 36 システムテーブルとビューによる性能分析 • 実行されたクエリには一意のクエリ ID が割当られる • システムテーブル・ビューから情報を取得する際は、多くの場合 クエリ ID をキーとする • Tips • 同一セッションで情報を取得する場合は以下が便利 1. クエリを実行 2. select pg_last_query_id() as q into temp table hoge; 3. select * from stl_explain where query=(select q from hoge); 4. select * from svl_query_summary where query=(select q from hoge); 5. :
37.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 37 Admin Views / Scripts • 管理、モニタリングに有益なViewおよびスクリプト群 • AWSにより開発・提供される • 無料で利用可能 https://github.com/awslabs/amazon-redshift-utils • クラスターの状態確認、トラブルシューティングに利用可能 • 例:ノードスライス間でのデータ分散状況の確認
38.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 38 クエリが性能要件を満たせない場合は • クエリの実行計画・実行統計を見て非効率な動作を確認したら、テーブル 設計の変更やSQLの修正など、パフォーマンスチューニングを実施 → 圧縮、ソートキー、分散スタイルといったAmazon Redshift特有のテー ブル物理設計の最適化は、現在は大部分自動化されている • 複数のクエリがCPUやメモリなどのリソースを使い切ったうえで性能が出 ない場合、クラスタをスケールアウト(またはスケールアップ)して、性 能を増強する • 夜間バッチ処理など、性能が必要な時間帯が決まっている場合は、その時 間帯だけノード数を増やす
39.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 39 頻繁に実行するクエリパターンを高速化 • 結合、フィルタ、集計、射影 • ベーステーブルとは異なる分散キーや ソートキーを指定できる • 外部表の参照も可能 ETL/BI パイプラインの簡素化 • データは自動でリフレッシュされる クエリリライト • アプリケーションからはテーブルに対して クエリするだけで必要に応じて実行計画を Rewrite し、マテリアライズドビューを参照 マテリアライズド・ビューの利用でクエリを高速化 item store cust price i1 s1 c1 12.0 i2 s2 c1 3.0 i3 s2 c2 7.0 sales store owner loc s1 Joe SF s2 Ann NY s3 Lisa SF store_info loc total_sales SF 12.00 NY 10.00 loc_sales
40.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 40 必要な性能に合わせてノード構成を変更する Elastic Resize Amazon Redshift JDBC/ODBC 広帯域ネットワーキング Redshift マネージドストレージ + + + 広帯域ネットワーキング ノード数やタイプの変更を数分で実行 スケジューリングによる実行も可能
41.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 41 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive 利用者の増加に対処する
42.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 42 DWH ワークロードの特徴 • DWHには多様なユーザーが様々なツールを使って接続する 可能性がある • 評判のよいDWHは成長していく データ サイエンティスト Amazon Redshift データアナリスト エンジニア 営業 バッチ アプリケーション マーケティング
43.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 43 DWH ワークロードの特徴 • BI ダッシュボードからはバックグラウンドで複数のクエリが流れる • DWH は接続ユーザー数以上のリクエストを受ける可能性がある Amazon Redshift
44.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 44 重要なクエリを優先的に実行 Redshift Cluster Leader Node Compute Nodes Workload Manager … Concurrency Query Slots = Auto BI/Analytics Priority: Normal ETL Priority: High Data Science Priority: Low Auto WLMでは、ワークロード毎にキュー を分け、相対的な優先度を設定することが 可能 Amazon Redshift が、優先度の高い キューで実行された処理に自動的に多く CPU, IOリソースを割り当てる 優先度はコマンドなどで動的に変更が可能
45.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 45 ショートクエリアクセラレーション (SQA) 実行時間の短いクエリは、通常のキューとは別の領域で処理 機械学習によってクエリの実行時間を予 測する ショートクエリと判断されたクエリは専 用の高速キューにルーティングされる リソースはショートクエリのために動的 に確保される SQAの機能 機能はデフォルトで有効 (ユーザー側での設定は不要) 分析およびBI / ダッ シュボードツール コンピュー トノード コンピュー トノード コンピュー トノード Amazon Redshift 高速キュー 1 2 3
46.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 46 ピークタイムのワークロード • アクセスの集中する時間帯では、システム全体のパフォーマンス低 下を引き起こす可能性がある • ピークタイムに合わせた DWH のリソースサイジングが必要になる Amazon Redshift
47.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 47 ピーク時にコンピュートを自動拡張する Concurrency Scaling Amazon Redshift 広帯域ネットワーキング Redshift マネージドストレージ メインクラスター 追加クラスター(1~10) + + + 処理を自動で 振り分け メインクラスターでクエリのキュー待ちが 発生すると、バックグラウンドで別の独立 したクラスターを順次追加して並列処理
48.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 48 Concurrency Scaling を有効化するには クラスターに設定されているパラ メータグループの WLM のキュー 定義を編集し、 「同時実行スケーリングモード」 設定値を「自動」に設定
49.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 49 追加クラスターの最大数を指定 パラメータ ”max_concurrency_scaling_clusters” にて、追加クラスターの最大数を 0-10 の範囲で指定 (デフォルト : 1)
50.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 50 Concurrency Scaling の料金 • 各追加クラスターでクエリが実行された期間(秒) • 1 日あたり 1 時間分の無料クレジットが付与(最大 30 時間) • 日/週/月毎の単位で実行時間上限を設定しコストをコントロールすることも可能 追加クラスター 1 追加クラスター 2 追加クラスターへの課金 クエリ 1 クエリ 2 クエリ 3 クエリ 4 クエリ5 クエリ 6 クエリ 7 Idle 時間 Idle 時間 クエリ 8 クエリ 9 Idle 時間 時間 1クラスター分 課金なし 課金なし 2クラスター分 1 1クラスター分 ※追加クラスターはクエリ終了後も 一定期間起動されるが、 クエリが実行されなければ無課金 * 課金体系は 2021 年 1 月時点での東京リージョンのものです 参考: https://aws.amazon.com/jp/redshift/pricing/
51.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 51 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive データ連携はどのように行うか
52.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 52 様々なサービスと様々なデータを連携 Amazon Kinesis Family Amazon S3 蓄積 AWS Glue 加工・変換 Amazon Redshift 集計・分析 Amazon QuickSight 可視化 Amazon SageMaker 機械学習 LOB CRM ERP OLTP AWS DMS/SCT Social Web Sensors Devices オンプレミス AWS クラウド Amazon Redshiftは、RDBMS以外にも様々なサービスとデータ連携をして分析を行うことができる 以下はデータ連携の一例だが、これ以外にも様々なデータ連携の形を取ることが可能
53.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 53 データロードと変換の基本 16 Input Files dc2.8xlarge Compute Node データロード • S3にファイルを置いて、SQLのCOPYコマ ンドでロードを実行 • S3からのロードの際、あらかじめファイル を複数に分割しておくことで、各スライス が並列にロードを実行 データの変換(Transform) • 外部ETLツール、AWS Glue、Hadoop等で 実行 • または、一旦Redshiftにデータをロードし、 SQLで変換
54.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 54 データロード&変換の例 システムA ステージング(昨日分) Redshift ・ ・ ・ 集約 CSV CSV ソース1 ソース2 ソースn ・ ・ ・ CSV CSV CSV EC2 CSV CSV S3 今日の日付 CSV CSV ・ ・ ・ ・ ・ ・ システムA 明細履歴 システムB ステージング(昨日分) CSV CSV CSV CSV ・ ・ ・ ・ ・ ・ システムB 明細履歴 ・ ・ ・ サマリー ステージング(昨日分) CSV CSV サマリー 履歴 BI COPY 明細:SELECT INSERT マスター:UPSERT UPLOAD
55.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 55 データレイクを介した他サービスとのデータ連携 Redshift Spectrum Amazon Redshift JDBC/ODBC オープンフォーマットファイル (Parquet, ORC, JSON, CSV etc) データレイク • ユーザー管理 S3 バケット Amazon Redshift Spectrum • S3 上のファイルに対する 並列クエリ実行エンジン AWS Glue • データカタログ データカタログを共有する ことで、他のAmazon Redshiftクラスターや、 Amazon Athenaなどの他の サービスと手軽にデータ連 携が可能 専用のクエリエンジンを用意 することで、Amazon Redshift 本体にデータをロードしなく とも、S3にデータを置いたま ま、高速なデータ分析や、分 析結果のデータレイクへの書 き出しが可能
56.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 56 Federated queryで、業務DBへ直接アクセス RDS/Aurora PostgreSQL に対して直接クエリ可能 データ移動なしにライブデータを分析 データウェアハウス、データレイク、 オペレーショナルデータベースのデータを 統合して分析 高い性能でセキュアにデータアクセス RDS/Aurora MySQL をサポート (プレビュー) RDS PostgreSQL Aurora PostgreSQL S3 Data lake JDBC/ODBC Redshift マネージドストレージ RA3 ノード
57.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 57 Redshift SpectrumとFederated queryを利用した例 -- Aurora PostgreSQLには最新のデータ (2019) -- Amazon Redshift には最近のデータ(2016-2018) -- Amazon S3にはアーカイブデータ (1992-1998) -- 全データを検索可能なUNION ALLビューを定義 CREATE VIEW lineitem_all AS SELECT * FROM s3.lineitem_1t_part UNION ALL SELECT * FROM public.lineitem UNION ALL SELECT * FROM apg.lineitem WITH NO SCHEMA BINDING -- 毎年1月の、発注量が1個の注文の数を集計 -- 述語(検索条件)がプッシュダウンされる -- S3データはパーティションプルーニングされる -- 集計がプッシュダウンされる -- とても直感的な構文で記載できる SELECT EXTRACT(year FROM l_shipdate) AS year, EXTRACT(month FROM l_shipdate) AS month, COUNT(*) AS orders FROM lineitem_all WHERE extract(month FROM l_shipdate) = 1 AND l_quantity < 2 GROUP BY 1,2 ORDER BY 1,2;
58.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 58 Anazon Redshift Data Sharing Redshift クラスター間でセキュアに簡単にデータを共有することが可能に プロデューサー クラスター コンピュート ノード コンピュート ノード コンピュート ノード コンピュート ノード リーダーノード コンシューマー クラスター コンピュート ノード コンピュート ノード コンピュート ノード リーダーノード コンピュート ノード コンピュート ノード Amazon Redshift マネージドストレージ 共有データの 読み込み プライベートデータの 読み込みと書き込み • プロデューサークラスターが書き込んだ共有データを、コンシューマークラスターがread onlyで 共有することが可能 • データの移動がなく、アクセス権の管理と共有状況の監査により、セキュアなデータ共有を実現
59.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 59 Data sharing のユースケース (1) 様々なビジネスクリティカルなワークロードを、簡単でコストパフォーマンスよくサポート 新しい分析ワークロードを素早く利用可能に パフォーマンス要件に応じて個々のクラスタの サイズ・性能を最適化 データセットを共有しながら、ワークロードを 分離 個々のワークロードごとに費用請求 ETL クラスタ ダッシュボードクラスタ データサイエンスクラスタ 4-node RA3.16XL 3-node RA3.16XL 5-node RA3.4XL 2–node RA3.4XL コンシューマクラスタは必要に応じて停止/再開 アドホッククエリクラスタ
60.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 60 Data sharing のユースケース (2) 部門間でのコラボレーション 経理 マーケティング R&D 営業 より広範なデータ分析を実現するために部門間で シームレスにコラボレーションし、製品間での相 互の影響を分析 どのAmazon Redshiftクラスタも、プロデューサー にもコンシューマーにもなれる データ移動に伴うコンプライアンス上の懸念を なくす
61.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 61 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive まとめ
62.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 62 まとめ • Amazon Redshift は、分析用クエリ実行に特化したRDBMS • Amazon Redshiftの基本的な運用タスクは、大部分自動化されている • 単体処理の性能が足りない場合は、必要な時間帯だけスケールアウト • 一時的な利用ユーザーの増加には、クラスター追加を自動対応 • データ連携はデータロード、またはデータを動かさずに各サービスと連携
63.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 63 Q&A お答えできなかったご質問については AWS Japan Blog 「https://aws.amazon.com/jp/blogs/news/」にて 後日掲載します。
64.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 64 AWS の日本語資料の場所「AWS 資料」で検索 https://amzn.to/JPArchive
65.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 65 で[検索] AWS イベント 毎週”W-A個別技術相談会”を実施中 • AWSのソリューションアーキテクト(SA)に 対策などを相談することも可能 • 申込みはイベント告知サイトから (https://aws.amazon.com/jp/about-aws/events/) AWS Well-Architected 個別技術相談会
66.
© 2021, Amazon
Web Services, Inc. or its Affiliates. All rights reserved. 67 © 2021, Amazon Web Services, Inc. or its Affiliates. All rights reserved. AWS 公式 Webinar https://amzn.to/JPWebinar 過去資料 https://amzn.to/JPArchive ご視聴ありがとうございました