Performance Problems when migrating fromoracle pl/sql application to postgresql - and how to overcome them
•Download as PPTX, PDF•
0 likes•268 views
Performance Tuning technique of Migrating Oracle PL/SQL table to plpgsql application.
Recommended
Recommended
More Related Content
Similar to Performance Problems when migrating fromoracle pl/sql application to postgresql - and how to overcome them
Similar to Performance Problems when migrating fromoracle pl/sql application to postgresql - and how to overcome them (20)
More from 拓也 岸本
Recently uploaded
Recently uploaded (8)
Performance Problems when migrating fromoracle pl/sql application to postgresql - and how to overcome them
- 2. 岸本 拓也プロフィール • 所属 • 株式会社インサイトテクノロジー DBコンサルティング部 • 今取り組んでいるお仕事 • アプリ移行 Oracle12c -> Postgres 11 • データ移行 Oracle11g EE RAC -> Oracle18c EE RAC • 分析DB作成(Treasuredata,Embulk,Lumbda) • リモートDBA(Oracle,Postgres,Mariadb) • 趣味 • ダイエット • 水泳 • ジョギング • DBをいじっていて楽しいこと • Performance Tuning ←今日の話題
- 3. アプリをOra->PG対応するために必要な考慮項目 • 機能要件 • Oracleと同じように動作すること • 非機能要件 • パフォーマンス • セキュリティ • バックアップ • 監視
- 4. Oracle版アプリと同じように動作するために • 無料のConversion Toolがあります • AWS謹製 • SCT(Schema Coversion Tool) • https://docs.aws.amazon.com/ja_jp/SchemaConversionTool/latest/userguide /CHAP_Welcome.html • Ora2Pg • http://ora2pg.darold.net/
- 5. Conversion Toolがやってくれること 1. DB接続 2. データ,定義情報を読みこみ 3. 変換結果を出力 • データ • In: 表data • Out: insert statements • オブジェクト • In: 表,索引,view,materialized view,pl/sql,sql • Out: DDL statements
- 6. 移行アセスメントサービスやっています • アプリケーションが使用している商用DBのテーブルやプロシ ジャなどのオブジェクトから、DBの構成や機能、ライセンス コスト等の情報を収集・分析し、移行時の問題点や難易度、移 行にかかる時間、移行時のコストなどを、レポートとしてご提 示するサービスです。 • アプリ移行検証過程では顧客DBサーバーへ接続する必要はない • 構成情報だけを顧客から提供してもらう(expdp metadata=only) • SQLは別途取得(v$sqlもしくはSQL収集ツール(Insight Detection Tool)) 貴社DB環境 インサイトテクノロジー社環境 オブジェクト 別DDL文 オブジェクト 表,索引,プロシジャ etc. SQL SQLファイル 自動 変換 ﾂｰﾙ フ ァ イ ル レポート
- 7. Conversion Toolで変換できないもの - Performance編- • 実行計画 • ヒント句 • SQL Profile
- 8. 変換できるけどPerformanceが良くないもの • 拡張パックスキーマに含まれるaws_oracle_ext function • PL/SQL->PL/pgSQLに自動変換される際に利用される • https://postgresconf.org/system/events/document/000/000/106/mig ration.pdf Click to add text 今回のワルモノ→
- 9. 今回ご紹介するperformance改善策 • 連想配列のグローバル変数としてSCTで変換されたfunctionが遅い • aws_oracle_ext.array$set_value • aws_oracle_ext.array$get_value • OracleのPL/SQL packageに定義されたPL/SQL表がこれらのfunctionに自動変換されていた • あるバッチを実行直後のpg_stat_user_functionsの出力結果 funcid schemaname funcname calls total_time self_time ------- -------------- ----------------------------------------------------- ----- ---------- --------- 5277753 aws_oracle_ext array$get_array_id 8257 3147.894 3147.894 5277762 aws_oracle_ext array$get_value 667 4683.889 706.273 5277908 aws_oracle_ext get_package_variable 5966 1035.831 617.547 5277754 aws_oracle_ext array$get_array_path_for_array_id 707 586.713 586.713 5277923 aws_oracle_ext is_package_initialized 6210 399.567 399.567 5277969 aws_oracle_ext set_package_variable 457 224.433 224.433 5277760 aws_oracle_ext array$get_storage_table_name 715 220.538 220.538 5277994 aws_oracle_ext to_char 1152 121.067 81.85
- 10. PL/SQL表の代替案 • PL/SQL表=Oracleの配列型 • 連想配列としてPL/SQL package部に大量に宣言され、pl/sqlコード内 で使いまわされていた • pl/pgsqlではpackageはないし、array型を連想配列として利用するに は使えない
- 11. 一時テーブルによる連想配列実装 • パッケージがないため、パッケージレベルの変数もありません。 これは幾分か厄介なことです。 代わって、セッションごとの状 態を一時テーブル内部に保存できます。 • https://www.postgresql.jp/document/11/html/plpgsql-porting.html
- 12. もっといい案ないのか • OracleでのPL/SQL表による実装の背景は、Performance改善のため • 一時表を使うことに抵抗があった • 連想配列だったら辞書型がいいんじゃないか • 辞書型はないからjsonbによる実装を試してみる
- 13. PL/SQL表代替案performance comparison • 2000回current_setting • 1 row(s) fetched - 125ms • 2000回select temporay table • 1 row(s) fetched - 1.390s • 2000回aws_oracle_ext.array$get_value • 1 row(s) fetched - 4.578s
- 14. 爆速!!!!!
- 15. 今後のtuning方針 • PL/SQLのpackage部に大量に宣言されている変数をどうにかしたい • 現状はaws_oracle_ext.set_package_valiable=set_config functionによりグ ローバル変数宣言されている • Json型を用いて、一括でset_config, current_configによるfunction間 での変数受け渡しを実現したい