Performance Problems when migrating fromoracle pl/sql application to postgresql - and how to overcome them
Download as PPTX, PDF0 likes286 views
Performance Tuning technique of Migrating Oracle PL/SQL table to plpgsql application.
![[db tech showcase Tokyo 2018] #dbts2018 #C17 『OracleからPostgreSQLへ移行する際のポイントとレ...](https://cdn.slidesharecdn.com/ss_thumbnails/dbts2018c17quest-180929165135-thumbnail.jpg?width=560&fit=bounds)
![[A33] [特濃jpoug statspack on pdb oracle database 12c] 20131115 補足?続報付き](https://cdn.slidesharecdn.com/ss_thumbnails/a33jpougstatspackonpdboracledatabase12c20131115-131119005920-phpapp02-thumbnail.jpg?width=560&fit=bounds)
![[db tech showcase Tokyo 2014] D21: Postgres Plus Advanced Serverはここが使える＆9.4新機...](https://cdn.slidesharecdn.com/ss_thumbnails/dbtstokyo2014d21hppostgresplusadvancedserverv9-141120232610-conversion-gate02-thumbnail.jpg?width=560&fit=bounds)
![[C14] ソーシャル ゲーム基盤を支える SQL Server by Takashi Inaba](https://cdn.slidesharecdn.com/ss_thumbnails/c14sqlserver-131119194051-phpapp01-thumbnail.jpg?width=560&fit=bounds)
More Related Content
Similar to Performance Problems when migrating fromoracle pl/sql application to postgresql - and how to overcome them (20)
More from 拓也 岸本 (10)
Recently uploaded (15)
Performance Problems when migrating fromoracle pl/sql application to postgresql - and how to overcome them
- 2. 岸本 拓也プロフィール ? 所属 ? 株式会社インサイトテクノロジー DBコンサルティング部 ? 今取り組んでいるお仕事 ? アプリ移行 Oracle12c -> Postgres 11 ? データ移行 Oracle11g EE RAC -> Oracle18c EE RAC ? 分析DB作成(Treasuredata,Embulk,Lumbda) ? リモートDBA(Oracle,Postgres,Mariadb) ? 趣味 ? ダイエット ? 水泳 ? ジョギング ? DBをいじっていて楽しいこと ? Performance Tuning ←今日の話題
- 3. アプリをOra->PG対応するために必要な考慮項目 ? 機能要件 ? Oracle?と同じように動作すること ? 非機能要件 ? パフォーマンス ? セキュリティ ? バックアップ ? 監視
- 4. Oracle版アプリと同じように動作するために ? 無料のConversion Tool?があります ? AWS謹製 ? SCT(Schema Coversion Tool) ? https://docs.aws.amazon.com/ja_jp/SchemaConversionTool/latest/userguide /CHAP_Welcome.html ? Ora2Pg ? http://ora2pg.darold.net/
- 5. Conversion Toolがやってくれること 1. DB接続 2. データ,定義情報を読みこみ 3. 変換結果を出力 ? データ ? In: 表data ? Out: insert statements ? オブジェクト ? In: 表,索引,view,materialized view,pl/sql,sql ? Out: DDL statements
- 6. 移行アセスメントサービスやっています ? アプリケーションが使用している商用DBのテーブルやプロシ ジャなどのオブジェクトから、DBの構成や機能、ライセンス コスト等の情報を収集?分析し、移行時の問題点や難易度、移 行にかかる時間、移行時のコストなどを、レポートとしてご提 示するサービスです。 ? アプリ移行検証過程では顧客DBサーバーへ接続する必要はない ? 構成情報だけを顧客から提供してもらう(expdp metadata=only) ? SQL?は別途取得(v$sqlもしくはSQL収集ツール(Insight Detection Tool)) 貴社DB環境 インサイトテクノロジー社環境 オブジェクト 別DDL文 オブジェクト 表,索引,プロシジャ etc. SQL SQLファイル 自動 変換 ??? フ ァ イ ル レポート
- 7. Conversion Toolで変換できないもの - Performance編- ? 実行計画 ? ヒント句 ? SQL Profile
- 8. 変換できるけどPerformanceが良くないもの ? 拡張パックスキーマに含まれるaws_oracle_ext? function ? PL/SQL->PL/pgSQLに自動変換される際に利用される ? https://postgresconf.org/system/events/document/000/000/106/mig ration.pdf Click to add text 今回のワルモノ→
- 9. 今回ご紹介するperformance改善策 ? 連想配列のグローバル変数としてSCTで変換されたfunctionが遅い ? aws_oracle_ext.array$set_value ? aws_oracle_ext.array$get_value ? OracleのPL/SQL packageに定義されたPL/SQL表がこれらのfunctionに自動変換されていた ? あるバッチを実行直後のpg_stat_user_functionsの出力結果 funcid schemaname funcname calls total_time self_time ------- -------------- ----------------------------------------------------- ----- ---------- --------- 5277753 aws_oracle_ext array$get_array_id 8257 3147.894 3147.894 5277762 aws_oracle_ext array$get_value 667 4683.889 706.273 5277908 aws_oracle_ext get_package_variable 5966 1035.831 617.547 5277754 aws_oracle_ext array$get_array_path_for_array_id 707 586.713 586.713 5277923 aws_oracle_ext is_package_initialized 6210 399.567 399.567 5277969 aws_oracle_ext set_package_variable 457 224.433 224.433 5277760 aws_oracle_ext array$get_storage_table_name 715 220.538 220.538 5277994 aws_oracle_ext to_char 1152 121.067 81.85
- 10. PL/SQL表の代替案 ? PL/SQL表=Oracleの配列型 ? 連想配列としてPL/SQL package部に大量に宣言され、pl/sqlコード内 で使いまわされていた ? pl/pgsqlではpackageはないし、array型を連想配列として利用するに は使えない
- 11. 一時テーブルによる連想配列実装 ? パッケージがないため、パッケージレベルの変数もありません。 これは幾分か厄介なことです。 代わって、セッションごとの状 態を一時テーブル内部に保存できます。 ? https://www.postgresql.jp/document/11/html/plpgsql-porting.html
- 12. もっといい案ないのか ? OracleでのPL/SQL表による実装の背景は、Performance改善のため ? 一時表を使うことに抵抗があった ? 連想配列だったら辞書型がいいんじゃないか ? 辞書型はないからjsonbによる実装を試してみる
- 13. PL/SQL表代替案performance comparison ? 2000回current_setting ? 1 row(s) fetched - 125ms ? 2000回select temporay table ? 1 row(s) fetched - 1.390s ? 2000回aws_oracle_ext.array$get_value ? 1 row(s) fetched - 4.578s
- 14. 爆速!!!!!
- 15. 今後のtuning方針 ? PL/SQLのpackage部に大量に宣言されている変数をどうにかしたい ? 現状はaws_oracle_ext.set_package_valiable=set_config functionによりグ ローバル変数宣言されている ? Json型を用いて、一括でset_config, current_configによるfunction間 での変数受け渡しを実現したい