Oracle 10g R2 を使用し、開発を行っていますが、
パフォーマンス改善という壁にぶつかっており、
お助けいただきたいと思いました。
要求定義の段階で、可変長のバイナリデータを扱う必要があり、
テーブル内には BLOB フィールドを用意しております。
レコード件数にすると、全体でおおよそ 500,000 ~ 1,000,000 件に
なります。(導入先によって上記範囲内で変動する)
データはさらに区分によって判別されるようになっております。
プログラムから投入する SQL 文については、
最適化を行っておりまして、最高のパフォーマンスが得られる
であろう構文になっておりますし、テーブルの設計についても、
検索条件となる項目へのインデックス設定を行っています。
現状としてプログラムの中でボトルネックとなっているのは、
BLOB データを Fetch するタイミングなんです。
開発環境は、C#.NET+ODP.NET なんですけど、ミドルウェアは、
oo4o を使った場合でも、Microsoft の Oracle のドライバを
使用したときでも同じ部分でボトルネックになっていました。
ちなみに、BLOB をやめて、CLOB にした場合も、
CLOB データを Fetch する部分がボトルネックになっていました。
テスト段階なのでバイナリデータが 4 KB 未満ですが、
これを VARCHAR2(4000) のフィールドに Base64文字列などで
格納した場合は、LOB データの Fetch はありませんので、
かなり高速な処理が実現できるのですが、実際の運用では、
4 KB を超えるようなバイナリデータが普通に現れてきます。
なので、VARCHAR2 でのデータベース設計ができない状態です。
そもそも、この BLOB フィールドや CLOB フィールドのデータを
Fetch する速度を向上させること、というのは可能なのでしょうか?
ちなみに、Oracle サーバ側の設定は一切行っておりません。
No.3ベストアンサー
- 回答日時:
1冊のマニュアルになるボリュームがあって色々書かれているので
開発者ガイドを見てください。
「アプリケーション開発者ガイド- ラージ・オブジェクト」です
個人的には設計段階でLOBは使用しないように最大限粘っていると思います。
参考URL:http://otndnld.oracle.co.jp/document/products/or …
> MZ-80B さん
OTNのドキュメント、拝見しました。
LOB は使わない、ということですか。
格納するデータに制限をつければ確かに遅い LOB を使わずに、
高速なカーソル操作が実現できそうですね。
ちょっと設計を見直してみることにします。
No.2
- 回答日時:
下位互換といわれているのは LONG RAW の事ではないでしょうか。
RAW はこれからも残っていくデータ型だったと思います。
RAW型の最大サイズは2000バイトなのでBASE64のVARCHAR2(4000)と比べると
1カラムでの容量では負けてしまいますね。
> MZ-80B さん
度々回答していただき、ありがとうございます。
RAW 型について勘違いをしておりました。
大変、申し訳ございませんでした。
今の開発環境が、.NET Framework である、ということもあって、
GZIP による圧縮を仮に想定したとして、どれだけ圧縮されるのか、
これを十分に考慮してテーブル設計をやりなおさなければ、と思います。
今のところ、登録するバイナリデータの制限が無いことがあり、
RAW フィールドを、いくつテーブルに用意すればよいのか、
という点での問題が残ります。
もしかするとRAWフィールドを設ける方法が使えない、という場合も考えられます。
提供いただいた参考サイトを拝見しますと、そもそも Oracle という
データベースにおいて BLOB のアクセスが遅い、というような表現が
見受けられましたが、やはり BLOB というものを
MySQL 並みとは言わなくても、それに近づけるような速くする
チューニングテクニックというのは存在しないものなのでしょうか。
Oracle の製品で提供されている機能なんかを見てみると、
BLOB で出力しているパッケージ・ファンクションなんかが見つかります。
BLOB が遅いということになると、こういった関数の部分のパフォーマンスも
大きく劣ってしまう、ということだと思うんです。
No.1
- 回答日時:
LOBのデータサイズによってパフォーマンスは変わるので
ひとつの例として参考にしてください。
小さなLOBについて検証しているケースなので似た状況かも。
あとバイナリを扱うなら文字にエンコードするとサイズが倍増しますから
RAW型を使ったほうがよいです。
参考URL:http://www.drk7.jp/MT/archives/001196.html
> MZ-80B さん
回答ありがとうございます。
バイナリデータの圧縮、気づきませんでした!
確かにデータが小さければ小さいほど読み込むデータ量も
小さくできるので快適になることが期待されますね。
試してみます。
あと、確認なんですが、RAW型を使ったほうが良い、
ということが回答中にありますが、何故 RAW 型とされたのでしょうか?
OTNのドキュメントを拝見しておりますと、Oracle 10g では、
下位互換のために用意されている型とあります。
そういうわけで、RAW 型ではなく LOB 型を使ってほしい、
ということが書かれています。
RAW 型の変わりに LOB 型を使っても良いものなのでしょうか?
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
このQ&Aを見た人はこんなQ&Aも見ています
関連するカテゴリからQ&Aを探す
おすすめ情報
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
SQLローダーCSV取込で、囲み文...
-
テーブルの最後(最新)のレコー...
-
SELECTした合計値をそのまま割...
-
固定長データのテキストファイ...
-
ACCESSのクエリで空白以降を別...
-
配列に指定した値が含まれてい...
-
BLOBやCLOBのパフォーマンスを...
-
phpmyadminで条件付きの検索置...
-
Null値件数をカウントする式に...
-
2つの列が同じ値の行を取得するSQL
-
SELECT FOR UPDATE で該当レコ...
-
select文の実行結果に空白行を...
-
アクセスのレポートでレコード...
-
【SQLサーバ】float型における...
-
VC++ (ADO) で Access の Yes/N...
-
単一グループのグループ関数で...
-
「数字で始まらない」ものを抽...
-
where句中のtrim関数について
-
並べ替えについて
-
AccessのSQL文で1件のみヒット...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
SQLローダーCSV取込で、囲み文...
-
テーブルの最後(最新)のレコー...
-
int型フィールドにnullを登録で...
-
2回実行のSQL文を1回にしたい
-
SELECTした合計値をそのまま割...
-
テーブルのフィールドの一番長...
-
配列に指定した値が含まれてい...
-
BLOBやCLOBのパフォーマンスを...
-
ACCESSのクエリで空白以降を別...
-
固定長データのテキストファイ...
-
【MySQL】 DECIMAL(2,1) に 13...
-
Null値件数をカウントする式に...
-
入力データの半角スペースと全...
-
ファイルメーカー10で重複デー...
-
重複しないデータのみを抽出
-
タイムスタンプ型を抽出条件に...
-
複数フィールド対してLIKE '% ...
-
一つのフィールドに複数の情報...
-
ACCESSでの桁数のあわせ方
-
MySQLでの近似値順での値の取得...
おすすめ情報