PostgreSQLバージョン 9
OS:RedHat
現在Oracleからの移行でPostgreSQLにてTEXT取り込み処理を作成しています。
OracleではSQLLoaderを使用して取り込んでいましたが、
PostgreSQLではCOPYコマンドを使用すれば取り込みできるところまで調べました。
しかし、行末に区切文字があるためうまく取り込みできません。
【コマンド】
\copy hoge from 'hoge.txt' delimiters '|';
【行末に区切文字がある場合NG】
AAA|BBB|CCC|
ERROR: extra data after last expected column
CONTEXT: COPY hoge, line 1: "AAA|BBB|CCC|"
【行末に区切文字がない場合OK】
AAA|BBB|CCC
SQLLoaderでは行末の区切文字があっても取り込めましたが
COPYコマンドでは取り込めないようです。
回避策はないのでしょうか?
(取引先からのTEXTなので相談はして見ますがレイアウトの変更は難しいかもしれません。)
回避策がない場合、行末の区切文字を削除する方法はありますでしょうか?
行末だけの区切文字を削除する方法が分かりません。
(テキストは固定長でないため、桁数を指定した削除ができません)
行末区切文字削除の方法だけでも良いのでお願いします。
No.1ベストアンサー
- 回答日時:
行末には必ず区切り文字が存在するのでしょうか?
案1A:
1. COPY先テーブルの最後に 1列ダミー列を追加し、
COPY実行。
2. COPY実行後に追加したダミー列を削除。
案1B:
COPY先テーブルにダミー列を入れるのが嫌なら、
1. COPY専用のテーブル (テーブルの最後にダミー列を
入れたもの) を別に作って、そこにCOPY実行。
2. COPY専用テーブルからCOPY先テーブルに
INSERT ~ SELECT ~ でデータを移動。
3. COPY専用テーブルを DROP。
案2:
問題のファイルがテキストであるならば、テキストエディタの
正規表現置換を使って行末の | を空白に置換。
検索文字 |$ 置き換え文字 (空白) で行けるはず。
テキストエディタは何でもよいですが、サクラエディタ等が
使えます。
http://sakura-editor.sourceforge.net/download.html
自分なら、データ量にもよりますが、案1B を使いそうな気が
します。(COPYファイル数が多かったりすると案2は面倒なので)
回答ありがとうございます。
やはりダミー列を入れるなど一手間加えないとダメなようですね。
対応方法を持ち帰って検討させていただきます。
テキストファイルが多いので案2は少し面倒ですね。
案1で検討させていただきます。
No.2
- 回答日時:
sed で行末の区切り文字を取っ払ったものを流し込んでやるのはどうですか?
sed -e 's/[|]$//' hoge.txt | psql -U user_hoge -c "\copy hoge from STDIN delimiters '|';" db_hoge
http://itpro.nikkeibp.co.jp/article/COLUMN/20060 …
参考URL:http://www.postgresql.jp/document/9.1/html/app-p …
回答ありがとうございます。
正規表現はあまり勉強していませんでしたが行末という正規表現もあるのですね。
これを機にもう少し勉強するようにします。
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- その他(データベース) カラム上の重複を削除するクエリを教えてください 3 2022/04/12 14:11
- Windows 10 バッチファイルの記述法とルールについてアドバイスをお願いいたします。 1 2022/04/13 10:50
- Visual Basic(VBA) 別ブックからシートのコピー 3 2022/04/01 20:07
- その他(プログラミング・Web制作) プログラミング pythonの問題について 2 2022/04/19 00:41
- Visual Basic(VBA) 【VBA】特定の文字で改行(次の行)に行きたい。 3 2022/04/11 17:20
- PHP PHPの構文で間違えが分からない 5 2022/07/11 16:38
- Visual Basic(VBA) 特定の文字を簡単な操作で半角スペースに変換するか削除したい 2 2022/11/01 10:35
- Visual Basic(VBA) 集めたシートのシート名を変更したい。 下記のコードでサブフォルダにあるファイルのSheet3を集めて 6 2022/08/23 10:38
- その他(開発・運用・管理) WindowsからSSHでサーバーにあるファイルをダウンロードできない…。 3 2022/04/24 11:08
- Excel(エクセル) ¥マークを含むパスの処理について(マクロ、または関数) 2 2022/12/25 02:11
関連するカテゴリからQ&Aを探す
おすすめ情報
- ・「みんな教えて! 選手権!!」開催のお知らせ
- ・漫画をレンタルでお得に読める!
- ・【大喜利】【投稿~12/6】 西暦2100年、小学生のなりたい職業ランキング
- ・ちょっと先の未来クイズ第5問
- ・これが怖いの自分だけ?というものありますか?
- ・スマホに会話を聞かれているな!?と思ったことありますか?
- ・それもChatGPT!?と驚いた使用方法を教えてください
- ・見学に行くとしたら【天国】と【地獄】どっち?
- ・2024年のうちにやっておきたいこと、ここで宣言しませんか?
- ・とっておきの「夜食」教えて下さい
- ・これまでで一番「情けなかったとき」はいつですか?
- ・プリン+醤油=ウニみたいな組み合わせメニューを教えて!
- ・タイムマシーンがあったら、過去と未来どちらに行く?
- ・遅刻の「言い訳」選手権
- ・好きな和訳タイトルを教えてください
- ・うちのカレーにはこれが入ってる!って食材ありますか?
- ・おすすめのモーニング・朝食メニューを教えて!
- ・「覚え間違い」を教えてください!
- ・とっておきの手土産を教えて
- ・「平成」を感じるもの
- ・秘密基地、どこに作った?
- ・この人頭いいなと思ったエピソード
- ・あなたの「必」の書き順を教えてください
- ・10代と話して驚いたこと
- ・大人になっても苦手な食べ物、ありますか?
- ・14歳の自分に衝撃の事実を告げてください
- ・人生最悪の忘れ物
- ・あなたの習慣について教えてください!!
- ・都道府県穴埋めゲーム
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
DBFluteについて質問です。 環...
-
SELECT 文の NULL列は?
-
group by で重複行を、縦横に展...
-
SQLでUPSERTを一度に複数行やる...
-
L2SWはARPテーブルを持っている?
-
男性と2人で飲食店に行きテーブ...
-
お金持ちのテーブル
-
「テーブルに座って……」という...
-
ACCESS での LEFT JOIN 時の WH...
-
オープンオフィスでのテーブル...
-
一つ前に戻るには…
-
会社の飲み会の幹事になり、座...
-
テーブル名をカラムとして取得...
-
EXCELデータからACCESSデータの...
-
AccessのSQL 部分一致したデー...
-
テーブルで一番古いレコードだ...
-
EXCEL マクロで行を挿入して貼...
-
オーダーの覚え方について
-
Visuaal Studio Community 2022...
-
中華料理屋なんかに行って 中央...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
SELECT 文の NULL列は?
-
テーブルに存在しない列をselec...
-
単純なselectが遅くなるのです...
-
SQLにて指定日付より前、かつ最...
-
SQLでUPSERTを一度に複数行やる...
-
javaでデータベース上のテーブ...
-
PostgreSQLの断片化の状況を確...
-
2つのテーブルで引き算 postgres
-
Postgresのデータ領域の拡張に...
-
MS Access から PostgreSQL へ...
-
PostgreSQL 8.0.2 の ERROR: r...
-
複数テーブルにまたがるmax
-
UPDATE文の更新順序について
-
マッチング
-
Postgresqlのレポート機能について
-
テーブル定義書作成時のIndex付...
-
postgres FILLFACTOR 確認方法
-
デットロック回避策(autocommit...
-
reindex と update のデッドロック
-
テーブルを作ろうとしたら。
おすすめ情報