プロが教えるわが家の防犯対策術！

PHPでCSVファイルをUTF8に変換したい

解決済

  • 質問者：do79tama13
  • 質問日時：
  • 回答数：3件

ブラウザからCSVファイルをアップロードし、MySQLのデータベースにインポートするプログラムをPHPで作成しています。

エクセルで作成したCSVファイルはsjis形式のため、UTF8に変換してからMySQLにインポートしてあげると文字化けせずにインポートする事が出来るのですが、毎回手動でUTF8に変換するのは面倒ですのでファイルをアップロードしたタイミングで自動的にsjis形式からUTF8に変換したいと考えております。

ファイルのアップロードまでは動作していますが、CSVファイルをsjisからUTF-8に変換するにはどうすればよいでしょうか？

どなたかご教示いただければ幸いです。以下は作成中のコードです。

index.html

<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=Shift_JIS">
<title>sample</title>
</head>
<body>
<form action="read.php" method="POST" enctype="multipart/form-data">
ファイル：<br>
<input type="file" name="upfile" size="30"><br>
<br>
<input type="submit" value="アップロード">
</form>
</body>
</html>


read.php

<?php

//csvファイルのアップロード
if (is_uploaded_file($_FILES["upfile"]["tmp_name"])) {
　　　　//「files」という名前のフォルダを同じ階層に設置。ここにCSVファイルをアップロード
if (move_uploaded_file($_FILES["upfile"]["tmp_name"], "files/" . $_FILES["upfile"]["name"])) {

chmod("files/" . $_FILES["upfile"]["name"], 0644);

//fileパス
$file = "files/" .$_FILES["upfile"]["name"];

//DB接続
$sv = "localhost";
$dbname = "shop";
$user = "user";
$pass = "password";
$conn = mysql_connect($sv, $user, $pass) or die("コネクトエラー");
mysql_select_db($dbname) or die("ＤＢセレクトエラー");
mysql_query("SET NAMES utf8");


//CSVデータの取り込み
$sql = "LOAD DATA LOCAL INFILE '$file' INTO TABLE food";
$sql .= " FIELDS";
$sql .= " TERMINATED BY ',' "; //TERMINATED BY 区切り文字
$sql .= " ENCLOSED BY '\"' "; //ENCLOSED BY 囲み文字
$sql .= " LINES TERMINATED BY '\r\n' ";
$sql .= " IGNORE 1 LINES";

$result = mysql_query($sql, $conn);

if (!$result) {
$message = 'Invalid query: ' . mysql_error() . "\n";
$message .= 'Whole query: ' . $sql;
die($message);
}

echo "インポートが完了しました！";


//失敗したとき
} else {
echo "ファイルをアップロードできません。";
}
} else {
echo "ファイルが選択されていません。";
}

?>

CSVファイル
"No","food","price"
"1","うどん","100"
"2","カレー","300"
"3","パスタ","500"

MySQLテーブル
CREATE TABLE IF NOT EXISTS `food` (
`No` int(11) NOT NULL,
`food` varchar(50) NOT NULL,
`price` int(11) NOT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

使用中のバージョン
PHP/5.4.19
Apache/2.4.4
XAMPP v3.2.1

素人の質問で凝縮ですが、よろしくお願いいたします。

通報する

この質問への回答は締め切られました。

質問の本文を隠す

A 回答 (3件)

No.1

アップロード処理はこのページのコピペでしょうか。


http://www.php-labo.net/tutorial/php/upload.html

上記はいわゆる「ダメなコピペ」です。例外処理はちゃんとしましょう。
http://qiita.com/mpyw/items/939964377766a54d4682
http://qiita.com/mpyw/items/73ee77a9535cc65eff1e

非推奨のMysql関数を使うのもやめましょう。
http://qiita.com/mpyw/items/b00b72c5c95aac573b71

以上を踏まえて下記のようなコードでどうでしょうか・・・
http://pastebin.com/EAQ8yg3x

しかしこれ、何故か文字化けを起こすんですよね。文字化けを回避するためのこともしているのに何故かうまくいきません・・・
http://d.hatena.ne.jp/hchuno/20120324/1332554400
    • good
    • 0
    • 件
通報する
この回答へのお礼

返信が遅くなり申し訳ございません。教えていただいたソースを解読するのに時間がかかっておりました。
http://pastebin.com/EAQ8yg3x

sql文がスッキリしていて目からうろこです。このような書き方があったのですね！
それに、エラー対策に感動しました！確ユーザー側の視点に立った目線でエラー対策を考える事も必要だと感じました。

$conn = mysql_connect($sv, $user, $pass) or die("コネクトエラー");
mysql_connect関数は非推奨だったのですね。今のうちに知る事が出来てよかったです！

ちなみに教えていただいたソースをコピペし実施したところ、PDO接続では何故かsql文が実行できません。当方のmysqlのバージョンはmysql:5.5.32です。

通報する
お礼日時：2013/11/13 23:27

No.2

  • 回答者： mpro-gram
  • 回答日時：

load 文にも、読み込むファイルの文字コードを指定できます。

field の指定より前に記述します。これが一番確実で、csvから読みとったデータをこの指定文字コードから対象テーブルやカラムの設定文字コードに変換します。
本家の英文マニュアルみると、5.1.17から使える構文のようです。というか、このversion以降は、これしか参照しないみたいなニュアンス？
http://dev.mysql.com/doc/refman/5.1/en/load-data …
「it is usually preferable to specify the character set of the file by using the CHARACTER SET clause, which is available as of MySQL 5.1.17. 」
日本語版マニュアルは、これ以前の情報しかないようです。

質問文に肝腎のMySQLのversion記載がないですね。XAMPPのversionも違う物みてるみたいだし。3.2ってXAMPP controllerアプリのversionかな
MySQLのversion は select version() で確認した物を書いてください。ときどきdistribution番号を書いてる人がいるので。

あと、\n は、mysql に渡すときに 文字バックスラッシュとn でないとならないので、
phpの文字列内では \\n とする必要があります、または、文字列全体をシングルクォート'で括れば、\' 以外の \ は文字バックスラッシュ。
蛇足だけど " や ' のエスケープが面倒だから、ヒアドキュメントを使うのをおすすめする。
以下 例文, あ、pdo 使用前提で。。
<?php
$file = /* 適宜 */ ;
$table= 'food';
$sql_src = <<<SQL
LOAD DATA LOCAL INFILE %s INTO TABLE `%s`
CHARACTER SET sjis
fields terminated by ',' enclosed by '"'
lines terminated by '\\r\\n'
IGNORE 1 LINES
SQL;
$sql = sprintf($sql_src , $pdo->quote($file), $table);
$stmt = $pdo->query($sql);
    • good
    • 0
    • 件
通報する
この回答へのお礼

教えていただきました通り、SQL文内の「fields」の前に「CHARACTER SET sjis」を追加したところ文字化けせずにインポートできました！ありがとうございました。

＞質問文に肝腎のMySQLのversion記載がないですね。XAMPPのversionも違う物みてるみたいだし。3.2ってXAMPP controllerアプリのversionかな

バージョンの記載が漏れてしまい申し訳ございませんでした。当方のmyaqlのバージョン5.5.32です。

XAMPPのversionはおっしゃる通りコントロールパネル画面に記載されている数字をバージョンかと勘違いしておりました。当方のXAMPPのバージョンはXAMPP Version 1.8.2でした。
XAMPPのバージョンは、コントロール画面内の「Helpボタン」→「View ReadMeボタン」→メモ帳ひらいて確認しました。

>蛇足だけど " や ' のエスケープが面倒だから、ヒアドキュメントを使うのをおすすめする。
ヒアドキュメントというものがあったのですね。これならsql文を書くのにいちいち「sql=.""」みたいな形で書かなくともスッキリしますね！調べてみたら他にもprint文を書くときなどにも使用できるようですね。参考になりました。ありがとうございます。



ちなみにPDO接続でコードを書き換えてみたところ何故かSQL文を実行してくれません。書き直したコードは以下の通りです。

<?php
//csvファイルのアップロード
if (is_uploaded_file($_FILES["upfile"]["tmp_name"])) {
//「files」という名前のフォルダを同じ階層に設置。ここにCSVファイルをアップロード
if (move_uploaded_file($_FILES["upfile"]["tmp_name"], "files/" . $_FILES["upfile"]["name"])) {
chmod("files/" . $_FILES["upfile"]["name"], 0644);

//fileパス
$file = "files/" .$_FILES["upfile"]["name"];


/* データベース接続 */

// PDOオブジェクト生成
$dsn = 'mysql:dbname=shop;host=localhost';
　　　　 $user = 'user';
　　　　 $password = 'password';
　　　　 $pdo = new PDO($dsn, $user, $password);



//CSVデータの取り込み
$table= 'food';
$sql_src = <<<SQL
LOAD DATA LOCAL INFILE %s INTO TABLE `%s`
CHARACTER SET sjis
fields terminated by ',' enclosed by '"'
lines terminated by '\\r\\n'
IGNORE 1 LINES
SQL;
$sql = sprintf($sql_src , $pdo->quote($file), $table);

//sql文の実行
$stmt = $pdo->query($sql);
$stmt->execute();

echo "インポートが完了しました！";


//失敗したとき
} else {
echo "ファイルをアップロードできません。";
}
} else {
echo "ファイルが選択されていません。";
}

?>

初心者のため初歩的な質問ばかりで申し訳ございません。。

通報する
お礼日時：2013/11/13 23:43

No.3ベストアンサー

  • 回答者： mpro-gram
  • 回答日時：

お礼ありがとうございます、お返事遅くなりました。


まず、pdo で接続するときは、dsnで、phpファイルの文字コードで charset を指定する。phpもmysqlも最新版なので、これが標準。
http://jp.php.net/manual/ja/ref.pdo-mysql.php

To_aru_Userさんのでもそうなっています。
あと、第４引数のoption配列 で PDO::ATTR_ERRMODE と PDO::MYSQL_ATTR_LOCAL_INFILE も指定しましょう。phpの最新版では、PDO::MYSQL_ATTR_LOCAL_INFILE をここでtrueにしないと、load出来ないようです。ここらへん、私もまだphpが古いversionでやってたりするので、マニュアルみて漸く気づいたりします。
mysqlとphpのversionの組み合わせで、制約がいろいろ変わるので、混乱しやすいかと思いますが、なるべく、それぞれのマニュアルを参照するようにしてください。
以下、お礼の提示文に少々追加。字下げは全角空白使ってるのでコピー時は削除のこと。
<?php
// PDOオブジェクト生成
$dsn = 'mysql:dbname=shop;host=localhost;charset=utf8';
　　　　 $user = 'user';
　　　　 $password = 'password';
$option = array(
　　　　 // エラーモードを例外スローに設定
　　　　 PDO::ATTR_ERRMODE => PDO::ERRMODE_EXCEPTION,
　　　　 // local ファイルからload可能にする
　　　　 PDO::MYSQL_ATTR_LOCAL_INFILE => true ,
);
$pdo = new PDO($dsn, $user, $password, $option);
?>
それから、$pdo->query($sql) に入れてる、$sql文を先に表示してみて、間違いがないか見ることと、query()メソッド はprepared ではないので、executeは不要。
細かいことをいうと、mysql本体は、load文にプレースホルダーが使えないのですが(mysqliでの接続も同様)、
pdo_mysqlでは、通常設定時、エミュレーションモードといって、php側で先に置き換えてしまうので、load文でもプレースホルダーが有効になります。To_aru_Userさんのはプレースホルダー使用例。
オプションでPDO::MYSQL_ATTR_DIRECT_QUERY をtrueにすると、mysql本体と同じ動作になります。
最後にエラーチェック、例外モードにしていないときは、query発行後に
var_dump( $pdo->errorInfo() );
してみる。
または、PDO::ATTR_ERRMODEを例外モードにしていれば、query 発行部分を try{}catch(){} でくるんで、sql発行時のエラーチェックをしてください。
<?php
try{ /* ここに query 発行部分
*/
}catch(Exception $e) {
echo 'エラー：', $e->getMessage();
}
    • good
    • 0
    • 件
通報する
この回答へのお礼

>PDO::MYSQL_ATTR_LOCAL_INFILE をここでtrueにしないと、load出来ないようです。
どうりでファイルを読み込んでくれないわけですね！他のサイトのPDOを使った作成例を見ても同じ書き方をしていたので、どこが間違っているのか分かりませんでした。

では書き直したPHP文をもう一度。

<?php
//csvファイルのアップロード
if (is_uploaded_file($_FILES["upfile"]["tmp_name"])) {
//「files」という名前のフォルダを同じ階層に設置。ここにCSVファイルをアップロード
if (move_uploaded_file($_FILES["upfile"]["tmp_name"], "files/" . $_FILES["upfile"]["name"])) {
chmod("files/" . $_FILES["upfile"]["name"], 0644);

//fileパス
$file = "files/" .$_FILES["upfile"]["name"];


//接続文字列
$dsn = 'mysql:dbname=shop;host=localhost;charset=utf8';
$user = 'user';
$password = 'password';
$option = array(
// エラーモードを例外スローに設定
PDO::ATTR_ERRMODE => PDO::ERRMODE_EXCEPTION,
// local ファイルからload可能にする
PDO::MYSQL_ATTR_LOCAL_INFILE => true ,
);

try{

$pdo = new PDO($dsn, $user, $password, $option);

$sql_src = <<<SQL
LOAD DATA LOCAL INFILE %s INTO TABLE `%s`
CHARACTER SET sjis
fields terminated by ',' enclosed by '"'
lines terminated by '\\r\\n'
IGNORE 1 LINES
SQL;
$table= 'food';
$sql = sprintf($sql_src , $pdo->quote($file), $table);

//sql文の実行
$stmt = $pdo->query($sql);

echo "インポートが完了しました！";

}catch(Exception $e) {
echo 'エラー：', $e->getMessage();
}

//失敗したとき
} else {
echo "ファイルをアップロードできません。";
}
} else {
echo "ファイルが選択されていません。";
}
?>

これで接続できました！ありがとうございました★

通報する
お礼日時：2013/11/20 09:09

お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう！

Q質問する（無料）

ページトップページトップ

Q質問する（無料）

デイリーランキングこのカテゴリの人気デイリーQ&Aランキング

マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング

おすすめ情報