SplFileObject を利用したときの5C問題？

phpでCSVファルを読み込み処理をしたいです。
ファイルの中身が下記のようになっています。
"テスト","名前","不能","3","4","5"

プログラムで下記のように記載してみました。

$strFilePath = 'C:';
$strFileName = 'Test.csv';
$file = new SplFileObject($strFilePath.$strFileName);
$file->setFlags(SplFileObject::READ_CSV);
// ファイル内のデータループ
foreach ( $file as $key => $line ) {
$line=mb_convert_encoding( $line, "utf-8", "sjis" );
var_dump($line);
}

を実行すると
array(5) {
[0]=> string(9) "テスト"
[1]=> string(6) "名前"
[2]=> string(10) "不能",3""
[3]=> string(1) "4"
[4]=> string(1) "5"
}
と表示されます。
本当は下記のようになってほしいです。
array(5) {
[0]=> string(9) "テスト"
[1]=> string(6) "名前"
[2]=> string(6) "不能"
[3]=> string(1) "3"
[4]=> string(1) "4"
[5]=> string(1) "5"
}
「能」や「表」の5C問題でしょうか？
どうすれば、希望のようにカンマ区切りになるでしょうか？

No.3 回答者： wakabadou 回答日時： 2024/12/11 11:17

"不能",の能の部分で発生しているいわゆる5C問題です。

次のライブラリで完全に解決できます。
https://packagist.org/packages/fw3/streams

他の方が書かれていたiconvを用いた変換の場合、変換不可能な文字があった場合、行そのものをなかった事として動作するので大変危険です。
その他、CSVのキャラクタセット変換における諸問題は次の資料に一通り全て記載されています。
https://speakerdeck.com/ickx/phperkaigi2021-phpd …

No.2 回答者： Ogre7077 回答日時： 2024/12/10 22:27

ご推察の通り 5C 問題の様です。

能(U+80FD) の SJIS 符号は `945C`
CSV のエスケープ文字のデフォルトは $escape = "\\"
https://www.php.net/manual/ja/splfileobject.setc …
SJIS を理解しないプログラムが 5C をエスケープ文字と判断して誤作動

これを解決するには UTF-8 の形式で SplFileObject に読み込ませばよいのですが、調べた限りエンコード指定の引数が無いようなので、フィルタでエンコード変換した結果の入力ストリームを読み込ませましょう。

例)
$fileName = "Test.csv";
$wrap = "php://filter/read=convert.iconv.CP932.UTF-8/resource=$fileName";
$file = new SplFileObject($wrap);
// 変換済みなので読み込み後の mb_convert_encoding は不要

参考)
https://www.php.net/manual/ja/wrappers.php.php#w …
https://www.php.net/manual/ja/filters.convert.ph …

No.1 回答者： Tacosan 回答日時： 2024/12/10 21:57

本当にそのような問題なのだとしたら, 「根本から」処理しないと話にならないのではないだろうか.

https://qiita.com/bstyle6130/items/4db3911e0a89d …
https://innx-hidenori.hatenadiary.org/entry/2009 …