csvファイルで、1列目の値を見て、重複していないレコードだけにしたいです。
これをlinuxコマンドで、実現できないでしょうか?(エクセルで扱えないデータ量なので)
以下のようなイメージです。
宜しくお願い致します。
<イメージ>
■編集前
120240414001,001,大門
120240414001,002,大門
120240414002,001,上野
120240414003,001,神田
120240414003,002,神田
■編集後
120240414002,001,上野
A 回答 (2件)
- 最新から表示
- 回答順に表示
No.2
- 回答日時:
「比較に使用するのが先頭から○文字目まで」という条件なので、sortとuniqコマンドで出来ます。
sort ファイル名 | uniq -w12 -u
またはソートキー範囲を行全体でなく1列目だけに限定して、
sort -t, -k1 ファイル名 | uniq -w12 -u
上記の条件でない場合は、プログラム的な処理が必要ですね。
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- Visual Basic(VBA) VBAで特定の場所にあるCSVファイル(複数)から特定場所を抜き出してExcelに転記したいです。 11 2023/05/23 16:29
- Excel(エクセル) CSVファイルでVBAを動かす方法 3 2023/04/04 10:22
- HTML・CSS HTMLタグのあるCSVファイルを利用する方法 4 2023/03/19 14:41
- Excel(エクセル) 【マクロ】webアドレスにて指定されたCSVファイル【excelソフト表示】を印刷する件 1 2023/02/15 01:52
- Excel(エクセル) PowerQueryに詳しい方教えてください(Office365) 1 2022/07/24 21:11
- その他(Microsoft Office) VBA CSV出力について 3 2023/04/19 14:14
- UNIX・Linux EC2の暗号化された.confファイルを複合したい! 1 2023/06/08 23:20
- Excel(エクセル) Excelマクロ 差分抽出の方法が知りたいです。 2 2023/03/07 13:25
- Excel(エクセル) MATLABでcsvファイルを読み込もうとしているのですが、Excelワークシートをアクティブにでき 1 2023/12/15 11:41
- Excel(エクセル) csvファイルをExcel形式で読み込むには 2 2023/07/03 13:09
このQ&Aを見た人はこんなQ&Aも見ています
-
プロが教える店舗&オフィスのセキュリティ対策術
中・小規模の店舗やオフィスのセキュリティセキュリティ対策について、プロにどう対策すべきか 何を注意すべきかを教えていただきました!
-
mallocについて
C言語・C++・C#
-
プログラミング
その他(プログラミング・Web制作)
-
コードを書いて下さい( ; ; )写真有り
HTML・CSS
-
-
4
プログラミング、アーキテクチャ好きに質問です。 kotlinなどのMVVM、単方向データフローの考え
その他(プログラミング・Web制作)
-
5
ファイルの比較について教えてください
Windows 10
-
6
プログラミング ソースコード
その他(プログラミング・Web制作)
-
7
Linux のシェルスクリプトの強制終了の仕方について
UNIX・Linux
-
8
httpのサイトにアクセスされたらhttpsのほうにリダイレクトするように設定する方法
サーバー
-
9
他のLinuxでも動くa.outの作り方
UNIX・Linux
-
10
Linuxでの開発環境構築や設定のコツ
C言語・C++・C#
-
11
WindowsのCapsLock(キャップスロック)って、何の意味があるんですか?
C言語・C++・C#
-
12
授業用のPCでアプリがインストールできない。外付けHDDなら?
教育ソフト・学習ソフト
-
13
Gitについて質問。 クローンしたフォルダをコピーして、色々書き換えて、 さらにクローンして、そこに
その他(プログラミング・Web制作)
-
14
なんでブラウザでPHPを動かすためだけにOSにPython2(Python3)を入れて、C(GCC)
PHP
-
15
pdfファイルを編集可にするソフトの目的は
PDF
-
16
Webプログラムってネイティブアプリプログラムに比べて遥かに簡単すぎる気がするのですが気の所為ですか
その他(プログラミング・Web制作)
-
17
システムエンジニアの適正について
C言語・C++・C#
-
18
pythonで複数画像からgifを作る方法
その他(プログラミング・Web制作)
-
19
windowsにいてなぜwindowsxpから10になると重くなるのですか?同じアプリでも最低条件、
その他(OS)
-
20
php配列のキーの二重定義 $a['zero'],$a['iti']と$a[0],$a[1]とが同等
PHP
おすすめ情報
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
Python CSVファイルについて
-
エクセルのVBAについて とある...
-
複数エクセルファイルの合成
-
大量のフォルダからひとつのフ...
-
コマンドプロンプトの「%1」と...
-
コマンドプロンプトのエラーに...
-
binファイルを解凍したいの...
-
stable diffusionのインストー...
-
バッチでテキストファイルから...
-
cygwinインストールでgccが利用...
-
Latexで図番号だけを「図1.1」...
-
バッチコマンドでファイル名の...
-
PCのアプリケーションを別のPC...
-
VBAでワークシートを引数として...
-
echo "abc" >> test.txt で、先...
-
複数のフォルダを開くバッチフ...
-
javaで大量のファイルを読み込...
-
.txtではなく.logの方が良いの...
-
ビルダーを使ってますがパソコ...
-
多数のサブディレクトリ内のフ...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
エクセルのVBAについて とある...
-
FTPコマンド mgetでとまってし...
-
Python CSVファイルについて
-
アクセスと同フォルダのCSVファ...
-
複数のcsvファイルを統合、でも...
-
エクセル 指定範囲をCSV出力
-
バッチ処理でcsvファイルの文字...
-
MAC フォルダ内のPDF件数とペー...
-
Excelの帳票形式をアクセスに取...
-
コマンドによるzip圧縮
-
エクセルマクロ、複数のCSVファ...
-
複数エクセルファイルの合成
-
【Rコマンダー】データインポー...
-
yahooカレンダーのデータをICS...
-
csv形式からbmpを作成
-
複数のCSVファイルを読み込んで...
-
Dosから既存フォーマットのエク...
-
EXCEL マクロが正常に動かなく...
-
XLS・CSVファイルのマージソフ...
-
エクセルでCSVファイルを一...
おすすめ情報