csvファイルで、1列目の値を見て、重複していないレコードだけにしたいです。
これをlinuxコマンドで、実現できないでしょうか?(エクセルで扱えないデータ量なので)
以下のようなイメージです。
宜しくお願い致します。
<イメージ>
■編集前
120240414001,001,大門
120240414001,002,大門
120240414002,001,上野
120240414003,001,神田
120240414003,002,神田
■編集後
120240414002,001,上野
A 回答 (2件)
- 最新から表示
- 回答順に表示
No.2
- 回答日時:
「比較に使用するのが先頭から○文字目まで」という条件なので、sortとuniqコマンドで出来ます。
sort ファイル名 | uniq -w12 -u
またはソートキー範囲を行全体でなく1列目だけに限定して、
sort -t, -k1 ファイル名 | uniq -w12 -u
上記の条件でない場合は、プログラム的な処理が必要ですね。
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- Visual Basic(VBA) VBAで特定の場所にあるCSVファイル(複数)から特定場所を抜き出してExcelに転記したいです。 11 2023/05/23 16:29
- Excel(エクセル) CSVファイルでVBAを動かす方法 3 2023/04/04 10:22
- HTML・CSS HTMLタグのあるCSVファイルを利用する方法 4 2023/03/19 14:41
- Excel(エクセル) 【マクロ】webアドレスにて指定されたCSVファイル【excelソフト表示】を印刷する件 1 2023/02/15 01:52
- Excel(エクセル) PowerQueryに詳しい方教えてください(Office365) 1 2022/07/24 21:11
- その他(Microsoft Office) VBA CSV出力について 3 2023/04/19 14:14
- UNIX・Linux EC2の暗号化された.confファイルを複合したい! 1 2023/06/08 23:20
- Excel(エクセル) Excelマクロ 差分抽出の方法が知りたいです。 2 2023/03/07 13:25
- Excel(エクセル) MATLABでcsvファイルを読み込もうとしているのですが、Excelワークシートをアクティブにでき 1 2023/12/15 11:41
- Excel(エクセル) csvファイルをExcel形式で読み込むには 2 2023/07/03 13:09
このQ&Aを見た人はこんなQ&Aも見ています
-
プロが教えるわが家の防犯対策術!
ホームセキュリティのプロが、家庭の防犯対策を真剣に考える 2組のご夫婦へ実際の防犯対策術をご紹介!どうすれば家と家族を守れるのかを教えます!
-
mallocについて
C言語・C++・C#
-
プログラミング
その他(プログラミング・Web制作)
-
コードを書いて下さい( ; ; )写真有り
HTML・CSS
-
-
4
プログラミング、アーキテクチャ好きに質問です。 kotlinなどのMVVM、単方向データフローの考え
その他(プログラミング・Web制作)
-
5
ファイルの比較について教えてください
Windows 10
-
6
プログラミング ソースコード
その他(プログラミング・Web制作)
-
7
Ubuntu系とCentOS系の違いはなんですか? 勝手にですが、前者はC++、後者はPythonの
UNIX・Linux
-
8
Linux のシェルスクリプトの強制終了の仕方について
UNIX・Linux
-
9
httpのサイトにアクセスされたらhttpsのほうにリダイレクトするように設定する方法
サーバー
-
10
他のLinuxでも動くa.outの作り方
UNIX・Linux
-
11
Linuxでの開発環境構築や設定のコツ
C言語・C++・C#
-
12
pdfファイルを編集可にするソフトの目的は
PDF
-
13
WindowsのCapsLock(キャップスロック)って、何の意味があるんですか?
C言語・C++・C#
-
14
パソコンについてなぜwindowsxpから7になって新機能のファイル検索などが追加して重くなったので
Windows 7
-
15
システムエンジニアの適正について
C言語・C++・C#
-
16
Gitについて質問。 クローンしたフォルダをコピーして、色々書き換えて、 さらにクローンして、そこに
その他(プログラミング・Web制作)
-
17
なんでブラウザでPHPを動かすためだけにOSにPython2(Python3)を入れて、C(GCC)
PHP
-
18
Webプログラムってネイティブアプリプログラムに比べて遥かに簡単すぎる気がするのですが気の所為ですか
その他(プログラミング・Web制作)
-
19
txtって、ページ番号振れないんでしたよね?
Word(ワード)
-
20
windowsにいてなぜwindowsxpから10になると重くなるのですか?同じアプリでも最低条件、
その他(OS)
おすすめ情報
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
エクセルのVBAについて とある...
-
バッチ処理でcsvファイルの文字...
-
複数のcsvファイルを統合、でも...
-
エクセルマクロ、複数のCSVファ...
-
エクセル 指定範囲をCSV出力
-
csvファイルをlinuxコマンドで...
-
csvをVBAを使ってエクセル形式...
-
MAC フォルダ内のPDF件数とペー...
-
アクセスと同フォルダのCSVファ...
-
Python CSVファイルについて
-
複数のCSVファイルを読み込んで...
-
csvファイルを結合するバッ...
-
コマンドプロンプトの「%1」と...
-
コマンドプロンプトのエラーに...
-
バッチでテキストファイルから...
-
大量のフォルダからひとつのフ...
-
画像・動画データを日付毎のフ...
-
exeファイルを実行するとコマン...
-
forfilesで検索したファイルを...
-
Thunderbirdで社内共有フォルダ...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
エクセルのVBAについて とある...
-
csvファイルをlinuxコマンドで...
-
Python CSVファイルについて
-
FTPコマンド mgetでとまってし...
-
エクセル 指定範囲をCSV出力
-
複数のcsvファイルを統合、でも...
-
アクセスと同フォルダのCSVファ...
-
csv形式からbmpを作成
-
MAC フォルダ内のPDF件数とペー...
-
バッチ処理でcsvファイルの文字...
-
【Rコマンダー】データインポー...
-
Excelで”データ”形式のCSVが作...
-
複数のCSVファイルを読み込んで...
-
複数エクセルファイルの合成
-
EXCEL マクロが正常に動かなく...
-
フォルダ内のファイル読み込み
-
gnuplotで複数csvファイルから...
-
複数のCSVファイルを1つのファ...
-
コマンドによるzip圧縮
-
コマンドプロンプトの「%1」と...
おすすめ情報