![](http://oshiete.xgoo.jp/images/v2/pc/qa/question_title.png?8acaa2e)
csvファイルで、1列目の値を見て、重複していないレコードだけにしたいです。
これをlinuxコマンドで、実現できないでしょうか?(エクセルで扱えないデータ量なので)
以下のようなイメージです。
宜しくお願い致します。
<イメージ>
■編集前
120240414001,001,大門
120240414001,002,大門
120240414002,001,上野
120240414003,001,神田
120240414003,002,神田
■編集後
120240414002,001,上野
A 回答 (2件)
- 最新から表示
- 回答順に表示
No.2
- 回答日時:
「比較に使用するのが先頭から○文字目まで」という条件なので、sortとuniqコマンドで出来ます。
sort ファイル名 | uniq -w12 -u
またはソートキー範囲を行全体でなく1列目だけに限定して、
sort -t, -k1 ファイル名 | uniq -w12 -u
上記の条件でない場合は、プログラム的な処理が必要ですね。
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- Visual Basic(VBA) VBAで特定の場所にあるCSVファイル(複数)から特定場所を抜き出してExcelに転記したいです。 11 2023/05/23 16:29
- Excel(エクセル) CSVファイルでVBAを動かす方法 3 2023/04/04 10:22
- HTML・CSS HTMLタグのあるCSVファイルを利用する方法 4 2023/03/19 14:41
- Excel(エクセル) 【マクロ】webアドレスにて指定されたCSVファイル【excelソフト表示】を印刷する件 1 2023/02/15 01:52
- Excel(エクセル) PowerQueryに詳しい方教えてください(Office365) 1 2022/07/24 21:11
- その他(Microsoft Office) VBA CSV出力について 3 2023/04/19 14:14
- UNIX・Linux EC2の暗号化された.confファイルを複合したい! 1 2023/06/08 23:20
- Excel(エクセル) Excelマクロ 差分抽出の方法が知りたいです。 2 2023/03/07 13:25
- Excel(エクセル) MATLABでcsvファイルを読み込もうとしているのですが、Excelワークシートをアクティブにでき 1 2023/12/15 11:41
- Excel(エクセル) csvファイルをExcel形式で読み込むには 2 2023/07/03 13:09
このQ&Aを見た人はこんなQ&Aも見ています
-
性格の違いは生まれた順番で決まる?長男長女・中間子・末っ子・一人っ子の性格の傾向
同じ環境で生まれ育っても、生まれ順で性格は違うものなのだろうか。家庭教育研究家の田宮由美さんに教えてもらった。
-
mallocについて
C言語・C++・C#
-
プログラミング
その他(プログラミング・Web制作)
-
ITの見積もりってなんであんなに高いんですか? 原価がかからないのに
その他(ソフトウェア)
-
-
4
Windows 10のサポート期限切れとともにパソコンの 大量廃棄が予想されているのでしょうか それ
Windows 10
-
5
ファイルの比較について教えてください
Windows 10
-
6
プログラム言語について c言語もコードによって機械語に通訳されると知りました。直接機械が通訳しなくて
C言語・C++・C#
-
7
Ubuntu系とCentOS系の違いはなんですか? 勝手にですが、前者はC++、後者はPythonの
UNIX・Linux
-
8
他のLinuxでも動くa.outの作り方
UNIX・Linux
-
9
インターネットの開通工事をしたのですが、こちらの機器の電源を切る場合はどのようにすれば良いのでしょう
ネットワーク
-
10
正規表現 URL抽出「 [\\/\\b]{0} 」 の意味教えてください。
その他(プログラミング・Web制作)
-
11
このエラー内容について教えてくれませんか? sudo〜/sr0の一行は入力コマンドの写しの写しですね
UNIX・Linux
-
12
ITパスポートの勉強をしています。 DIMMとはなんですか?簡単に説明していただきたいです。 ネット
その他(プログラミング・Web制作)
-
13
テキストファイルの1行目のみを削除したい
その他(プログラミング・Web制作)
-
14
0 == False はいいけど
C言語・C++・C#
-
15
CPUが16bitでも32bitOSでコンパイルしたコード(例えばintが4バイトと定義されている)
C言語・C++・C#
-
16
コードを書いて下さい( ; ; )写真有り
HTML・CSS
-
17
プログラミング、アーキテクチャ好きに質問です。 kotlinなどのMVVM、単方向データフローの考え
その他(プログラミング・Web制作)
-
18
プログラミング ソースコード
その他(プログラミング・Web制作)
-
19
楽しくて最高のプログラミング言語を作りたいのですが、そもそもプログラミング言語を作る意味なんてないと
その他(プログラミング・Web制作)
-
20
コンピュータ用語、データベース用語で、これを何と言いますか?
その他(データベース)
おすすめ情報
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
エクセルのVBAについて とある...
-
Python CSVファイルについて
-
【Rコマンダー】データインポー...
-
複数エクセルファイルの合成
-
MAC フォルダ内のPDF件数とペー...
-
エクセル 指定範囲をCSV出力
-
複数のcsvファイルを統合、でも...
-
csv形式からbmpを作成
-
アクセスと同フォルダのCSVファ...
-
csvファイルを統合する方法を教...
-
フォルダ内のファイル読み込み
-
ファイルパスの指定の仕方がわ...
-
コマンドプロンプトのエラーに...
-
コマンドプロンプトの「%1」と...
-
大量のフォルダからひとつのフ...
-
バッチでテキストファイルから...
-
多数のサブディレクトリ内のフ...
-
バッチ処理でファイルの中身を...
-
exeファイルを実行するとコマン...
-
アクセス 壊れた? 「ファイ...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
エクセルのVBAについて とある...
-
Python CSVファイルについて
-
アクセスと同フォルダのCSVファ...
-
FTPコマンド mgetでとまってし...
-
【Rコマンダー】データインポー...
-
エクセル 指定範囲をCSV出力
-
バッチ処理でcsvファイルの文字...
-
エクセルマクロ、複数のCSVファ...
-
複数のcsvファイルを統合、でも...
-
EXCEL マクロが正常に動かなく...
-
MAC フォルダ内のPDF件数とペー...
-
gnuplotで複数csvファイルから...
-
複数エクセルファイルの合成
-
エクセルにまとめたcsvデータを...
-
シェルスクリプトで文字コード変換
-
複数のCSVファイルを読み込んで...
-
Excelの帳票形式をアクセスに取...
-
excelでMac(-)⇒Win(?)文字化け...
-
csvファイルを結合するバッ...
-
csvファイルを統合する方法を教...
おすすめ情報