csvファイルで、1列目の値を見て、重複していないレコードだけにしたいです。
これをlinuxコマンドで、実現できないでしょうか?(エクセルで扱えないデータ量なので)
以下のようなイメージです。
宜しくお願い致します。
<イメージ>
■編集前
120240414001,001,大門
120240414001,002,大門
120240414002,001,上野
120240414003,001,神田
120240414003,002,神田
■編集後
120240414002,001,上野
A 回答 (2件)
- 最新から表示
- 回答順に表示
No.1
- 回答日時:
まずはsortかけてから
uniq -u -w 11 xxx.csv
かな。
No.2
- 回答日時:
「比較に使用するのが先頭から○文字目まで」という条件なので、sortとuniqコマンドで出来ます。
sort ファイル名 | uniq -w12 -u
またはソートキー範囲を行全体でなく1列目だけに限定して、
sort -t, -k1 ファイル名 | uniq -w12 -u
上記の条件でない場合は、プログラム的な処理が必要ですね。
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- Visual Basic(VBA) VBAで特定の場所にあるCSVファイル(複数)から特定場所を抜き出してExcelに転記したいです。 11 2023/05/23 16:29
- Excel(エクセル) CSVファイルでVBAを動かす方法 3 2023/04/04 10:22
- HTML・CSS HTMLタグのあるCSVファイルを利用する方法 4 2023/03/19 14:41
- Excel(エクセル) 【マクロ】webアドレスにて指定されたCSVファイル【excelソフト表示】を印刷する件 1 2023/02/15 01:52
- Excel(エクセル) PowerQueryに詳しい方教えてください(Office365) 1 2022/07/24 21:11
- その他(Microsoft Office) VBA CSV出力について 3 2023/04/19 14:14
- UNIX・Linux EC2の暗号化された.confファイルを複合したい! 1 2023/06/08 23:20
- Excel(エクセル) Excelマクロ 差分抽出の方法が知りたいです。 2 2023/03/07 13:25
- Excel(エクセル) MATLABでcsvファイルを読み込もうとしているのですが、Excelワークシートをアクティブにでき 1 2023/12/15 11:41
- Excel(エクセル) csvファイルをExcel形式で読み込むには 2 2023/07/03 13:09
このQ&Aを見た人はこんなQ&Aも見ています
-
性格の違いは生まれた順番で決まる?長男長女・中間子・末っ子・一人っ子の性格の傾向
同じ環境で生まれ育っても、生まれ順で性格は違うものなのだろうか。家庭教育研究家の田宮由美さんに教えてもらった。
-
mallocについて
C言語・C++・C#
-
プログラミング
その他(プログラミング・Web制作)
-
コードを書いて下さい( ; ; )写真有り
HTML・CSS
-
-
4
プログラミング、アーキテクチャ好きに質問です。 kotlinなどのMVVM、単方向データフローの考え
その他(プログラミング・Web制作)
-
5
プログラミング ソースコード
その他(プログラミング・Web制作)
-
6
ファイルの比較について教えてください
Windows 10
-
7
コンピュータ用語、データベース用語で、これを何と言いますか?
その他(データベース)
-
8
Ubuntu系とCentOS系の違いはなんですか? 勝手にですが、前者はC++、後者はPythonの
UNIX・Linux
-
9
Linux のシェルスクリプトの強制終了の仕方について
UNIX・Linux
-
10
httpのサイトにアクセスされたらhttpsのほうにリダイレクトするように設定する方法
サーバー
-
11
他のLinuxでも動くa.outの作り方
UNIX・Linux
-
12
Linuxでの開発環境構築や設定のコツ
C言語・C++・C#
-
13
なんでブラウザでPHPを動かすためだけにOSにPython2(Python3)を入れて、C(GCC)
PHP
-
14
Webプログラムってネイティブアプリプログラムに比べて遥かに簡単すぎる気がするのですが気の所為ですか
その他(プログラミング・Web制作)
-
15
パソコンについてなぜwindowsxpから7になって新機能のファイル検索などが追加して重くなったので
Windows 7
-
16
システムエンジニアの適正について
C言語・C++・C#
-
17
pdfファイルを編集可にするソフトの目的は
PDF
-
18
Gitについて質問。 クローンしたフォルダをコピーして、色々書き換えて、 さらにクローンして、そこに
その他(プログラミング・Web制作)
-
19
WindowsのCapsLock(キャップスロック)って、何の意味があるんですか?
C言語・C++・C#
-
20
PDFを送って貰う言い方
PDF
おすすめ情報
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
エクセルのVBAについて とある...
-
エクセル 指定範囲をCSV出力
-
Python CSVファイルについて
-
FTPコマンド mgetでとまってし...
-
アクセスと同フォルダのCSVファ...
-
MAC フォルダ内のPDF件数とペー...
-
フォルダ内のファイル読み込み
-
csv形式からbmpを作成
-
コマンドプロンプトの「%1」と...
-
コマンドプロンプトのエラーに...
-
バッチでテキストファイルから...
-
大量のフォルダからひとつのフ...
-
バッチ処理でファイルの中身を...
-
VBAでワークシートを引数として...
-
#include <Windows.h>というヘ...
-
コマンドプロンプト標準出力と...
-
「読み取りと実行」と「読み取...
-
コマンドプロンプトで変数が数...
-
バッチファイルの内容を表示さ...
-
Thunderbirdで社内共有フォルダ...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
エクセルのVBAについて とある...
-
csvファイルをlinuxコマンドで...
-
Python CSVファイルについて
-
FTPコマンド mgetでとまってし...
-
エクセル 指定範囲をCSV出力
-
複数のcsvファイルを統合、でも...
-
アクセスと同フォルダのCSVファ...
-
csv形式からbmpを作成
-
MAC フォルダ内のPDF件数とペー...
-
バッチ処理でcsvファイルの文字...
-
【Rコマンダー】データインポー...
-
Excelで”データ”形式のCSVが作...
-
複数のCSVファイルを読み込んで...
-
複数エクセルファイルの合成
-
EXCEL マクロが正常に動かなく...
-
フォルダ内のファイル読み込み
-
gnuplotで複数csvファイルから...
-
複数のCSVファイルを1つのファ...
-
コマンドによるzip圧縮
-
コマンドプロンプトの「%1」と...
おすすめ情報