CSVファイルを使用していますが、コマンドラインから行または列の内容をすばやく確認する必要がある場合があります。多くの場合cut、head、tail、と友人が仕事をします。ただし、cutは次のような状況に簡単に対処できません。
"this, is the first entry", this is the second, 34.5
ここでは、最初のコンマは最初のフィールドの一部ですが、cut -d, -f1一致しません。自分で解決策を書く前に、この仕事のためにすでに存在する優れたツールを誰かが知っているかどうか疑問に思っていました。少なくとも、上記の例を処理し、CSV形式のファイルから列を返すことができる必要があります。他の望ましい機能には、最初の行に指定された列名に基づいて列を選択する機能、他の引用スタイルのサポート、およびタブ区切りファイルのサポートが含まれます。
そのようなツールを知らないが、そのようなプログラムをBash、Perl、Python、または他の一般的なスクリプト言語で実装することに関する提案がある場合、私はそのような提案を気にしません。
回答:
私はおそらく少し遅すぎますが、言及する価値のある別のツールがあります：csvkit
http://csvkit.readthedocs.org/
次のことができるコマンドラインツールがたくさんあります。
cut、grep、sortなどが、CSV-意識し、Perlでの仕事のように聞こえText::CSVます。
perl -MText::CSV -pe '
BEGIN {$csv = Text::CSV->new();}
$csv->parse($_) or die;
@fields = $csv->fields();
print @fields[1,3];
'
列名の処理方法については、ドキュメントを参照してください。セパレータとクォートのスタイルは、パラメータを使用して調整できますnew。Text::CSV::Separatorセパレータの推測も参照してください。
(t)cshそのコマンドである場合を除き、コマンドはシェルのプロンプトで正常に機能します。1行で必要な場合は、いつでもこれらの行を結合できます。改行は、一般的にCのようなperl構文のスペースのようなものです。
-e暗黙的なループを作成する方法など）の一部を実行する構文糖が存在することを期待していました。
コマンドラインツールがうまく機能するcsvfixを見つけました。ただし、自分で作成する必要があります。
http://neilb.bitbucket.org/csvfix
期待するすべてのこと、列の順序/選択、分割/マージ、およびCSVデータからのSQL挿入の生成とCSVデータの比較を望まない多くのことを行います。
コマンドラインを使用したい（そしてプログラム全体を作成してジョブを実行したくない）場合は、私が取り組んでいるプロジェクトrowsを使用したいと思います：それは表データへのコマンドラインインターフェースですが、プログラムで使用するPythonライブラリ。コマンドラインインターフェイスを使用すると、CSV、XLS、XLSX、HTML、またはライブラリでサポートされているその他の表形式のデータを簡単なコマンドできれいに印刷できます。
rows print myfile.csv
次のmyfile.csvような場合：
state,city,inhabitants,area
RJ,Angra dos Reis,169511,825.09
RJ,Aperibé,10213,94.64
RJ,Araruama,112008,638.02
RJ,Areal,11423,110.92
RJ,Armação dos Búzios,27560,70.28
次に、行は次のように内容をきれいに印刷します。
+-------+-------------------------------+-------------+---------+
| state | city | inhabitants | area |
+-------+-------------------------------+-------------+---------+
| RJ | Angra dos Reis | 169511 | 825.09 |
| RJ | Aperibé | 10213 | 94.64 |
| RJ | Araruama | 112008 | 638.02 |
| RJ | Areal | 11423 | 110.92 |
| RJ | Armação dos Búzios | 27560 | 70.28 |
+-------+-------------------------------+-------------+---------+
あなたがPython開発者であり、すでにpipマシンにインストールされている場合は、virtualenv内で実行するか、sudo次のコマンドで実行します。
pip install rows
Debianを使用している場合：
sudo apt-get install rows
サポートされているフォーマット間で変換できます：
rows convert myfile.xlsx myfile.csv
はい、SQLをCSVファイルに使用できます。
$ rows query 'SELECT city, area FROM table1 WHERE inhabitants > 100000' myfile.csv
+----------------+--------+
| city | area |
+----------------+--------+
| Angra dos Reis | 825.09 |
| Araruama | 638.02 |
+----------------+--------+
--outputパラメータを使用して、クエリの出力をstdoutではなくファイルに変換することもできます。
Pythonプログラムでも次のことができます。
import rows
table = rows.import_from_csv('myfile.csv')
rows.export_to_txt(table, 'myfile.txt')
# `myfile.txt` will have same content as `rows print` output
楽しんでください！
Rは私のお気に入りのプログラミング言語ではありませんが、このようなものには適しています。あなたのcsvファイルが
***********
foo.csv
***********
col1, col2, col3
"this, is the first entry", this is the second, 34.5
'some more', "messed up", stuff
Rインタープリタータイプ内
> x=read.csv("foo.csv", header=FALSE)
> x
col1 col2 col3
1 this, is the first entry this is the second 34.5
2 'some more' messed up stuff
> x[1] # first col
col1
1 this, is the first entry
2 'some more'
> x[1,] # first row
col1 col2 col3
1 this, is the first entry this is the second 34.5
他のリクエストに関しては、「最初の行に指定された列名に基づいて列を選択する機能」を参照してください。
> x["col1"]
col1
1 this, is the first entry
2 'some more'
「他の引用スタイルのサポート」についてはquote、read.csv（および関連する関数）への引数を参照してください。「タブ区切りファイルのサポート」についてはsep、read.csv の引数（sep「\ t」に設定）を参照してください。
詳細については、オンラインヘルプを参照してください。
> help(read.csv)
Rscript（ベースRディストリビューションの一部）またはアドオンパッケージを参照してくださいlittler。あなたが行うことができます#!/usr/bin/env Rscriptまたは同様。
または、awkマジックを試すこともできます。しかし、私はawkユーザーではないので、これが適切に機能するかどうか、およびその方法を確認できません。
コマンドラインからpythonを使用するには、pythonpy（https://github.com/Russell91/pythonpy）をチェックアウトできます：
$ echo $'a,b,c\nd,e,f' | py '[x[1] for x in csv.reader(sys.stdin)']
b
e
cissyは、コマンドラインのcsv処理も行います。ほとんどのディストリビューションでrpmおよびdebパッケージを使用できるC（小/軽量）で書かれています。
例の使用：
echo '"this, is the first entry", this is the second, 34.5' | cissy -c 1
"this, is the first entry"
または
echo '"this, is the first entry", this is the second, 34.5' | cissy -c 2
this is the second
または
echo '"this, is the first entry", this is the second, 34.5' | cissy -c 2-
this is the second, 34.5
github repo Structured Text Toolsには、関連するLinuxコマンドラインツールの便利なリストがあります。特に、区切り文字区切り値セクションには、要求された操作を直接サポートするCSV対応ツールがいくつかリストされています。
xsv-Rust（Github）で書かれた高速CSVコマンドラインツールキットをお勧めします。
最良のツールの1つはMiller（http://johnkerl.org/miller/doc/index.html）です。これは、CSV、TSV、表形式JSONなどの名前付きデータのawk、sed、cut、join、sortのようなものです。
例で
echo '"this, is the first entry", this is the second, 34.5' | \
mlr --icsv --implicit-csv-header cat
あなたにあげる
1=this, is the first entry,2= this is the second,3= 34.5
TSVが必要な場合
echo '"this, is the first entry", this is the second, 34.5' | \
mlr --c2t --implicit-csv-header cat
あなたに与えます（ヘッダーを削除することは可能です）
1 2 3
this, is the first entry this is the second 34.5
1列目と3列目が必要な場合は、順序を変更します
echo '"this, is the first entry", this is the second, 34.5' | \
mlr --csv --implicit-csv-header --headerless-csv-output cut -o -f 3,1
あなたにあげる
34.5,"this, is the first entry"
ターミナルで視覚的/インタラクティブなツールが必要な場合は、心からVisiDataをお勧めします。
周波数テーブル（上記）、ピボット、融解、散布図、Pythonを使用したフィルタリング/計算などがあります。
次のようにcsvファイルを渡すことができます
vd hello.csv
CSVの特定のオプションがあります：--csv-dialect、--csv-delimiter、--csv-quotechar、および--csv-skipinitialspace用のCSVファイルの取り扱い微調整。