Pythonで記述されたCSVファイルには、各行の間に空白行があります

import csv

with open('thefile.csv', 'rb') as f:
  data = list(csv.reader(f))
  import collections
  counter = collections.defaultdict(int)

  for row in data:
        counter[row[10]] += 1


with open('/pythonwork/thefile_subset11.csv', 'w') as outfile:
    writer = csv.writer(outfile)
    for row in data:
        if counter[row[10]] >= 504:
           writer.writerow(row)

このコードは、読み取りthefile.csv、変更、結果の書き込みを行いthefile_subset1ます。

ただし、結果のcsvをMicrosoft Excelで開くと、各レコードの後に​​余分な空白行があります。

余分な空白行を入れないようにする方法はありますか？

Python 2では、の代わりにoutfileモードで開きます。書き込みファイルに直接。バイナリモードでファイルを開かない場合は、Windowsのテキストモードでそれぞれがに変換されるため、ファイルは書き込まれます。'wb''w'csv.writer\r\n\r\r\n\n\r\n

Python 3では必要な構文が変更されたため（以下のドキュメントリンクを参照）、代わりにoutfile追加のパラメーターnewline=''（空の文字列）で開きます。

例：

# Python 2
with open('/pythonwork/thefile_subset11.csv', 'wb') as outfile:
    writer = csv.writer(outfile)

# Python 3
with open('/pythonwork/thefile_subset11.csv', 'w', newline='') as outfile:
    writer = csv.writer(outfile)

ドキュメントリンク

• https://docs.python.org/2/library/csv.html#csv.writer
• https://docs.python.org/3/library/csv.html#csv.writer

バイナリモード「wb」でファイルを開くと、Python 3以降では機能しません。または、データを書き込む前にデータをバイナリに変換する必要があります。それは単なる面倒です。

代わりに、テキストモードで保持する必要がありますが、改行を空としてオーバーライドします。そのようです：

with open('/pythonwork/thefile_subset11.csv', 'w', newline='') as outfile:

単純な答えは、csvファイルは入力または出力に関わらず、常にバイナリモードで開く必要があるということです。そうでない場合、Windowsでは行末に問題があります。具体的には出力にcsvモジュールは、書き込みます\r\n（テキストモードで）、次いで（標準CSV行ターミネーター）とランタイムが置換する\nことによって\r\n結果を与える（Windowsの標準ラインターミネータ）\r\r\n。

をいじるのlineterminatorは解決策ではありません。

注：Windowsシステムで余分な行が追加されていたため、これは推奨されるソリューションではないようです。Pythonドキュメントで述べたように：

csvfileがファイルオブジェクトの場合、違いがあるプラットフォームでは、「b」フラグを使用して開く必要があります。

Windowsはそのようなプラットフォームの1つです。以下で説明するように行末記号を変更すると問題が解決する可能性がありますが、バイナリモードでファイルを開くと、問題を完全に回避できます。このソリューションはより「優雅」であると言えるかもしれません。この場合、ラインターミネータを "いじる"と、システム間でコードが移植できなくなる可能性があり、UNIXシステムでバイナリモードでファイルを開いても効果はありません。すなわち。その結果、システム間で互換性のあるコードになります。

Pythonドキュメントから：

Windowsでは、モードに追加された「b」はバイナリモードでファイルを開くため、「rb」、「wb」、「r + b」などのモードもあります。WindowsのPythonでは、テキストファイルとバイナリファイルが区別されます。テキストファイルの行末文字は、データの読み取りまたは書き込み時に自動的にわずかに変更されます。ファイルデータに対するこの舞台裏の変更は、ASCIIテキストファイルでは問題ありませんが、JPEGファイルやEXEファイルのようなバイナリデータは破損します。そのようなファイルを読み書きするときは、バイナリモードを使用するように十分注意してください。Unixでは、モードに「b」を追加しても問題ないため、すべてのバイナリファイルに対してプラットフォームに依存せずに使用できます。

オリジナル：

csv.writerのオプションのパラメーターの一部として、余分な空白行を取得している場合は、lineterminatorを変更する必要がある場合があります（詳細はこちら）。下記の例は、pythonページのcsv docsから適応したものです。 '\ n'から、本来あるべき姿に変更します。これは問題の暗闇の中での突き刺しにすぎないので、これは機能する場合と機能しない場合がありますが、それが私の推測です。

>>> import csv
>>> spamWriter = csv.writer(open('eggs.csv', 'w'), lineterminator='\n')
>>> spamWriter.writerow(['Spam'] * 5 + ['Baked Beans'])
>>> spamWriter.writerow(['Spam', 'Lovely Spam', 'Wonderful Spam'])

私は最初に同じ問題を抱えていたので、この回答をpython 3に書き込みます。

私はを使用してarduinoからデータを取得PySerialし、.csvファイルに書き込むことになっていた。私の場合の各読みはで終わっていた'\r\n'ので、改行は常に各行を区切っていました。

私の場合、newline=''オプションが機能しませんでした。それはのようないくつかのエラーを示したので：

with open('op.csv', 'a',newline=' ') as csv_file:

ValueError: illegal newline value: ''

したがって、ここでは改行の省略を受け入れないようです。

ここで答えの1つだけを見て、筆者オブジェクトの行末記号に言及しました。

writer = csv.writer(csv_file, delimiter=' ',lineterminator='\r')

そして、それは余分な改行をスキップするために私のために働いた。

with open(destPath+'\\'+csvXML, 'a+') as csvFile:
    writer = csv.writer(csvFile, delimiter=';', lineterminator='\r')
    writer.writerows(xmlList)

"lineterminator = '\ r'"は、2つの行の間に空の行がなくても、次の行に渡すことを許可します。

この答えを借りると、最もクリーンなソリューションは使用することio.TextIOWrapperです。私はこの問題を次のようにして自分で解決することができました。

from io import TextIOWrapper

...

with open(filename, 'wb') as csvfile, TextIOWrapper(csvfile, encoding='utf-8', newline='') as wrapper:
    csvwriter = csv.writer(wrapper)
    for data_row in data:
        csvwriter.writerow(data_row)

上記の答えはPython 2と互換性がありません。互換性を持たせるには、すべての書き込みロジックをifブロックでラップするだけでよいと思います。

if sys.version_info < (3,):
    # Python 2 way of handling CSVs
else:
    # The above logic

以下に定義する方法を使用して、CSVファイルにデータを書き込みます。

open('outputFile.csv', 'a',newline='')

メソッドnewline=''内にパラメーターを追加するだけopenです。

def writePhoneSpecsToCSV():
    rowData=["field1", "field2"]
    with open('outputFile.csv', 'a',newline='') as csv_file:
        writer = csv.writer(csv_file)
        writer.writerow(rowData)

これにより、追加の行を作成せずにCSV行が書き込まれます。

Python 3を使用する場合、コーデックモジュールを使用することで空行を回避できます。ドキュメントに記載されているように、ファイルはバイナリモードで開かれるため、改行kwargを変更する必要はありません。私は最近同じ問題に遭遇していましたが、それは私にとってはうまくいきました：

with codecs.open( csv_file,  mode='w', encoding='utf-8') as out_csv:
     csv_out_file = csv.DictWriter(out_csv)