パンダデータフレームからHTMLに変換するときに、HTMLで完全な（切り捨てられていない）データフレーム情報を表示する方法は？

DataFrame.to_html関数を使用して、pandasデータフレームをhtml出力に変換しました。これを別のhtmlファイルに保存すると、ファイルの出力が切り捨てられます。

たとえば、私のTEXT列では、

df.head(1) 表示されます

映画は素晴らしい努力でした...

の代わりに

この映画は、この時期に広まった複雑な社会的感情を解体するための優れた取り組みでした。

このレンディションは、大規模なパンダデータフレームの画面に適した形式の場合は問題ありませんが、データフレームに含まれる完全な表形式のデータを表示するhtmlファイル、つまり、以前のテキストスニペット。

HTMLバージョンの情報のTEXT列の各要素について、切り詰められていない完全なテキストデータをどのように表示できますか？HTMLテーブルが完全なデータを表示するために長いセルを表示する必要があると想像しますが、私が理解している限り、列幅のパラメーターのみをDataFrame.to_html関数に渡すことができます。

display.max_colwidthオプションを-1次のように設定します。

pd.set_option('display.max_colwidth', -1)

set_option docs

たとえば、iPythonでは、情報が50文字に切り捨てられています。超過分は省略されます。

このdisplay.max_colwidthオプションを設定すると、情報が完全に表示されます。

pd.set_option('display.max_columns', None)  

id （2番目の引数）は列を完全に表示できます。

pd.set_option('display.max_columns', None)表示される最大列の数を設定する一方で、このオプションpd.set_option('display.max_colwidth', -1)は各単一フィールドの最大幅を設定します。

私の目的のために、コードの残りの部分に影響を与えずに巨大なデータフレームを完全に印刷する小さなヘルパー関数を作成しました。また、浮動小数点数を再フォーマットし、仮想ディスプレイの幅を設定しました。あなたはあなたのユースケースのためにそれを採用するかもしれません。

def print_full(x):
    pd.set_option('display.max_rows', len(x))
    pd.set_option('display.max_columns', None)
    pd.set_option('display.width', 2000)
    pd.set_option('display.float_format', '{:20,.2f}'.format)
    pd.set_option('display.max_colwidth', None)
    print(x)
    pd.reset_option('display.max_rows')
    pd.reset_option('display.max_columns')
    pd.reset_option('display.width')
    pd.reset_option('display.float_format')
    pd.reset_option('display.max_colwidth')

やっとこれを行うことを探している人のために。私はdaskで同様のオプションを見つけることができませんでしたが、パンダ用の同じノートブックでこれを単純に実行すると、daskでも機能します。

import pandas as pd
import dask.dataframe as dd
pd.set_option('display.max_colwidth', -1) # This will set the no truncate for pandas as well as for dask. Not sure how it does for dask though. but it works

train_data = dd.read_csv('./data/train.csv')    
train_data.head(5)

次のコードの結果、以下のエラーが発生します。

pd.set_option('display.max_colwidth', -1)

FutureWarning：負の整数を渡すことはバージョン1.0では非推奨であり、将来のバージョンではサポートされません。代わりに、Noneを使用して列幅を制限しないでください。

代わりに、次を使用します。

pd.set_option('display.max_colwidth', None)

これはタスクを実行し、バージョン1.0 以降のパンダのバージョンに準拠しています。