6
パンダの大規模で永続的なDataFrame
私は、長年のSASユーザーとしてpythonとpandasへの切り替えを検討しています。 しかし、今日いくつかのテストを実行しているときpandas.read_csv()、128mbのcsvファイルを書き込もうとすると、Pythonがメモリ不足になって驚いた。約200,000行と200列の大部分が数値データでした。 SASを使用すると、csvファイルをSASデータセットにインポートでき、ハードドライブと同じ大きさになります。 に類似したものはありpandasますか？ 私は定期的に大きなファイルを扱っており、分散コンピューティングネットワークにアクセスできません。