数百万行を返すPostGISクエリがあります。
SELECT
t1.id AS id1,
t2.id AS id2,
ABS(t1.mean_h - t2.mean_h) AS h_diff,
ST_Distance(t1.the_geom, t2.the_geom) AS dist
FROM tas_ponds as t1, tas_ponds as t2
WHERE
(t1.gid > t2.gid) AND
ST_DWithin(t1.the_geom, t2.the_geom, 17000)
で実行するとpsql、out of memory for query resultエラーが発生します。
Googlingは、これはpostgres / PostGISではなくpsql内のエラーであることを示唆しています。クエリをフォームにSELECT ... INTO x FROM ...修正すると問題が解決しますか？非常に大きなデータセットを処理するために推奨される他の方法はありますか？
回答:
これをPostgresクライアントの問題であると確認する人もいます。空間やサーバーの考慮事項とは関係ありません。クライアントには、結果を画面に表示する前にバッファするメモリ量に制限があります。
これを処理するための推奨アプローチは、DECLARE / FETCHアプローチを使用して、結果セット全体よりも小さいブロックのデータにアクセスすることです。クエリのコンポーネント（距離など）を含むビューを作成して、クエリ操作自体に必要なメモリを削減することもできます。
scwは2分遅れてくれたので、彼の答えは繰り返さない。その他の可能な解決策は次のとおりです。
のMemoryセクションを編集しpostgresql.confます。クエリの実行を妨げる可能性がある非常に低いメモリ設定があるかどうかを確認してください。
次のコマンドを使用して、クエリをファイルに書き込み、コマンドラインから実行してみます。
psql -fファイル名db_name> output_file
外部アプリケーションで結果を使用する場合は、外部からカーソルを使用してクエリを実行してみてくださいpsql。たとえば、クエリを実行するPythonスクリプト：
脚本：
try:
conn = psycopg2.connect("dbname='' user='' host='' password=''") # Fill in
cur = conn.cursor()
except:
print 'Unable to connect to the database'
else:
print 'Connected to database.'
query="""YOUR
QUERY
HERE"""
cur.execute(query)
カーソルは反復可能であるため、次のいずれかを行うことができます。
for result in cur:
print result
またはそれらすべてを入手してください：
results=cur.fetchall()PostgresとPostGISではインデックス作成が非常に重要です
http://postgis.refractions.net/docs/ch04.html#id2794434
非常に大きなデータセットにはGiST（一般化検索ツリー）インデックスを推奨します...（これも「nullセーフ」です）例CREATE INDEX [indexname] ON [tablename] USING GIST（[geometryfield]）;
インデックスを構築した後、PostgreSQLにクエリ統計の最適化に使用されるテーブル統計を強制的に収集させることが重要です
VACUUM ANALYZE [table_name] [column_name]; SELECT UPDATE_GEOMETRY_STATS（[table_name]、[column_name]）;
また、適切なリファレンスは次のとおりです。インデックスの 活用http://postgis.refractions.net/docs/ch04.html#id2794685