回答:
私が知ってwget
いる唯一の制限オプションは、-Q
クォータの切り替えです。ただし、個別にではなく、ダウンロードしたすべてのファイルを組み合わせた制限の後で停止するため、これは希望どおりではありません。manページで-Q
説明されているように、スイッチを使用して各リンクを個別にパイプで接続しても機能しません。
使用している環境はわかりませんが、クローラーはmax-length-bytesのファイルサイズ制限をサポートしており、Javaプラットフォームで実行されます。
ユーザーマニュアルから:
- 最大長バイト
ドキュメントごとにダウンロードする最大バイト数。この制限に達すると、ファイルを切り捨てます。
デフォルトでは、この値は非常に大きな値(エクサバイトの範囲)に設定されており、実際には決して到達しません。
これはサードパーティのパッチの助けを借りて可能です:http : //yurichev.com/wget.html