応答を得るWget 403

1時間でリクエストの制限があるAPIを使用しています。しかし、私のスクリプトは一度にすべてを行うため、403を取得するため、リクエストの約1/3を失います。

wgetの応答を確認する方法はありますか？403を取得して5分待って再試行する場合は？

そして、ここに私の（今のところ）テストコードがあります：

system ("wget \"http://test-link.com/403/\" -O  {$dir}/{$in_dir_counter}.xml");
$test = system ("wget \"http://test-link.com/403/\" -O  {$dir}/{$in_dir_counter}.xml");

echo "responsed - ".$test;      

両方が同じを返します。

そのための簡単なスクリプトを使用してはどうですか：

• 既に実行されていない限り、5分ごとにスクリプトを実行します。
• ローカルファイルの経過時間を確認してください。特定のしきい値よりも古い場合は、再度ダウンロードします。

そのため、すべてがスムーズに進んだとしても、ファイルが古くなっていなければ何も起こりません。ファイルが古く、ダウンロードに失敗した場合は、次の反復を再試行できます。

なぜこれをタグ付けしたのかphpわかりませんが、実際にPHPスクリプトを実行している場合、このアプローチはかなり簡単です（Webソケットが有効になっている場合）：

foreach($files as $file)
    if (@filemdate($local_path + $file) + $cache_duration < time())
        @copy($remote_path + $file, local_path + $file);

$remote_path確かにHTTPまたはFTP URLであることに注意してください。wgetを呼び出す必要はありません。これ@により、エラーメッセージが出力されなくなります。

これが不必要な待機を引き起こさないことを証明するには：

• ダウンロードするファイルが1000個あると仮定しますが、1時間あたり最大250個のファイルしかダウンロードできません。
• cache_duration24時間（24 * 60 * 60）など、すべてのファイルを取得できる保存時間に設定します。
• 上記のスクリプトを1時間に1回再実行します。
• 最初の反復では、最初の250ファイルが更新されます。他は失敗します。
• 2回目の反復では、最初の250ファイルがスキップされ（十分に新しいため）、次の250ファイルがダウンロードされます。
• 4回目の反復の後、1000個すべてのファイルが更新/ダウンロードされます。
• もちろん、5分などの短い間隔を設定できますが、これにより、より多くのリクエスト/トラフィックが作成されます（これが受け入れられるかどうかによって異なります）。

代替スクリプトのアイデア：

• ファイルをダウンロードしてみてください。
• 失敗した場合は、wgetの戻り値/終了コードに基づいて判断できます。その場合、5分間待ってから繰り返します。