cURLを使用したサイトスクレイピングは「合法」ですか？[閉まっている]

最近、私はcURLを試していましたが、多くの可能性があることがわかりました。オンラインの曲を再生する音楽サイトをクロールする小さなスクリプトを作成しました。私の実験の途中で、曲のソースもクロールできることがわかりました。（そのサイトはダウンロードを提供していません）。

知っておくべきこと..サイトをクロールするのは完全に合法ですか？私が使用することを意味しhttp and port '80'、

市場にはダウンロードマネージャーがありません。ほとんどすべてのサイトからダウンロードできます。これらはすべて有効で合法です。

あなたの質問に対する答えはまさにイエスです。唯一の例外は、cURLが静的にリンクされたSSLサポートを使用して構築された場合、または米国から敵対的と見なされる数カ国の1つに輸出している場合、国の暗号化です。

一般に、サイトの公開されているWebページをスクレイピングすることも合法です。ブラウザに表示される可能性のあるすべてのページをそれぞれ1つずつダウンロードすれば、問題は発生しません。他の用途で問題が発生し始めた場合、サービス拒否攻撃と見なされる可能性があります。また、サイトの利用規約を確認する必要があるかもしれませんが、それをダウンロードして表示するので、大きな違いはありません（せいぜい微妙な技術です）。

ただし、音楽のダウンロードはそれだけです。Limewire、uTorrent、Megaupload、Flashget、またはcURLを使用するかどうかは関係ありませんが、音楽をダウンロードしています。アーティスト/レコードレーベルがそう言っている場合、ライセンスを所有している場合、または一般的に法的に許可されている場合、それは合法です。

したがって、cURLは完全に合法です。しかし、他のものと同様に、あなたがそれで何をするかはそうでないかもしれません。

IMDB.comは、利用規約の一部としてサイトでこのようなスクレーパーの使用を明示的に禁止しています。

ここには担当者がいないため、回答についてコメントすることはできませんが、いくつかの回答は、ウェブサイトの利用規約によっては合法ではない可能性があると述べています。そして、これは微妙な技術ですが、それが事実である場合、それはまだ合法ですが、契約違反または著作権違反で著作権侵害で訴えられる可能性があります（ただし、著作権違反も犯罪的に違法になる可能性があります）。しかし、一般的に、ウェブサイトのTOSがあなたが何かをすることができないと言うからといって、彼らがあなたにそれをすることを禁止する法的権限を持っていることを意味しません。

一般に、それをどうするか、それをどのように取得するかが重要です。IE、CDをコピーできますが、そのCDで何をしましたか？誰かにそれを売ったか（違法）、または傷のないコピーを得るために古いCDの上の棚に置くだけでした（合法）。同様に、あなたが完全に音楽を所有している場合でも、他人が使用するためではなく、自分で使用するためだけにコピーする権利しかありません。

ここに質問があります。一般に、インターネットに関して言えば、それを公開する権利を持つ誰かによって「公開」され、自由に使用できないという規定がない場合（つまり、TOS）、通常は公正なゲームと見なされます非営利的な方法で使用すること。しかし、コンテンツがWebページの「可視」部分の一部ではなく、取得/アクセスするためにソーススクレイピングとフォルダーサーフィンが必要な場合はどうでしょう。ただし、「パブリック」ネットワーク上にあり、安全でない手段でアクセスできます。それは、ドアを開けたままにしているので、誰かの家を奪うことができると主張するようなものです。ページにリンクがない場合、コンテンツが「公開」されていないと主張できます。

しかし、それはおそらく、何も気にしないことです。もしあなたが何かおかしなことをしていない場合、または他の仕事から利益を得ようとする場合、通常、スクレイプを調達しても誰も気にしません。