PythonでのCURLの代替


114

PHPで使用するcURL呼び出しがあります。

curl -i -H 'Accept:application / xml' -u login:key " https://app.streamsend.com/emails "

Pythonで同じことをする方法が必要です。PythonのcURLに代わるものはありますか?私はurllibを知っていますが、私はPythonの初心者であり、それを使用する方法がわかりません。


2
あなたはpycurl
ghostdog74

2
urllib2は、この種の作業に広く使用されているパッケージです。
Saurav


3
上記は、requestsPythonでシンプルなhttpを実行するための優れたライブラリへのリンクです(easy_installまたはPyPiのpipを使用してインストールできます)。名前/ URLは少し混乱している-最初に私にはほとんどこれが良いためウィッシュリスト要求だと思ったurllib2代わりに、requestsニシキヘビのライブラリを使用することは非常に直感的で使いやすいですsudo easy_install requestssudo pip install requests
ジンボブ博士、2012

回答:


68
import urllib2

manager = urllib2.HTTPPasswordMgrWithDefaultRealm()
manager.add_password(None, 'https://app.streamsend.com/emails', 'login', 'key')
handler = urllib2.HTTPBasicAuthHandler(manager)

director = urllib2.OpenerDirector()
director.add_handler(handler)

req = urllib2.Request('https://app.streamsend.com/emails', headers = {'Accept' : 'application/xml'})

result = director.open(req)
# result.read() will contain the data
# result.info() will contain the HTTP headers

# To get say the content-length header
length = result.info()['Content-Length']

代わりにurllib2を使用したcURL呼び出し。完全にテストされていません。


4
右下の解答とこれを比較し、Pythonは過去4年間で進行しているどのくらい見るためにそれのnice
Raziシャバン

133

リクエスト:HTTP for Humans」ユーザーガイドで説明されているHTTPリクエストを使用できます。


2
リクエストは最新かつ最高です!それは不器用なurllib2を吸って燃やします、リクエストがPython着信3.xバージョンの標準HTTPクライアントになればいいのですが
Phyo Arkar Lwin

1
リクエストの使用に切り替えたとき、urllib2を直接使用することに振り返ることはありませんでした。組み込みのJSONデコードも便利です。適切なcontent-typeが設定されている場合は、jsonを使用して本文を手動でロードする必要はありません。
Thomas Farvour 2013

リクエストはとても簡単です。数分でカスタム認証スキームを作成することもできました。urllib2は非常に迷惑です。
Doug

35

以下は、GitHubのAPIに対して基本認証を行うurllib2を使用した簡単な例です。

import urllib2

u='username'
p='userpass'
url='https://api.github.com/users/username'

# simple wrapper function to encode the username & pass
def encodeUserData(user, password):
    return "Basic " + (user + ":" + password).encode("base64").rstrip()

# create the request object and set some headers
req = urllib2.Request(url)
req.add_header('Accept', 'application/json')
req.add_header("Content-type", "application/x-www-form-urlencoded")
req.add_header('Authorization', encodeUserData(u, p))
# make the request and print the results
res = urllib2.urlopen(req)
print res.read()

さらに、これをスクリプトでラップし、ターミナルから実行すると、応答文字列を 'mjson.tool'にパイプして、きれいに印刷できるようになります。

>> basicAuth.py | python -mjson.tool

最後に注意すべきことは、urllib2はGETおよびPOSTリクエストのみをサポートすることです。
DELETE、PUTなどの他のHTTP動詞を使用する必要がある場合は、PYCURLを確認することをお勧めします。


なぜこれが投票されたのですか?おそらくあなたがPycURL:Dの代わりにPYCURLを書いたためでしょう
Bhargav Rao

20

コマンドを使用してそのようにcurlを呼び出すだけの場合、Pythonでを使用して同じことを行うことができますsubprocess。例:

subprocess.call(['curl', '-i', '-H', '"Accept: application/xml"', '-u', 'login:key', '"https://app.streamsend.com/emails"'])

または、PHPのようなより構造化されたAPIとしてそれを使用したい場合は、PycURLを試すことができます。


いいえ。cURL呼び出しはプログラムの一部です。上記のcurl呼び出しで行われているのとまったく同じことを行うコードを投稿できれば、すばらしいことです。
Gaurav Sharma

あなたの質問に基づいてサブプロセスを使用することによって私が意味したことの例を追加しましたが、PycURLのようなものを探していると思います。
unholysampler

私はこれが古いことを知っていますが、私の意見では、PycURLはcURLのほとんどの使用に対してかなり低いレベルです。cURLのPHP実装でさえ、かなり低レベルです。
Thomas Farvour 2013

cmdから「python」を呼び出した後、「name error、name subprocess not defined」と表示され、Python envになりました。
Timo

@ティモはしましたかimport subprocess?python repl環境はpythonファイルのようなもので、他のモジュールをインポートする必要があります。
unholysampler 2014年

13
import requests

url = 'https://example.tld/'
auth = ('username', 'password')

r = requests.get(url, auth=auth)
print r.content

これは私が手に入れることができた最も簡単なものです。


これが最も簡単な答えです。urllib2過度に複雑です。
not2qubit 2018

7

いくつかの例、そのためにurllibを使用する方法と、いくつかの砂糖の構文。リクエストやその他のライブラリについては知っていますが、urllibはpythonの標準ライブラリであり、個別にインストールする必要はありません。

Python 2/3互換。

import sys
if sys.version_info.major == 3:
  from urllib.request import HTTPPasswordMgrWithDefaultRealm, HTTPBasicAuthHandler, Request, build_opener
  from urllib.parse import urlencode
else:
  from urllib2 import HTTPPasswordMgrWithDefaultRealm, HTTPBasicAuthHandler, Request, build_opener
  from urllib import urlencode


def curl(url, params=None, auth=None, req_type="GET", data=None, headers=None):
  post_req = ["POST", "PUT"]
  get_req = ["GET", "DELETE"]

  if params is not None:
    url += "?" + urlencode(params)

  if req_type not in post_req + get_req:
    raise IOError("Wrong request type \"%s\" passed" % req_type)

  _headers = {}
  handler_chain = []

  if auth is not None:
    manager = HTTPPasswordMgrWithDefaultRealm()
    manager.add_password(None, url, auth["user"], auth["pass"])
    handler_chain.append(HTTPBasicAuthHandler(manager))

  if req_type in post_req and data is not None:
    _headers["Content-Length"] = len(data)

  if headers is not None:
    _headers.update(headers)

  director = build_opener(*handler_chain)

  if req_type in post_req:
    if sys.version_info.major == 3:
      _data = bytes(data, encoding='utf8')
    else:
      _data = bytes(data)

    req = Request(url, headers=_headers, data=_data)
  else:
    req = Request(url, headers=_headers)

  req.get_method = lambda: req_type
  result = director.open(req)

  return {
    "httpcode": result.code,
    "headers": result.info(),
    "content": result.read()
  }


"""
Usage example:
"""

Post data:
  curl("http://127.0.0.1/", req_type="POST", data='cascac')

Pass arguments (http://127.0.0.1/?q=show):
  curl("http://127.0.0.1/", params={'q': 'show'}, req_type="POST", data='cascac')

HTTP Authorization:
  curl("http://127.0.0.1/secure_data.txt", auth={"user": "username", "pass": "password"})

機能は完全ではなく、おそらく理想的ではありませんが、使用するための基本的な表現と概念を示しています。追加のものは好みによって追加または変更できます。

12/08更新

これはライブ更新されたソースへのGitHubリンクです。現在サポートしています:

  • 認可

  • CRUD互換

  • 自動文字セット検出

  • 自動エンコード(圧縮)検出


4

探しているコマンドラインから上記のすべてを実行している場合は、HTTPieをお勧めします。これは素晴らしいcURLの代替であり、使用(およびカスタマイズ)が非常に簡単便利です。

以下は、GitHubからの(簡潔で正確な)説明です。

HTTPie(aych-tee-tee-pieと発音)は、コマンドラインHTTPクライアントです。その目標は、CLIとWebサービスとの対話を可能な限り人間にやさしいものにすることです。

シンプルで自然な構文を使用して任意のHTTPリクエストを送信できるシンプルなhttpコマンドを提供し、カラー出力を表示します。HTTPieは、テスト、デバッグ、および一般にHTTPサーバーとの対話に使用できます。


認証に関するドキュメントには、問題を解決するための十分な指針が示されているはずです。もちろん、上記の答えはすべて正確でもあり、同じタスクを実行するためのさまざまな方法を提供します。


Stack Overflowから離れる必要がないように、簡単に説明すると次のとおりです。

Basic auth:

$ http -a username:password example.org
Digest auth:

$ http --auth-type=digest -a username:password example.org
With password prompt:

$ http -a username example.org


たぶんまったく理解できなかったかもしれませんが、それはPythonモジュールですか?私はそれがシェル/ CLIツールだと思います、そして私は失望しました: '(とても使いやすいようでした
Alex

@Alex-Pythonモジュールです。GithubのREADME(github.com/jkbrzt/httpie)には、必要なものがすべて含まれています。
2016年
弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.