Python代码如何像curl一样工作

Question

在curl中，我这样做：

curl -u email:password http://api.foursquare.com/v1/venue.json?vid=2393749

我该如何在Python中完成同样的事情？

- diegueus9

---

请参考 Python urllib2 Basic Auth Problem ，该问题涉及在 Python 中使用 Basic Auth 与 Foursquare 进行通信。 - Matthew Flaschen

Answer 1

这是使用pycurl的等效代码：

import pycurl
from StringIO import StringIO

response_buffer = StringIO()
curl = pycurl.Curl()

curl.setopt(curl.URL, "http://api.foursquare.com/v1/venue.json?vid=2393749")

curl.setopt(curl.USERPWD, '%s:%s' % ('youruser', 'yourpassword'))

curl.setopt(curl.WRITEFUNCTION, response_buffer.write)

curl.perform()
curl.close()

response_value = response_buffer.getvalue()

- Sam Dolan

Answer 2

问题可能在于Python库根据HTTP标准首先发送未经身份验证的请求，然后只有在收到401重试响应后才发送正确的凭据。如果Foursquare服务器不执行“完全标准的身份验证”，则这些库将无法正常工作。请尝试使用标题进行身份验证。此段引自Python urllib2 Basic Auth Problem。

import urllib2
import base64

req = urllib2.Request('http://api.foursquare.com/v1/venue.json?vid=%s' % self.venue_id)
req.add_header('Authorization: Basic ',base64.b64encode('email:password'))
res = urllib2.urlopen(req)

- diegueus9

Answer 3

我更喜欢通过子进程运行命令行curl。这样可以避免Python、pycurl和libcurl之间的潜在版本匹配问题。观察到pycurl已经两年没有更新，并且只支持Python 2.5，这让我感到担忧。 -- John

   import subprocess

   def curl(*args):
        curl_path = '/usr/bin/curl'
        curl_list = [curl_path]
        for arg in args:
            curl_list.append(arg)
        curl_result = subprocess.Popen(
                     curl_list,
                     stderr=subprocess.PIPE,
                     stdout=subprocess.PIPE).communicate()[0]
        return curl_result

    answer = curl('-u', 'email:password', 'http://api.foursquare.com/v1/venue.json?vid=2393749')

- mjhm

Answer 4

如果使用 human_curl，您可以编写一些代码：

导入 human_curl 作为 hurl。

r = hurl.get('http://api.foursquare.com/v1/venue.json?vid=2393749', auth=('email','password'))

r.content中的Json数据

- Alexandr

Answer 5

请使用pycurl。

• http://pycurl.sourceforge.net/

在SO上有一个关于教程的讨论

• 有哪些好的pycURL学习教程？

一个典型的例子：

import sys
import pycurl

class ContentCallback:
        def __init__(self):
                self.contents = ''

        def content_callback(self, buf):
                self.contents = self.contents + buf

t = ContentCallback()
curlObj = pycurl.Curl()
curlObj.setopt(curlObj.URL, 'http://www.google.com')
curlObj.setopt(curlObj.WRITEFUNCTION, t.content_callback)
curlObj.perform()
curlObj.close()
print t.contents

- pyfunc

---

你可以使用 pycurl，但并非必须。完全可以使用标准库。请参见我上面链接的问题。 - Matthew Flaschen