Python解释器易于扩展,可以使用C或C++(或者其他可以通过C调用的语言)扩展新的功能和数据类型。 Python 也可用于可定制化软件中的扩展程序语言,语言流行指数的编译器Tiobe将Python加冕为最受欢迎的编程语言。在进行数据抓取任务中可以使用华科云HTTP,这样会提高数据抓取成功率。
#! -*- encoding:utf-8 -*-
import requests
# 要访问的目标页面
targetUrl = "http://"
# 服务器
proxyHost = ""
proxyPort = "39010"
# 代理隧道验证信息
proxyUser = "username"
proxyPass = "password"
proxyMeta = "http://%(user)s:%(pass)s@%(host)s:%(port)s" % {
"host" : proxyHost,
"port" : proxyPort,
"user" : proxyUser,
"pass" : proxyPass,
}
proxies = {
"http" : proxyMeta,
"https" : proxyMeta,
}
resp = requests.get(targetUrl, proxies=proxies)
print resp.status_code
print resp.text