网页爬虫 - 关于python3.x 编写爬虫异常问题请各位大神帮忙!
问题描述
这段代码一直出现异常,但只要把导入的库稍加更改在python2.x中运行是没有问题的,请问大神问题出在哪?出现的异常也总变,小弟初学爬虫,请赐教!
import urllib.errorimport urllib.requestimport urllib.parseurl = ’http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&smartresult=ugc&sessionFrom=https://www.baidu.com/link HTTP/1.1’data = {}data[’type’]= ’AUTO’data[’i’] = ’I am fine !’data[’doctype’] = ’json’data[’xmlVersion’] = ’1.8’data[’keyfrom’] = ’fanyi.web’data[’ue’] = ’UTF-8’data[’action’] = ’FY_BY_CLICKBUTTON’data[’typoResult’] = ’true’head = {}head[’User-Agent’]= ’Mozilla/5.0 (Windows NT 6.1; WOW64; rv:52.0) Gecko/20100101 Firefox/52.0’ try: data = urllib.parse.urlencode(data).encode(’utf-8’) req = urllib.request.Request(url,data,head) response = urllib.request.urlopen(req) html = response.read().decode(’utf-8’) print(html)except urllib.error.HTTPError as e: print (’Error code : ’,e.code)except urllib.error.URLError as e: print (’The reason: ’,e.reason)
昨天是这样的:
今天运行就这样了:
问题解答
回答1:删掉url后面 HTTP/1.1,url后面加它干嘛。。
Python3不用解码和编码啦,还有些模块的用法不一样了,自己看一下Python3的文档吧
回答3:相关文章:
1. docker-compose 为何找不到配置文件?2. python的bs4如何筛选出h1标签中的内容3. angular.js - 通过数据中children的个数自动生成能点击展开的div4. css - 使用blur()滤镜为什么有透明的效果5. docker gitlab 如何git clone?6. android - 安卓做前端,PHP做后台服务器 有什么需要注意的?7. 前端 - css3 3d效果问题8. java - spring-data Jpa 不需要执行save 语句,Set字段就可以自动执行保存的方法?求解9. javascript - 移动端H5页面禁止缩放了,在浏览器上仍然可以缩放10. javascript - JS设置Video视频对象的currentTime时出现了问题,IE,Edge,火狐,都可以设置,反而chrom却...
