推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
这是一个创建于 2581 天前的主题，其中的信息可能已经有所发展或是发生改变。
improt urllib3
url = 抓取地址
http = urllib3.PoolManager()
result = http.request('GET', url)
r = result.data
这读取回来的数据里汉字全都是‘\xe5\xad\xa6 ’类似这样的数据，一旦用.decode('utf8')解码的话，就会少一部分数据，而少的那一部分数据正是我要的，恐怖不，这该咋整，萌新求助！求带飞
url = 抓取地址
http = urllib3.PoolManager()
result = http.request('GET', url)
r = result.data
这读取回来的数据里汉字全都是‘\xe5\xad\xa6 ’类似这样的数据，一旦用.decode('utf8')解码的话，就会少一部分数据，而少的那一部分数据正是我要的，恐怖不，这该咋整，萌新求助！求带飞
 |
1
zhengjian 2017-12-07 02:14:14 +08:00 via iPhone  1
|
 |
2
Carseason 2017-12-07 03:02:06 +08:00 via iPhone
你需要框架来帮助奴解析一些 js，还有记得使用 head 头
|
 |
3
ioven 2017-12-07 07:28:16 +08:00
import requests
r = requests.get(url) print(r.text) |
 |
4
lhx2008 2017-12-07 08:00:04 +08:00 via Android
小白用 request
|
 |
5
likuku 2017-12-07 09:01:58 +08:00
小白用 request +10086
|
|
6
likuku 2017-12-07 09:02:32 +08:00
额，是 requests
|
 |
7
Number13 OP 然鹅，用 requests 介个还是丢数据，就是我要的数据用 php file_get_contents()就能拿到，但 python 拿回字节对象时，解码后就没了……这我就……
|
|
8
Number13 OP 再次尝试 接：
r = result.data.decode('utf-8') 这里回显的数据仍然是没有想要的部分，但是字节对象中却是有 大胆的先用正则取一下解码后的数据，居然取到了(ΩДΩ) 很是神奇啊，同样的代码，用 python 的 shell 跑一下，居然可以回显出想要的数据，很是神奇 |
 |
9
sosilver 2017-12-07 10:57:52 +08:00 via Android
返回的网页用的什么编码方式？
|
|
11
Number13 OP 炸了，找到症结所在，pycharm 对一些转码可能有缺陷，在控制台这样输出 print('-------测试数据---------\r\t') 这文字就没了…………好了就此结贴
|
Select Language