Python 下载今日头条的文章（不是爬虫），无法解码，问题到底出在哪儿？

[dididaren]

周末打算写一个脚本，功能是输入今日头条的文章链接，自动下载文章里的图片本地。

遇到坑了。

python requests 能成功获取到文章数据，用 charles 抓包也可以看到 requests.get 是成本获取到了文章数据，但是在本地解码的时候，无论是用 response.text,还是 response.content.decode，还是直接把 respons 接收到的数据以二进制写入文本，要么是乱码，要么是报错。（ charles 抓包里查看是正常的数据）

respose 解码时试过 gbk,utf-8,iso ； decode 参数试过 ignore, replace 也没用。

谷歌百度也搜不到可用的解决方法。

[maobukui]

地址，参数案例发一下看看

[imn1]

写到硬盘的文件试一下 zip 软件能否打开

[est]

目测 LZ 用的是 win98 + py2

[limuyan44]

你直接发代码吧，这样也好测试，不然帮个忙还得自己写代码，没抓过的人全靠猜。

[dididaren]

py3，已附代码

[Arrowing]

内容经过压缩编码(gzip，compress 等)了吧，解压一下，浏览器一般自动解压，爬取的需要自己解压。

[Ptu2sha]

accept-encoding: gzip, deflate, br 去掉

[dididaren]

@Arrowing 感谢

[dididaren]

@Ptu2sha 感谢

[fucUup]

Chrome/42.0 你是古董机

[omph]

运行环境：linux，locale 默认 utf8
代码输出正常。重定向存为 html 文件，打开正常

[vone]

6 楼正解，br 压缩的问题，requests 默认不能解析 br 压缩后的 Body 。

请求头的 accept-encoding 参数删掉 br 就可以了。