requests.exceptions.ChunkedEncodingError: ('Connection broken: IncompleteRead(2048 bytes read)', IncompleteRead(2048 bytes read))
这个错误出现的时间不固定,有时几分钟就出现了 有时几个小时才出现
python requests python-爬虫 网页爬虫
典型的一个缓冲区的尺寸。实际上 IncompleteRead 是python原生库httplib的异常。
IncompleteRead
HTTP通道返回0字节,或者返回一定字节后卡住太正常了。如果返回数据的可靠性很重要,请注意设置合理的超时并捕获相关的错误,如有必要甚至可以考虑手工验证HTTP头数据的Content-Length字段。
Python requests 多线程抓取 出现HTTPConnectionPool Max ...
为什么python爬虫爬一号店时所抓取的网页不是按照我的地理位置来的?
python如何获取百度搜索结果的真实URL
python爬虫怎么在网易博客发表评论
python 爬虫爬取代理验证验证代理的速度?一直不能爬取,出现各种问题,求指导??
Python 爬虫调用 requests 如何设置代理(GoAgent/GoAgentX)?