python爬虫乱码，爬虫编码问题

求Python大佬解决爬虫乱码

1、遇到的中文乱码问题1 简单的开始使用requests来拔取网站内容十分方便，一个最简单的代码段只需要2-3行代码就行。

2、http：//python.jobbole.com/85482/ 同时，对于网页的中文乱码，建立使用requests模块代替urllib\urllib2 requests的content方法，对中文编码，支持比较好，基本不会出现乱码。

3、这个问题主要是编码问题，一般需要检查系统设置、ide设置、python代码里的编码，一致改成utf8一般就没问题。

4、第一种是，通过浏览器打开你写的html之后，找到浏览器中的文字编码修改，将编码改为Unicode编码，即可修复。

5、执行python脚本出现乱码的解决方法：首先把中文解码为unicode，具体方法如：【decode(utf-8)】；然后再转化为gbk即可，具体方法如：【encode(gbk)】。

相关问答

Q1: 我在用python爬虫,代码没错,却会报错?

这种问题如果代码没写错的话，估计是网站做了反爬处理，如果说是反爬的话你可以用python里面的urllib2模块试试看，这是一个进阶爬虫模块。

错误：httplib.BadStatusLine：这个错误，一般是服务器返回数据为空导致的。

你好！你的错误原因在于html页面获取到的img标签src属性中的链接，可能是因为src中的url格式是这样的：这样获取到的链接都没有带上协议：http或者https。而导致程序抛出ValueError的错误异常。

Q2: 我在写一个python的网络爬虫,写入记事本的内容都是乱码如何使写入的数...

程序开头：！/usr/bin/env python# -*- coding：utf8 -*-import urllibimport urllib2import stringimport reimport systype0 = sys.getfilesystemencoding() #解决中文乱码问题 后面做抓取程序的时候全部加上decode和encode。

第一种是，通过浏览器打开你写的html之后，找到浏览器中的文字编码修改，将编码改为Unicode编码，即可修复。

抓的不是乱码，只是你打印出来编程乱码了，需要进行字符编码转换，一般就是gbk或者utf-8之前转就可以。

Python的作者有意的设计限制性很强的语法，使得不好的编程习惯(例如if语句的下一行不向右缩进)都不能通过编译。其中很重要的一项就是Python的缩进规则。

Q3: 执行python脚本出现乱码怎么解决

解决方法：直接使用 u是 形式，指明以unicode编码，解码方式会以顶部 #coding定义的编码方式，如果不写，以操作系统当前编码方法，建议写上#coding，因为要让操作系统编码和源文件编码经常会不一样。

解决方法：依次选择Edit-Preferences -Debugger -I/O，将其中的Encoding相关编码都改为UTF-8即可。更多python知识请关注python视频教程。

import sys sys.getdefaultencoding()ascii解决方法：在IDLE中执行的时候 去掉字符串前面的u字符，也不要加#coding这一行。先import sys，然后reload(sys)，再使用sys.setdefaultencoding(utf-8)。

打开脚本文件，将脚本文件的编码 设置成 ANSI，保存脚本，在 IDLE 中运行，查看结果正常；-*- coding： utf-8 -*- 这是一个注释的练习 print 这是我的第一个学习练习。Python 2测试结果，中文显示正常。

python爬虫乱码的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于爬虫编码问题、python爬虫乱码的信息别忘了在本站进行查找喔。