python utf-8报错_python处理一些乱码的中文文本时decode('utf-8')报错的处理_weixin_39801158的博客-程序员秘密

技术标签： python utf-8报错

用python写脚本时，遇到处理中文(乱码的中文)时，用decode('utf-8')会发现始终会报错

>>> txt_from = open('/home/love/ex130705.log')

>>> txt_from_iter= iter(txt_from)

>>> txt_proc = txt_from_iter.next().decode('utf-8', 'ignore')

Traceback (most recent call last):

File "/tmp/py4049kjX", line 41, in

txt_proc = txt_from_iter.next().decode('utf-8')

File "/usr/lib/python2.7/encodings/utf_8.py", line 16, in decode

return codecs.utf_8_decode(input, errors, True)

UnicodeDecodeError: 'utf8' codec can't decode bytes in position 84-85: invalid continuation byte

欲处理的原文件中部分显示为乱码：

2013-07-05 04:20:10 192.168.1.5 GET /Portals/0/鏁欒偛淇℃伅鏂囦欢澶校园 80 - 25.XXX.10.99 Mozilla/4.0+(compatible;+MSIE+8.0;+Windows+NT+5.1;+Trident/4.0;+Alexa+Toolbar)

本文链接：https://blog.csdn.net/weixin_39801158/article/details/110696370

原作者删帖不实内容删帖广告或垃圾文章投诉

智能推荐

关于pv操作的理解_pv操作中p和v各代表什么_qq_40108183的博客-程序员秘密

在软考考试中，关于操作系统的知识有一个考点是pv操作，同时也是一个考点，现在我给大家略微谈一下我对这个的理解吧首先先弄清楚pv操作的含义，pv操作是实现进程同步和互斥的常用方法，pv操作是低级通信原语，在执行期间不可分割，其中，p操作表示申请一个资源、v操作表示释放一个资源p操作定义：s:=s-1，若s>=0,则执行p操作的进程继续执行；否则，若sv操作定义：s:=s-1,若s>0,则

二叉树的三种遍历方式解析_遍历二叉树csdn_Happme1的博客-程序员秘密

小白一枚，初看数据结构，一直不是非常理解树的三种遍历方式，直到看了这篇大佬的总结，非常清晰易懂博客链接：https://blog.csdn.net/soundwave_/article/details/53120766二叉树的遍历分为以下三种：先序遍历：遍历顺序规则为【根左右】中序遍历：遍历顺序规则为【左根右】后序遍历：遍历顺序规则为【左右根】什么是【根左右】？就是先遍...

hadoop生态圈_embarrassingly parallel large-scale_武晓兵的博客-程序员秘密

终于发现struts2 Annotation的用处了——验证_catstiger的博客-程序员秘密

struts2提供了annotation来代替配置文件，并且说:"It is great start."。我试用了Annoation风格的Action配置，感觉并不是很好用，尤其在比较复杂的Action中，反而不如XML直观明了。甚至，我不喜欢使用带有{}的简化配置，还是传统的方式更加一目了然。尤其是配置配置Action的时候需要在web.xml中注明packages，简直是...今天终于找到...

StructuredStreaming: A Declarative API for Real-Time_weixin_38440581的博客-程序员秘密

AbstractWith the ubiquity of real-time data,organizations need streaming systems that are scalable, easy to use, and easyto integrate into business applications. Structured Streaming is a newhigh-leve...

乘积尾零因式分解【蓝桥杯真题】（c++实现）_利用c++编写乘积尾零_河南-殷志强的博客-程序员秘密

上文链接：第几天修改版【蓝桥杯真题】（c++实现）乘积尾零如下的10行数据，每行有10个整数，请你求出它们的乘积的末尾有多少个零？5650 4542 3554 473 946 4114 3871 9073 90 43292758 7949 6113 5659 5245 7432 3051 4434 6704 35949937 1173 6866 3397 4759 7557 3070 ...