Chinaunix首页 | 论坛 | 博客
  • 博客访问: 497643
  • 博文数量: 74
  • 博客积分: 750
  • 博客等级: 军士长
  • 技术积分: 1453
  • 用 户 组: 普通用户
  • 注册时间: 2012-08-29 15:59
文章分类
文章存档

2014年(30)

2013年(8)

2012年(36)

分类: Python/Ruby

2014-07-16 13:55:01

这里我在编写程序的时候总结的一个重要的结论。
 

python报错UnicodeDecodeError: 'ascii' codec can't decode byte 0xe5 in position 4:
ordinal not in range
128

这样的编码问题。
首先是我们看一下自己的编码设置是否有问题,
#!/usr/bin/env python
#coding:utf-8
这里有很多形式
还可以这样:
#!usr/bin/python
#-*-coding:utf8 -*-
但是重要的是在设置这样的编码后系统的编码确实得到了我们要设置的字体编码形式即可。
Python 里面的编码和解码也就是 unicode 和 str 这两种形式的相互转化。编码是 unicode -> str,相反的,解码就 
是 str -> unicode。剩下的问题就是确定何时需要进行编码或者解码了.关于文件开头的"编码指示",
也就是 # -*- coding: -*- 这个语句。

Python 默认脚本文件都是 UTF-8 编码的,当文件中有非 UTF-8 编码范围内的字符的时候就要使用"编码指示"来修正.
关于 
sys.defaultencoding,这个在解码没有明确指明解码方式的时候使用。
#! /usr/bin/env python 
# -*- coding: utf-8 -*- 
s = '中文'  # 注意这里的 str 是 str 类型的,而不是 unicode 
s.encode('gb18030') 
这句代码将 s 重新编码为 gb18030 的格式,即进行 unicode -> str 的转换。因为 s 本身就是 str 类型的,因此 
Python 会自动的先将 s 解码为 unicode ,然后再编码成 gb18030。因为解码是python自动进行的,
我们没有指明解码方式,python 就会使用 
sys.defaultencoding 指明的方式来解码。
很多情况下 
sys.defaultencoding 是 ANSCII,如果 s 不是这个类型就会出错。
拿上面的情况来说,我的 
sys.defaultencoding 是 anscii,
而 s 的编码方式和文件的编码方式一致,是 utf8 的,所以出错了: 

UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 
0: ordinal not in range(128) 
对于这种情况,我们有两种方法来改正错误: 
一是明确的指示出 s 的编码方式 
#! /usr/bin/env python 
# -*- coding: utf-8 -*- 
s = '中文' 
s.decode('utf-8').encode('gb18030') 
二是更改 sys.defaultencoding 为文件的编码方式
import sys 
reload(sys)
sys.setdefaultencoding('utf-8')
在转码的过程中我们的decode作为中间转化形式。encode是将转的编码形式


阅读(1342) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~