美文网首页
python3.5下的一个编码问题

python3.5下的一个编码问题

作者: 种个太阳砸死你 | 来源:发表于2016-11-27 16:15 被阅读74次

今天学习python,用其做了一个统计单词频数的小例子。

#coding=utf-8
import string
path = 'D:/Walden.txt'with
open(path,'r') as text:
    words = [raw_words.strip(string.punctuation).lower() for raw_words in text.read().split()]
    words_index = set(words)
    counts_dist = {index : words.count(index) for index in words_index}
file = open('D:/wordCount.txt','w')
for word in sorted(counts_dist,key=lambda x:counts_dist[x],reverse=True):
    file.write('{}-{} times'.format(word,counts_dist[word]))
file.close()
print('done')

运行时,报了一个编码错误:

UnicodeEncodeError: 'gbk' codec can't encode character '\ufeff' in position 0: illegal multibyte sequence

查了一下,发现是因为遇到了非法字符,因此在转码的过程中出现了异常,修改默认的编码为utf-8其实就可以了,然后开始查如何设置编码,最后发现如下设置:

open(path,'r','utf-8')

即可

相关文章

网友评论

      本文标题:python3.5下的一个编码问题

      本文链接:https://www.haomeiwen.com/subject/sblnpttx.html