解决Python3控制台输出的UnicodeEncodeError: ‘gbk‘ codec can‘t encode character ‘\u30fb‘ in position 0:问题

分手后的思念是犯贱 2022-12-06 04:30 183阅读 0赞

# 解决 Python3控制台输出的UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\\u30fb’ in position 0: illegal multibyte sequence问题 #

最近在GitHub找了一段大神写的机器学习的代码，但是大神是用的python2写的，而我本机是python3的环境，所以遇到了很多兼容问题。

出现问题的代码：

word_dic = load_word_file(train_file)
    value_list = sorted(word_dic.items(), key=lambda d: d[1], reverse=True)
    for word in value_list[:30000]:
    print(word[0])

错误信息：  
![错误信息描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxMTYxOTIz_size_16_color_FFFFFF_t_70_pic_center]  
在print(word\[0\])中报编码错误，但是我在load\_word\_file时，已经设置读取文件的编码为UTF-8了，为啥这里还显示是GBK编码的问题，于是我尝试找方法解决：

### 解决过程一 ###

一开始我以为是file Encoding的问题，于是我全部改成了UTF-8，很遗憾，还是没有解决。  
![设置文件编码][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxMTYxOTIz_size_16_color_FFFFFF_t_70_pic_center 1]

### 最终解决方案 ###

原来是print()函数自身有限制，不能完全打印所有的unicode字符。python输出的默认编码不是’utf-8’,加入下面代码改成’utf-8’就行了。

import io
    import sys
    sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') #改变标准输出的默认编码

到此，完美解决。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxMTYxOTIz_size_16_color_FFFFFF_t_70_pic_center]: /images/20221123/546c8f81e5e347e1b8d4a1c3f9b724ba.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxMTYxOTIz_size_16_color_FFFFFF_t_70_pic_center 1]: /images/20221123/594ac571021b42eb96df08d2883a4b3b.png