为啥妹子给我发的 Excel 打开之后是乱码？

超、凢脫俗 2022-11-13 01:58 13阅读 0赞

![4e826ca02149728002ae33b8986e3f62.png][]

![7d1716765be0244f57fc93e993c4eef6.png][]

咳咳

人生的三大错觉之一

就是**她喜欢我**

![c6646b7ca3e4027158c5c9238ac571f5.png][]

为了解开粉丝的疑惑

让他面对现实

今天我就来给大家揭秘

乱码背后那些不为人知的事

![2d30bcd2c9da2690e95c78b04c66394c.png][]

首先

我们要意识到

『乱码』

本质上是**编码与解码的方式不一致**

![d8bed6a94fd88f54b2a7cc8deeeee313.png][]

举个例子

当用拼音的方式来解读英文

![2bf4fabfeac0cf13e14f152dbeae8b14.png][]

事实上

Excel 对中文的解析编码

默认是 **GBK**

![165db47526635973a9c5fe8161008959.png][]

所以

当有人把 **UTF-8** 编码的 Excel 文件发给你

Excel 默认会用 **GBK** 去解析

双击打开

出现一大坨乱码

其实是很正常滴

才不是有什么隐含信息呢

![9baa244f8317ba4fe2b43a5051cd955a.png][]

那么遇到这种问题该怎么解决呢？

![08bcf3d37192b6514c71d0c2dda979a9.png][]

知道了乱码产生的原理是

**读取的编码方式与写入时不一致**

那么解决办法就很简单了

(把读取的编码方式改为 UTF-8)

![3bc8da71bc99813d426aad7d9de0bcce.png][]

![775ae02eac68b9e316a027af32cfaf58.png][]

因为 Numbers 默认是 **UTF-8**

所以不会显示乱码

![cdfcb627b2105cdc73af878fe6ad111e.png][]

什么？你说就这？

作为程序员

当然还有更装逼的办法

当然还有更加极客的办法

(把文件转为 GBK)

iconv -f UTF-8 -t GB18030 test.csv > test2.csv

![43e43732e11ead65b45827df00b339bb.png][]

轻松搞定

![1198c568ceaaf2a7c7d88c0923d87859.png][]

既然讲到这了

那就再讲讲 **UTF-8** 到底是个什么东东

(非战斗人员可以撤离了)

![38e9e74887cea5c26c55200310ce2838.png][]

首先，我们都知道

计算机起源于美国

他们用二进制来存储数据

![f5fc81453243cd89fd63936f070e9804.png][]

每一个 0 或 1 称为**一位**

![d3e1e7beefa28e2ff76cc94076b10170.png][]

而八位就组成了一个**字节**

![3860c08867dba4b66f91a85f38131a12.png][]

每一位能标识两种状态

每个字节则能标识 2^8 = 256 种状态

那么这些状态有啥用呢？

![87a3849a8ea218ac89fc2050bfe3d05a.png][]

美国人把 **0 - 127** 这 128 个状态

都映射到各种字符上

包括**大小写英文字母、标点符号、数字**等

这就是常说的 **ASCII** 字符集

![7d3f0d12e5f11128f0d564e5fa6aeac2.png][]

后来

随着其他国家开始使用计算机

ASCII 里没有他们的字母

他们便利用起剩下的 128 - 255 位

这被称为 **ASCII 拓展字符集**

然而

事情并没有这么简单

等到中国人开始使用计算机时

已经没有多余的位置了

咋办呢？

![9fbe8ec4ba8028cc1484ae5276ee18ea.png][]

智慧的中国人民

毫不客气地去掉了127 位之后的编码

**用 2 个字节来编码一个汉字**

这样一来

7000 多常用汉字的编码问题就解决了

这就是 **GB2312 编码**

它是对 ASCII 的中文拓展

![bd0c7aaeb8ba804fbc6e7b4373fea041.png][]

但汉字实在太多了

GB2312 不够用了咋办呢

这个问题充钱(拓展)就能解决

![829efdf42fceec5e95b66a456cf9e2d1.png][]

这回拓展出了**GBK**

不仅包含 GB2312 所有内容

还包含了 20000 多个

新的汉字(含繁体字)

![08431e18efdd000af9659022ea7dd904.png][]

再后来少数民族也要用电脑了

GBK 又拓展成了 **GB18030**

这一系列汉字编码标准被通称为

**DBCS**

![cfd8029dbd6b6cd7d8e00206df84eab6.png][]

中国人的编码问题解决了

但日本、韩国各自的编码问题咋办呢？

他们也各自搞了一套自己的编码标准

结果就是

**谁也不支持谁**

![fbbb2a982565f34bbd3025c8b282c722.png][]

兼容性问题眼看着愈来愈严重

这可咋办呢？

这时

**Unicode**

闪亮登场

![df81857a82146c743341a09fd8659743.png][]

Unicode 的制定就是为了

将世界上所有的符号都纳入其中

每一个符号都给予一个独一无二的编码

如此一来就可以**解决乱码问题**

(虽然到现在并没有解决)

这就是字符集的发展过程

![aa4b74fe34a24ad554ec024abce2e78a.png][]

回到 UTF-8

它其实是 Unicode 字符集的一种编码方式

![84c8918e5fb0e7ef13487df1f9a62ee4.png][]

UTF-8 由

**肯·汤普逊**

和

**罗勃 · 派克**

发明

![a0e66ef6bb02831b352f2d6c022dbe8e.png][]

其中

**肯·汤普逊** 是名副其实的大佬

![73a758e6f89741a88c52f404bb821b1b.png][]

![cf58f989c2d665e94de459bdfaaf341c.png][]

听听

这是人话吗

![484b2566e27f5ad02759ddcb426da1c0.png][]

知道了 UTF-8 的来历

那么 UTF-8 具体是怎么编码的呢？

![a06a75aba8b292d01ae836a13c015fc5.png][]

UTF-8 作为一种可变长的编码方式

也就是说

**不同的字符占用的字节数不同**

2003年11月

UTF-8 被 **RFC 3629** 重新规范后

使用 1- 4个字节来进行编码

规则其实很简单

![058ab8463457ff466e9bef56ad749245.png][]

看不懂没关系

来看几个例子

![47516433b2ea691eb9b3553b32d611f6.png][]

![0afd47a0be5a2d394f755bd2a356bb39.png][]

按照不同的编码方式

同一句话被编码后的 01 字符串不同

(正如我们前面所说的 UTF-8 和 GBK)

![497480bf288439fb6d2983d4643168aa.png][]

是不是很简单

什么？

你说还没看懂？

![84b0ca6e5f3be3e7694085570f59ef89.png][]

![7d2fd784d069324c2fc1f72717eacc54.gif][]

················· END ·················

本文作者菜饼，鹅厂程序员，目前致力于用心创造有趣的文章，把技术与趣味相结合，博君一笑的同时，也能收获知识，岂不美哉？

[4e826ca02149728002ae33b8986e3f62.png]: /images/20221022/c7b7d56df70349a9a7c9610b113d1425.png
[7d1716765be0244f57fc93e993c4eef6.png]: /images/20221022/af7dffdadd194683bb6e0a3e527905a8.png
[c6646b7ca3e4027158c5c9238ac571f5.png]: /images/20221022/87aeab7b171b4ec1a64df71c1c40e3b3.png
[2d30bcd2c9da2690e95c78b04c66394c.png]: /images/20221022/aef2efbb3e79413588331bf64335b1d7.png
[d8bed6a94fd88f54b2a7cc8deeeee313.png]: /images/20221022/3c8aefc53df24eadba68dab95fdbd260.png
[2bf4fabfeac0cf13e14f152dbeae8b14.png]: /images/20221022/52f90b9d12cf45ee8c0dde7d5f055d0c.png
[165db47526635973a9c5fe8161008959.png]: /images/20221022/9925636b695e40c09a0bf9a08f00a197.png
[9baa244f8317ba4fe2b43a5051cd955a.png]: /images/20221022/513eb7785df342179a125a4a22e0e105.png
[08bcf3d37192b6514c71d0c2dda979a9.png]: /images/20221022/64242d315319483190ad299dad84ed33.png
[3bc8da71bc99813d426aad7d9de0bcce.png]: /images/20221022/3fe69f3425ab416a8062ad780e993fff.png
[775ae02eac68b9e316a027af32cfaf58.png]: /images/20221022/5859576c75474b909528dd6aab6c33b9.png
[cdfcb627b2105cdc73af878fe6ad111e.png]: /images/20221022/362a8613012546ae929da3e911d94fbe.png
[43e43732e11ead65b45827df00b339bb.png]: /images/20221022/cae7d753ba5046d0a8ecbf505d110627.png
[1198c568ceaaf2a7c7d88c0923d87859.png]: /images/20221022/eaa06e381f9a4afd8dca551b7802bc92.png
[38e9e74887cea5c26c55200310ce2838.png]: /images/20221022/97901339f6404cc1a4acbf0a0371e836.png
[f5fc81453243cd89fd63936f070e9804.png]: /images/20221022/163928b2ab73416187d37ac2b7a3e61a.png
[d3e1e7beefa28e2ff76cc94076b10170.png]: /images/20221022/71dde73c65c9482a8f1a0799de7520c5.png
[3860c08867dba4b66f91a85f38131a12.png]: /images/20221022/ec140de4d4ec4bf8b096d3036f320f5e.png
[87a3849a8ea218ac89fc2050bfe3d05a.png]: /images/20221022/0ef166545c5f43e080cf8baa09ed5b19.png
[7d3f0d12e5f11128f0d564e5fa6aeac2.png]: /images/20221022/b4af9e0c50754a0a9ce5cdcb46553eb7.png
[9fbe8ec4ba8028cc1484ae5276ee18ea.png]: /images/20221022/5b2d01907c7f49eca23e471c1b0e2ae8.png
[bd0c7aaeb8ba804fbc6e7b4373fea041.png]: /images/20221022/fb81cf363f354f03a14601d94e44337d.png
[829efdf42fceec5e95b66a456cf9e2d1.png]: /images/20221022/2966eb47e8d444a390774cf8a9df0b88.png
[08431e18efdd000af9659022ea7dd904.png]: /images/20221022/9aeb2cadfc1643b8a037c32bbde60164.png
[cfd8029dbd6b6cd7d8e00206df84eab6.png]: /images/20221022/175c14f015244bf299060b52259dc510.png
[fbbb2a982565f34bbd3025c8b282c722.png]: /images/20221022/84b2a507d4cc426ba55d261c710dd8c3.png
[df81857a82146c743341a09fd8659743.png]: /images/20221022/287a7e2c1f824aaba25d8ef89e3916b7.png
[aa4b74fe34a24ad554ec024abce2e78a.png]: /images/20221022/7fd14e462e5442bf82fb68e4e9de891d.png
[84c8918e5fb0e7ef13487df1f9a62ee4.png]: /images/20221022/f5c78e32878c4e398c13444e82d66e86.png
[a0e66ef6bb02831b352f2d6c022dbe8e.png]: /images/20221022/b6f04c37b6bf4d5782835c1966162642.png
[73a758e6f89741a88c52f404bb821b1b.png]: /images/20221022/511844b8571f4f089724ac12e0947baa.png
[cf58f989c2d665e94de459bdfaaf341c.png]: /images/20221022/fc0039de2c60499d9e88597b692db927.png
[484b2566e27f5ad02759ddcb426da1c0.png]: /images/20221022/827c86a9ec1042dca522f813591cb9ef.png
[a06a75aba8b292d01ae836a13c015fc5.png]: /images/20221022/89742af8dea5484f8f5e93c710058a3a.png
[058ab8463457ff466e9bef56ad749245.png]: /images/20221022/a6f0fd5f99484741a8cb0130d83b15a0.png
[47516433b2ea691eb9b3553b32d611f6.png]: /images/20221022/84c8cd7cca91408ebb507b19f0712e1b.png
[0afd47a0be5a2d394f755bd2a356bb39.png]: /images/20221022/f67cb96aa96d4f15ba9bae59b64d5aa4.png
[497480bf288439fb6d2983d4643168aa.png]: /images/20221022/24298caaeac848feaf6bfd982eb2a85a.png
[84b0ca6e5f3be3e7694085570f59ef89.png]: /images/20221022/57518e5ec16f425c9760e48c5b067d50.png
[7d2fd784d069324c2fc1f72717eacc54.gif]: /images/20221022/ec0414404d25425ca6ef113b03625ce0.png