单词词干化和语义化

╰半橙微兮° 2022-09-14 09:47 133阅读 0赞

参考：[机器识文断字的秘密：人工智能如何理解语言][Link 1]

本文仅仅部分内容，更多知识在上方链接中！

### 词干化 ###

词干化是将一个词还原为词根的过程，比如去掉词缀和后缀。 这对于搜索引擎来说是非常有效的，因为它需要使用集群来得到更相关的结果。 使用词干，搜索引擎可以找到更多的匹配，因为单词有更广泛的含义，甚至可以处理拼写错误等问题。 当使用人工智能应用程序时，这可以帮助提高整体理解。

![watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBAZHJlYW1fdXBpbmc_size_17_color_FFFFFF_t_70_g_se_x_16][]

### 语义化 ###

语义化类似于词干化。 但是它并不是简单地删除词缀或前缀，而是专注于寻找相似的词根词。 一个例子是“better”，我们可以把它词元化为“good”。 只要意思基本不变，这个方法就能奏效。 在我们的例子中，两者大致相似，但是“good”有更清晰的含义。 语元化也可以提供更好的搜索或语言理解，特别是在翻译中。

![watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBAZHJlYW1fdXBpbmc_size_16_color_FFFFFF_t_70_g_se_x_16][]

自然语言处理系统要想有效地运用语义化，就必须理解词语的含义和语境。 换句话说，这个过程通常比词干化有更好的性能。 另一方面，这也意味着算法更加复杂，需要更强大的计算能力。

[Link 1]: https://baijiahao.baidu.com/s?id=1705774628992352290&wfr=spider&for=pc
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBAZHJlYW1fdXBpbmc_size_17_color_FFFFFF_t_70_g_se_x_16]: /images/20220828/50f7d18de7f24dedb8162d15cba46dfa.png
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBAZHJlYW1fdXBpbmc_size_16_color_FFFFFF_t_70_g_se_x_16]: /images/20220828/981b7dffb08f469a91fb32ea50e3d9fa.png

发表评论取消回复

表情：

评论列表（有 0 条评论，133人围观）

还没有评论，来说两句吧...

相关阅读

相关 HTML语义化

1、什么是HTML语义化？ <基本上都是围绕着几个主要的标签，像标题（H1~H6）、列表（li）、强调（strong em）等等> 　　根据内容的结构化（内容语义化），选择

水深无声/ 2022年09月23日 05:53/ 0 赞/ 206 阅读

相关单词词干化和语义化

参考：[机器识文断字的秘密：人工智能如何理解语言][Link 1] 本文仅仅部分内容，更多知识在上方链接中！词干化词干化是将一个词还原为词根的过程，比如去掉词缀和

╰半橙微兮°/ 2022年09月14日 09:47/ 0 赞/ 134 阅读

相关 html语义化

1、定义　　根据内容的结构化（内容语义化），选择合适的标签（代码语义化）便于开发者阅读和写出更优雅的代码的同时让浏览器的爬虫和机器很好地解析。通俗的说

素颜马尾好姑娘i/ 2022年08月19日 08:29/ 0 赞/ 239 阅读

相关 html 语义化

1，去掉或者丢失样式的时候能够让页面呈现出清晰的结构 2，有利于SEO：和搜索引擎建立良好沟通，有助于爬虫抓取更多的有效信息：爬虫依赖于标签来确定上下文和各个

布满荆棘的人生/ 2022年07月15日 08:43/ 0 赞/ 281 阅读

相关理解html语义化

1、什么是HTML语义化？ <基本上都是围绕着几个主要的标签，像标题（H1~H6）、列表（li）、强调（strong em）等等> 　　根据内容的结构化（内容语义化），

不念不忘少年蓝@/ 2022年07月12日 18:38/ 0 赞/ 253 阅读

相关 HTML语义化

1、什么是语义化根据内容的结构化（内容语义化），选择合适的标签（代码语义化）便于开发者阅读和写出更优雅的代码，同时让浏览器更好的解析。 2、为什么要语义化

Bertha 。/ 2022年06月02日 05:27/ 0 赞/ 243 阅读

相关 Web语义化

什么是Web语义化？如今互联网已经到了web3.0时代了，HTML语言在不断的进化并发挥着越来越重要的地位；而我们制作的网页也从当初的table表格嵌套发展到了

浅浅的花香味﹌/ 2022年05月10日 20:53/ 0 赞/ 169 阅读

相关 HTML5-语义化

距HTML5标准规范制定完成并公开发布已经有好些年了，面试时也少不了要问对HTML5语义化得理解。但是在实际运用时，真正使用HTML5标签来开发的似乎不是很多（ps：查看了几个

逃离我推掉我的手/ 2021年11月23日 11:40/ 0 赞/ 401 阅读

相关语义化版本-200

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][] [https://semver.org/lang/zh-

喜欢ヅ旅行/ 2021年09月20日 02:52/ 0 赞/ 286 阅读

相关标签语义化

> 使用正确的标签做正确的事，即使是源码也是有意义的，也是可读的。理解起来很简单，人眼能看到的某个标签长什么样，做什么用，但是阅读设备只能阅读源码结构，所以必须要让这个结构是有

我不是女神ヾ/ 2021年09月18日 23:30/ 0 赞/ 408 阅读