分词是什么原理？比较著名的是 jieba 分词，不过操作系统其实有内置分词功能

2023-04-08 09:04:44 +08:00
 zhengzhongzhao
1680 次点击
所在节点    问与答
7 条回复
LaurelHarmon
2023-04-08 09:28:24 +08:00
这个一搜不就有好多资料，隐马尔可夫，条件随机场
dji38838c
2023-04-08 09:34:16 +08:00
@LaurelHarmon ta 期待的答案是没有复杂的数学的
yangzhezjgs
2023-04-08 11:15:15 +08:00
想看简单科普的话，可以去看吴军老师的《数学之美》，比较通俗的写了很多 NLP 和人工智能技术的发展和由来
xiaowowo
2023-04-08 11:33:06 +08:00
中文分词首先是要有词库的。
AngryPanda
2023-04-08 17:13:42 +08:00
以后可以尝试 ChatGPT 分词语
zhengzhongzhao
2023-04-11 15:14:27 +08:00
@yangzhezjgs ～～～
zhengzhongzhao
2023-04-11 15:14:41 +08:00
@LaurelHarmon 隐马尔可夫，条件随机场 好牛逼的名字

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/930737

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX