游戏开发论坛

 找回密码
 立即注册
搜索
查看: 8390|回复: 2

浅谈中文分词

[复制链接]

1万

主题

1万

帖子

2万

积分

管理员

中级会员

Rank: 9Rank: 9Rank: 9

积分
20515
发表于 2015-2-10 12:48:26 | 显示全部楼层 |阅读模式

作者:lpy   aglab@foxmail.com

中文分词就是把一句话拆分成多个词,应用于搜索引擎等领域。游戏编程中该技术可用于匹配玩家所输入的内容,或者作为客服机器人中的一部分。

普通的分词方法是字典法,但有局限性。

幻灯片3.jpg

幻灯片4.jpg

现代大家都用统计学模型做中文分词

幻灯片5.jpg

幻灯片6.jpg

幻灯片7.jpg

幻灯片8.jpg

幻灯片9.jpg

幻灯片10.jpg
综上,便可完美的把句子拆分成多个不同的关键词。

0

主题

31

帖子

337

积分

中级会员

Rank: 3Rank: 3

积分
337
发表于 2015-2-10 15:31:52 | 显示全部楼层
= =不明觉厉

31

主题

257

帖子

1752

积分

金牌会员

申城谍影

Rank: 6Rank: 6

积分
1752
QQ
发表于 2015-2-11 10:18:18 | 显示全部楼层
我看懂了,

其实仔细看看,这个解释得很明白和通俗。。。。。。。。。。
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

作品发布|文章投稿|广告合作|关于本站|游戏开发论坛 ( 闽ICP备17032699号-3 )

GMT+8, 2025-6-8 12:20

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表