分词

[盛金标]

汉语的自然语言处理第一步就得分词,
英语是不需要的, 因为有空格.
比方, 给汉语标词性,
你就先得把词和词用空格隔开，如何跟一下句子分词呢？

小李做事一向很马虎。
^^^^
小马虎头虎脑的挺可爱。
^^^^
我马上就去你家。
^^^^
我骑了马上了山。

[small]

我想了解这方面的情况，搂主能否告诉在下，是否目前有现成的公开的电子词库呢？

[盛金标]

电子词库是很多的，甚至你自己就可以从各种输入法的码表中提取。但是经过标注的免费的词库不多见。请尝试兰开斯特汉语语料库
(LCMC) 。其主页：
http://www.cass.net.cn/chinese/s18_yys/dangdai/LCMC/LCMC.htm
你可以写信给北京外国语大学许家金免费索取。