1、首先,要安装中文分词工具。如果是Anaconda,需要在Anaconda prompt进行,或者手动进入conda环境后再安装。可以使用pip install -i 指定国内镜像安装。

3、如图是使用snownlp进行分词的例子。注意,只有现代汉语准确度较好,这是显然的。

5、接下来,是使用THULAC进行分词的例子。如图所示。


时间:2024-10-12 08:29:24
1、首先,要安装中文分词工具。如果是Anaconda,需要在Anaconda prompt进行,或者手动进入conda环境后再安装。可以使用pip install -i 指定国内镜像安装。

3、如图是使用snownlp进行分词的例子。注意,只有现代汉语准确度较好,这是显然的。

5、接下来,是使用THULAC进行分词的例子。如图所示。

