汉语分词工具包jieba

 1 #分词pip install jieba
 2 import jieba
 3 str="你真的真不知道我是谁吗？"
 4 res1=jieba.cut(str)
 5 print(list(res1))
 6 
 7 #cut_for_search更详细的分词
 8 res2=jieba.cut_for_search(str)
 9 print(list(res2))
10 
11 # [‘你‘, ‘真的‘, ‘真不知道‘, ‘我‘, ‘是‘, ‘谁‘, ‘吗‘, ‘？‘]
12 # [‘你‘, ‘真的‘, ‘真不‘, ‘不知‘, ‘知道‘, ‘真不知道‘, ‘我‘, ‘是‘, ‘谁‘, ‘吗‘, ‘？‘]