近来看到不少英文文字相关的东西, 如果给中文用上必然很好, 可惜是不可能的, 中文分词再精准, 也只能是专门的领域, 无法在生活中应用, 否则肯定竟然遇到尴尬的时候, 这点真的可惜了.
|
kkzxak47Jun 2, 2016 via Android
1
中文 分词 从 我 做起
|
|
binuxJun 2, 2016
2
可以用 character based 啊
|
|
YUXJun 2, 2016
3
可以用 Jieba /Python
|
|
maemoleeJun 2, 2016
4
最近一个报纸的标题:儿子生性病母倍感骄傲。
一般来说的分段方式是:儿子生性病,母倍感骄傲。 然而正确分段方式是:儿子生性,病母倍感骄傲。 说明断句在多元文化融合的今天,是有多么的重要。 |
|
v2014Jun 2, 2016
5
有空格多浪费纸啊,现在有大数据,根据上下文统计下概率,基本上也就很准确了,再说有的人断句也是不正确的,
就和楼上说的一样,很多人第一眼肯定是第一种断法,感觉不对,才有第二种断法,现在机器分词就差这种改正了。 |
|
243205964Jun 2, 2016 via Android
6
我记得在微博上,小娜 一直在分词,一开始我还奇怪,知道看到此贴。
|
|
bugeyeJun 2, 2016
8
中文使用空格的话,不如灭绝算了。 4 楼那个根本不是规范可读的中文,英语写的差,一样不可读不可交流。
|
|
9
@bugeye 就是。什么叫“儿子生性”。活了这么多年都不知道这是啥意思
|
|
10
@crysislinux
生性在广东话里面就是 懂事乖巧的意思 |
|
wxunm60tAn8bODGsJun 2, 2016 via Android
12
记得中文连标点系统都没有的时代嘛
|
|
ChaosParkJun 2, 2016
14
句读之不知
|
|
15
这不光是空格就能解决的问题吧,比如这个:
人生要经历四个阶段 喜欢上一个人 喜欢上一个人 喜欢上一个人 喜欢上一个人 |
|
16
@sensui7
@Nothentai 所以,中文还得分东北话和广东话,以后说中文之前,先写声明了? <!DOCTYPE 中文> <中文 lang="东北话"> <meta charset="沈阳"> <!DOCTYPE html PUBLIC "-//PuTongHua//DTD XHTML 1.0 Transitional//中文" "http://www.普 putonghua.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.zhongwen.org/1999/xhtml"> |
|
jsonlineJun 2, 2016
17
中文的乐趣不就在这里嘛……
|
|
saroursJun 2, 2016 via iPhone
18
看完评论,感觉还是古文比较好懂,因为大部分都是意会。外文在我看来跟文言文是一个套路
|
|
stcasshernJun 2, 2016
19
@sarours 古文连标点都没有。。也不好懂。。。
|
|
ChaosParkJun 2, 2016
20
中文添加空格分词对人来说实用性有限,刚才和同事聊天,同事说:典型的程序员思维,让人去适应计算机。
|
|
21
其实我不是说给中文添加分词, 这当然是不可能了, 我只是说, 中文词汇(不是字)原生就像英文那样有明确的分割就好了, 我不是说语言的优劣, 只是说拉丁文字用有限的字母, 然后单词之间有空格, 这确实很方便计算机处理.
如果计算机是中国人发明的, 不知道是否更能容易处理?我觉得还是不太可能. |
|
cst4youJun 2, 2016
23
这个我想起来 QQ 上面那种不能好好说话乱加空格的人
|
|
zgkJun 2, 2016 via Android
24
中文不断句有时候会有歧义
“你根本不懂什么叫做爱”,“以前我喜欢一个人,现在我喜欢一个人”,还有 4 楼那个😂 (高考修改病句这些是有语病的) |
|
downskyJun 2, 2016
25
英文的分词是区别前字与后字,不然无法阅读。而中文天生就不需要这样的他词,每个字都是独立可区别的。
|
|
RqPS6rhmP3Nyn3TmJun 2, 2016 via Android
26
跟空格分词没关系,语法功能标点符号已经承担了。中国长期言文不一致,没有这个必要。
|
|
xiaozhizhu1997Jun 2, 2016 via Android
27
有人想过韩文么,他们那个空格分词…
|
|
saroursJun 2, 2016 via iPhone
28
@stcasshern
首先,顾问是有标点符号的,只不过比较单一,没现在这么多。 其次,文言文在掌握以后,是比较好理解稳重的意境,或者大概的意思,而且很简洁。现在的很多外语其实跟文言文差不多。 其实跟编程语言是很类似的,学习一大堆知识,然后我说的一小句话,可能代表很长的一段意思。 最后,楼主的困扰是基于白话文造成的,但是,不可避免的,如果没有白话文的普及,中国现在识字识礼的人……呵呵 |
|
pandashuaiJun 2, 2016
29
最近标题党不是很流行吗,每次都引诱我点进去,却发现不是自己想的那样。。。
|
|
cocacoldJun 2, 2016
31
中文博大精深,岂是我辈可以理解的。
 |
|
42V0CdLjCU494ogFJun 2, 2016
32
http://bosonnlp.com/ 玻森中文语义分析做得挺厉害的
|
|
DladJun 2, 2016
33
数学之美
马尔可夫链 |
|
estJun 2, 2016
34
我有一个 trick 可以免费做到中文加空格。谁给我 10 元我就告诉他
|
|
maemoleeJun 2, 2016
37
|
|
maemoleeJun 2, 2016
38
|
|
dingyaguang117Jun 2, 2016 via iPhone
40
南京市长江大桥
|
|
JackBlack2006Jun 2, 2016
41
有这种疑问的难道不是语体教吗?
小学时候文言文句读就是重点内容之一了吧 |
|
ibigbugJun 3, 2016
42
工信处女干事每月经过下属科室都要亲口交代 24 口交换机等技术性器件的安装工作
|
|
clickJun 3, 2016
43
明明有标点,你不用,怪谁?
|
|
mcblackJun 3, 2016
45
感觉现有很多人都不会去好好认真的标点分开
|
|
StlinJun 3, 2016
46
可 以 有 的
|
|
davinJun 13, 2016
52
下雨天留客天留我不留
|
|
iahuJul 28, 2016
54
有时候用标点并不合适。打字聊天也会经常给一些关键的字词加上空格。
|