解析英语句子的例子
例如,在句子中:
那蛋糕非常好吃。
英语语言的规则将使蛋糕一个名词,极端的副词修饰的形容词不错,并通过这种分析的含义可以理解。
然而,这种分析依赖于我们认识到所使用的符号序列是单词。如果我们不熟悉使用的字符,我们就无法做到这一点。如果我们使用不熟悉的符号(例如中文)遇到句子,则以这种方式解析可能会很困难。这是一个中文句子的例子:
我可以写一点儿中文。
对于没有阅读中文字符的人来说,不清楚哪些符号组合形成单词。处理英语或中文时计算机算法也是如此。
因此,必须通过称为词法分析或扫描的过程来进行解析,其中将各个字符组合在一起形成识别的符号,我们通常可以将其称为单词,但在解析算法中称为标记。