字符语言模型 使用单独的字符而不是词 使用相同的公式和方法 可以考虑使用4gram,5-gram,因为数 据比较充足 对交叉语言的比较很有用 基于字和基于词的交叉熵的换算关系 H(P)=H(p)/句子S中的平均词长字符语言模型 • 使用单独的字符而不是词 • 使用相同的公式和方法 • 可以考虑使用4-gram，5-gram，因为数 据比较充足 • 对交叉语言的比较很有用 • 基于字和基于词的交叉熵的换算关系 – HS (pc ) = HS (pw) / 句子S中的平均词长