java – 我可以确定数据是英语还是中文？
发布时间：2020-12-15 04:55:21 所属栏目：Java 来源：网络整理
导读：是否可以确定数据是英文还是中文？ 解决方法 例如,这可以使用统计方法.英语语言具有非常独特的字符分布,并且字符在另一个字符后面显示出非常独特的分布(称为1级模型). 如果’e’是最常见的符号,则该语言不太可能不是欧洲语言. 通过查看Unicode字符值(必要时
|
是否可以确定数据是英文还是中文？
解决方法
例如,这可以使用统计方法.英语语言具有非常独特的字符分布,并且字符在另一个字符后面显示出非常独特的分布(称为1级模型).
如果’e’是最常见的符号,则该语言不太可能不是欧洲语言. 通过查看Unicode字符值(必要时在字符集之间进行转换)来进行这种区分也可能相当简单(但可能不是100％可靠).如果存在Unicode值大于127的字符,则英语有点不太可能(请注意,有些符号表示 （编辑：李大同） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |