fbis语料预处理
中文:
第69243句子包含英文句子"whatisfirmlyestablishedcannotbeuprooted , whatisfirmlygraspedcannotslipaway , itwillbehonoredfromgenerationtogeneration", 手工删除

英文:


nist语料预处理
中文:

英文:
需将一些非英文字母替换, 例如:
Jürgen Sandkühler --> Jurgen Sandkuhler