ernie1.0-char

作者 peterchou · 下载 0 · 点赞 0 · 更新 2023-11-01

此模型为字符切分版的ernie1.0(即对非whitespace的字符按个切分),去除长度超过1的token的tokenizer和模型。