jparacrawl-v3-big-ct2

作者 JustFrederik · 下载 0 · 点赞 0 · 更新 2023-11-02

https://www.kecl.ntt.co.jp/icl/lirg/jparacrawl/

ct2-fairseq-converter --model_path big.pretrain.pt --data_dir . --source_lang en --target_lang ja --output_dir ../converted/jparacrawl-v3-big-ct2/en-ja
ct2-fairseq-converter --model_path ./big/big.pretrain.pt --data_dir ./big --source_lang ja --target_lang en --output_dir ../converted/jparacrawl-v3-big-ct2/ja-en