AIFFEL Life

[Day68] 번역기 만들기 시리즈 2

nevermet 2020. 12. 25. 20:51

오늘 자연어처리 심화과정 실습은 번역기 만들기였습니다. 지난번엔 Seq2Seq으로 만들기였는데, 이번엔 트랜스포머로 만들기네요. 실습하면서 참고한 자료들을 공유합니다.

1. korean-parallel-corpora/korean-english-news-v1/ (github)

github.com/jungyeul/korean-parallel-corpora/tree/master/korean-english-news-v1

 

jungyeul/korean-parallel-corpora

Korean Parallel Corpus. Contribute to jungyeul/korean-parallel-corpora development by creating an account on GitHub.

github.com

2. google / sentencepiece (github)

github.com/google/sentencepiece

 

google/sentencepiece

Unsupervised text tokenizer for Neural Network-based text generation. - google/sentencepiece

github.com