GPT
-
[Day81] 최신 NLP 흐름AIFFEL Life 2020. 12. 26. 21:17
오늘은 최신 NLP 흐름에 대해 알아보는 내용이었습니다. Transformer 이후 어떤 새로운 모델들이 등장했으며, 어떤 방향으로 자연어처리가 발전해 나가는지 공부해 볼 수 있는 시간이었습니다. 1. Deep contextualized word representations arxiv.org/abs/1802.05365 Deep contextualized word representations We introduce a new type of deep contextualized word representation that models both (1) complex characteristics of word use (e.g., syntax and semantics), and (2) how these uses v..
-
[Day31] 자연어를 생성하는 인공지능AIFFEL Life 2020. 12. 15. 14:20
오늘은 GPT를 이용해 노래 가사를 만들어 내는 실습을 해보았습니다. 공부하는 과정에서 알게된 유용한 글들을 아래에 공유합니다. 1. Talk to Transformer app.inferkit.com/demo InferKit app.inferkit.com 2. 뛰어난 '문장 생성 인공지능'을 숨겨야만 하는 이유는? decenter.kr/NewsView/1VFGQMBBXZ/GZ02 뛰어난 '문장 생성 인공지능'을 숨겨야만 하는 이유는? 인공지능(AI)이 보편화되면 가장 먼저 멸종될 것이라고 언급되는 비운의 직업들이 있다. 대표적으로 꼽히는 것 중 하나는 ‘기자’. 그런데 이제 이 우려가 목전에 닥친 듯하다. 지난 14일 실리콘 decenter.kr 3. 시퀀스 python.bakyeono.net/chapt..