트랜스포머
-
[리뷰]트랜스포머를 활용한 자연어 처리, 루이스 턴스톨 외 2명 지음, 박해선 옮김, 한빛미디어, 2022일상기록/독서 2023. 3. 25. 19:36
최근 ChatGPT가 연일 뉴스에 오르내리고 있습니다. IT에 문외한인 분들도 한 번쯤은 들어봤을 만큼인데요, 이 ChatGPT도 자연어에 기반한 인공지능 중 하나 입니다. 인공지능 분야는 활발하게 연구가 진행되는 분야로, 최근에는 구글에서(엄밀히는 구글 연구원들이) 발표한 논문*에 새로운 신경망 아키텍처를 제안하면서 '트랜스포머'란 이름의 아키텍처가 대두 되었다고 합니다. * 여담으로 당시 논문은 'Attention Is All You Need' 란 제목으로 발표되었는데, 이후 'all you need' 가 붙은 논물이 쏟아졌다고 하네요. 이 책은 그러한 '트랜스포머'에 기반해서 책을 풀고 있습니다. 사실 인공지능 분야는 잘 모르는 분야라 이 책을 통해 고급 내용을 접해보고 싶은 욕심이 있었는데요. 책..