알고싶다. LLM(2)
-
Instruction-tuning의 개념(a.k.a FLAN)
들어가며 프롬프트를 통한 튜닝이 모델이 가진 데이터를 탐색하는데 주로 사용되었는데, 이제는 데이터가 없는, 즉 unseen task에 대해 추론을 잘하는 것이 인공지능의 똑똑함을 보여주는 하나의 지표가 될 것이다. 예시로, instruction-tuning은 데이터가 없는 개념에 대해서도 학습과정에서 설정된 instruction에 따라 똑똑하게 유추하여 답을 제안하는 튜닝 방법이다. 오늘은 instruction-tuning에 대해 톺아본다. Fine-tuning / Prompt-learning / Instruction-tuning의 차이 세 가지 모두 사전 학습된 모델을 새로운 작업에 적용하기 위한 기술이다 Fine-tuning : 이미 학습된 모델을 가져와서 추가 데이터를 사용하여 다시 학습 시키는 과..
2023.12.22 -
HCI 감성의 인공지능 : 우리와 함께 감정을 공유할 수 있을까?
영화 Her의 인공지능 사만다 영화 "Her"에서의 사만다는 주인공과의 관계에서 감정적인 상호작용을 통해 사랑과 친밀감을 형성하는 인공지능이다. 이와 마찬가지로 LLM은 인간과 자연어로 대화하며 감정과 의미를 이해하는 능력을 갖추고 있다. 사만다는 음성 인식과 대화를 통해 소통하고, LLM은 텍스트 기반으로 사용자의 질문이나 요청에 응답한다. 자연어 이해와 생성 능력을 통해 인간과 유사한 수준의 언어 처리를 수행하는 인공지능이 우리의 친구가 될 수 있을까? LLM / NLP / ML..? 무슨 의미일까 LLM이란 무엇인가? Large Language Model, 대형 AI 언어모델. 많은 양의 텍스트 데이터를 사용하여 학습하고 NLP 작업을 처리하는데 수행된다. 자연어는 인간이 일상적으로 사용하는 언어를..
2023.12.15