All Lectures
RouteNoticeQ&A

[re:COMMIT] 명령어를 이해하는 오픈소스 언어 모델 ‘KoAlpaca’ 개발기 - 이준범 연구원

Lecture Introduction
Difficulty
Normal
Category
Programming - Programming Fundamentals
Tag
인공지능




구름 re:COMMIT


re:COMMIT은 한 달에 한 번 수요일에 기술, 개발, 성장, 조직 문화 등을 이야기하는 구름의 온·오프라인 세미나인 COMMIT의 VOD입니다.


모든 COMMIT을 re:COMMIT로 볼 수 있는 것은 아닙니다.

매월 진행되는 COMMIT에 관심있는 분은 온·오프라인 라이브 일정을 '구름 블로그'에서 확인하기 바랍니다.

# re:COMMIT은 강사가 동의한 일부 COMMIT만 공개됩니다.




ChatGPT 같은 언어 모델을 서비스에 적용하고 싶으신가요?


최근 자연어 처리 분야에서 ChatGPT 등 LLM(Large Language Model: 거대 언어 모델)이 IT 업계를 뜨겁게 달구고 있습니다.
ChatGPT는 이미 1억 5천만 명의 사용자를 확보했고, 구글도 AI 챗봇 Bard를 전 세계 180여 개국에 전면 공개했죠.
빅테크 업계에서는 LLM이 기업의 미래를 좌우할 새로운 전쟁터가 되고 있습니다.

거대 기업이 경쟁하는 와중에 오픈소스 LLM/LM(Language Model)도 빠르게 발전하고 있습니다.
학습과 서비스에 대규모 컴퓨터 인프라가 필요한 빅테크 기업의 LLM과 달리, 오픈소스 LLM/LM은 학습에 드는 컴퓨팅 파워와 시간이 적죠.
폐쇄적인 빅테크 업계의 LLM과 달리 누구나 참여할 수 있는 오픈소스인 점도 주목할 만 합니다.

5월 COMMIT은 'KoAlpaca'를 개발한 이준범 연구원과 함께 합니다.
스탠퍼드 대학이 공개한 오픈소스 LLM 'Alpaca'의 한국어 버전을 만들고 개선해 온 이야기에서 오픈소스 LLM/LM의 현 주소와 활용 가능성을 엿볼 수 있을 거에요.




데이터드리븐 AI/NLP 연구원


이준범

현) 데이터 드리븐 AI/NLP Researcher

전) NAVER CLOVA Research Intern

전) KAIST DSLAB Internship

전) NEXON Korea 인텔리전스랩스 어뷰징탐지팀 소프트웨어 엔지니어




발표자료





ANYONE CAN DEVELOP

구름은 '모두가 개발자가 된다'라는 비전으로 클라우드 기반의 SW 교육과 평가, 클라우드 개발 환경 서비스를 운영하고 있습니다.
COMMIT은 고용노동부가 함께하는 K-Digital Platform 사업의 일환으로, IT 지식을 갖추고자 하는 분들을 대상으로 한 무료 세미나입니다.



Curriculum
  • 01
    [re:COMMIT] - 이준범 연구원
  • 명령어를 이해하는 오픈소스 언어 모델 ‘KoAlpaca’ 개발기
Recent Update|2023. 06. 02
Instructor Introduction
re:COMMIT은 한 달에 한 번 수요일에 기술, 개발, 성장, 조직 문화 등을 이야기하는 구름의 온·오프라인 세미나인 COMMIT의 VOD입니다. > 매월 진행되는 COMMIT에 관심있는 분은 온·오프라인 라이브 일정을 블로그 링크에서 확인하실 수 있습니다. > 가장 먼저 COMMIT 소식을 받아보고 싶으시면 LIVE 뉴스레터를 구독해주세요. ANYONE CAN DEVELOP

Lecture Reviews
Free

Average Rating
5.0
Difficulty
Normal
Lecture Period
Unlimited