미디어고토사(Mediagotosa) logo

언어모델

A collection of 9 posts

[주간경향 기고] 언어모델의 진화와 AI 자본주의 시대
전체 공개 유료 구독자 전용 무료 회원 공개
미디어기술

[주간경향 기고] 언어모델의 진화와 AI 자본주의 시대

주간경향에 기고하는 기술 비평 칼럼. 오늘에서야 공개가 됐네요. 꾸준히 관심가지고 있는 언어모델 이야기입니다. 뭐랄까요 일종의 'AI 울타리치기' 흐름이랄까요? 인클로저 맞습니다. 그런 경향들이 뚜렷해지고 있다는 인상을 받게 됩니다. 이를 닉 다이어

두 번째 런치 스터디 : 네이버 하이퍼클로바 논문 - 초대형 언어모델은 어떤 변화를 가져올 수 있는가
전체 공개 유료 구독자 전용 무료 회원 공개
런치스터디

두 번째 런치 스터디 : 네이버 하이퍼클로바 논문 - 초대형 언어모델은 어떤 변화를 가져올 수 있는가

벌써 두 번째 런치 스터디가 다가오네요. 지난번 스터디를 통해 격주로 진행하기로 확정했습니다. 이번주 유독 제 일정이 너무 빡빡해서 1시간만 당겼습니다. 참석률이 저조해질 것을 알면서도 불가피했습니다. 이번주만 양해를 해주세요. 지난번엔 저널리즘과

  • 이성규
    이성규
자동팩트체킹 기술의 흐름과 한국 언론계의 과제
전체 공개 유료 구독자 전용 무료 회원 공개
자동 팩트체킹

자동팩트체킹 기술의 흐름과 한국 언론계의 과제

자동팩트체킹 기술에 대한 관심이 높아지고 있습니다. 얼마전 정부가 발표한 미디어 소통 역량 강화 종합 계획에도 이 프로젝트는 포함돼 있었죠. 새로 시작하는 사업이어서가 아니라 이미 진행되고 있는 사업이기에 새롭다고 볼 순

  • 이성규
    이성규
기사 잘쓰는 GPT-3, '가짜뉴스 만드는' GPT-2와 무엇이 달라졌을까
전체 공개 유료 구독자 전용 무료 회원 공개
GPT-3

기사 잘쓰는 GPT-3, '가짜뉴스 만드는' GPT-2와 무엇이 달라졌을까

언어모델의 경쟁구도가 BERT와 GPT-3의 대결로 압축이 되는 흐름입니다. BERT의 우위로 굳어지던 분위기가 GPT-3의 등장으로 다시 역전이 됐습니다. 제가 표지 포함 72페이지나 되는 공학계 영어 논문을 모두 이해했다는 건 거짓말일 겁니다.

  • 이성규
    이성규
전체 공개 유료 구독자 전용 무료 회원 공개
AI

글 잘쓰는 AI 'GPT-2'와 저널리즘 역할론

언어 모델은 비지도 복합작업 학습자(Language Model are Unsupervised Multitask Learners) 논문 원문 링크 도입 우리는 개별 작업을 위해 트레이닝 데이터 세트를 라벨링하거나 수동으로 만드는 작업 없이 다양한 작업을 수행할 수 있는 보편 시스템을 만들고 싶었다. 멀티태스크 러닝은 보편적인 작업수행(성과)를 개선하기 위한

  • 이성규
    이성규