국내외 과학기술 정책에 대한 간략한 정보
단신동향
해외단신
구글, 차세대 LLM ‘PaLM 2’ 공개 원문보기 1
- 국가 미국
- 생성기관 더버지
- 주제분류 핵심R&D분야
- 원문발표일 2023-05-11
- 등록일 2022-05-15
- 권호 239
○ 구글은 연례 개발자 회의(I/O)에서 차세대 대규모언어모델(LLM) ‘PaLM 2(Pathways Language Model)’ 공개
- PaLM 2는 2022년 공개된 PaLM의 새로운 버전으로 수학적 표현과 대량의 수학 및 과학 텍스트를 모델에 학습시켜 상식적인 추론, 수학, 논리 등에서 더 우수한 점이 특징
- 오픈AI의 GPT-4는 자연어 모델이기 때문에 수학 텍스트 추론에 약점을 드러내는 반면, PaLM 2는 수학 퍼즐을 풀고, 문제 내용을 추론해 다이어그램도 생성 가능
- 또한, 자바스크립트·파이썬 등의 언어 외에 Prolog· Verilog·포트란 등 20개 개발언어를 학습하여 코드 작성과 디버깅 기능 지원 역량도 향상
- 이 외에도 100개 이상의 언어를 학습하여 이전 모델보다 더 미묘한 문구를 포함한 다국어 작업에 특화
- PaLM 2는 2022년 공개된 PaLM의 새로운 버전으로 수학적 표현과 대량의 수학 및 과학 텍스트를 모델에 학습시켜 상식적인 추론, 수학, 논리 등에서 더 우수한 점이 특징
- 오픈AI의 GPT-4는 자연어 모델이기 때문에 수학 텍스트 추론에 약점을 드러내는 반면, PaLM 2는 수학 퍼즐을 풀고, 문제 내용을 추론해 다이어그램도 생성 가능
- 또한, 자바스크립트·파이썬 등의 언어 외에 Prolog· Verilog·포트란 등 20개 개발언어를 학습하여 코드 작성과 디버깅 기능 지원 역량도 향상
- 이 외에도 100개 이상의 언어를 학습하여 이전 모델보다 더 미묘한 문구를 포함한 다국어 작업에 특화
