■ 50분의 1 크기인데 성능은 동급?...작지만 강한 소형 LLM의 비밀마이크로소프트, 애플, 메타 등 빅테크 기업들이 거대언어모델이 아닌 소형언어모델를 선보이며 작지만 강하다는 점을 집중 부각하고 있다.키워드는 데이터다. 모델 훈련에 사용되는 데이터를 최적화하는 접근으로 작지만 강한 모델을 만들었다는 것이다. 세마포 최근 보도를 보면 마이크로소프트는 파이-3 훈련에 웹에서 가져온 실제 데이터와 AI가 생성한 합성 데이터를 활용했다. 파이-3가 크기에 비해 우수한 것은
■ 소형 언어 모델, 생성형 AI판 격전지로..."작지만 성능은 GPT 3.5급"마이크로소프트가 신형 소형 AI 모델 파이3 3종을 선보인다.마이크로소프트는 파이3 시리즈 중 가장 소규모 모델도 오픈AI GPT-3.5 수준 역량을 보여준다고 강조해 눈길을 끈다.마이크로소프트는 파이-3 시리즈 중 가장 소형 버전인 파이-3 미니를 먼저 선보인다. 38억개 매개변수 규모로, 상대적으로 작은 데이터셋 기반으로 훈련됐다. 애저, 허깅페이스, 올라마에서 이용할 수 있다. 미니의 경우 스마트폰에서 적합하다. 사용자들
마이크로소프트가 소형언어모델 '파이-3-미니'를 출시했다고 23일 IT매체 아스테크니카가 전했다.파이-3-미니는 이전에 출시된 2개의 소형언어모델인 파이-2와 파이-1의 후속 버전이다. 오픈AI의 GPT-4 터보와 같은 기존의 대규모언어모델보다 운영이 간단하고 비용이 저렴하며, 인터넷 연결 없이도 스마트폰에서 실행 가능한 것이 특징이다.구글의 팜2와 대규모언어모델 중 일부는 수천억개의 매개변수를 가지고 있다. 이러한 모델이 제대로 실행되려면 강
[디지털투데이 황치규 기자마이크로소프트가 신형 소형 AI 모델 파이3 3종을 선보인다.마이크로소프트는 파이3 시리즈 중 가장 소규모 모델도 오픈AI GPT-3.5 수준 역량을 보여준다고 강조해 눈길을 끈다.마이크로소프트는 파이-3 시리즈 중 가장 소형 버전인 파이-3 미니를 먼저 선보인다. 파이-3 미니는 38억개 매개변수 규모로 GPT-4 같은 거대 언어 모델과 비교해 상대적으로 작은 데이터셋 기반으로 훈련됐다. 애저, 허깅페이스, 올라마에서 이용할 수 있다.마이크로소프트는 파이-3 스몰(매개변수 70억
마이크로소프트, 애플, 메타 등 빅테크 기업들이 거대언어모델이 아닌 소형언어모델를 선보이며 작지만 강하다는 점을 집중 부각하고 있다.마이크로소프트는 파이-3 시리즈, 애플은 오픈ELM을 선보였다. 이중 마이크로소프트는 파이3 시리즈 중 가장 소규모 모델인 파이-3 미니에 대해 일부 작업에선 오픈AI GPT-3.5 수준 역량을 보여준다고 강조해 눈길을 끈다. 참가로 파이-3 미니 매개변수는 38억개고, GPT 3.5는 1750억개다. 메타도 최근 라마3 시리즈 중 상대적으로 작은 규모인
인기기사
Generic placeholder image
청소년 잡지 '밥' 창간한 퍼스트 무버, 이흥복
6시간전
펭귄 무리들이 바다 앞에 서서 머뭇거린다. 물속에는 바다표범이나 범고래 같은 천적들이 우글거린다. 한 마리가 먼저 바다에 뛰어든다. 다른 펭귄들도 죽음의 공포를 이겨내고 잇따라 바다에 뛰어든다. 먼저 뛰어든 그 펭귄은 바로 ‘퍼스트 무버’다. 이흥복을 ‘퍼스트 무버’의 범주에 넣고 그의 이야기를 전개해 볼까 했다. 그러나 펭귄보다는 더 잘 어울릴 것 같은 캐릭터가 생각났다. 바로 돈키호테다.‘잡지’의 ‘잡’ 자도 몰랐던 이흥복은 느닷없이 1998년 9월 15일 인천에서 월간지 ‘
Generic placeholder image
성주군, 2024 성주참외 생명문화축제 안전관리계획 심의위원회 개최!
성주군은 5월 1일 군청 재난종합상황실에서 안전관리위원회를 개최하여 오는 5월 16일부터 19일까지 4일간 개최되는 ⌜2024 성주참외 생명문화축제⌟ 안전관리계획을 심의하였다.안전관리위원회는 지역의 안전관리에 관한 중요정책의 심의 및 총괄·조정, 재난관리책임기관이 수행하는 재난관리업무의 협의·조정 역할 등을 하고 있다.안전관리계획에는 인파대책, 교통안전, 유형별 안전사고 대책 등이 수록되어 있으며 사전에 안건을 검토 후 심의회를 통해 안전관리계획에 대한 의견을 나누었다.이날 심의회는 성주경찰서, 성주소방서 등 유관기관 안전관리위원과
Generic placeholder image
2024 문화가 흐르는 서울광장 7개월 간 매월 1회 진행
가수 하현우,가수 오뮤오,어거스틱 여성 듀오 삼치와이기리,싱어송 라이터 두마디 등 출연 3일 서울시에 따르면, 시민...
Generic placeholder image
동물약품 품목허가 갱신제 도입 수면 위 왜?
당국, 발전대책 제도선진화 추진...미생산·판매 품목 효율목관리 업계, 현 재평가 통해 이미 검증 "규제일뿐, 되레 산업발전 저해" 외국에서도 시행·휴면제 대안 제시 '시각차 확연'...소통·조율 절실 농림축산식품부가 올해 마련하고 하는 ‘동물용의약품 산업 발전대책’에는 ‘품목허가 갱신제’ 도입안이 들어있다. 제도
Generic placeholder image
서울 동작구 '상도 푸르지오 클라베뉴' 아파트 미분양 잔여세대 선착순 분양...모델하우스 운영중
계약과 동시에 즉시입주가 가능한 선시공 후분양 아파트 ‘상도 푸르지오 클라베뉴’가 1차 계약금 정액제, 중도금 30% 무이자, 계약안심보장제 등 파격적인 혜택을 앞세워 미분양 잔여세대를 동호지정 선착순 분양 중이다.서울 미분양 아파트 ‘상도 대우 푸르지오 클라베뉴’가 들어서는 지역은 상도 14‧15구역이 신속통합기획을 추진 중이며, 단지 바로 옆 상도15구역은 신속통합기획이 확정되어 약 5,000세대의 대단지 아파트가 들어설 예정이다. 또한, 단지 인근에 모아타운을 진행 중으로 해당 지역은 대단지 아파트 타운으로 변모할 예정으로 주
최신기사
Generic placeholder image
나만 믿고 따라와? '결남출' 뚫고 입사해도 고달프다
1시간전
'프리랜서'라는 허울 좋은 이름으로 사회 생활을 시작했다. 그렇게 '여성 노동자'가 됐지만, 정작 '노동자'라는 인식은 부족했다. 갑이 부르면 언제든 달려갔다. 못 마시는 술...
Generic placeholder image
태백시, 투명페트병 별도배출제 집중 홍보기간 운영
태백시는 오는 5월 7일부터 7월 11일까지, 투명페트병 별도배출제의 정착 가속화와 시민 인식개선을 위한 ‘투명페트병 별도배출제 집중 홍보기간'을 운영한다고 밝혔다.환경부는 재활용자원의 회수율을 높이고자 지난 2020년에 관련지침을 개정하고, 불순물 함량이 낮아 고품질 재생 원료의 가치가 높은 투명페트병에 대해 별도 분리 및 수거를 추진하고 있다.시는 투명페트병 별도배출제의 인식전환을 위해 공동주택과 단독주택, 다량배출사업장에 대해 배출실태 점검을 실시하며, 수거업체에 대한 투명페트병 별도수거 점검을
Generic placeholder image
원주시의회 사회적경제기업 활성화 연구회, 연구용역 착수보고회
원주시의회 의원연구단체 ‘원주시 사회적경제기업 활성화 연구회’는 지난 5월 2일 오후 4시, 원주시의회 1층 모임방에서 연구용역 착수보고회를 개최했다.이번 보고회는 원주시 사회적경제기업의 현황을 파악하고 이를 바탕으로 정책 수요를 조사하며 향후 정책과제를 도출하기 위한 첫 걸음으로 마련되었다.이날 보고회에는 원주시 사회적경제기업 활성화 연구회의 손준기 대표 의원을 비롯한 최미옥, 안정민, 문정환 의원과 원주시 사회적기업협의회 홍정표 회장 등 주요 관계자들이 참석한 가운데 진행되었다.손준기 의원은 “오늘은 우리 연구회가 연구의 방향성
Generic placeholder image
임영웅 "배우해도 되겠네"... 신곡 '온기' 뮤비 선공개 '명품연기'
1시간전
"임영웅, 본격적으로 배우해도 되겠네"가수 임영웅이 5일 오후 공식 유튜브 채널을 통해 자작곡인 신곡 '온기' 뮤직비디오가 공개했다.음원 발매에 앞서 선공개된 뮤직비디오는 임영웅은 차 시동을 건 뒤 오프로드를 달리며 다양한 표정연기를 선보였다. 황야에 혼자 남은 듯한 쓸쓸한 모습 도 담았다. 특히 임영웅은 눈빛만으로 긴장과 외로움, 두려움 등 다채로운 감정선을 표현해 극강의 몰입도를 선사하는 가하면 배우 안은진과 현봉식도 등장해 마지막까지 눈을 뗄 수 없다.임영웅의 열연 속 ‘또 다시 먼 길을 떠나도. 한번 더 긴 시간이 가도. 이
Generic placeholder image
(재)박기범재단 박수안 이사장, 외국인 장학기금 쾌척
재단법인 박기범재단 박수안 이사장이 외국인 유학생의 학업정진을 위한 장학기금 2천만원을 상지대학교에 기부했다.상지대학교는 지난 5월 2일 오후 3시, 본관 2층 총장실에서 재단법인 박기범재단 박수안 이사장의 발전기금 전달식 및 장학증서 수여식을 개최했다.이날 행사에는 유만희 총장직무대행, 양문희 대외협력처장, 김민우 학생취업지원처장, 정연실 국제교류처장과 박수안 이사장, 김태하 한국오지케이 이사, 엄소현 사무국장 등 관계자와 박기범재단 외국인 장학생 8명이 참석했다.2017년에 설립된 재단법인 박기범재단은 “꿈