Tagged: 파인튜닝

[AI Times] “프롬프트 대신 컨텍스트 엔지니어링”…미세조정 대안으로 부상

(사진=셔터스톡) ‘바이브 코딩’이라는 용어를 만든 안드레이 카르파시 오픈AI 공동 창립자가 이번에는 ‘컨텍스트 엔지니어링(context engineering)’이라는 개념을 소개했다. 대형언어모델(LLM)이 최고의 성능을 발휘할 수 있도록 컨텍스트를 최적화한다는 개념으로, 기존 프롬프트 엔지니어링의 개념을 뛰어넘어 ‘미세조정의 대안’으로 꼽았다. 카르파시...

[AI타임스] MIT, 스스로 학습하고 진화하는 언어 모델 프레임워크 ‘SEAL’ 공개

대형언어모델(LLM)이 새로운 정보나 과제를 접했을 때, 자체적으로 학습 데이터를 만들고 내부 가중치를 조정해 학습하고 적응할 수 있도록 돕는 기술이 등장했다. MIT 연구진은 23일(현지시간) 대형언어모델(LLM)에 자가 학습 및 적응 능력을 부여하는 새로운 프레임워크 ‘SEAL(Self-Adapting Language...

[IT조선] “거짓말·헛소리 그만” 할루시네이션 줄여주는 RAG의 비밀 [요즘 뜨는 AI]

인공지능(AI) 산업이 시시각각 변하고 있습니다. GPT가 두각을 나타내고 생성형 AI가 무엇인지 궁금해하던 때가 불과 한 해 전입니다. 지금은 텍스트, 이미지, 영상을 한꺼번에 이해하고 생성하는 AI가 나왔고, 보다 정확한 생성을 위한 기술들이 주목받고 있습니다. 누구나 AI...

[서울경제] 학습량 대비 20배 이상 성능 도출…’작지만 강한 AI’가 대세로

[초소형 AI 빅뱅] ■ AI 개발 트렌드 소형화로 이동 초거대 모델, 개발·가동비용 부담 실생활 접목하기엔 가성비 낮아 美 빅테크와 경쟁하기도 부담 커 초소형은 제품·서비스 접목 용이 인터넷 접속 필요없어 수익성 높아 생성형AI에 “소규모언어모델(sLM)과 에지AI를...

[news1] 韓기업 절반 “우리도 써볼 생각” …’프라이빗 AI’가 뜬다

네이버 ‘하이퍼클로바X’ 기반 기업 특화 모델 지원 토종 스타트업 ‘업스테이지’도 집중…해외서도 주목 (서울=뉴스1) 오현주 기자 | 2023-08-27 09:00 송고     초거대 인공지능(AI) © News1 DB 기업 맞춤 프라이빗 생성형 인공지능(AI) 시장 선점을 둘러싼 경쟁이...

[매일경제] 작지만 똑똑한 AI … sLLM 시대 온다

비용은 적고 특정 성능 우수해 학계서 주목하고 개발 잇달아 스캐터랩, AI플랫폼 이어 42마루·스켈터랩스도 서비스 “챗GPT의 연산 비용이 눈물 날 정도다.”(샘 올트먼 오픈AI CEO) 오픈AI ‘GPT-4‘, 구글 ‘팜2’, 네이버 ‘하이퍼클로바X’와 같은 대규모언어모델(LLM) 주도권 경쟁이 벌어진...