OpenAI, 전문가 수준 AI 모델 구축 위한 강화 미세조정 연구 프로그램 확대 (12 Days of OpenAI 2일차)

OpenAI, 전문가 수준 AI 모델 구축 위한 강화 미세조정 연구 프로그램 확대 (12 Days of OpenAI 2일차)

2024년 12월 6일 발표 (12 Days of OpenAI 2일차)

OpenAI는 개발자와 머신러닝 엔지니어가 특정 전문 분야의 복잡한 작업을 전문가 수준으로 수행하는 AI 모델을 만들 수 있도록 강화 미세조정 연구 프로그램(Reinforcement Fine-Tuning Research Program)을 확대한다고 발표했습니다. 이 발표는 12월 5일 예고된 "12 Days of OpenAI" 행사의 두 번째 날에 공개되었습니다.

 

강화 미세조정(Reinforcement Fine-Tuning)이란?

이 새로운 모델 맞춤화 기술은 개발자가 수십에서 수천 개의 고품질 작업 데이터와 참조 답변을 사용하여 OpenAI 모델을 미세 조정할 수 있도록 합니다. 모델이 유사한 문제를 추론하는 방식을 강화하고 특정 분야 작업의 정확도를 향상시키는 것이 핵심입니다. 기존의 미세조정 방식과 달리, 강화학습 방식을 통해 모델이 더욱 효과적으로 학습하고 전문가 수준의 성능을 달성할 수 있도록 돕습니다.

 

누가 신청해야 할까요?

전문가가 주도하는 복잡한 작업을 수행하고 AI 지원을 통해 이점을 얻을 수 있는 연구 기관, 대학교, 기업의 참여를 권장합니다. 특히 법률, 보험, 의료, 금융, 엔지니어링과 같이 객관적으로 "정답"이 존재하고 대부분의 전문가가 동의하는 결과를 요구하는 분야에서 강화 미세조정은 뛰어난 성과를 보여줍니다.

 

프로그램 참여 시 제공되는 혜택:

• 알파 단계의 강화 미세조정 API 접근: 참여 기관은 알파 버전의 API를 사용하여 특정 분야의 작업에 대한 강화 미세조정 기술을 테스트할 수 있습니다.
• 피드백 제공 및 공동 개발: API 개선을 위한 피드백을 제공하고 OpenAI와 협력하여 기술 발전에 기여할 수 있습니다.
• 데이터셋 공유를 통한 모델 개선 (선택 사항): 데이터셋 공유를 통해 OpenAI 모델 개선에 참여할 수 있습니다.

프로그램 신청:

관심 있는 기관은 제공된 양식을 작성하여 신청할 수 있습니다. 프로그램 참여 가능 기관 수는 제한되어 있으며, 신청 결과는 개별적으로 안내될 예정입니다. OpenAI는 2025년 초에 강화 미세조정 기능을 공개적으로 제공할 계획입니다.

 

12 Days of OpenAI - 앞으로 10일 동안의 기대

12월 5일 시작된 "12 Days of OpenAI" 행사는 이제 2일 차에 접어들었습니다. 앞으로 10일 동안 더욱 흥미로운 발표들이 이어질 예정입니다. OpenAI의 새로운 기술과 서비스에 대한 기대감을 높여주는 이벤트에 많은 관심 부탁드립니다.