아마존웹서비스(AWS)는 ‘AWS 리인벤트 2025(AWS re:Invent 2025)’에서 아마존 베드록(Amazon Bedrock)과 아마존 세이지메이커 AI(Amazon SageMaker AI)의 신규 기능을 발표했다. 이번 신규 기능들은 개발자가 머신러닝 전문 지식 없이도 고급 모델 맞춤화 기능을 활용할 수 있도록 지원하며, 기본 모델보다 더 빠르고 정확하며 비용 효율적인 AI를 구축하는 과정을 간소화한다.

AI를 배포하는 기업에게 효율성은 중요한 과제다. AI 애플리케이션 구축은 쉬워졌지만, 대규모 실행에는 여전히 높은 비용과 많은 리소스가 필요하다. 한편, AI 에이전트가 수행하는 작업 중 상당 부분은 일정 확인이나 문서 검색 등 고급 지능이 필요하지 않은 일상적 업무다. 이는 불필요한 비용 증가와 느린 응답 속도, 리소스 낭비로 이어진다. 이를 해결하기 위한 방법은 맞춤화(customization)다. 에이전트가 가장 자주 수행하는 작업을 담당하도록 특화된 소규모 모델을 사용함으로써 더 빠르고 정확한 응답을 더 낮은 비용으로 제공할 수 있다.

아마존 베드록의 RFT(Reinforcement Fine Tuning)와 아마존 세이지메이커 AI의 강화 학습 기반 서버리스 모델 맞춤화는 효율적인 AI를 구축하는 과정을 간소화하며, 기본 모델 대비 더 빠른 속도와 비용 효율, 정확도를 구현하도록 돕는다. AWS는 이러한 기술을 고객사의 개발자들이 더 쉽게 활용할 수 있게 제공함으로써, 모든 규모의 조직이 다양한 비즈니스 요구에 대응하는 맞춤형 에이전트를 간편하게 구축할 수 있도록 지원한다.

복잡한 맞춤화 기법은 효율적인 맞춤형 모델 구축에 있어 걸림돌이 된다. 예를 들어 강화 학습은 사람 또는 다른 모델의 피드백을 활용해 모델을 훈련한다. 그러나 강화 학습은 복잡한 훈련 파이프라인, 막대한 컴퓨팅 자원, 그리고 모든 응답을 평가하기 위한 고비용의 인간 피드백 또는 강력한 AI 모델을 필요로 한다.

아마존 베드록의 RFT는 모델 맞춤화 과정을 단순화해 모든 조직의 모든 개발자가 이 기술을 활용할 수 있게 한다. 아마존 베드록은 선도적인 AI 기업의 고성능 파운데이션 모델(foundation model)과 함께 보안과 개인 정보 보호, 책임 있는 AI 기능을 갖춘 에이전트 및 생성형 AI 애플리케이션을 구축할 수 있는 역량을 제공하는 완전관리형 AI 플랫폼이다. RFT는 기본 모델 대비 평균 66%의 정확도 향상을 제공하며, 고비용의 대규모 모델에 의존하지 않고도 더 작고 빠르며 비용 효율적인 모델로 더 나은 결과를 얻을 수 있도록 지원한다.

AI 워크플로에 대한 더 많은 제어가 필요한 팀은 가장 강력한 모델을 대규모로 구축·훈련·배포할 수 있는 완전한 제어권을 제공하는 아마존 세이지메이커 AI를 활용할 수 있다. 세이지메이커 AI는 새로운 서버리스 모델 맞춤화 기능을 지원해 며칠 만에 모델 맞춤화를 가능하게 한다. 개발자는 에이전트가 모델 맞춤화 과정을 안내하는 에이전틱(agentic) 방식과 개발자가 직접 주도하기를 원할 때 적합한 셀프 가이드(self-guided) 방식 중 선택할 수 있다. 에이전틱 방식은 프리뷰 버전으로 제공된다.

에이전틱 방식에서는 개발자가 자연어로 요구사항을 설명하면, 에이전트가 합성 데이터 생성부터 평가까지 전체 맞춤화 과정을 안내한다. 셀프 가이드 방식은 세밀한 제어와 유연성을 제공한다. 이 방식은 인프라 관리 부담을 없애는 동시에 원하는 맞춤화 기법을 선택하고 파라미터를 조정할 수 있도록 지원하는 적절한 도구를 제공한다. 개발자는 두 방식 모두에서 AI 피드백 기반 강화 학습(Reinforcement Learning from AI Feedback), 검증 가능한 보상 기반 강화 학습(Reinforcement Learning with Verifiable Rewards), 지도 미세 조정, 직접 선호 최적화(Direct Preference Optimization) 등의 고급 맞춤화 기법을 활용할 수 있다.