연구진, 약 1,500달러의 비용으로 파운데이션 모델을 처음부터 학습시켰다고 밝혀
• Sapient의 연구진은 약 1,500달러의 비용으로 처음부터 학습시킨 HRM-Text라는 1B 파라미터 추론 모델을 개발했습니다. • 이 모델은 40B 토큰으로 학습되었으며, 2B에서 7B 파라미터 범위의 더 큰 모델들과 경쟁 가능한 성능 수준을 달성했습니다. • 이러한 획기적인 성과는 파운데이션 사전 학습이 더 이상 자금력이 풍부한 기관의 전유물이 아니라는 점을 보여주며, 소규모 조직도 저렴한 비용으로 유능한 추론 모델을 구축할 수 있게 합니다.
venturebeat.com


