솔라 LLM 기반 번역 모델 인프라 구축
프렌들리 전용 엔드포인트 도입, GPU 비용 최적화

[사진=업스테이지]
[사진=업스테이지]

[K글로벌타임스] 인공지능(AI) 기술 기업 업스테이지(대표 김성훈)가 프렌들리AI와 손잡고 회사의 거대언어모델(LLM) ‘솔라’ 기반의 번역 모델 인프라 구축 계약을 체결했다.

앞서 업스테이지는 솔라 LLM을 미세 조정한 한국어-영어 번역 특화 모델을 API 형태로 공개했다. 단순 문장 번역을 넘어 전후 문맥을 종합해 의미를 추론하고, 대화의 맥락과 흐름까지 파악하는 딥러닝 번역을 제공한다. 기계번역 평가의 바로미터로 꼽히는 메타의 ‘플로레스’ 벤치마크 평가에서 오픈AI의 GPT-4, 딥엘(DeepL) 등을 뛰어넘을 정도로 정확도가 높다.

이에 업스테이지는 프렌들리AI와 협약을 체결, 일일 최대 10만여 건에 달하는 번역 트래픽을 효율적으로 처리하기 위해 프렌들리AI의 ‘프렌들리 전용 엔드포인트’를 도입했다. 이를 통해 트래픽 부하에 따라 GPU 할당량을 동적으로 조정하는 ‘자동 스케일링’ 기능을 구현, 서비스 운영을 자동화하고 GPU 비용을 크게 절감했다.

전병곤 프렌들리AI 대표는 “업스테이지가 개발한 최고의 생성형 AI 모델 ‘솔라’와 프렌들리AI의 생성형 AI 인프라가 만나, 기업들이 최고의 생성형 AI 응용을 최저의 비용으로 사용할 수 있도록 제공하게 되어서 매우 기쁘다”라며 “프렌들리AI와 업스테이지가 같이 기업들의 생성형 AI 혁신을 돕도록 매진하겠다“라고 밝혔다.

김성훈 업스테이지 대표는 “생성형 AI 인프라 수행 리더 기업 프렌들리AI와 협력해 솔라 번역 모델의 서비스 비용을 효율화할 것”이라며 “이제 더 많은 사람들이 세계 최고 수준의 번역 모델을 더욱 빠르고 손쉽게 사용할 수 있을 것”이라고 밝혔다.

[K글로벌타임스 강초희 기자] [email protected]

저작권자 © K글로벌타임스 무단전재 및 재배포 금지