세일즈포스, ProVision 프레임워크 소개
세일즈포스가 새롭게 선보인 ProVision은 프로그램적으로 시각적 지시 데이터를 생성하는 혁신적인 프레임워크입니다. 이를 통해 고성능의 멀티모달 언어 모델을 훈련시키기 위한 데이터를 체계적으로 합성할 수 있게 되었습니다.
- ProVision은 자동화된 데이터 생성 기술로 인해 노동 집약적인 수작업을 줄이고, 효율적인 데이터 처리 방식을 제공합니다.
- 산업 및 연구뿐 아니라 다양한 도메인에서의 AI 적용 확대를 위한 혁신적인 기반 기술로 주목받고 있습니다.
ProVision-10M 데이터셋의 역할
ProVision-10M 데이터셋은 세일즈포스의 새로운 접근 방식을 통해 생성되었습니다. 이는 다양한 멀티모달 AI 모델의 성능과 정확도를 높이기 위해 사용되고 있습니다.
- ProVision-10M은 질적 향상을 통해 다양한 분야의 AI 모델 훈련에 필수적인 데이터셋으로 자리 잡고 있습니다.
- 이 데이터셋은 텍스트와 시각 데이터의 통합 분석을 가능하게 하여 멀티모달 연구를 더욱 촉진합니다.
데이터 전문가를 위한 새로운 길
ProVision은 고품질의 시각적 지시 데이터를 프로그램적으로 생성하여 제한되거나 불규칙하게 레이블된 데이터세트에 대한 의존성을 줄여주는 중요한 발전을 의미합니다.
- ProVision은 레이블링 과정을 간소화하여 데이터 수집 시간과 비용을 절감하는 데 기여합니다.
- 연구자와 개발자가 데이터셋 구축에 매진하기보다 주요 연구에 집중할 수 있는 환경을 제공합니다.
장기적인 효율성과 비용 절감
체계적으로 합성된 데이터세트는 더 나은 제어와 확장성을 제공하며, 도메인별 데이터 획득 비용을 줄이고 빠른 반복 주기를 가능하게 합니다.
- 자동화된 데이터 합성은 프로젝트의 초기 단계에서 발생하는 예산과 시간 낭비를 줄일 수 있습니다.
- 환경에 따라 데이터 모델을 맞춤화할 수 있는 대규모 데이터 생성은 시장 경쟁력을 강화합니다.
장면 그래프 활용한 데이터 생성
ProVision은 장면 그래프를 활용하여 시각 중심의 지시 데이터를 합성합니다. 이는 이미지의 의미를 구조적으로 표현하는 방식으로, 객체와 속성 간의 관계를 그래프 형태로 나타냅니다.
- 이러한 그래픽 구조는 시각적 정보 해석과 의미적 연계성을 강화하여 분석 정확성을 높입니다.
- 객체 관계 분석을 통해 새로운 인사이트를 도출하고 복합적인 정보 처리가 가능해졌습니다.
10M 데이터 포인트 생성
ProVision을 통해 1,500만 개의 단일 이미지 지시 데이터 포인트와 4,200만 개의 다중 이미지 지시 데이터 포인트가 생성되었습니다. 이 데이터는 AI 훈련에 큰 효과를 발휘하고 있습니다.
- 대량의 데이터 포인트는 더 정교하고 신뢰성 있는 AI 모델을 위한 풍부한 학습 자원을 제공합니다.
- 이처럼 다양한 데이터셋은 AI 시스템의 반응성과 성능을 향상시키는 데 필수적인 요소로 작용합니다.
AI 모델 성능 개선
ProVision-10M을 활용한 멀티모달 AI의 미세 조정 결과, 모델의 평균 성능이 ProVision 데이터 없이 조정했을 때보다 향상되었습니다. 이는 단일 이미지와 다중 이미지 지시 데이터 모두에서 긍정적인 영향을 미쳤습니다.
- 이러한 성능 향상은 복잡한 데이터 소스와의 통합을 통해 이루어졌으며, 실질적인 인식률 개선으로 이어졌습니다.
- 특히 자연어 처리와 시각적 인식을 필요로 하는 응용 프로그램에서 더 높은 효율성을 보장합니다.
장기적 목표
세일즈포스는 ProVision을 통해 연구자들이 장면 그래프 생성 파이프라인을 향상시키고 새로운 유형의 지시 데이터를 생성할 수 있도록 기여하고자 합니다. 이러한 노력은 비디오와 같은 새로운 데이터 유형에도 적용될 것입니다.
- 지속적인 개선과 기술 혁신을 통해 사용자의 다양한 요구와 시장의 변화를 신속히 반영할 수 있습니다.
- 세일즈포스는 AI 기반의 솔루션을 통해 다양한 산업에서의 응용 가능성을 탐색하고 있습니다.
출처 : 원문 보러가기