Chitrarth-1 : Krutrim AI Labs의 다국어 VLM

인도의 AI 환경은 빠르게 발전하고 있으며, 상당한 발전과 혁신이 떠오르고 있습니다. Ola Group 회사 인 Krutrim AI Labs는이 성장의 핵심 플레이어로, 최근 획기적인 비전 언어 모델 (VLM) 인 Chitrarth-1을 발표했습니다. 인도의 다양한 언어 및 문화적 맥락을 위해 설계된 Chitrarth-1은 10 개의 주요 인도 언어와 영어를 지원하며 다국어 AI 솔루션에 대한 중요한 요구를 해결합니다. 이 기사는 Chitrarth-1과 인도의 AI 기능 확장에 대한 영향을 탐구합니다. 목차

chitrarth-1은 무엇입니까? Chitrarth-1 아키텍처 및 사양 훈련 데이터 및 방법론 1 단계 : 어댑터 사전 훈련

2 단계 : 명령 튜닝
• 성능 및 벤치 마크 에 액세스 chitrarth-1 chitrarth-1의 행동
• 결론
  • Chitrarth-1은 무엇입니까?
  • Chitrarth-1 ( "Chitra"-이미지와 "Artha"-의미)는 고급 언어 및 비전 처리를 통합하는 7.5 억 개의 매개 변수 VLM입니다. 인도의 다양한 언어 적 요구를 제공하기 위해 지어진이 도시는 힌디어, 벵골어, 텔루구 어, 타밀어, 마라 티어, 구자라트티, 칸나다어, 말라 얄 람어, 오디아, 아삼 어 및 영어를 지원합니다. 이 모델은 "우리 나라, 국가, 시민들을 위해 AI를 개발하려는 Krutrim의 약속을 구현합니다. 풍부하고 다국어 데이터 세트를 사용하면 편견을 최소화하고 Indic Languages ​​및 English에서 강력한 성능을 보장하여 공평한 AI 액세스를 촉진합니다. Chitrarth-1에 대한 연구는 Neurips 및 Machine Translation에 관한 9 번째 회의를 포함한 주요 학술 저널에 발표되었습니다. Chitrarth-1 아키텍처 및 사양
  • Chitrarth-1은 Siglip (Siglip-SO400M-PATCH14-384) 모델을 기반으로 한 비전 인코더에 의해 향상된 기초로 Krutrim-7B LLM을 기초로 사용합니다. 주요 아키텍처 구성 요소는 다음과 같습니다
  이미지 기능 추출을위한 미리 훈련 된 Siglip Vision Encoder LLM의 토큰 공간에 이미지 기능을 제공하기위한 훈련 가능한 선형 매핑 레이어. 광학적 인 성능 향상을위한 명령어를 따르는 이미지 텍스트 데이터 세트로 미세 조정
  훈련 데이터 및 방법론
  Chitrarth-1의 훈련은 광대 한 다국어 데이터 세트를 사용하여 두 단계를 포함했습니다.
  1 단계 : 어댑터 사전 훈련
  오픈 소스 모델을 사용하여 여러 인디언 언어로 변환 된 다양한 데이터 세트에서 미리 훈련되었습니다. 는 공평한 성능을 보장하기 위해 영어 및 인디언의 균형 잡힌 표현을 유지했습니다. 단일 언어에 대한 편견을 피하고 효율성과 견고성을 최적화하도록 설계되었습니다.
  • 2 단계 : 명령 튜닝
  복잡한 명령 데이터 세트에서 미세 조정하여 멀티 모달 추론 기능을 향상시킵니다. 는 영어 기반의 명령 조정 데이터 세트와 다국어 번역을 활용했습니다 는 다양한 인도 이미지 (성격, 기념물, 예술 작품, 요리)를 특징으로하는 비전 언어 데이터 세트를 포함했습니다. 균형 도메인 표현을위한 고품질 독점 영어 텍스트 데이터.
  • 성능 및 벤치 마크
  Chitrarth-1은 Idefics 2 (7b) 및 Palo 7B와 같은 주요 VLM에 대해 엄격하게 테스트되었으며 TextVQA 및 Vizwiz와 같은 작업에 대한 경쟁력을 유지하면서 다양한 벤치 마크에서 지속적으로 성능이 우수합니다. 또한 주요 지표에서 LLAMA 3.2 11B 비전 지시를 능가합니다. Krutrim은 세 가지 작업에 걸쳐 10 개의 자원 부족 인디 언어에 대한 새로운 평가 제품군 인 Bharatbench를 소개하여 향후 연구를위한 기준을 설정하고 Chitrarth-1의 언어를 효과적으로 처리 할 수있는 능력을 강조했습니다. 샘플 Bharatbench 결과는 다음과 같습니다 자세한 내용은 여기를 클릭하십시오 chitrarth-1

  액세스

  Chitrarth-1은 다음을 통해 액세스 할 수 있습니다 포옹 얼굴 :

  직접 사용 또는 미세 조정. (방문하려면 여기를 클릭하십시오) github : (원본 기사에 제공된 코드) Krutrim Cloud : (탐색하려면 여기를 클릭하십시오)

  chitrarth-1의 행동
  Chitrarth-1의 기능의 예에는 이미지 분석, 이미지 캡션 생성 및 UI/UX 화면 분석 (원본 기사에 제공된 이미지)이 포함됩니다.
  • 결론
  • OLA 그룹의 부서 인 Krutrim AI Labs는 AI 컴퓨팅의 미래를 구축하기 위해 노력하고 있습니다. Chitrarth-1 및 GPU와 같은 기타 제품을 서비스, AI 스튜디오 등으로, 그들은 포용적이고 문화적으로 민감한 AI에 대한 새로운 표준을 구축하여보다 공평한 기술 환경을 조성하고 있습니다.

위 내용은 Chitrarth-1 : Krutrim AI Labs의 다국어 VLM의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!