IBM의 Granite Vision: 기업 인텔리전스를 위한 경량 오픈소스 다중 모달 모델


IBM이 개발한 경량 다중 모달 모델 Granite Vision은 기업의 시각적 문서 이해를 위한 혁신적인 솔루션을 제공합니다. 20억 매개변수의 경량 아키텍처와 뛰어난 성능, 그리고 Apache-2 라이선스 기반의 오픈소스 공개는 연구 및 상업적 활용 모두를 지원하며 AI 기술 발전에 크게 기여할 것으로 예상됩니다.

related iamge

IBM의 Granite Vision: 기업 인텔리전스의 새로운 지평을 열다

최근 IBM 연구팀은 기업 환경에 최적화된 경량화된 대규모 언어 모델인 Granite Vision을 공개했습니다. 이 모델은 시각적 문서 이해에 탁월한 성능을 보이며, 표, 차트, 다이어그램, 스케치, 인포그래픽 등 다양한 형태의 시각 자료에서 콘텐츠 추출을 지원합니다. 단순히 텍스트만을 다루는 기존 모델과 달리, Granite Vision은 시각 정보와 언어 정보를 통합적으로 처리하는 다중 모달 모델입니다.

Granite Vision의 핵심은 20억 개의 매개변수를 가진 경량 아키텍처에 있습니다. 이는 대규모 모델의 높은 성능을 유지하면서도, 기업 환경에서의 효율적인 구현 및 운영을 가능하게 합니다. 과도한 자원 소모 없이도 뛰어난 성능을 발휘하는 것이 Granite Vision의 가장 큰 강점입니다. 또한, 잠재적으로 유해한 입력을 식별하기 위해 테스트 시간에 특수한 안전 분류 접근 방식을 도입하여 신뢰성을 높였습니다. 이는 모델의 안전한 활용을 보장하는 중요한 요소입니다.

성능 측면에서 Granite Vision은 시각적 문서 이해와 관련된 표준 벤치마크에서 뛰어난 결과를 달성했습니다. 특히, 최신 연구 논문의 데이터베이스를 지속적으로 업데이트하는 LiveXiv 벤치마크에서도 높은 정확도를 기록하며 그 성능을 검증했습니다. 이는 모델의 일반화 능력이 뛰어남을 시사합니다.

더욱 고무적인 사실은 Granite Vision이 Apache-2 라이선스 하에 오픈소스로 공개되었다는 점입니다. 이는 연구 목적뿐 아니라 상업적 이용까지 허용하며, 훈련 데이터와 관련 정보에 대한 완전한 접근성을 제공합니다. IBM은 이를 통해 AI 기술의 발전과 확산에 기여하고자 합니다. 모델의 가중치는 https://huggingface.co/ibm-granite/ 에서 확인할 수 있습니다.

결론적으로, Granite Vision은 경량화, 높은 성능, 그리고 오픈소스 접근성이라는 세 가지 강점을 갖춘 혁신적인 모델입니다. 이 모델은 기업의 시각적 문서 이해 능력을 한 단계 끌어올리고, 다양한 산업 분야에 걸쳐 혁신적인 응용 프로그램의 개발을 촉진할 것으로 기대됩니다. 앞으로 Granite Vision이 AI 기술 발전에 어떤 영향을 미칠지 주목할 필요가 있습니다.


*이 기사는 AI가 생성한 내용으로, 일부 정보가 실제와 다를 수 있습니다. 정확한 확인을 위해 추가적인 검증을 권장드립니다.

Reference

[arxiv] Granite Vision: a lightweight, open-source multimodal model for enterprise Intelligence

Published:  (Updated: )

Author: Granite Vision Team, Leonid Karlinsky, Assaf Arbelle, Abraham Daniels, Ahmed Nassar, Amit Alfassi, Bo Wu, Eli Schwartz, Dhiraj Joshi, Jovana Kondic, Nimrod Shabtay, Pengyuan Li, Roei Herzig, Shafiq Abedin, Shaked Perek, Sivan Harary, Udi Barzelay, Adi Raz Goldfarb, Aude Oliva, Ben Wieles, Bishwaranjan Bhattacharjee, Brandon Huang, Christoph Auer, Dan Gutfreund, David Beymer, David Wood, Hilde Kuehne, Jacob Hansen, Joseph Shtok, Ken Wong, Luis Angel Bathen, Mayank Mishra, Maksym Lysak, Michele Dolfi, Mikhail Yurochkin, Nikolaos Livathinos, Nimrod Harel, Ophir Azulai, Oshri Naparstek, Rafael Teixeira de Lima, Rameswar Panda, Sivan Doveh, Shubham Gupta, Subhro Das, Syed Zawad, Yusik Kim, Zexue He, Alexander Brooks, Gabe Goodhart, Anita Govindjee, Derek Leist, Ibrahim Ibrahim, Aya Soffer, David Cox, Kate Soule, Luis Lastras, Nirmit Desai, Shila Ofek-koifman, Sriram Raghavan, Tanveer Syeda-Mahmood, Peter Staar, Tal Drory, Rogerio Feris

http://arxiv.org/abs/2502.09927v1