푸위 링비 164

浦语·灵笔는 书生·浦語 대규모 언어 모델을 기반으로 개발된 비전-언어 대규모 모델로, 뛰어난 이미지-텍스트 이해 및 창작 능력을 갖추고 있으며 다음과 같은 여러 가지 장점을 제공합니다.

이미지와 텍스트가 교차되는 창작: 浦语·灵笔는 사용자를 위해 이미지와 글이 어우러진 전용 기사를 제작할 수 있습니다. 생성된 기사는 문채가 뛰어어나고 이미지와 글이 서로 어우러져 몰입적인 독서 경험을 제공합니다. 이러한 능력은 다음 단계를 통해 구현됩니다.

사용자 지시를 이해하고 요구 사항에 부합하는 긴 기사를 창작합니다.

기사를 지능적으로 분석하여 삽화의 이상적인 위치를 자동으로 계획하고 이미지 콘텐츠 요구 사항을 결정합니다.

다층 지능형 선별을 통해 이미지 라이브러리에서 가장 완벽한 이미지를 선별합니다.

풍부한 다중 모달 지식을 기반으로 한 이미지-텍스트 이해: 浦语·灵笔는 효율적인 학습 전략을 설계하여 모델에 방대한 다중 모달 개념 및 지식 데이터를 주입함으로써 강력한 이미지-텍스트 이해 및 대화 능력을 부여합니다.

뛰어난 성능: 浦语·灵笔는 여러 비전-언어 대규모 모델의 주요 평가에서 모두 최고의 성능을 달성했으며, 여기에는 MME Benchmark(영문 평가), MMBench(영문 평가), Seed-Bench(영문 평가), CCBench(중문 평가), MMBench-CN(중문 평가)이 포함됩니다.

저희가 오픈소스로 공개한 浦语·灵笔에는 두 가지 버전이 포함되어 있습니다.

InternLM-XComposer-VL-7B : 书生·浦語 대규모 언어 모델을 기반으로 한 다중 모달 사전 학습 및 다중 작업 학습 모델로, MME Benchmark, MMBench, Seed-Bench, CCBench, MMBench-CN 등 다양한 평가에서 뛰어난 성능을 보입니다.

InternLM-XComposer-7B : 이미지-텍스트 교차 기사 창작 및 지능형 대화를 위한 미세 조정(fine-tuning) 모델입니다.

浦语灵笔는 현재 오픈소스로 공개되었으며, 동시에 GitHub, Hugging Face 및 魔搭社区(ModelScope)에 출시되었습니다.