대본 기획 도우미▸ 
AI 앱 
AI 뉴스 
FireRedASR: 샤오홍슈(小红书)가 오픈소스로 공개한 음성 인식 모델
FireRedASR: 샤오홍슈(小红书)가 오픈소스로 공개한 음성 인식 모델소개
FireRedASR는 2025년 2월 9일 샤오홍슈(小红书)의 FireRed 팀에서 출시하고 오픈소스로 공개한 대규모 모델 기반 음성 인식 모델로, 중국 표준어(보통화) 음성 인식 분야에서 새로운 SOTA(글자 오류율 CER 3.05%)를 달성했으며, 중국어 방언, 영어 및 가사 인식까지 지원합니다.
FireRedASR의 주요 기능:
고정밀 음성 인식: FireRedASR-LLM(8.3B 파라미터)은 공개 테스트셋에서 3.05%의 글자 오류율(CER)을 기록하며 새로운 SOTA를 달성했고, 기존 SOTA 모델 Seed-ASR(12B+ 파라미터) 대비 오류율을 8.4% 감소시켰습니다.
효율적인 추론: FireRedASR-AED(1.1B 파라미터)는 높은 정확도를 유지하면서도 추론 효율을 크게 향상시켰으며, CER은 3.18%입니다.
다양한 시나리오 적용: FireRedASR은 단편 동영상, 라이브 방송, 음성 입력, 스마트 어시스턴트 등 다양한 일상 시나리오에서 뛰어난 성능을 발휘하며, 업계 최고의 ASR 서비스 제공업체 및 Paraformer-Large 대비 CER이 23.7%~40.0% 상대적으로 감소했습니다.
가사 인식 능력: 가사 인식 능력이 필요한 시나리오에서 FireRedASR-LLM의 CER이 50.2%~66.7% 상대적으로 감소하여 매우 뛰어난 적응 능력을 보여주었습니다.
다국어 지원: FireRedASR은 표준어(보통화)를 지원하며, 중국어 방언 및 영어 음성 인식에서도 뛰어난 성능을 보여 활용 범위를 더욱 넓혔습니다.
FireRedASR 모델의 두 가지 핵심 버전:
FireRedASR-LLM
아키텍처: Encoder-Adapter-LLM 프레임워크를 채택하고, 대규모 언어 모델 Qwen2-7B-Instruct와 결합하여 LoRA 미세 조정을 통해 엔드 투 엔드 음성 상호작용을 구현합니다.
성능: 표준어 벤치마크 테스트에서 CER 3.05%를 기록하여 기존 SOTA 모델 대비 오류율을 8.4% 감소시켰으며, 가사 인식 시나리오에서 CER이 50.2%~66.7% 상대적으로 감소했습니다.
특징: 파라미터 8.3B, 극한의 정확도에 집중하여 전문 자막 생성과 같은 고사양 시나리오에 적합합니다.
FireRedASR-AED
아키텍처: 어텐션 인코더-디코더(Conformer 인코더 + Transformer 디코더) 기반, 파라미터 1.1B.
성능: CER 3.18%로 12B 파라미터의 Seed-ASR을 능가하며, 추론 효율이 더 높습니다.
특징: 정확도와 연산 효율의 균형을 갖추어 라이브 자막, 음성 어시스턴트와 같은 실시간 애플리케이션에 적합합니다.
FireRedASR의 기술적 하이라이트:
다양한 시나리오 적용: 단편 동영상, 라이브 방송 등 일상 시나리오에서 CER이 23.7%~40.0% 상대적으로 감소하며, 중국어 방언과 영어를 지원합니다.
오픈소스 생태계: 모델과 코드가 오픈소스로 공개되었으며(GitHub), 산업 등급 설계로 커뮤니티의 2차 개발을 지원합니다.
학습 전략: LLM 버전은 대부분의 파라미터를 고정하고 인코더와 어댑터만 학습하여 사전 학습된 능력을 보존합니다.
FireRedASR의 활용 시나리오
지능형 음성 상호작용: FireRedASR은 스마트 음성 어시스턴트, 음성 입력기 등 시나리오에 적용되어 고정밀 음성 인식 서비스를 제공할 수 있습니다.
멀티미디어 콘텐츠 이해: FireRedASR은 동영상 자막 생성, 가사 인식 등 멀티미디어 콘텐츠 이해 시나리오에서 뛰어난 성능을 보입니다.
일상 시나리오 적용: FireRedASR은 단편 동영상, 라이브 방송, 음성 입력, 스마트 어시스턴트 등 다양한 일상 시나리오에서 뛰어난 성능을 발휘하며, 업계 최고의 ASR 서비스 제공업체 및 Paraformer-Large 대비 CER이 23.7%~40.0% 상대적으로 감소했습니다.
FireRedASR 관련 링크:
프로젝트 주소: https://github.com/FireRedTeam/FireRedASR
논문 주소: https://arxiv.org/abs/2501.14350
