바이두 ‘ERNIE 5.1’, 전모달 기반 위에 효율·추론 더했다

텍스트·이미지·영상·음성 통합한 5.0 기술 계승…모델 규모 줄이고 에이전트·검색 능력 강화

 

[전모달(全模态, Omni-modal)은 텍스트·이미지·음성·영상처럼 서로 다른 형태의 정보를 하나의 AI 모델이 함께 이해하고 생성하는 기술을 말한다]_ 

중국 최대 검색·인공지능 기업 바이두가 차세대 대형언어모델 ‘ERNIE 5.1(文心大模型 5.1)’을 앞세워 중국 AI 시장의 주도권 경쟁에 속도를 내고 있다. 텍스트와 이미지, 영상, 음성을 하나의 구조에서 처리하는 ERNIE 5.0의 기술적 기반을 활용하면서도 모델 규모와 연산비용을 크게 줄이고, 추론과 검색, 지능형 에이전트 능력을 강화한 것이 특징이다.

바이두는 2026년 5월 9일 ERNIE 5.1을 공식 출시했다. 회사는 5.1이 기존 ERNIE 5.0의 사전학습 결과를 이어받아 전체 매개변수 규모를 약 3분의 1로, 실제 작동하는 활성 매개변수를 약 절반으로 줄였다고 밝혔다. 같은 규모의 모델과 비교한 사전학습 연산비용은 약 6% 수준이라는 것이 바이두의 설명이다. 

 

텍스트부터 영상·음성까지 하나의 구조로

ERNIE 5.1의 출발점이 된 ERNIE 5.0은 바이두가 개발한 2조4천억 매개변수 규모의 원천 전모달 모델이다. 기존 멀티모달 AI가 텍스트 언어모델에 이미지·음성·영상 처리 모듈을 추가하는 방식이었다면, ERNIE 5.0은 처음부터 모든 정보를 하나의 자기회귀 네트워크에서 학습하도록 설계됐다.

텍스트에는 다음 토큰 예측 방식을, 이미지와 영상에는 다음 프레임 및 화면 크기 예측 방식을 적용한다. 음성은 의미에서 세밀한 음향 정보까지 단계적으로 예측하는 구조를 사용한다. 서로 다른 정보가 하나의 공통 공간에서 학습되기 때문에 텍스트로 영상을 분석하거나, 영상과 음성의 관계를 이해하고, 여러 형태의 콘텐츠를 연계해 생성할 수 있다는 설명이다.

ERNIE 5.0은 전체 매개변수 가운데 매번 약 3%만 활성화하는 초희소 혼합전문가 방식도 적용했다. 2조4천억 개라는 대규모 매개변수를 확보하면서 실제 연산에 필요한 비용을 낮추기 위한 설계다. 

 

5.1의 초점은 ‘더 큰 모델’ 아닌 ‘더 효율적인 AI’

ERNIE 5.1의 핵심은 모델의 외형을 키우는 것이 아니라, ERNIE 5.0이 학습한 지식과 능력을 상대적으로 작은 구조에 효과적으로 이전하는 데 있다.

바이두는 이를 위해 ‘다차원 탄력적 사전학습’ 기술을 적용했다. 하나의 대규모 모델을 학습하는 과정에서 네트워크의 깊이와 전문가 수, 매번 활성화하는 전문가의 비율이 서로 다른 다수의 하위 모델을 함께 훈련한다. 이후 용도와 연산환경에 적합한 하위 구조를 선택해 별도의 대규모 재학습 없이 활용할 수 있다.

이러한 방식은 여러 크기의 모델을 각각 처음부터 훈련해야 했던 기존 방식과 비교해 개발기간과 비용을 줄일 수 있다. 또한 기업은 보유한 서버와 서비스 목적에 따라 성능과 운영비용 사이의 균형을 선택할 수 있다.

 

검색·추론 넘어 스스로 일하는 에이전트로

바이두가 ERNIE 5.1에서 특히 강조하는 분야는 지능형 에이전트다. 에이전트는 사용자의 질문에 답하는 수준을 넘어 작업을 계획하고, 필요한 도구를 선택하며, 여러 단계를 거쳐 결과를 만들어내는 AI를 뜻한다.

이를 위해 바이두는 학습, 추론, 보상평가, 에이전트 실행 과정을 분리한 ‘완전 비동기 강화학습’ 시스템을 구축했다. 각 작업을 서로 다른 서버와 연산장치에서 독립적으로 처리해 자원 이용률을 높이고, 시간이 오래 걸리는 일부 작업 때문에 전체 학습이 지연되는 문제를 줄였다고 설명했다.

여러 분야의 전문가 모델을 개별적으로 학습한 뒤, 그 능력을 하나의 모델에 통합하는 다단계 후속학습 방식도 적용했다. 코딩, 수학적 추론, 검색, 도구 사용 등 서로 다른 능력을 동시에 강화할 때 특정 능력이 향상되는 대신 다른 능력이 떨어지는 현상을 줄이기 위한 것이다.

이에 따라 ERNIE 5.1은 복잡한 질의를 검색하고 정리하는 심층검색, 여러 프로그램을 연속해서 사용하는 도구 호출, 문서·스프레드시트 처리, 전문적인 글쓰기와 지식 질의응답 등에 초점을 맞췄다. 바이두 첸판 플랫폼에서 제공되는 ERNIE 5.1의 문맥 길이는 12만8천 토큰, 최대 출력 길이는 6만5천536토큰이다. 

 

중국 AI 모델 평가에서 상위권

바이두에 따르면 ERNIE 5.1은 2026년 5월 검색형 AI 성능을 평가하는 ‘Arena Search’에서 1천223점을 받아 중국 모델 가운데 1위, 세계 4위에 올랐다. 공개 전 시험 버전인 ERNIE 5.1 Preview도 LMArena 텍스트 부문에서 중국 모델 1위, 세계 13위를 기록했다.

다만 이러한 순위는 특정 시점과 평가방식에 따른 결과다. AI 모델의 실제 경쟁력은 평가점수뿐 아니라 정확성, 응답속도, 운영비용, 서비스 안정성, 기업 현장에서의 활용성 등을 종합해 판단해야 한다.

 

바이두, AI 클라우드 성장과 연결

ERNIE 5.1은 바이두의 AI 클라우드 전략과도 밀접하게 연결돼 있다. 바이두가 발표한 2026년 1분기 실적에 따르면 회사의 AI 클라우드 인프라 매출은 88억 위안으로 전년 같은 기간보다 79% 증가했다. GPU 클라우드 매출도 같은 기간 184% 늘었다.

바이두는 ERNIE 모델을 독립적인 챗봇에 머물게 하지 않고 검색과 문서작성, 클라우드, 자율주행, 기업용 업무시스템 등에 연계하고 있다. 보다 작고 효율적인 ERNIE 5.1은 AI 모델의 성능 경쟁을 실제 기업 서비스의 비용 경쟁력으로 연결하려는 전략적 모델로 풀이된다. 

 

초거대 경쟁에서 효율 경쟁으로

ERNIE 5.0이 텍스트·이미지·영상·음성을 하나의 모델에서 이해하고 생성하는 기술적 기반을 제시했다면, ERNIE 5.1은 이 기반을 보다 작고 경제적인 모델로 전환하는 데 초점을 맞췄다.

중국 AI 시장에서도 이제 단순히 매개변수가 많은 모델을 만드는 경쟁에서 벗어나, 적은 연산비용으로 높은 성능을 내고 실제 업무를 자율적으로 수행하는 모델을 만드는 경쟁이 본격화되고 있다.

바이두 ERNIE 5.1은 이러한 변화의 대표적인 사례다. 텍스트·영상·음성을 통합하는 전모달 기술과 비용 효율적인 에이전트 모델이 결합하면서, 중국 AI 산업의 경쟁 무대도 챗봇에서 검색·콘텐츠 제작·업무자동화·기업용 지능형 서비스 전반으로 빠르게 확대되고 있다.

농심 켈로그 에너지바K 크런치넛(30... 16,900원
농심 켈로그 에너지바K 크런치넛(30g 12개), 160g, 3개
https://ads-partners.coupang.com/image1/ucN1Y1rP29QhMvULuUltRXZr37erWrqxez9-n5kTJHg5D5xqwHryCzzBLD2qiEWi-LDgSV7xz-N8hGy_FuYpN7fbn5LnNahZt7hdFhcyLI_ogMr10KqPuudJ_L9x-P8KeAfHQd6YVh8eq6a2iZmYTGhE8Vg8IncxqGpjWSOtZbOesqOM-OMCZanNcLBZOD-tLdPNu0eQlSSDBXjOwzLk_Hun_ndUkA3JMi-GC0ZJvJ7ZwxBTIAhDnHG96f18E5nOsrsbddnDpany8TAgE5au7OlGY7l6qKug3W9dDMxvfoyfUcXHNMQzgUhQFXBEkytGyyw-u7P5oYdIuJcfePErIblQiHFZQlEEH_uDCBL2vQjxSO7hQoM4S7EDPUv0z-czpPhCnzDkoQjn6jJ8PoQn_MSi2k3b8RQ-t0kPWJim9aVysUEPFdr1nM7saA7z4pxP7nY5GjaCcysdDzU_3mHGxXgBV14WYvtZE0r0xN_b8giwF_73jaYkc9iSQ20BOJ_2Y2c9HXIeAcNOTMYzN9KGCcQnrLuZh0YwAVjx3NpvWbdsT_Elq9l9eXNl6Z-KTAkAF6E25DhbvhzBvhaQLjhfwAJeuFMD
자세히보기
위드슬립 멜라토닌 원적외선 수면 패치... 9,900원
위드슬립 멜라토닌 원적외선 수면 패치 슬립톡 36개입
https://ads-partners.coupang.com/image1/E7M-akbmO2RvXMZIE__AcYaaPhtWScXgCVYsheRElnHJcGbErsQ6jJ5I52yppCyM5V9DNQ0fQSDQ4ubd6_yWNMeFaZWMbLpuRDsZDR3GrCLB8h1Je5QvEq5DP97MxA2NxJwE8wpAZpQtHpSimsZRhBmDOoHPXfGB-8wjoOFqMGHYHRNHAXDm5xI0RgQMTOV53eV1nruJdTHQW6Vma2g5Ih7A62bSUOw4t58FKBh0Fp7wjzWjncRm6A_-XHEQyLU6cYjw_Z-9EuN-8hMq5-2pxXo122JAumn3Gj_Rp_wXYfJ5yylaTBoOwbotec7oV6FVfiURpR4wUvHT9NTvdKdQuduKl2s5iOpj3VtCl5YMf_eb2o_YzwVHNVqFwPgCMMEsMFsavHmqC2Ddu-7J6lc3ER2nA_Uro26fnipymeYGWOfEZab-0PkUHoU-8HqAdEqLUvJUcrgXDmRVRrzXGR1w1hwDBRAGO-3lJVqnNFgzgz-1LlZASgPwXEFKDyFhgzYfaiw1XVP3fBO7cSjs1SlfP94hdz4e-ZaFXQWimsJ6AWlibkzBSFcboQ7EI-lIY51UbokoqeAnww308GQw_4JZR9ldCMuYDXijKQSr6wsC
자세히보기
두보식품 하루한콩 튀기지 않아 담백한... 12,260원
두보식품 하루한콩 튀기지 않아 담백한 구운 파바빈 군옥수수맛, 15g, 22개
https://ads-partners.coupang.com/image1/NxMMCcBAKEyFIDV-N-zz-yYc620-VSzE0N6APmwYg8WGe74QLAEA-UkKQxS2lJj0o2MYRr2eEQPeL5AsP75j6jK28fDpsOAceiA6m31u1qCTNIP5_QXo2q-WBz6-E5LlBfOtG4YZ77qL6UUq2-A0SfAXFA_UwQyuLi6KHMh2Hwldc2vlzDYzhQn7TBbJ9TQhG5mtsIxIRbdxAdXeJ8S585fN04US-GqFTYPb164X9hSuHLFTPIbjRGut_6JU3MF-Gh0fKuyRKd2kvwdNjPEsUHEwp_XwO2forG33HJm5YuAh9GWAPKY1bxl801eR8FgSQV7Eolmd_K5TVieI38klYXTFbelzoKIBVioMuh5UletN3fRid7faQ5EWU3rtYQEfGrIlyqbjaaDdqPa1PiVE4LXGK_pLpAnuklMGMM3ut3_3OvOZcN2SKTUKjfiD1_HoxddFv70JH67EDNwN9d5VZ0iLdAIgTHsF8DvQ-n9-NsaRuvCr3p3BgKYsBogMqzQtEWDzTp5UgLwkm-AMd6g6Un8HtXzK4uW8dYv8D0b2UK-qYYdGo40vxHYX6ewIA1YxaHrlEDc=
자세히보기
락토핏 다이어트 유산균 60p 13,500원
락토핏 다이어트 유산균 60p
https://ads-partners.coupang.com/image1/gokDlNtJt626gsQqgsRfgO8p3KG-SIMo8-lV9cB5n-yQZ-IQ8PMA4FIIjFtAiGNFkwNgytEH5INEeCzdlQVuZy4K5342BQx8ymRQicEgEN72mk-Vjk3jqhp402kjfHZGqsjEKfwLf9lvoLukgmbtzbwN4RDJN3AaJd6v5XIO6jlCuO8Xjkr24JR6KMRUfGJ7Qgx2ZM2c-Zi-5Y-jV13TjLuelS5gQ7C9h5I30SI6uFdSwYUeSPAgqgBiucaggKRMhL_SYuWnNIfAbwwwO91ncl1mZDtCmHogw1V1RTvU2Tr0u-uViT9A1RIGGCgbRjfkpZpwPcY1SFc3HMIypwgtN-7xFV9m9GkCr3WMIeUfks_7Xq8oYQCysLWDV72YRd8SBrNBoGD2cZuimzOewrlOYB27Gm9Z6LxJf6d62xNHztIU-EB8-Xs8FutAaaeXlJpH1lhObJ127FPIjY--pnZxfgiQ6WXRObuQKZ6RiN9g0-zFDrzXZthoVIjFlCfYsvTgIuI51FlJvXlSMc23jSiIOiKftop3OVJI21-sGypEunS-F_Tgps7ksWF6irfMceNNqAjg6YWspYpw-Mn_e_GE_Q==
자세히보기
두보식품 하루한콩 튀기지 않아 담백한... 9,900원
두보식품 하루한콩 튀기지 않아 담백한 구운 병아리콩 군옥수수맛 22p, 330g, 1개
https://ads-partners.coupang.com/image1/Iu1rfzE6NY4cqHMnItWkLwfvIy08khVJ4FqA54EIjAEEEkcJBceZ1BPnLUV68LBSq00Bf8QgZUDQ05mhBqDKBJ4TAl_olxzeyyVlbt6bTcz3PBgCnJkLoXi1HYtAzlFZRrpgUGJ3Nw0yJ17C1z7t4N-NmThyz4Anpick3TA8nrdAesy6aQtPUFREUQlbIrToAZ-CwmLtVKm70PeMVv9trBj8iDTsjhT0tWCwle9J7Pidj1Xi1ks3r6nSHtBfBQBKmxsXf11QZgUAeracCp8ISZZW4J1vKOJMBHSY_Qa1zaIBpq3B73d8Wc8xAuyhg2B7mDS3FqNxAPDBd5MYbjNgmfgGwR2qGBZVEYRjIO9w7z9w0kNt1a4kRc36N5BW7Nuf5hdCQFitEX6J81YqJHmamZoW_MODET7bCSWCE9ODJwunCLjndPC2cHsl5cKofsc5_nI9SOUF0aE5sS7guWwNi9jzoEWnkD2jj22NrsZBkuclSI6b_ebNNsStYc6pV1JwNggtorg_-JgSlTZmUrq09IFV929aYydeORKPCXo7xcIaeEoQWQCimrd3mUMgjoYDaRs=
자세히보기
건강곡간 치아씨드 통 5,980원
건강곡간 치아씨드 통
https://ads-partners.coupang.com/image1/x_4e0B5LYYb00uBvx2uAOaPsqWXQO2LUYB1jzOuZKEMYDzD-SKRLRNbphGkVU_NSWOoq3BdXOwh4BWhD9JmGuHimb0YA6eTktlamhSjFyPf9RTYV11es7xFKGfRRgHrXML9qD1d-o8_gXXkpRIP0F-ygKyITJ8btcib54juDU2A8WnwPHIPAOWlJ4f1wFYlLEwdaJ40vMrsG2HMkFZkbmB9Wbi3jDLYnumCVyb5AAqk3S8jC26clPnarRrzmEj1Bz9eWvZzQA-Du-HOrtu5oKkLWXPRtWY117A-vkPnVWqqa60jaCBWgWDiz_k53zCcyQyq6mBBhwd7hS9EHWa8_INRalMUVr2nbXoLDApcK_5WNHz9GUDngzxS6-kvJY-N-4SvSWzE-Cy_4kP8wHzp3x-wwElSYStaF8JBVt2u_x6T43OAEROIi8rKkvif2iS7mQGSk1mDLDPr9na93kECKaWSKvXoDDsiQ9QJOIJHyOF0WDbl7ZBUlE3knlfQwfD5jKM9RE16hhO8TtxErUwRM1_q-BkMoQZXFyYlFLIxdHHQAJDMp56A1QpSbT04hQ_P5geefXE-KPnfFQfiuWZ3-zw==
자세히보기
숨편해 소프트 편안한 입막음 테이프 ... 5,280원
숨편해 소프트 편안한 입막음 테이프 60p
https://ads-partners.coupang.com/image1/iY7OYxESKmg3c8OsiZc9y7fyq5WIHBFx5rJJUYait_lN0d4uwtUYkeCEmXmzFEoPKPOlDQDAl1hB8hNQ_pFa7T2oYKVkvopmg0U-ffBMIF8J9egRLMheJ7I6hUmbpAp1ty-eA9ozeafeQUBulZOdN8mhR_b06PPNJ8y-a6nYGNkjG_y0GVD_4ARVqp440gkbmzzZFIB2qSKtC-haAkn3xq6EMKd8XZvH9oCMrh5Z0pLgqrZBUJ7SQKq5ssUn3b2bmKo-Eh5hhM8AMoZEIhzAPMDNB5PYHjjar_cHitpXwxvtURHDxo--HErf-LZlp9KI_taqMVaxPvU3RNj90a4egRmyEf5D2-NrVnuLbrvPjf3qhpgLpzQOxg_z3W7GPwLzfZb8breS7QqFdJbPncPGAsGaow5E1cZRXSILkv-KzPI8_96sjB1TZvKMM4rM54tLoaMrNeipPtuRl-YL5x5OU_0gy8gabaw5AoeKeGdeexB6DwbvCNzLuz9UHQzuUW_i1s5cqrb1dC2t_Rqy3il_MD4XyTQla0Ct2Co9zkqnZ6Zo3Dpyre7w0ZzWgzt2ZiaJqxPGNf2zrIMLs32XnWsn-6OWAIk4ngXg7zHxMGvE
자세히보기
이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.
시노인사이트 편집부 기자 bats21@naver.com
작성 2026.08.01 15:23 수정 2026.08.01 15:23
727

RSS피드 기사제공처 : 시노인사이트 SINOINSIGHT / 등록기자: 시노인사이트 편집부 기자 무단 전재 및 재배포금지

해당기사의 문의는 기사제공처에게 문의

댓글 0개 (/ 페이지)
댓글등록- 개인정보를 유출하는 글의 게시를 삼가주세요.
등록된 댓글이 없습니다.
Shorts NEWS 더보기
강남3구 줄줄이 하락! 그런데 성북·중랑·금천은 올랐다?
“가슴 펴고 앉으세요” 이 말만 믿었다면? 허리 통증의 반전
[이형주교수의 이야기/오디오에세이]RESTART | 제65회 “정직하게 ..
건강하려고 단백질 줄였는데… 사망 위험 117% 증가?
수험생 응원가-청춘만만세
서울 전셋값 5억 돌파! 무주택자 벼락거지 피하는 정부의 파격 대책?
치매 위험, 뇌가 아니라 팔·다리 근육에 단서가? 189만 명 연구 결과..
비싼 화장품보다 중요한 건? 뷰티업계가 주목한 이것
해남에 12,000평 규모?! 역대급 아열대 체험 농장
당뇨병 있다면 꼭 보세요! 알츠하이머 위험 1.53배의 진실
노인일자리 참여자 79% 의료비 절감 체감
푸르게푸르게 푸른문학
푸른문학사 - 이은별 대표
진원 고성일 시인 데뷔 축하 송
독도, 그날의 푸른 감동
푸른문학사 - 이은별 대표 작시
난방비 걱정된다면 지금 확인하세요! 겨울철 복지 혜택 총정리
국화꽃으로 뒤덮인 서산의 가을
AI가 감염병 치료제까지 찾는다? 정부 3개 부처가 모인 이유
(주)원WK엔터테인먼트
상림공원 꽃무릇 - 안청자 시인
상림공원 꽃무릇
11일 오후 2시 통합시 무안청사에서 백승주 균형발전부시장이 "27년도,..
어머님 아버님 사랑합니다-카톡을 넘기며
어머님 아버님 사랑합니다-카톡을 넘기며
커피의 향기
스킵(Skip)
엽서(Postcard)
유튜브 NEWS 더보기

영암에 이런 농장이? 멜론농장 체험부터 디저트까지! 야미야미팜

[한기범농구교실/고양점]한기범농구교실 12월훈련 "탄성 로프를 활용한 지역방법 수비훈련" #드리블기능테스트 ...

[방생특집] 방생은 물고기만? 두 갈래 방생의 의미 | 방생 뜻·하는 법 | 서원암

"국내산이라더니 중국산" 온 가족 밥상에 오른 중국산 식품 TOP7

#차기자의칭찬합시다 #지은숙가수

2026.11.03 용인블루인택시협동조합 신사옥 이전 기념행사 #협동조합택시 #협동조합 #용인블루인 #쿱모빌...

"고양시는 환경단체의 가짜 선동에 춤추는 꼭두각시인가?"스프링힐스 18홀 증설 논란 15년, 산황동 리포트

(MBN 방송출현)초고령 사회의 희망을 짓다 – 박은정 대표의 ‘성공의 한 수’

미쳤나봐 (Crazy in Love) | 설레는 첫사랑 감성 K-POP

목포쫀드기 쫀박스 과거 옛추억을 찾아서

해남 땅끝에서 만나는 아열대 바나나 숲과 농부의 꿈

푸른문학사 -이은별 대표 작시

이탁규회장

(주)원WK엔터테인먼트

과학기술인 소통의 밤

학여울역 세텍 건축박람회에 청우산업(주) 이동식황토방이 참가합니다!

제15회 글로벌 자랑스러운 세계인 대상 개최…국제미디어그룹 창립 19주년 기념, 13개 분야 공로자 선정

모두의 아이디어 #5 이것이 대한민국입니다.

2026여수 해양창업 진로페스타 전남대학교 여수캠퍼스 산학연구관 및 도서관 일원 11월 10일 유튜브라이브

상리종합사회복지관 사회보장특구사업 결과보고 영상

  • 전자책/종이책
  • 다이어리