AI 과학 보고서, 문장과 인용을 따로 검증…NLPCC 공동평가 주목

마카오 3~5일 회의 일정…실험 결과·참고논문과 주장의 일치 평가

 인공지능(AI)이 작성한 과학 보고서가 근거를 정확히 옮겼는지 평가하는 연구 과제가 공개돼 있다. 실험 결과에서 결론을 과장했는지와 참고문헌이 실제 주장을 뒷받침하는지를 나눠 살피는 방식이다. 11월 3~5일 마카오 일정으로 안내된 자연어 처리·중국어 계산 국제회의(NLPCC 2026)의 공동평가 과제로, 매끄러운 문장 뒤의 증거를 따로 확인하는 연구 흐름을 보여 준다.

 중국컴퓨터학회(CCF)의 행사 달력은 제15회 NLPCC의 개최지와 기간을 마카오, 11월 3~5일로 제시한다. 마카오대학이 운영하는 과학 보고서 신뢰성 공동평가 안내는 실험 결과에 대한 진술의 충실성과 외부 문헌에 대한 인용의 충실성을 두 평가 분야로 설정했다. 회의 일정과 공동평가의 접수 기간은 서로 다르다.

 해당 과제의 공식 페이지에 따르면 참가 접수와 평가 제출은 이미 마감됐다. 최종 결과는 6월 30일 공개됐으며 자료와 도구, 평가 안내를 확인할 수 있다. 따라서 이번 주의 회의 소식을 새로운 참가 모집으로 읽을 수는 없다. 11월 회의 일정과 연결해 이미 공개된 연구 과제의 구조를 살펴보는 것이다.

 첫 번째 분야는 실험 근거와 AI가 만든 주장 문장을 함께 제공한다. 평가 시스템은 각 문장이 근거의 범위 안에 있는지 판단한다. 문단 전체가 그럴듯하더라도 한두 문장이 실험에서 확인하지 않은 내용을 포함할 수 있다는 문제를 겨냥했다. 문장의 자연스러움과 증거의 충분함을 별도로 평가하는 설계다.

 두 번째 분야는 하나의 과학적 주장과 인용된 논문의 구조화된 본문을 제공한다. 논문이 주장을 직접 지지하는지, 일부만 지지하는지, 주제가 비슷할 뿐 근거가 되지 않는지, 무관한지를 나눈다. 관련 근거가 있는 문단도 찾아 제시하도록 했다. 참고문헌이 존재하는지보다 어떤 관계로 연결됐는지를 묻는 방식이다.

 이 차이는 연구 결과를 소개하는 기사에서도 중요하다. 한 재료가 제한된 실험 조건에서 좋은 성능을 보였다는 결과와 어떤 환경에서도 같은 성능을 낸다는 주장은 범위가 다르다. 원문에 조건이 붙어 있는데 요약 과정에서 빠지면 결론의 강도가 달라진다. 이는 실제 참가 자료의 문장을 옮긴 것이 아니라 보고 오류가 생기는 구조를 설명한 예다.

 인용 오류 역시 가짜 논문에서만 생기지는 않는다. 실재하는 논문을 붙였더라도 해당 논문이 그 주장을 검증하지 않았다면 근거가 되지 않을 수 있다. 같은 기술을 다룬다는 이유로 효과와 안전성까지 입증된 것처럼 쓰면 관련성과 지지를 혼동하게 된다. 두 번째 평가가 논문과 주장 사이의 관계를 여러 단계로 나눈 이유다.

 이 과제는 시험 자료를 처리하는 과정에서 인터넷 검색 등 외부 연결 도구를 사용하지 못하도록 안내한다. 모델 자체의 오프라인 판별 능력을 보려는 평가 조건이다. 이는 실제 연구와 보도에서 원자료 검색이 불필요하다는 주장이 아니다. 제공된 증거 안에서 어떤 판단을 할 수 있는지 측정하기 위한 제한이다.

 평가 조건은 결과의 해석 범위를 결정한다. 시험 자료가 충분히 제공된 환경에서 좋은 점수를 얻었다고 자료 수집부터 검증까지 모두 자동화할 수 있는 것은 아니다. 실제 업무에서는 어떤 원문을 찾아야 하는지 정하고, 여러 자료 사이의 차이를 비교하는 과정도 필요하다. 제한된 과제의 성능과 전체 업무의 성능은 나누어 평가된다.

 근거 문단을 찾게 한 설계는 사람의 후속 확인과도 연결된다. 시스템이 정답이라는 표시만 내면 사용자는 판단 이유를 다시 찾아야 한다. 관련 문단이 함께 제시되면 어떤 조건과 수치를 확인했는지 비교할 수 있다. 다만 근거 위치를 제시하는 기능도 잘못된 문단을 선택할 수 있어 결과를 그대로 승인하는 절차와는 구분된다.

 연구기관과 출판 현장에는 이런 평가를 작은 작업 단위로 나누는 방식이 참고가 된다. 실험 수치와 문장 사이의 비교, 조건의 누락 여부, 인용의 지지 관계는 서로 다른 오류를 찾아낸다. 한 가지 점수로 글 전체를 평가하면 어떤 부분이 취약한지 드러나지 않을 수 있다. 오류 유형이 보일수록 수정 작업의 책임도 구체적으로 정할 수 있다.

 공개 자료의 이용 조건 역시 평가 도구와 함께 확인할 부분이다. 페이지는 대회 기간 자료의 재배포와 재가공에 제한을 두고 대회 뒤 연구용 공개에 관한 안내를 제시한다. 자료가 인터넷에 있다는 사실만으로 모든 사용 권한이 생기는 것은 아니다. 실제 이용 시에는 해당 저장소와 자료의 현재 허용 조건이 기준이 된다.

 이번 기사는 개별 참가 모델의 순위나 점수를 새 성과로 소개하지 않는다. 공식 안내에서 확인한 것은 평가 분야와 자료, 접수 종료와 결과 공개 시점이다. 어느 시스템이 현업에 가장 적합한지 판단하려면 자료 구성과 오류 유형, 실제 사용 조건을 더 살펴야 한다.

 평가 자료의 정답 역시 어떤 근거를 기준으로 정했는지 설명될수록 활용 가치가 높아진다. 사람 사이에 해석이 갈리는 사례를 어떻게 처리했는지가 있어야 점수의 범위를 이해할 수 있다. 검증 도구를 만드는 연구에서도 판단 근거의 공개가 중요한 이유다.

 NLPCC 공동평가는 AI 글쓰기의 품질을 표현 능력과 근거의 일치로 나눠 본 사례다. 과학 보고서의 신뢰는 참고문헌의 개수나 문장의 유창함만으로 만들어지지 않는다. 어떤 실험에서 어떤 조건으로 나온 결과를 어디까지 말할 수 있는지 추적할 수 있을 때 검증의 출발점이 마련된다.

[참고자료]
중국컴퓨터학회, NLPCC 2026의 마카오 개최지와 2026년 11월 3~5일 회의 일정.
마카오대학교 NLP2CT 연구실, NLPCC 2026 과학 보고서 신뢰성 공동평가의 두 분야·평가 조건·접수 종료·결과 공개 안내.

 

    NLPCC任务分别检验科学陈述与引文
 NLPCC 2026相关共享任务关注AI科学报告的可靠性,分别检查陈述与实验结果、引文与论文证据的关系。任务已结束报名,最终结果于6月30日公开,不能把11月3日至5日的会议日程理解为新的征集期。评测同时要求定位支持证据,并限制测试时联网。

[어휘풀이]
陈述 / chénshù / 진술
引文 / yǐnwén / 인용문
实验 / shíyàn / 실험
证据 / zhèngjù / 증거
可靠性 / kěkàoxìng / 신뢰성
报名 / bàomíng / 참가 신청
评测 / píngcè / 평가
定位 / dìngwèi / 위치를 찾다

락토핏 다이어트 유산균 60p 13,500원
락토핏 다이어트 유산균 60p
https://ads-partners.coupang.com/image1/kDcGd5RVozX0PrzAkPuuHnrEZvDmargQ6ndRo8LXukvfYe46Z1lxOiJmTOfYCAyJhZnBbgOIIKY37qlsU89kfI9BCIhBF3B4cnnCctdWj99Or3NjrxsofYaYRLOtgW73ZvZNGBwCww08V26-hU5pka7CS4uNyO_i0emjGjcZMCdwQGzFm_Qsupz2il5RpoQd5TxNEwZSCowtg4pj9xVC_wgSFOGh4tfpwlUVw1i0ulgR0lm8Xl0lPoGMWvAHOa8ypRkG1YhtUd9Ty86FNCS0GbbzCxyNpf0iB-Xd2N32jEgsro-0f7wb3foHiYxfcVMoT_-aqFegdl3cCVno-efQ6j-klBBDfw5W23EXOafKWGwtkuADIITcJ6BAIkzJTutImidNzW7IjAVrNrk51sLrbfpdXSJh9AQzhkbmfp1ZgaZ4iOwWNop6WfiW7BFqRsUxwxT8ACJQID2xf7hUQGS38agP47DpUaEmVAwKMNTdXzaM9bF7_1l8aE0xT_ZO07bIubAExEn4AKrf9O52DWqHxP5pp1kcMhJj0Mmukw2ez9UTlvweBx65_HHOJYJgKlnyIN5elQMqjm452mwc4PWR
자세히보기
두보식품 하루한콩 튀기지 않아 담백한... 9,900원
두보식품 하루한콩 튀기지 않아 담백한 구운 병아리콩 군옥수수맛 22p, 330g, 1개
https://ads-partners.coupang.com/image1/Bfepe20hk2siUClpBYxOVUGhLWmLcNqmArvprX1LYtoTrFsAq_HbWYTKWPTHOhKWDr54exMifOzufbLc0SC_WN0md9p7OcbPLwxyDnNMR9pa-ZcvoUGrENOr0MqAxchEt3Rnuabf6Ox1ABks21GN1BtMx1g4WqWijtra_7otWC1Xh61ZkJF8qbWEsFkVFFmXd1yFRUkn-vsQ1zCHGjepZEZlj9t6OXIJablhkoqrO96H031JI2LTXQb5_T8y-YHWUrcIVR39ZPOSCd1Huv0E3YSTTOMkUnufMmH7QTvAAINFhQL4o9Bc_nvsyAcA60iAfAQXYvti6FCDRLsjKsDBR5rej8KnZh4xbr2WmGkJyWwhufkzOhPpkrgsNV51KJCnJLZSYNDRjFhY_fX5t0XDzBnzGx_786X4rxDqfBEqJP84uZ5-1VkEwQta6iJkAp8KYWKX95HpJ0A7lPhbCi1wwWXfk4xcV5mpSgxf7uK1VUGvcDOraWBJ0LQXTpRrefjoVMVgLqueA1TF1o4JOk4Virdr7ScX1DmUb0dZJcZ0q_PeDqQHRIPZaIIiqoyYJCSh0p4=
자세히보기
두보식품 하루한콩 튀기지 않아 담백한... 12,260원
두보식품 하루한콩 튀기지 않아 담백한 구운 파바빈 군옥수수맛, 15g, 22개
https://ads-partners.coupang.com/image1/zVwsDdGHlsUQlGBhzY5SPdiVZbysKnTUV-PF74x-ZvQe9P2YAp0MsFljlo8RFN_j1rR8zD1-RYxReryXHrnKO2x2DMMkNaqTMg5YL6_yEhly4Z-_Mv9hKxKp5Hnq38uvYsX8brdkyh-Pe_EDOZlXGX3lNWoFbhbl95JJ_yrZmcKnQoeAntbkrM1uWcIODwj7UDNzA68Vb7u83ZmPv5GgGGHiHpuYriUxTEJAQnlGPwF5n8QuWrxnSKRgz1SRoNC4vU6h_iHQBql1xPYcEeb50zNYvpuJe05-HsiDv11-CqdSUpfUBTZMrfLde-RIo5KJoO2X0VQ1bn9uwLoPTUgKMuASTtpkOQTvxvQryfsxVBuoxCK8uBGbBoXiSXX6c3XwQrjaXodk8lPRF1wN2X36nZ09_8tFUYLvYfCyQtjdHE4wgsYY-Qc2iit7fbgKzw_Ps0ab-uCU8VPDp69X8HoN6mgUa3tdr7fz9ru5HXj5Qe7l0uM5pE7wHD11G83JwEguTJqOuOROWIailBzpADv__u6LAVaLsx76nKt5sZSsrdj08cGRcQ7Iycv7ypSt5JJ6sKQEMQ==
자세히보기
위드슬립 멜라토닌 원적외선 수면 패치... 9,900원
위드슬립 멜라토닌 원적외선 수면 패치 슬립톡 36개입
https://ads-partners.coupang.com/image1/d0hgC_qB00XXbhWDdwA4dQG_pUgZXffpWmlHzmy_u9koWfdKZhREQGC-xD6jBsWYSlfhcoxW2C_ttaPrZZbO8cm8pF5DckAlBgq7uR8i4grOKZuMpfbrTErVObRJfFgiNIVA4gng5XGIeKHVqqa3K41jbDqmFAiUtC6E6x-L-z1CDjTd_qheVnBRv1hMGKdGOZ9Y5uMXjvBu13oe5XWDE9zy5OsfM-9pjh3yigtLFPocKiRNpP22mSkAlDF-je5YwIiqUTpxo7rU0QxbKWjk_sHMK54rh8Tyo0HJUFlQc_dABQkyguRQUWiPqCVEpxfYMi6nAf2ta_K9qvJuZ1cQtjxDAVSC6uxbfhpR-fDwIhGumihNrXBKbFNCTVjVrP3q5Er4A5DSzopPYLO7kor07BZn09hOkAl9dLGdx8Bkn4CU33Cz8bu1KiZRkTmsetIkOcIC61xDEoTTnatyL_5QLct5OWHQVPPq7CDP4NFG-scTy8P3TzZPDZCAyHE_rpOznS2Qf0grQ5X8VumP-IQ6ZgR5nUX3cY2qd9CTgxe5kxlarlAcVzLDK-HewGcEzhtGW3DoPOVBsVNAYOXPn5espNcHbx71womz5J5SWPDNsw==
자세히보기
농심 켈로그 에너지바K 크런치넛(30... 16,900원
농심 켈로그 에너지바K 크런치넛(30g 12개), 160g, 3개
https://ads-partners.coupang.com/image1/HiRevTaMJ-aiMLBdHr7Y8gMliclzlnWdK3Ydef4Bz-beu0Pqo7vooh6FJdVpbAAn_HxwmTZra0r1KsraVn-4TCBxArZqjHUZLN8W8ZKoxxvppFBu9TEIEoYvxX8u3vTx44bA0X9U8NDDSPU716kY_SSAQUEwUs04V93L_DD8EcLcncWoaD--x40Neur7pjO9pmsKKGXWtYAHKd8KSwe4UIuopauZIk-8FY8qAhIQaJ2Ro8Q0Tpo4KOTEp9s6w4-T10q2x9tn8DMI9Jy0FacKn2ld66YylyeISehhVwlh7lSp5xNrxit8b7uKwiQUGXxCR0HQrYhRW8Lu7JYUUKR1CDjWIpTwgnqARbPx67-05kBACSYNNH2XiTlBHyCOimD6F4ub7-x3nu2WrEyscYr6uIvjvSw2TGAcjRlH5jKfEE1CRLD8hNwY2IPOcwYr0FVL_R62XuSkQArT7TvKK3o3uRAU2bfj-Lp-S4HdGLZZKEMxNGsPnHO1XFlTtD25pGj85an2tINiwo_nFeax-j503Cfe2C7VFMAfShrqm2g0MrxehsZM-W9SV39TgFQPJqvtF6qD3fyoPf-LC5VZeYaFKl9o-9F6
자세히보기
숨편해 소프트 편안한 입막음 테이프 ... 5,280원
숨편해 소프트 편안한 입막음 테이프 60p
https://ads-partners.coupang.com/image1/sWbkDVwY7qrLd6YFsceQWajtWWxmCxGWLBT4q4uSA403a-PPmwI5kHn1ccB26Ep5crvk4guJ9Jj0IV7JG11732ICq8ogbLXUX92RYrUotBfz1zqiAhzNTDNEVYfDw2wAzpFRMCWCVKcezp8n7dTuByCRn0Ks-NvJMwrY76ked0Bq_KK42sywbnUQTY-9DXqyDfh_z8x4_44M_QshNgeEhLTsuv64RLA28NqxftxvfHlNahxixLSJugO4ApXL7OggF4dfnc9MLU9lYShtzO4MjO9_yJ7e4btWgzj7DwEZK8wh4BVV41fN81X1xm_bNd9Jc9Hz9gyEW7oC_sdNJqO3qEfZeQ1WK1UwZj4fInghFR-rtAV95zSknLB1xkhAdEeZ3dyFr6kjnbe8BXVAbKWaSY1vCqGcOnMDyQ0RpKKt_7mOmNTLjnK7Z-QCIHb0ekvvsBbLxIu5P9yMaikAI3ddACFz3BLkNMLN5w-y6NAc4N9KGP2Z2oOtu4WXm-q4_R7lBiarUDyQm9NXiyqmm-EYw-V8algqOWcMPkYgjXJsy6Zd4iG6JlPJ7-Qj-QyFtWvCQXWHdviLUPYgntaPtKHopttrCYGvP6kz0ifQhNvHzQ==
자세히보기
건강곡간 치아씨드 통 5,980원
건강곡간 치아씨드 통
https://ads-partners.coupang.com/image1/3lo_3Iztc0_oljNU3tg9AYfa2ER9slFw2l7V8MROzc6AwCGnXTwMZEMd6YVr-cm8d4Vblafc_DIZBvgBRTDvf5aTCeQsvUqOi8hZ7e2zpVqRkfgD6GFltq8TN8cp_RYRRyjGJkB9iDG62XOaZdRUYqToqx4yAxh1xHSokhhqDPAaX5rSVrSI_E7A3qi6jQgFZo6-j4IMLOwhBXOpKan3IBu4ZfBg9wgAVAowPTSkzFZ3IR2ZucS26npDuOfEPoaYH9vJVJCgA13LAYcyalA3I_ZhuE3J_Nn1oE_A-k0V55fdZRmfCuWDCYh28LoDeFmsl2dggmgAmQMJh8822R6J8MTxsSe1bLJtyiU8fZ2EdnDVB4P2xshGOim_5-wLu8IyRkIPNN84TO8X4oj9uK6ezEOSfpFwtkD06qgXfcI12KrZXuhbaPWjzrUyvLEZv5CaCe9-PA3tJHR8J5FXEhGy9_IAMVcsTQYq2swP-WAgSOHBDOTogiXImzjDmzWUZZbTczGaXBkA0HIznDMtrydGVRdvA_M0-8sDpG4seKwe-oS70e8jp5mKiZoXPlgyOVYEEuj2hQ-2oJXGlrtUvRJ1tAs=
자세히보기
이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.
시노인사이트 편집부 기자 bats21@naver.com
작성 2026.11.04 11:26 수정 2026.11.04 11:26
727

RSS피드 기사제공처 : 시노인사이트 SINOINSIGHT / 등록기자: 시노인사이트 편집부 기자 무단 전재 및 재배포금지

해당기사의 문의는 기사제공처에게 문의

댓글 0개 (/ 페이지)
댓글등록- 개인정보를 유출하는 글의 게시를 삼가주세요.
등록된 댓글이 없습니다.
Shorts NEWS 더보기
강남3구 줄줄이 하락! 그런데 성북·중랑·금천은 올랐다?
“가슴 펴고 앉으세요” 이 말만 믿었다면? 허리 통증의 반전
[이형주교수의 이야기/오디오에세이]RESTART | 제65회 “정직하게 ..
건강하려고 단백질 줄였는데… 사망 위험 117% 증가?
수험생 응원가-청춘만만세
서울 전셋값 5억 돌파! 무주택자 벼락거지 피하는 정부의 파격 대책?
치매 위험, 뇌가 아니라 팔·다리 근육에 단서가? 189만 명 연구 결과..
비싼 화장품보다 중요한 건? 뷰티업계가 주목한 이것
해남에 12,000평 규모?! 역대급 아열대 체험 농장
당뇨병 있다면 꼭 보세요! 알츠하이머 위험 1.53배의 진실
노인일자리 참여자 79% 의료비 절감 체감
푸르게푸르게 푸른문학
푸른문학사 - 이은별 대표
진원 고성일 시인 데뷔 축하 송
독도, 그날의 푸른 감동
푸른문학사 - 이은별 대표 작시
난방비 걱정된다면 지금 확인하세요! 겨울철 복지 혜택 총정리
국화꽃으로 뒤덮인 서산의 가을
AI가 감염병 치료제까지 찾는다? 정부 3개 부처가 모인 이유
(주)원WK엔터테인먼트
상림공원 꽃무릇 - 안청자 시인
상림공원 꽃무릇
11일 오후 2시 통합시 무안청사에서 백승주 균형발전부시장이 "27년도,..
어머님 아버님 사랑합니다-카톡을 넘기며
어머님 아버님 사랑합니다-카톡을 넘기며
커피의 향기
스킵(Skip)
엽서(Postcard)
유튜브 NEWS 더보기

영암에 이런 농장이? 멜론농장 체험부터 디저트까지! 야미야미팜

[한기범농구교실/고양점]한기범농구교실 12월훈련 "탄성 로프를 활용한 지역방법 수비훈련" #드리블기능테스트 ...

[방생특집] 방생은 물고기만? 두 갈래 방생의 의미 | 방생 뜻·하는 법 | 서원암

"국내산이라더니 중국산" 온 가족 밥상에 오른 중국산 식품 TOP7

#차기자의칭찬합시다 #지은숙가수

2026.11.03 용인블루인택시협동조합 신사옥 이전 기념행사 #협동조합택시 #협동조합 #용인블루인 #쿱모빌...

"고양시는 환경단체의 가짜 선동에 춤추는 꼭두각시인가?"스프링힐스 18홀 증설 논란 15년, 산황동 리포트

(MBN 방송출현)초고령 사회의 희망을 짓다 – 박은정 대표의 ‘성공의 한 수’

미쳤나봐 (Crazy in Love) | 설레는 첫사랑 감성 K-POP

목포쫀드기 쫀박스 과거 옛추억을 찾아서

해남 땅끝에서 만나는 아열대 바나나 숲과 농부의 꿈

푸른문학사 -이은별 대표 작시

이탁규회장

(주)원WK엔터테인먼트

과학기술인 소통의 밤

학여울역 세텍 건축박람회에 청우산업(주) 이동식황토방이 참가합니다!

제15회 글로벌 자랑스러운 세계인 대상 개최…국제미디어그룹 창립 19주년 기념, 13개 분야 공로자 선정

모두의 아이디어 #5 이것이 대한민국입니다.

2026여수 해양창업 진로페스타 전남대학교 여수캠퍼스 산학연구관 및 도서관 일원 11월 10일 유튜브라이브

상리종합사회복지관 사회보장특구사업 결과보고 영상

  • 다이어리
  • 전자책/종이책