애플 연구진, 가상 주택 1000곳 자료로 유니트리 로봇 동작 학습

처음 보는 실제 방에서 이동·앉기 등을 시험…연구진이 공개한 사전논문

 애플 연구진이 컴퓨터로 만든 가상 주택 1000곳의 영상과 언어 지시, 동작 자료를 이용해 사람 형태 로봇을 훈련하고, 중국 유니트리 로보틱스의 두 발 로봇 G1으로 실제 방에서 시험했다. 연구진이 11월 4일 공개한 사전논문과 프로젝트 자료에 따르면 로봇은 카메라 영상과 말로 적은 지시를 바탕으로 낯선 공간에서 물체에 다가가거나 의자에 앉는 동작을 수행했다. 연구는 가상 공간에서 모은 자료를 실제 로봇에 적용할 수 있는지 살피는 데 초점을 맞췄다. 논문은 사전 공개본이며, 가정용 제품의 출시나 모든 집에서의 성능을 발표한 자료는 아니다.

 연구진은 이 시스템을 ‘헤일로(HALO)’라고 부른다. 유니트리 G1은 카메라를 달고 몸을 움직이는 시험 장치였다. 애플 연구진은 그 장치가 주어진 일을 수행할 때 카메라 화면에서 무엇을 알아내고 어떤 동작을 만들지 결정하는 시스템을 연구했다. 따라서 연구 결과를 읽을 때 기계 자체와 그 기계를 움직인 연구 시스템을 구분해야 한다. 논문에서 특정 로봇을 사용했다는 사실은 제조사가 같은 기능을 모든 구매자에게 제공한다는 뜻과 거리가 있다.

 실제 집에서 자료를 모으려면 어떤 의자가 놓여 있는지, 좁은 공간에서 가구를 지나려면 어디에 발을 놓아야 하는지 같은 조건을 여러 차례 바꿔야 한다. 사람이 같은 장면을 반복해 재현하거나 로봇을 여러 곳으로 옮기는 일에는 시간이 든다. 연구진은 컴퓨터 안에서 방의 모양과 가구 배치가 달라지는 주택 1000곳을 만들었다. 로봇의 관점에서 보이는 영상, 수행할 일을 설명하는 말, 그 일에 필요한 몸의 움직임을 서로 연결해 만든 자료가 훈련에 쓰였다.

 예를 들어 의자에 앉는 동작은 의자가 어디에 있는지 찾는 일로 시작한다. 의자에 접근한 뒤에는 등받이와 앉는 면의 위치를 살피고, 방향을 돌려 몸을 내려야 한다. 방의 넓이와 의자의 높이가 달라지면 발을 놓을 자리가 달라질 수 있다. 연구에서 영상과 행동이 짝을 이룬다는 말은 움직이는 모양만 외우는 대신 화면 속 배치에 맞춰 움직임을 바꾸는 법을 학습할 자료를 제공한다는 뜻이다. 실제 환경에서 안전하게 앉을 수 있는 의자의 범위를 전부 확인했다는 의미는 아니다.

 가상 주택은 로봇에게 같은 행동을 여러 상황에서 보여 줄 수 있다는 장점이 있다. 한 장면에서 의자가 창문 가까이 있으면 다른 장면에서는 벽 옆에 놓일 수 있다. 움직임을 가구가 가로막지 않는 위치에서 시작하게 하거나, 같은 유형의 동작이 다른 공간에서도 등장하도록 자료를 구성할 수 있다. 다만 실제 가구는 미끄러지거나 흔들릴 수 있고, 조명과 반사에 따라 카메라에 보이는 모습이 달라진다. 이 때문에 가상에서 시험한 결과와 실제 공간에서 시험한 결과는 따로 봐야 한다.

 연구진은 동작을 생성하는 부분과 그것을 몸으로 실행하는 부분을 나눴다. 앞의 부분은 영상과 지시에 맞는 움직임을 만들어 내고, 뒤의 부분은 주어진 동작을 실제 로봇이 따라 하도록 조절한다. 카메라에 의자가 보인다고 해서 로봇이 바로 앉을 수 있는 것은 아니다. 몸의 균형을 유지하고 관절을 움직이는 과정도 필요하다. 반대로 미리 정해 놓은 동작을 잘 따라 하더라도 의자가 처음 예상한 곳에 없다면 그 동작을 그대로 쓰기 어렵다.

 프로젝트는 실제로 처음 보는 실내 공간에서 로봇을 시험한 사례를 제시한다. 연구진이 공개한 화면에는 가구에 다가가고, 의자에 앉고, 좁은 곳을 지나거나 물체를 밀어 움직이는 모습이 나온다. 이런 동작은 카메라가 보고 있는 실내 배치와 몸의 움직임을 연결하는 데 어떤 문제가 생기는지 연구할 수 있게 한다. 여러 작업을 골라 시연한 결과는 해당 조건에서 움직임이 가능했음을 보여 준다. 모든 집에서 누구의 말이든 알아듣고 가사 일을 처리한다는 증거는 아니다.

 이번 자료는 가상 훈련에 쓰인 집의 수를 공개했지만, 숫자가 많다고 실제 주택의 모든 형태를 포함하는 것은 아니다. 사람이 지나가는 통로, 반려동물이 몰려오는 상황, 예상과 달리 움직이는 가구가 있는 공간은 각각 다른 시험이 필요하다. 실제 환경에서 비교할 때는 방의 수와 구조, 선택한 과제, 한 번의 시도를 성공으로 판단한 기준도 함께 살펴야 한다. 예를 들어 로봇이 의자 앞까지 갔는지와 같은 의자에 균형을 잃지 않고 앉았는지는 서로 다른 결과다.

 연구진은 실험 동영상과 함께 연구 자료를 공개했다. 이를 통해 독자는 실제 로봇이 움직이는 장면과 가상 자료를 만드는 방식을 각각 살펴볼 수 있다. 가상 공간을 활용하면 반복 실험을 준비하기 쉬워질 수 있지만, 연구진이 사용한 가상 장면이나 계산 장비를 다른 연구자가 그대로 갖출 수 있는지는 별도의 문제다. 연구의 재현에 필요한 환경과 제품을 일상에서 운용하는 비용은 이 결과를 바탕으로 따로 확인해야 한다.

 이번 연구가 보여 준 것은 컴퓨터에서 서로 다른 방을 만들고, 그 안에서 모은 자료로 사람 형태 로봇의 일부 움직임을 훈련한 뒤 실제 공간에서 시험할 수 있다는 점이다. 가상 자료가 실제 환경에서 얼마나 도움이 됐는지 판단하려면 방의 유형을 바꾸었을 때 결과가 얼마나 달라지는지도 살펴야 한다. 후속 연구에서는 처음 보는 가구나 주변에서 움직이는 사람이 있는 환경에서도 지시를 안전하고 일관되게 수행하는지, 다양한 로봇 기종에서도 학습한 방식을 적용할 수 있는지가 과제로 남는다.

[참고자료]
애플 연구진은 2026년 11월 4일 공개한 사전논문에서 가상 주택 1000곳에서 영상·언어·동작 자료를 만들어 휴머노이드 시스템을 훈련하고 시험한 방법을 설명했다.
애플 연구진은 헤일로 프로젝트 페이지에서 가상 훈련 자료 구성과 유니트리 G1의 실내 시험 영상을 공개했다.

 

[苹果研究人员用模拟住宅训练宇树人形机器人]
苹果研究人员11月4日公布预印本,介绍用一千套模拟住宅生成视觉、语言和动作数据,并在宇树G1人形机器人上测试。机器人根据摄像头画面和语言指令,在陌生的实际房间执行走向物体、坐下等任务。项目区分动作生成与跟踪控制。测试说明部分模拟训练结果可用于真实环境,应用范围仍需进一步验证。

[어휘풀이]
预印本 / yùyìnběn / 사전논문
模拟住宅 / mónǐ zhùzhái / 가상 주택
动作数据 / dòngzuò shùjù / 동작 자료
人形机器人 / rénxíng jīqìrén / 사람 형태 로봇
摄像头 / shèxiàngtóu / 카메라
指令 / zhǐlìng / 지시
陌生 / mòshēng / 낯설다
跟踪控制 / gēnzōng kòngzhì / 목표 동작을 따라가는 제어
真实环境 / zhēnshí huánjìng / 실제 환경
验证 / yànzhèng / 검증하다

애플헤일로,유니트리G1,가상훈련,박용호,시노인사이트,sinoinsight,苹果,宇树G1,人形机器人
 

[로켓프레시] 곰곰 콤비 부어스트 파... 4,380원
[로켓프레시] 곰곰 콤비 부어스트 파티 후랑크 소시지
https://ads-partners.coupang.com/image1/J3hTHnAj08QUkdReJ3o6fhOwJajuzhMI2df6VQhINg-A6CNO2KMi0U6Nu2j5Yaj-wofjxzGwGUwg9q975dIl2Gi-H7m5xLhcRizmuDs1TEMJYcPEyo7AzueG2Okv66zv9sJEz2zmY74q2S7YX1B1EFWzyUT2FQVjYylX1IKWjT9qgYtng1fV8LpJt1SS7R5qZ-LmgjTfDRajE9vVAfgnkuC5bXEzas7kXu0xlBlzweanq_BKW-DE1WILycFZXvq5VsrU0x2pW4XeZy2Efjiy92lP6RQPe2MVW3I6E43NK2_FVHNqLe7qMLG42ASraPJ9ikhemLv4omsC2je8YF6Mi7goPo1iouFxOKf8kxfBvIiwludd0YIGnitiGao9lYvZ4bIBOXNvWiLqS5BjJmFMSF_EdUXN0d02iDEGLhw2CrLzUwySw2AuMtzg45_xc-KqEOJMDm31cI3AMezg97-W4H3KLPhLgvqhgTV-9cpbotxnHnNvzO_Vg-vKRFX4wLygSjo4aSddsyZqr4wRY_yfN0pC
자세히보기
[로켓프레시] 코다노 쫄깃 고소한 구... 5,020원
[로켓프레시] 코다노 쫄깃 고소한 구워먹는 치즈 (냉동)
https://ads-partners.coupang.com/image1/pOv4zP0y-jo9lndppAwDOn35gJ8wm57Gz5zIcLVWucOUXY13m5q-HU9AJqQkMzAI88tokCaxW0Dbci7T_HS3GPfwCfYszRZ_F5hWLilY1_60ixZUKWiqFPhOYF1SsnkvbXpsUgQfK0N-AUvq5ZsJssHuyPJx8vvvMbGUMZxYtTGesXfDuYEAwljuIgf6xXK4CviEJhUi1sw2QUI43NMIIYgWRvbrmwOz0bGK1Jeb_bKStvCKyM8f6_yp-AibxSOsYA7hbAwe16rMiHgHvx6GcXUed-k-hGSPle3I-_LTkrEiG0xGZrDzcLo0NrDqdsR2RtUNRXrB28kWyPzmfQfzVXgn8UHhQ5tTg_byrFNf2dT9oPnq9azWrDDJ0ifxUEkpnHWCMk3v-Zj2O-Vh3mY1Jtq9ClvP9m2Ve_06okSgnTKSTwHZoqtEaCoc6viaIl-D8MGUvLpCOYBIqZ2V_0Bz3_XbqJmZaSfsi_dmnJOzf8l6_iwgYJ1SsAqzOBSjxnm895lOYesZ11-e-gMF0s6klNV3
자세히보기
원스위크라이프 행어 접이식 우드 캠핑... 34,450원
원스위크라이프 행어 접이식 우드 캠핑 선반 + 가방 세트, 다크브라운, 1세트, 3단
https://ads-partners.coupang.com/image1/kvhDI5n5SPoz6ju_klJ7StUV7iX6hwanqZfPR64g5a943JUxBAwcWZ9XqVcba4hkBcsILl90z_g6w7X1EOH38H1fBNDHUkGOAh43DPM9Wmt2-Jl_zRuT-hI2X-VPg8e5VAohoiGBaeBX6MLpLSoE80XXC412tZZl4GSeTG4x64JWqo1YTxbu8Zn-hCuZtj7AvsE9H5vsyhXAfm9GSb9dpZAtinCS2QpPmGoNR_1hHDLgD-IuhspAXejdmhmzqX_gsLUbTJxq5EQSWMGkodZUT1NmuRNRc0B3STcikj0trP5rzWGHUQ_7DaqQquRV94G2fcm2ZFUxlpPCEKHnPKPWyhQShTrCu9e28zeSL2I9RY2FtuKP_4fduNOl5b2egiwryKAaJMovwpkj3Y5KhOOE9BHvxB5m8Xc3PJnoAJKEoWdkG7PhCtzO9izo5stYYoVFKZifzNHyCtqDXodz0J7EK8zhOqk5udqiAdA9Y1a7TAbnekICmyqEMIAfPHlMiW6nTCTaYeDteA==
자세히보기
[로켓프레시] 고래사어묵 바로 끓여먹... 14,850원
[로켓프레시] 고래사어묵 바로 끓여먹는 꼬치어묵전골 & 유부주머니 2~3인분 (냉동)
https://ads-partners.coupang.com/image1/nWndAf_HMg2AWGg9nTqQzUukVSJgPVplEGuIjWnxzQS6CNy3-xjbD9BP4iK4SXDep0X8fiT5hNUiTaJ8s86IUwpOUZNWyWWGK5jVfztcgKAGsIy2Ue4gDzwrJUk57CQX2yCXVipP3X72w5KtcFbbivzrCjzLpx_rMDOYVFuHBO9zo3shMf1np9EvHvKouZ9CnA1z49r4CwnvpyB8etIY_Alm339vlzASfIipboWO9afuc6D7Qiug68YvGVJNfXFPxBr6ul6UKUSzSmICb5Wk5W26b0xtpQLL_AycQweTVfex-8YEJeA-bxM8gTQZJMFEX_VIAtKCwk7ImMFX9ZEywbN6fTGQ9qVUUb0nTycwFlKVtr4F0Ov58GlQvZD4xHpj6G2EyPydRYYg2ZaJJaRvKW-v2MekKdMaEfdUIQP1ff3FN8kTYe2NRbdmAskgHwmMaUWJ-CYjQw_8sA6GbZLTIu3ORxoRchkXGGUlTo7MfHEQMt94r8W7tKZm3CcvX3stplLqoe48dKCnbA==
자세히보기
원스위크라이프 접이식 우드 캠핑 선반... 28,990원
원스위크라이프 접이식 우드 캠핑 선반 + 가방 세트, 단일색상, 4단, 1개
https://ads-partners.coupang.com/image1/a-ZGgAH546GzWZp7a4-4938jBLKsVa9qqpNAv4NUBNIWUiug0lRU86uMaRSaZlK4Qev0NgfnbfIMeyT10eV0hxLnGYDGGo-llhuJw8HLtr3PRXixqa2ahhcx8fpU7bJGkRpgHS17szx4xWLoBkOp446wDqyS3Mr1faappN-IfqMcHXekTqdsHsav8ROAyj6WwNRuywfy-WkE9khm46-NCoz7ZVqyqoDyHzK-AeAKQqbpidy5u61_L0_G-pTQIF4RSNZs1UcjVtUmPHJy9SofGnfB6vqjDibtwiXh6zQKNQk7mozOqamU2BsgtKc3Q2eD-r8ieWs0JShC_iPZahlBFTciA8TGvXQvM1qJ0xr5v6T0MDJfwvB33dqdoTKb4xGrTdIwuQgvWkLaFMEqyXLlwQ3Hp8kDEFOwnVJrRlR1uR4SZX7uIwAv1FHPJF_8yogSqiU6wbMBku6ZcFT3FTrlne36-MudugS8vBNy-X8l0fi-aoB-c-TUsq_NtUhsDCcNAQqEIvwD8fNcuXl9iVJDOBMklgdQ1O8=
자세히보기
원스위크라이프 행어 접이식 우드 캠핑... 39,990원
원스위크라이프 행어 접이식 우드 캠핑 선반 + 가방 세트, 네추럴, 1세트, 4단
https://ads-partners.coupang.com/image1/pcV7DmVz8hSYcCm3pajGjUZOBqx1lpRlK8VYsUJYmKi_6Rr_vyA5Wq6zeJ7R5iLkdK-Ep0EeSI-AhcA77BE8SWbB0i9FEQNuxgPlDEilynMSdsUnaT4gWYVAaWmBJg-hv39HWbeqFr3SCmEyEkgdJfmalvuG6xceAXDbnZ7ZyWStUUYSvZuJIB-AKOmEEgm3b816dxGiRZEKM-0YS0K8vtdnBCunkfmZCdETO78pewKGtHh2s-Lj0hPpvDKLtEwx-RfTGsfaNGHggsicjJyhwOJApAhE-5ZuAgYPXVTe2BOed3zImfknOn5DafdytzCb4lnR0GiZlObcBT440BMTfPlvK4x8xd8l86Wno161HoMAHuXFOk-64ph1p3JiDAuSHRgtMpnEhI7xXCn8cuPdP_vxtFV0c-xmJHZqSJHB4GMZUEQfZ6_IfulCjVu1qWiQbbAdk6rf2efyXmQtyiAl3oSZnIb8nMY9MkS0UCaF3T0zq3CIvaaEJFZnde5SG5-yG04yjhGthA==
자세히보기
구룡포 원양산 반건조 오징어 5미 (... 15,890원
구룡포 원양산 반건조 오징어 5미 (냉동)
https://ads-partners.coupang.com/image1/S6hwz4hPm40I-k3FS0jag6E9KH9aNM5l5hulaqDV5jbv1OOlU1El8TjWj_bo3B-8vxZLp7IwKRWcm6KXpSj1K5tivDVqRCdDs__OJSyjcCHofZq2CwlnkKKC19RIis__YhwUT6a6UakMAwxQyK8pZ13h4f7F6NwD2KVAVFqYB92-j6mrpn4wD7Sq8u1xCm7ybCWYEYJYx_wK_TYCqrskmdvj9aeaLAO-jL5BBNY2XeqvtT0K32NsvJIxDib0usr-SbN3HEZdyhDC8P3dimJ0_mmVYo_sGzCpMWhfFXIbhy6wo8Ti2cc6cAuS7i_X5E40T-U_wzl0z5UrNghN-Jze8BgzR5Oigzt3Y9Bfck7gZSo5o37NaogCiNMeyHsrNGOZoGv9_mbBLLc0NlxsHRmusyYGGZA_bZtJhuqnWDw0OEM7To5O-LT-WKUYEr5Km4YKGbTSgCWC67C6N24EkE4ato-S0-RExhVbUkm2AMdnFUxM8s6435FdzUkvCYPFcCuBiHBrWmIqcmLHOP7jwdnmUJe3Yw==
자세히보기
플레잇 국내산 파닭꼬치 50g x 1... 14,900원
플레잇 국내산 파닭꼬치 50g x 12p + 숯불데리양념소스 150g 세트 (냉동)
https://ads-partners.coupang.com/image1/cElAtthaQtLMvPtFcPF93VpInv0i0t2u7uupCt5ZaAiBJytL_0reR0vV9TW7DNqrLNnLeUsYVnUaAnQxyhIJXQpJVEQAJznPn7dSuTIZ4Ws03ell4fDiA2YCb_qXQbVmmruc27U4YQoUzryTb0N7pYARwAf71VaQmK84YARiqeJmfbE2Wj9nArokcnySKWpvSyP8ptYzVRq5AmIsIbLdKByci0zl-EJV_jwYbccs4QJppFF8ekwnKnhKvYj-igbhlC9cPsuoaeiCBYycASyxu-3TjXtPMhWJS13owVs9tBs3XNLvLQbg1ygnocFdj1fWyuVBwgKARxMcyCy6VcLpWL9lAedNksnLcVFdtVujdlOrOW3l4y4CVlSM55V5JjXlCes4G0vD7LEKGGnSW50IOdEGlNhmlhV7p6cfNeHBm5gKJAAzSYzGhJejNeuVEu5uvfqzxa2epu0PPQ51nl8274vDYdis6q6qbqOxyFhpEzeWhZELgnZO0ucuX4vNDw-opySTJngSJ1A65frgpfYj8hNZlw==
자세히보기
이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.
시노인사이트 편집부 기자 bats21@naver.com
작성 2026.11.16 02:22 수정 2026.11.16 02:22
727

RSS피드 기사제공처 : 시노인사이트 SINOINSIGHT / 등록기자: 시노인사이트 편집부 기자 무단 전재 및 재배포금지

해당기사의 문의는 기사제공처에게 문의

댓글 0개 (/ 페이지)
댓글등록- 개인정보를 유출하는 글의 게시를 삼가주세요.
등록된 댓글이 없습니다.
Shorts NEWS 더보기
강남3구 줄줄이 하락! 그런데 성북·중랑·금천은 올랐다?
“가슴 펴고 앉으세요” 이 말만 믿었다면? 허리 통증의 반전
[이형주교수의 이야기/오디오에세이]RESTART | 제65회 “정직하게 ..
건강하려고 단백질 줄였는데… 사망 위험 117% 증가?
수험생 응원가-청춘만만세
서울 전셋값 5억 돌파! 무주택자 벼락거지 피하는 정부의 파격 대책?
치매 위험, 뇌가 아니라 팔·다리 근육에 단서가? 189만 명 연구 결과..
비싼 화장품보다 중요한 건? 뷰티업계가 주목한 이것
해남에 12,000평 규모?! 역대급 아열대 체험 농장
당뇨병 있다면 꼭 보세요! 알츠하이머 위험 1.53배의 진실
노인일자리 참여자 79% 의료비 절감 체감
푸르게푸르게 푸른문학
푸른문학사 - 이은별 대표
진원 고성일 시인 데뷔 축하 송
독도, 그날의 푸른 감동
푸른문학사 - 이은별 대표 작시
난방비 걱정된다면 지금 확인하세요! 겨울철 복지 혜택 총정리
국화꽃으로 뒤덮인 서산의 가을
AI가 감염병 치료제까지 찾는다? 정부 3개 부처가 모인 이유
(주)원WK엔터테인먼트
상림공원 꽃무릇 - 안청자 시인
상림공원 꽃무릇
11일 오후 2시 통합시 무안청사에서 백승주 균형발전부시장이 "27년도,..
어머님 아버님 사랑합니다-카톡을 넘기며
어머님 아버님 사랑합니다-카톡을 넘기며
커피의 향기
스킵(Skip)
엽서(Postcard)
유튜브 NEWS 더보기

영암에 이런 농장이? 멜론농장 체험부터 디저트까지! 야미야미팜

[한기범농구교실/고양점]한기범농구교실 12월훈련 "탄성 로프를 활용한 지역방법 수비훈련" #드리블기능테스트 ...

[방생특집] 방생은 물고기만? 두 갈래 방생의 의미 | 방생 뜻·하는 법 | 서원암

"국내산이라더니 중국산" 온 가족 밥상에 오른 중국산 식품 TOP7

#차기자의칭찬합시다 #지은숙가수

2026.11.03 용인블루인택시협동조합 신사옥 이전 기념행사 #협동조합택시 #협동조합 #용인블루인 #쿱모빌...

"고양시는 환경단체의 가짜 선동에 춤추는 꼭두각시인가?"스프링힐스 18홀 증설 논란 15년, 산황동 리포트

(MBN 방송출현)초고령 사회의 희망을 짓다 – 박은정 대표의 ‘성공의 한 수’

미쳤나봐 (Crazy in Love) | 설레는 첫사랑 감성 K-POP

목포쫀드기 쫀박스 과거 옛추억을 찾아서

해남 땅끝에서 만나는 아열대 바나나 숲과 농부의 꿈

푸른문학사 -이은별 대표 작시

이탁규회장

(주)원WK엔터테인먼트

과학기술인 소통의 밤

학여울역 세텍 건축박람회에 청우산업(주) 이동식황토방이 참가합니다!

제15회 글로벌 자랑스러운 세계인 대상 개최…국제미디어그룹 창립 19주년 기념, 13개 분야 공로자 선정

모두의 아이디어 #5 이것이 대한민국입니다.

2026여수 해양창업 진로페스타 전남대학교 여수캠퍼스 산학연구관 및 도서관 일원 11월 10일 유튜브라이브

상리종합사회복지관 사회보장특구사업 결과보고 영상

  • 다이어리
  • 전자책/종이책