151가지 사용자 조건·95종 물체 활용 맞춤형 행동 평가
가정·돌봄·서비스 로봇 등 인간중심 AI 개발 활용 기대
![[대전=뉴시스] ETRI 김형민 박사가 트리니티 로봇 AI 평가기술에 대해 설명하고 있다.(사진=ETRI 제공) *재판매 및 DB 금지](https://img1.newsis.com/2026/11/13/NISI20261113_0002291123_web.jpg?rnd=20261113112132)
[대전=뉴시스] ETRI 김형민 박사가 트리니티 로봇 AI 평가기술에 대해 설명하고 있다.(사진=ETRI 제공) *재판매 및 DB 금지
[대전=뉴시스] 김양수 기자 = 로봇이 명령을 수행하는 수준을 넘어 사용자의 식습관과 알레르기 등 개인 특성까지 고려해 적절한 행동인지를 평가하는 기술이 국내연구진에 의해 개발됐다.
한국전자통신연구원(ETRI)은 사람과 인공지능(AI) 에이전트, 주변환경 등을 종합적으로 분석해 로봇의 작업계획 능력을 평가할 수 있는 벤치마크 '트리니티(Trinity)'를 개발했다고 13일 밝혔다.
기존 로봇 AI 평가는 주변 환경을 얼마나 정확하게 이해하고 주어진 작업을 성공적으로 수행하는지에 초점을 맞춘 반면 트리니티는 로봇의 행동이 서비스를 받는 사람에게도 적절한지를 평가한다.
연구원 관계자는 "같은 음식 요청이라도 알레르기가 있는 사람과 채식주의자에게 서로 다른 음식을 제공해야 하는 것처럼 사용자 특성에 맞는 행동을 선택하는 능력을 검증하는 것"이라고 설명했다.
평가에는 식습관·알레르기·종교적 식이조건·취미 등을 조합한 151가지 사용자 조건과 관련 물체 95종이 활용됐다. 이를 통해 로봇이 사용자 정보와 주변 환경을 함께 고려해 적절한 물체를 선택하고 행동을 계획하는지 확인할 수 있다.
특히 물체의 위치를 정확히 파악하고 작업을 수행했더라도 사용자에게 적합하지 않은 대상을 선택하면 성공으로 평가하지 않는다.
트리니티는 사용자 특성을 잘못 이해했는지, 주변 환경을 제대로 탐색하지 못했는지, 수행할 수 없는 행동을 계획했는지 등 AI의 판단 오류 원인도 구분해 분석할 수 있다.
연구진이 대표적인 대형언어모델(LLM) 기반 AI 에이전트를 평가한 결과, 환경을 이해하는 능력과 사용자 요구를 실제 행동에 반영하는 능력 사이에 차이가 있는 것으로 나타났다.
로봇 AI의 평가 기준을 사용자 적합성까지 확장한 이번 연구 성과는 자연어처리 분야 국제학술대회인 'EMNLP 2026 Findings'에서 지난달 발표됐다.
향후 가정·돌봄·서비스 로봇과 휴머노이드 등 사람과 함께 생활하는 로봇의 성능과 사용자 적합성을 검증하는 데 활용될 것으로 기대된다.
연구원 김형민 박사는 "트리니티의 코드와 데이터를 일반에 공개했다"며 "앞으로 음식·음료 중심의 평가 영역을 청소·정리·안전 등 다양한 생활 분야로 확대하고 시간에 따라 달라지는 사용자 요구도 반영할 계획"이라고 말했다.
◎공감언론 뉴시스 [email protected]
한국전자통신연구원(ETRI)은 사람과 인공지능(AI) 에이전트, 주변환경 등을 종합적으로 분석해 로봇의 작업계획 능력을 평가할 수 있는 벤치마크 '트리니티(Trinity)'를 개발했다고 13일 밝혔다.
기존 로봇 AI 평가는 주변 환경을 얼마나 정확하게 이해하고 주어진 작업을 성공적으로 수행하는지에 초점을 맞춘 반면 트리니티는 로봇의 행동이 서비스를 받는 사람에게도 적절한지를 평가한다.
연구원 관계자는 "같은 음식 요청이라도 알레르기가 있는 사람과 채식주의자에게 서로 다른 음식을 제공해야 하는 것처럼 사용자 특성에 맞는 행동을 선택하는 능력을 검증하는 것"이라고 설명했다.
평가에는 식습관·알레르기·종교적 식이조건·취미 등을 조합한 151가지 사용자 조건과 관련 물체 95종이 활용됐다. 이를 통해 로봇이 사용자 정보와 주변 환경을 함께 고려해 적절한 물체를 선택하고 행동을 계획하는지 확인할 수 있다.
특히 물체의 위치를 정확히 파악하고 작업을 수행했더라도 사용자에게 적합하지 않은 대상을 선택하면 성공으로 평가하지 않는다.
트리니티는 사용자 특성을 잘못 이해했는지, 주변 환경을 제대로 탐색하지 못했는지, 수행할 수 없는 행동을 계획했는지 등 AI의 판단 오류 원인도 구분해 분석할 수 있다.
연구진이 대표적인 대형언어모델(LLM) 기반 AI 에이전트를 평가한 결과, 환경을 이해하는 능력과 사용자 요구를 실제 행동에 반영하는 능력 사이에 차이가 있는 것으로 나타났다.
로봇 AI의 평가 기준을 사용자 적합성까지 확장한 이번 연구 성과는 자연어처리 분야 국제학술대회인 'EMNLP 2026 Findings'에서 지난달 발표됐다.
향후 가정·돌봄·서비스 로봇과 휴머노이드 등 사람과 함께 생활하는 로봇의 성능과 사용자 적합성을 검증하는 데 활용될 것으로 기대된다.
연구원 김형민 박사는 "트리니티의 코드와 데이터를 일반에 공개했다"며 "앞으로 음식·음료 중심의 평가 영역을 청소·정리·안전 등 다양한 생활 분야로 확대하고 시간에 따라 달라지는 사용자 요구도 반영할 계획"이라고 말했다.
◎공감언론 뉴시스 [email protected]
