HRI Research & Paper

지금까지의 HRI Project와 논문들을 돌아보며

Yihyun
7 min readApr 3, 2021
Illustration by Nayane de Souza Hablitzel

회사에서, 대학원에서, 그리고 지금까지 하고있는 HRI Project와 논문들을 돌아보며. 좋은 분들께 많이 배울 수 있었고, 재미있는 프로젝트를 많이 진행할 수 있었던 기회들에 감사하다. 다들 보고싶다. 로봇할 때 참 재미있었어! 🤖💛

#Human-Robot-Interaction

SKT NUGU A.I Project

Role: HRI/VUX Research, Design

Timeline: Feb 2017-Aug 2017

Role & Output

  1. HRI UX Design
  • 국내외 Social Robot & Virtual Assistant 시장 조사, 서비스 분석
  • 인공지능 스피커의 Value-add를 위한 감정표현개발 방향성 제시
  • 감정 교감 요소 도출, Context별 Taskflow 설계

2. HRI UI Design

  • 감정상태 반영한 HRI 표정 Design system
  • 상태표시 의인화
  • 디자인 제작 가이드 도출
  • 서비스 Domain 대표 GUI Design

신규 모델 DAP 기획 및 VUX 디자인

Role: UX/UI Design, VUX Design

Timeline: Jun 2017-Feb 2018

Role & Output

  • 안드로이드 DAP, 신규 모델 기획
  • 신규 모델 UX Concept도출
  • 음악 감상 특화 기능 탑재 반영한 VUI 설계 및 프로토타이핑 검증
  • VUI system 구축 및 대표 GUI Design

Companion for children`s desirable behavior of social viewing on YouTube.

아동의 바람직한 유튜브 시청 경험을 위한 컴패니언 서비스 제안: 사회적 시청 컴패니언봇과 아동의 시청 정보 전달 애플리케이션을 바탕으로. (3저자)

Role: HRI Research & UX Writing

Timeline: Feb 2019

Result

  • 아동과 함께 유튜브를 시청하며 영상에 관련한 생각과 감정을 나누는 컴패니언봇 제안, HCI 적 관점에서의 경험 요소 도출: 아동의 사회적 시청 컴패니언봇 경험은 ‘사용자 관련 요인’, ‘기능 디자인 요인’, ‘봇 디자인 요인’의 범주에서 구조화할 수 있었다.
  • 아동의 유튜브 시청 경험에 대한 정보를 부모에게 전달하는 모바일 앱 제안, 경험 분석: 아동의 유튜브 시청 정보를 앱으로 전달받은 부모는 안심이 된다는 점에서 호의적인 반응

Implication

  • TV 미디어에 집중되었던 사회적 시청의 연구 범위를, 오늘날 아동의 실질적 미디어인 유튜브로 확장
  • 아동과 부모라는 서로 다른 두 사용자 군의 니즈를 충족시키고, 둘의 눈높이를 맞출 수 있는 방안 (컴패니언) 을 제시
  • 기술적으로도 한계가 있는 유튜브 콘텐츠 필터링에 대하여, human in the loop 개념에서 아동의 간단한 인터랙션으로 해결시도

Exploring Effects of Dialect on User Perception of Conversational Agents.

대화형 에이전트의 사투리 사용이 사용자 인식에 미치는 영향 : 내집단 유대감과 지속사용의도를 중심으로 (2저자)

Role: HRI Research & Experiment

Timeline: Feb 2019

대화형 에이전트 프롬프트 측면-사투리의 긍정적 가능성 발견에 따른 사투리 유무와 대화맥락에 따른 실험연구

With the advancement of technology, Conversational Agents (e.g., Amazon Alexa, Google Assistant) have been speaking as more human-like. However, the use of Dialect by a Conversational Agent, despite its frequent use and positive effects in human conversations, are not fully explored in Human Computer Interaction fields. To investigate the effect of Dialect on user perception of Ingroup tie and Continuance Intention to Use toward the agent, we conducted a 2(with/without dialect) x 2(task/social oriented conversation) experiment with fifty-four participants. Our main findings are as follows: 1) Use of Dialect in Conversational Agents resulted in ingroup-tie with the users 2) Although there was no statistically significant effect, users had a tendency of feeling stronger ingroup tie with dialect-speaking agents during the social-oriented conversation.

Results

사용자들은 사투리를 구사하는 에이전트를 내집단으로 인지하고 유대감을 느끼는 것으로 나타났다. 또한 그 효과는 과업중심의 대화보다 사회적 대화 중심에서 강하게 나타나는 경향성이 확인되었다.

Implications

  • 대화형 에이전트의 부정적 감정 상쇄 요소로써 사투리의 가능성 확인
  • 에이전트에게 적용된 언어적 디자인 요소가 대화의 맥락에 따라 다르게 나타날 수 있음
  • 사투리 사용효과는 사회적 대화 맥락에서 더 크게 발현될 수 있음
  • 제한된 시나리오 조건에서 간접적인 사용경험을 토대로 지속사용의도 측정의 한계. 재검증 필요

AI기반 가사 관리 서비스 시스템

Timeline: May 2019 (과학기술정보통신부)

Roel & Output

  • 가사 관리 서비스 A.I Persona Design
  • VUI 가이드라인 제작

2019 Digital Social Innovation Chatbot Project

How do we create people’s willingness to use an anti-tuberculosis chatbot? The design of technology acceptance model (TAM). (3저자)

Timeline: Jun 2019 — Dec 2019 (과학기술정보통신부-행정안전부)

Role & Output

  1. 결핵 챗봇 및 스마트 호흡 재활 서비스 개발
  • 서비스 컨셉 반영한 시나리오 설계 및 출력 구현
  • Basic Research: 결핵/건강 정보 컨텐츠, ICT기반 의료 서비스 11종 분석
  • User Research: 결핵 위험군, 의료진, 홈리스 지원시설 관계자
  • Output: 주요 4개 기능 설계, 결핵 챗봇만의 컨텐츠 개발

2. 결핵 챗봇 UX Design

  • Chatbot 메뉴 트리 및 사용자 응대 시나리오 설계, 시나리오 작성 및 출력
  • Chatbot Social cue Design

3. 사용성 테스트, 시범 운영, 유관기관 워크숍 후 개선점 도출 및 개선

  • 정성 분석: IDI, FGI / User Diary / Open coding
  • 정량 분석: Usability Testing, 건강정보 이해능력 평가, 스트레스 지수 경감 효과 및 만족도 확인
  • 분석 통계 기반 시나리오 고도화, 이론적 모델로 인사이트 도출 (TAM)

4. 결핵 퇴치 스스로 해결단 기획 및 운영

Relational Agents for The Homeless with Tuberculosis Experience: Providing social support through human-agent relationships.

노숙 결핵 환자를 위한 관계적 에이전트: 휴면-에이전트 관계를 통한 사회적 지지 관점에서 (1저자)

<리뷰어에게 Best라는 평을 들은 초록과 서론!>

In Human-Computer Interaction (HCI) research, relational agents are increasingly used as a means to improve social support for vulnerable groups including people exposed to stigmas, alienation, and isolation. However, technical support for tuberculosis (TB) patients, one such vulnerable group, remains insufficient due to the nature of infectious diseases and difficulties in accessing the homeless community. To derive design considerations for developing relational agents targeting homeless TB patients, we conducted an empirical study to explore: 1) the environmental and behavioral characteristics of the patients; 2) their perceptions of relational agents’ identities, their attitudes toward relational agents, and their needs in relation to relational agents; and 3) their relationships with relational agents. Data was collected through participatory observations and interviews and this information was processed using deductive thematic analysis. The classification of patients’ environmental and behavioral characteristics showed that understanding these factors in the design of an RA is important because the patients’ perception, attitudes and expectations towards the agent are shaped by (and also shape) their environmental and behavioral characteristics, which in turn affect the nature of relationships formed between them. Based on these findings, we drew the following design considerations: (1) protection of privacy is a prerequisite to the use of an RA for homeless TB patients and can be addressed from both short-term (technical) and long-term (sociotechnical) perspectives; (2) the homeless group emphasized affective support from the agent, suggesting that relationships per se are already valuable to people who have been socially isolated and stigmatized; (3) consideration of the past memories in selecting social cues can facilitate the exchange of affective expressions in the user-agent interaction; and (4) an RA should clarify to its interlocuters its identity as a machine lest it possibly causes confusion to people especially with low technological literacy.

<결과, 결론 등 이하 내용은 보안>

<Contribute>

  1. 문헌 연구를 바탕으로 관계적 에이전트 디자인 고려사항 도출을 위한 Research framework 도출 / Develops a research framework to derive relational agent design considerations based on a literature review.
  2. 노숙 결핵환자 대상의 실증적 연구를 통한 관계적 에이전트 디자인 고려사항 도출 / Derives relational agent design considerations through empirical study of homeless TB patients.
  3. 취약 계층의 사회적 지지를 위한 관계적 에이전트 설계 시사점 제공 / Provides insights for designing relational agents to socially support the vulnerable.

Process

Framework for designing a Relational Agents
Research methodology & process
Thematic analysis map based on the research framework
귀여운 Bocco emo

--

--