KR20240091224A

KR20240091224A - 사용자의 표현을 생성 및 디스플레이하기 위한 디바이스들, 방법들, 및 그래픽 사용자 인터페이스들

Info

Publication number: KR20240091224A
Application number: KR1020247018090A
Authority: KR
Inventors: 에이미 이. 데도나토; 크리스티 이. 바우얼리; 루퍼트 버튼; 도리안 디. 다르간; 제이슨 디. 릭월드; 필립 로켈; 지안카를로 예르케스
Original assignee: 애플 인크.
Priority date: 2021-11-29
Filing date: 2022-11-22
Publication date: 2024-06-21

Abstract

일부 예들에서, 컴퓨터 시스템은 컴퓨터 시스템이 사용자의 표현을 생성하기 위한 사용자에 관한 정보를 캡처할 수 있도록 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안 사용자의 신체로부터 컴퓨터 시스템을 제거하라는 프롬프트를 디스플레이한다. 일부 예들에서, 컴퓨터 시스템은 사용자에 관한 정보를 캡처하고, 사용자의 표현을 생성하며, 사용자의 표현을 디스플레이한다. 일부 예들에서, 컴퓨터 시스템은 사용자의 신체의 상태에 관한 직접 정보가 하나 이상의 미리결정된 시간들 동안 수신되지 않는 것에 기초하여 상이한 외관들을 갖는 사용자의 표현을 디스플레이한다. 일부 예들에서, 컴퓨터 시스템은 사용자의 입의 신체 상태에 관한 캡처된 정보에 기초하여 사용자의 표현의 상이한 입 표현들을 디스플레이한다. 일부 예들에서, 컴퓨터 시스템은 모발 표현의 일부분들이 사용자의 표현의 각자의 부분으로부터 위치되는 거리에 기초하여 사용자의 표현의 모발 표현의 상이한 부분들을 디스플레이한다. 일부 예들에서, 컴퓨터 시스템은 사용자의 표현의 내부 부분에 비해 시각적으로 강조되는 사용자의 표현의 경계 부분을 디스플레이한다.

Description

사용자의 표현을 생성 및 디스플레이하기 위한 디바이스들, 방법들, 및 그래픽 사용자 인터페이스들

관련 출원의 상호 참조

본 출원은, 2022년 11월 16일자로 출원된, 발명의 명칭이 "DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR GENERATING AND DISPLAYING A REPRESENTATION OF A USER"인 미국 특허 출원 제17/988,532호, 및 2021년 11월 29일자로 출원된, 발명의 명칭이 "DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR GENERATING AND DISPLAYING A REPRESENTATION OF A USER"인 미국 가특허 출원 제63/283,969호의 이익을 청구하며, 이들 각각의 내용들은 그 전체가 본 명세서에 참고로 포함된다.

기술분야

본 개시내용은, 대체적으로, 디스플레이를 통해 가상 현실 및 혼합 현실 경험들을 제공하는 전자 디바이스들을 포함하지만 이에 제한되지 않는, 컴퓨터 생성 경험들을 제공하는 컴퓨터 시스템들에 관한 것이다.

증강 현실을 위한 컴퓨터 시스템들의 개발은 최근에 상당히 증가하였다. 예시적인 증강 현실 환경들은 물리적 세계를 대체하거나 증강시키는 적어도 일부 가상 요소들을 포함한다. 컴퓨터 시스템들 및 다른 전자 컴퓨팅 디바이스들에 대한 입력 디바이스들, 예를 들어 카메라들, 제어기들, 조이스틱들, 터치-감응형 표면들, 및 터치-스크린 디스플레이들이 가상/증강 현실 환경들과 상호작용하기 위해 사용된다. 예시적인 가상 요소들은, 디지털 이미지들, 비디오, 텍스트, 아이콘들, 및 버튼들 및 다른 그래픽들과 같은 제어 요소들과 같은 가상 객체들을 포함한다.

적어도 일부 가상 요소들(예를 들어, 애플리케이션들, 증강 현실 환경들, 혼합 현실 환경들, 및 가상 현실 환경들)을 포함하는 환경들에서 사용자의 표현을 생성 및/또는 디스플레이하기 위한 일부 방법들 및 인터페이스들은 번거롭고, 비효율적이며, 제한된다. 예를 들어, 사용자의 표현을 생성하기 위한 데이터를 캡처하는 시스템들, 사용자의 표현을 디스플레이하는 시스템들, 및/또는 사용자의 표현을 디스플레이하는 동안 불충분한 피드백을 수신하는 시스템들은 복잡하고, 장황하며, 오류가 발생하기 쉽고, 사용자에게 상당한 인지적 부담을 야기하며, 가상/증강 현실 환경에 대한 경험을 손상시킨다. 게다가, 이러한 방법들은 필요 이상으로 오래 걸려서, 컴퓨터 시스템의 에너지가 낭비된다. 이러한 후자의 고려사항은 배터리-작동형 디바이스들에서 특히 중요하다.

따라서, 사용자에게 더 효율적이고 직관적인 사용자 표현의 생성 및/또는 디스플레이를 가능하게 하는 컴퓨터 생성 경험들을 사용자들에게 제공하기 위한 개선된 방법들 및 인터페이스들을 갖는 컴퓨터 시스템들에 대한 필요성이 존재한다. 그러한 방법들 및 인터페이스들은, 선택적으로, 적어도 일부 가상 요소들을 포함하는 환경들에서 사용자들의 표현들을 생성 및/또는 디스플레이하기 위한 종래의 방법들을 보완하거나 대체한다. 그러한 방법들 및 인터페이스들은, 사용자가 제공된 입력들과 입력들에 대한 디바이스 응답들 사이의 접속을 이해하는 것을 도움으로써 사용자로부터의 입력들의 수, 크기, 및/또는 종류를 줄여서, 이에 의해 더 효율적인 인간-기계 인터페이스를 생성한다.

컴퓨터 시스템들에 대한 사용자 인터페이스들과 연관된 위의 결함들 및 다른 문제들은 개시된 시스템들에 의해 감소되거나 또는 제거된다. 일부 실시예들에서, 컴퓨터 시스템은 연관된 디스플레이를 갖는 데스크톱 컴퓨터이다. 일부 실시예들에서, 컴퓨터 시스템은 휴대용 디바이스(예를 들어, 노트북 컴퓨터, 태블릿 컴퓨터, 또는 핸드헬드 디바이스)이다. 일부 실시예들에서, 컴퓨터 시스템은 개인용 전자 디바이스(예를 들어, 시계 또는 머리 장착형 디바이스와 같은 웨어러블 전자 디바이스)이다. 일부 실시예들에서, 컴퓨터 시스템은 터치패드를 갖는다. 일부 실시예들에서, 컴퓨터 시스템은 하나 이상의 카메라들을 갖는다. 일부 실시예들에서, 컴퓨터 시스템은 터치 감응형 디스플레이("터치 스크린" 또는 "터치 스크린 디스플레이"로도 알려짐)를 갖는다. 일부 실시예들에서, 컴퓨터 시스템은 하나 이상의 눈 추적 컴포넌트들을 갖는다. 일부 실시예들에서, 컴퓨터 시스템은 하나 이상의 손 추적 컴포넌트들을 갖는다. 일부 실시예들에서, 컴퓨터 시스템은 디스플레이 생성 구성요소에 추가하여 하나 이상의 출력 디바이스들을 갖고, 출력 디바이스들은 하나 이상의 촉각적 출력 생성기들 및/또는 하나 이상의 오디오 출력 디바이스들을 포함한다. 일부 실시예들에서, 컴퓨터 시스템은 그래픽 사용자 인터페이스(GUI), 하나 이상의 프로세서들, 메모리, 및 다수의 기능들을 수행하기 위해 메모리에 저장되는 하나 이상의 모듈들, 프로그램들 또는 명령어들의 세트들을 갖는다. 일부 실시예들에서, 사용자는 터치-감응형 표면 상의 스타일러스 및/또는 손가락 접촉들 및 제스처들, 카메라들 및 다른 이동 센서들에 의해 캡처된 사용자의 신체 또는 GUI(및/또는 컴퓨터 시스템)에 대한 공간에서의 사용자의 눈들 및 손의 이동, 및 하나 이상의 오디오 입력 디바이스들에 의해 캡처된 음성 입력들을 통해 GUI와 상호작용한다. 일부 실시예들에서, 상호작용들을 통해 수행되는 기능들은, 선택적으로, 이미지 편집, 드로잉, 프레젠팅(presenting), 워드 프로세싱, 스프레드시트 작성, 게임 하기, 전화 걸기, 화상 회의, 이메일 보내기, 인스턴트 메시징(instant messaging), 운동 지원, 디지털 사진촬영, 디지털 비디오 녹화, 웹 브라우징, 디지털 음악 재생, 메모하기(note taking), 및/또는 디지털 비디오 재생을 포함한다. 이러한 기능들을 수행하기 위한 실행가능 명령어들은, 선택적으로, 하나 이상의 프로세서들에 의한 실행을 위해 구성된 일시적 및/또는 비일시적 컴퓨터 판독가능 저장 매체 또는 다른 컴퓨터 프로그램 제품에 포함된다.

사용자들의 표현들을 생성 및/또는 디스플레이하기 위한 개선된 방법들 및 인터페이스들을 갖는 전자 디바이스들이 필요하다. 그러한 방법들 및 인터페이스들은 사용자들의 표현들을 생성 및/또는 디스플레이하기 위한 종래의 방법들을 보완하거나 대체할 수 있다. 이러한 방법들 및 인터페이스들은 사용자로부터의 입력들의 수, 정도, 및/또는 종류를 줄이고 더 효율적인 인간-기계 인터페이스를 생성한다. 그러한 방법들 및 인터페이스들은, 또한, 컴퓨터 시스템의 프로세싱 전력이 감소되도록 사용자들의 표현들의 관련 부분들을 디스플레이하여, 그에 의해, 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리-작동형 컴퓨팅 디바이스들의 경우, 그러한 방법들 및 인터페이스들은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.

일부 실시예들에 따르면, 방법이 설명된다. 본 방법은 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템에서 수행된다. 본 방법은, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하는 단계; 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 지시하는 프롬프트를 디스플레이하는 것에 후속적으로, 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하는 단계; 및 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 사용자와 관련된 정보를 캡처하는 단계 - 컴퓨터 시스템은 정보를 사용하여 사용자의 표현을 생성하도록 구성됨 - 를 포함한다.

일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능 저장 매체가 설명된다. 비일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하기 위한; 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 지시하는 프롬프트를 디스플레이하는 것에 후속적으로, 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하기 위한; 그리고 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 사용자와 관련된 정보를 캡처하기 위한 - 컴퓨터 시스템은 정보를 사용하여 사용자의 표현을 생성하도록 구성됨 - 명령어들을 포함한다.

일부 실시예들에 따르면, 일시적 컴퓨터 판독가능 저장 매체가 설명된다. 일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하기 위한; 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 지시하는 프롬프트를 디스플레이하는 것에 후속적으로, 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하기 위한; 그리고 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 사용자와 관련된 정보를 캡처하기 위한 - 컴퓨터 시스템은 정보를 사용하여 사용자의 표현을 생성하도록 구성됨 - 명령어들을 포함한다.

일부 실시예들에 따르면, 컴퓨터 시스템이 설명된다. 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 컴퓨터 시스템은 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하기 위한; 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 지시하는 프롬프트를 디스플레이하는 것에 후속적으로, 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하기 위한; 그리고 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 사용자와 관련된 정보를 캡처하기 위한 - 컴퓨터 시스템은 정보를 사용하여 사용자의 표현을 생성하도록 구성됨 - 명령어들을 포함한다.

일부 실시예들에 따르면, 컴퓨터 시스템이 설명된다. 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 컴퓨터 시스템은, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하기 위한 수단; 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 지시하는 프롬프트를 디스플레이하는 것에 후속적으로, 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하기 위한 수단; 및 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 사용자와 관련된 정보를 캡처하기 위한 수단 - 컴퓨터 시스템은 정보를 사용하여 사용자의 표현을 생성하도록 구성됨 - 을 포함한다.

일부 실시예들에 따르면, 방법이 설명된다. 본 방법은 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템에서 수행된다. 본 방법은, 사용자의 표현을 생성하기 위한 등록 프로세스 동안, 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하는 단계; 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처한 후에, 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 사용자의 하나 이상의 신체적 특성들에 관한 정보에 기초하여 사용자의 표현을 생성하는 단계; 및 사용자의 표현을 생성한 후에, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이하는 단계를 포함한다.

일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능 저장 매체가 설명된다. 비일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 사용자의 표현을 생성하기 위한 등록 프로세스 동안, 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하기 위한; 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처한 후에, 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 사용자의 하나 이상의 신체적 특성들에 관한 정보에 기초하여 사용자의 표현을 생성하기 위한; 그리고 사용자의 표현을 생성한 후에, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이하기 위한 명령어들을 포함한다.

일부 실시예들에 따르면, 일시적 컴퓨터 판독가능 저장 매체가 설명된다. 일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 사용자의 표현을 생성하기 위한 등록 프로세스 동안, 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하기 위한; 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처한 후에, 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 사용자의 하나 이상의 신체적 특성들에 관한 정보에 기초하여 사용자의 표현을 생성하기 위한; 그리고 사용자의 표현을 생성한 후에, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이하기 위한 명령어들을 포함한다.

일부 실시예들에 따르면, 컴퓨터 시스템이 설명된다. 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 컴퓨터 시스템은, 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 사용자의 표현을 생성하기 위한 등록 프로세스 동안, 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하기 위한; 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처한 후에, 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 사용자의 하나 이상의 신체적 특성들에 관한 정보에 기초하여 사용자의 표현을 생성하기 위한; 그리고 사용자의 표현을 생성한 후에, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이하기 위한 명령어들을 포함한다.

일부 실시예들에 따르면, 컴퓨터 시스템이 설명된다. 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 컴퓨터 시스템은, 사용자의 표현을 생성하기 위한 등록 프로세스 동안, 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하기 위한 수단; 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처한 후에, 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 사용자의 하나 이상의 신체적 특성들에 관한 정보에 기초하여 사용자의 표현을 생성하기 위한 수단; 및 사용자의 표현을 생성한 후에, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이하기 위한 수단을 포함한다.

일부 실시예들에 따르면, 방법이 설명된다. 본 방법은 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서 수행된다. 본 방법은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 단계 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하는 단계; 및 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하는 것에 응답하여, 제1 컴퓨터 시스템이, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하는 단계를 포함하고, 제1 컴퓨터 시스템이 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하는 단계는, 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도 미만인 제2 충실도로 제2 사용자의 표현을 디스플레이하는 단계; 및 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 충실도 미만인 제3 충실도로 제2 사용자의 표현을 디스플레이하는 단계를 포함한다.

일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능 저장 매체가 설명된다. 비일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하기 위한; 그리고 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하는 것에 응답하여, 제1 컴퓨터 시스템이, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하기 위한 명령어들을 포함하고, 제1 컴퓨터 시스템이 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도 미만인 제2 충실도로 제2 사용자의 표현을 디스플레이하는 것; 및 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 충실도 미만인 제3 충실도로 제2 사용자의 표현을 디스플레이하는 것을 포함한다.

일부 실시예들에 따르면, 일시적 컴퓨터 판독가능 저장 매체가 설명된다. 일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하기 위한; 그리고 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하는 것에 응답하여, 제1 컴퓨터 시스템이, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하기 위한 명령어들을 포함하고, 제1 컴퓨터 시스템이 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도 미만인 제2 충실도로 제2 사용자의 표현을 디스플레이하는 것; 및 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 충실도 미만인 제3 충실도로 제2 사용자의 표현을 디스플레이하는 것을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하기 위한; 그리고 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하는 것에 응답하여, 제1 컴퓨터 시스템이, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하기 위한 명령어들을 포함하고, 제1 컴퓨터 시스템이 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도 미만인 제2 충실도로 제2 사용자의 표현을 디스플레이하는 것; 및 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 충실도 미만인 제3 충실도로 제2 사용자의 표현을 디스플레이하는 것을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 수단 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하기 위한 수단; 및 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하는 것에 응답하여, 제1 컴퓨터 시스템이, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하기 위한 수단을 포함하고, 제1 컴퓨터 시스템이 상이한 충실도로 제2 사용자의 표현을 디스플레이하기 시작하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도 미만인 제2 충실도로 제2 사용자의 표현을 디스플레이하는 것; 및 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 충실도 미만인 제3 충실도로 제2 사용자의 표현을 디스플레이하는 것을 포함한다.

일부 실시예들에 따르면, 방법이 설명된다. 본 방법은 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서 수행된다. 본 방법은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 단계 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 발화(utterance)에 대응하는 정보를 수신하는 단계; 및 제2 사용자의 발화에 대응하는 정보를 수신하는 것에 응답하여, 제2 사용자의 발화에 대응하는 정보에 기초하여 제2 사용자의 표현의 외관을 업데이트하는 단계를 포함하고, 제2 사용자의 표현의 외관을 업데이트하는 단계는, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 단계 - 제1 입 표현은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 단계 - 제2 입 표현은 제2 입 표현을 생성하기 위해 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성됨 - 를 포함한다.

일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능 저장 매체가 설명된다. 비일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 발화에 대응하는 정보를 수신하기 위한; 그리고 제2 사용자의 발화에 대응하는 정보를 수신하는 것에 응답하여, 제2 사용자의 발화에 대응하는 정보에 기초하여 제2 사용자의 표현의 외관을 업데이트하기 위한 명령어들을 포함하고, 제2 사용자의 표현의 외관을 업데이트하는 것은, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 것 - 제1 입 표현은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 것 - 제2 입 표현은 제2 입 표현을 생성하기 위해 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성됨 - 을 포함한다.

일부 실시예들에 따르면, 일시적 컴퓨터 판독가능 저장 매체가 설명된다. 일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 발화에 대응하는 정보를 수신하기 위한; 그리고 제2 사용자의 발화에 대응하는 정보를 수신하는 것에 응답하여, 제2 사용자의 발화에 대응하는 정보에 기초하여 제2 사용자의 표현의 외관을 업데이트하기 위한 명령어들을 포함하고, 제2 사용자의 표현의 외관을 업데이트하는 것은, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 것 - 제1 입 표현은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 것 - 제2 입 표현은 제2 입 표현을 생성하기 위해 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성됨 - 을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 발화에 대응하는 정보를 수신하기 위한; 그리고 제2 사용자의 발화에 대응하는 정보를 수신하는 것에 응답하여, 제2 사용자의 발화에 대응하는 정보에 기초하여 제2 사용자의 표현의 외관을 업데이트하기 위한 명령어들을 포함하고, 제2 사용자의 표현의 외관을 업데이트하는 것은, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 것 - 제1 입 표현은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 것 - 제2 입 표현은 제2 입 표현을 생성하기 위해 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성됨 - 을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 수단 - 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동함 -; 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 동안, 제2 사용자의 발화에 대응하는 정보를 수신하기 위한 수단; 및 제2 사용자의 발화에 대응하는 정보를 수신하는 것에 응답하여, 제2 사용자의 발화에 대응하는 정보에 기초하여 제2 사용자의 표현의 외관을 업데이트하기 위한 수단을 포함하고, 제2 사용자의 표현의 외관을 업데이트하는 것은, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 것 - 제1 입 표현은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 것 - 제2 입 표현은 제2 입 표현을 생성하기 위해 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성됨 - 을 포함한다.

일부 실시예들에 따르면, 방법이 설명된다. 본 방법은 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서 수행된다. 본 방법은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 단계를 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 모발의 시각적 표현을 포함하며, 제2 사용자의 모발의 시각적 표현은, 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 모발의 표현의 제1 부분 - 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리 초과인 제2 거리에 위치되는 모발의 표현의 제2 부분 - 모발의 표현의 제2 부분은 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함한다.

일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능 저장 매체가 설명된다. 비일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 모발의 시각적 표현을 포함하며, 제2 사용자의 모발의 시각적 표현은, 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 모발의 표현의 제1 부분 - 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리 초과인 제2 거리에 위치되는 모발의 표현의 제2 부분 - 모발의 표현의 제2 부분은 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함한다.

일부 실시예들에 따르면, 일시적 컴퓨터 판독가능 저장 매체가 설명된다. 일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 모발의 시각적 표현을 포함하며, 제2 사용자의 모발의 시각적 표현은, 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 모발의 표현의 제1 부분 - 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리 초과인 제2 거리에 위치되는 모발의 표현의 제2 부분 - 모발의 표현의 제2 부분은 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 모발의 시각적 표현을 포함하며, 제2 사용자의 모발의 시각적 표현은, 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 모발의 표현의 제1 부분 - 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리 초과인 제2 거리에 위치되는 모발의 표현의 제2 부분 - 모발의 표현의 제2 부분은 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 수단을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 모발의 시각적 표현을 포함하며, 제2 사용자의 모발의 시각적 표현은, 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 모발의 표현의 제1 부분 - 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리 초과인 제2 거리에 위치되는 모발의 표현의 제2 부분 - 모발의 표현의 제2 부분은 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함한다.

일부 실시예들에 따르면, 방법이 설명된다. 본 방법은 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서 수행된다. 본 방법은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 단계를 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 제2 사용자의 표현의 제1 부분 - 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하지 않는 제2 사용자의 표현의 제2 부분 - 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 제1 시각적 외관은 제2 시각적 외관에 비해 강조됨 - 을 포함한다.

일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능 저장 매체가 설명된다. 비일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 제2 사용자의 표현의 제1 부분 - 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하지 않는 제2 사용자의 표현의 제2 부분 - 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 제1 시각적 외관은 제2 시각적 외관에 비해 강조됨 - 을 포함한다.

일부 실시예들에 따르면, 일시적 컴퓨터 판독가능 저장 매체가 설명된다. 일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 제2 사용자의 표현의 제1 부분 - 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하지 않는 제2 사용자의 표현의 제2 부분 - 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 제1 시각적 외관은 제2 시각적 외관에 비해 강조됨 - 을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 제2 사용자의 표현의 제1 부분 - 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하지 않는 제2 사용자의 표현의 제2 부분 - 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 제1 시각적 외관은 제2 시각적 외관에 비해 강조됨 - 을 포함한다.

일부 실시예들에 따르면, 제1 컴퓨터 시스템이 설명된다. 제1 컴퓨터 시스템은 하나 이상의 디스플레이 생성 컴포넌트들과 통신한다. 제1 컴퓨터 시스템은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 수단을 포함하고, 제2 사용자의 표현은 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자의 검출된 이동에 기초하여 이동하고, 제2 사용자의 표현은, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 제2 사용자의 표현의 제1 부분 - 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하지 않는 제2 사용자의 표현의 제2 부분 - 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 제1 시각적 외관은 제2 시각적 외관에 비해 강조됨 - 을 포함한다.

전술된 다양한 실시예들이 본 명세서에 기술된 임의의 다른 실시예들과 조합될 수 있음에 주목한다. 본 명세서에 기술된 특징들 및 이점들은 모두를 포함하는 것은 아니며, 특히, 많은 추가적인 특징들 및 이점들이 도면, 명세서 및 청구범위를 고려하여 당업자에게 명백할 것이다. 그에 부가하여, 본 명세서에 사용된 표현은 주로 이해의 편의 및 설명을 위해 선택되었고, 본 발명의 요지를 상세히 기술하거나 제한하기 위해 선택되지 않았을 수 있다는 것에 주목해야 한다.

다양하게 기술된 실시예들의 더 양호한 이해를 위해, 유사한 도면 부호들이 도면 전체에 걸쳐서 대응 부분들을 나타내는 하기의 도면들과 관련하여 하기의 발명을 실시하기 위한 구체적인 내용이 참조되어야 한다.
도 1은 일부 실시예들에 따른 XR 경험들을 제공하기 위한 컴퓨터 시스템의 동작 환경을 예시하는 블록도이다.
도 2는 일부 실시예들에 따른 사용자에 대한 XR 경험을 관리 및 조정하도록 구성된 컴퓨터 시스템의 제어기를 예시하는 블록도이다.
도 3은 일부 실시예들에 따른 XR 경험의 시각적 컴포넌트를 사용자에게 제공하도록 구성된 컴퓨터 시스템의 디스플레이 생성 컴포넌트를 예시하는 블록도이다.
도 4는 일부 실시예들에 따른 사용자의 제스처 입력들을 캡처하도록 구성된 컴퓨터 시스템의 손 추적 유닛을 예시하는 블록도이다.
도 5는 일부 실시예들에 따른 사용자의 시선 입력들을 캡처하도록 구성된 컴퓨터 시스템의 눈 추적 유닛을 예시하는 블록도이다.
도 6은 일부 실시예들에 따른, 글린트-보조(glint-assisted) 시선 추적 파이프라인을 예시하는 흐름도이다.
도 7a 내지 도 7j는 일부 실시예들에 따른, 사용자의 표현을 생성하고 사용자의 표현을 디스플레이하기 위한 예시적인 기법들을 예시한다.
도 8은 다양한 실시예들에 따른, 사용자의 표현을 생성하기 위한 방법들의 흐름도이다.
도 9는 다양한 실시예들에 따른, 사용자의 표현을 디스플레이하는 방법들의 흐름도이다.
도 10a 내지 도 10i는 일부 실시예들에 따른, 사용자의 표현의 외관을 조정하기 위한 예시적인 기법들을 예시한다.
도 11은 다양한 실시예들에 따른, 사용자의 표현의 외관을 조정하는 방법들의 흐름도이다.
도 12는 다양한 실시예들에 따른, 사용자의 표현의 입 표현을 디스플레이하는 방법들의 흐름도이다.
도 13은 다양한 실시예들에 따른, 사용자의 표현의 모발 표현을 디스플레이하는 방법들의 흐름도이다.
도 14는 다양한 실시예들에 따른, 사용자의 표현의 일부분을 시각적으로 강조하여 디스플레이하는 방법들의 흐름도이다.

본 개시내용은 일부 실시예들에 따른, 확장 현실(XR) 경험을 사용자에게 제공하기 위한 사용자 인터페이스들에 관한 것이다.

본 명세서에 설명되는 시스템들, 방법들, 및 GUI들은 다수의 방식들로 가상/증강 현실 환경들과의 사용자 인터페이스 상호작용들을 개선시킨다.

일부 실시예들에서, 컴퓨터 시스템은 사용자와 관련된 정보를 캡처하고, 캡처된 정보를 사용하여 사용자의 표현을 생성한다. 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 컴퓨터 시스템은 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 사용자에게 촉구한다. 컴퓨터 시스템은 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하고, 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 사용자와 관련된 정보를 캡처한다. 일부 실시예들에서, 컴퓨터 시스템은 사용자의 신체에 대해 각자의 배향 및/또는 위치로 착용될 수 있는, 머리 장착형 디스플레이 생성 컴포넌트 및/또는 워치와 같은 웨어러블 컴퓨터 시스템이다. 일부 실시예들에서, 컴퓨터 시스템은 컴퓨터 시스템이 사용자의 신체로부터 제거되는 동안 사용자의 머리 및/또는 얼굴과 관련된 정보를 캡처하고, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안 사용자의 손들과 관련된 정보를 캡처한다. 일부 실시예들에서, 컴퓨터 시스템은 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 사용자에게 촉구하는 제1 프롬프트를 제1 디스플레이 생성 컴포넌트 상에 디스플레이하고, 컴퓨터 시스템이 사용자의 신체로부터 제거되는 동안 사용자와 관련된 정보를 캡처하기 위한 지시사항들을 제공하는 제2 프롬프트를 제2 디스플레이 생성 컴포넌트 상에 디스플레이한다.

일부 실시예들에서, 컴퓨터 시스템은 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하고, 사용자의 하나 이상의 신체적 특성들에 관한 정보에 기초하여 사용자의 표현을 생성하며, 증강 현실 환경 및/또는 가상 현실 환경과 같은 확장 현실 환경 내에 사용자의 표현을 디스플레이한다. 일부 실시예들에서, 컴퓨터 시스템은 물리적 환경에서의 사용자의 신체 상태의 미러 이미지인 대표 상태를 포함하도록 사용자의 표현을 디스플레이한다. 일부 실시예들에서, 컴퓨터 시스템은 물리적 환경에서의 사용자의 신체 이동에 기초하는 표현의 이동을 애니메이션화하고/하거나 디스플레이한다. 일부 실시예들에서, 컴퓨터 시스템은, 확장 현실 환경 내에 사용자의 표현을 디스플레이하는 동안, 사용자의 표현을 편집하고/하거나 사용자의 하나 이상의 신체적 특성들에 관한 정보를 재캡처하기 위한 선택가능 옵션들을 제공한다.

일부 실시예들에서, 제1 사용자에 의해 사용되고 있는 제1 컴퓨터 시스템은 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하고, 제2 사용자의 신체의 상태에 관한 직접 정보의 양에 기초하여 제2 사용자의 표현의 외관을 조정한다. 예를 들어, 컴퓨터 시스템은 제1 시각적 충실도 및/또는 정밀도로 제2 사용자의 표현을 디스플레이한다. 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않을 때, 컴퓨터 시스템은, 제1 시각적 충실도 및/또는 정밀도 미만인 제2 시각적 충실도 및/또는 정밀도로 제2 사용자의 표현을 디스플레이한다. 제2 사용자의 신체의 상태에 관한 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않을 때, 컴퓨터 시스템은, 제1 시각적 충실도 및/또는 정밀도 미만이고 제2 시각적 충실도 및/또는 정밀도 미만인 제3 시각적 충실도 및/또는 정밀도로 제2 사용자의 표현을 디스플레이한다. 일부 실시예들에서, 제2 사용자의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않을 때, 컴퓨터 시스템은, 제2 사용자의 표현이 의인화된 특징부들을 갖지 않고/않거나 확장 현실 환경 내의 무생물 객체이도록, 제시 모드에서 제2 사용자의 표현을 디스플레이한다.

일부 실시예들에서, 제1 사용자에 의해 사용되고 있는 제1 컴퓨터 시스템은 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하고, 제2 사용자의 발화에 대응하는 오디오 정보 및/또는 제2 사용자의 입의 검출된 신체 상태에 관한 정보 중 하나 이상에 기초하여 제2 사용자의 표현의 입 표현을 디스플레이한다. 컴퓨터 시스템은 제2 사용자의 발화에 대응하는 오디오 정보를 수신하고, 사용자의 발화에 대응하는 오디오 정보에 기초하여 제2 사용자의 표현의 외관을 업데이트한다. 예를 들어 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 신뢰 수준 임계치 미만인 것과 같이, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않을 때, 컴퓨터 시스템은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성되는 제1 입 표현을 갖는 제2 사용자의 표현을 디스플레이한다. 예를 들어 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 신뢰 수준 임계치 초과인 것과 같이, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시킬 때, 컴퓨터 시스템은 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성되는 제2 입 표현을 갖는 제2 사용자의 표현을 디스플레이한다. 일부 실시예들에서, 제1 입 표현은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성되는 제3 입 표현과 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성되는 제4 입 표현의 조합 및/또는 오버레이이다. 일부 실시예들에서, 제1 입 표현은 제2 사용자의 입의 검출된 신체 상태에 관한 정보의 신뢰 수준에 기초하여 상이한 양들의 제3 입 표현 및 제4 입 표현을 사용하여 생성된다.

일부 실시예들에서, 제1 사용자에 의해 사용되고 있는 제1 컴퓨터 시스템은 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하고, 제2 사용자의 모발의 시각적 표현을 포함하는 제2 사용자의 표현을 디스플레이한다. 제2 사용자의 모발의 시각적 표현은, 얼굴 및/또는 목과 같은 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되고 제1 시각적 충실도 및/또는 정밀도를 포함하는 제1 부분을 포함한다. 모발의 시각적 표현은, 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 제1 거리 초과인 제2 거리에 위치되고 제1 시각적 충실도 및/또는 정밀도 미만인 제2 시각적 충실도 및/또는 정밀도를 포함하는 제2 부분을 포함한다. 이와 같이, 제2 사용자의 모발의 시각적 표현은 모발의 시각적 표현이 제2 사용자의 각자의 신체 부위에 대응하는 제2 사용자의 표현의 일부분으로부터 더 멀리 위치될수록 덜 명확해진다. 일부 실시예들에서, 모발의 시각적 표현은 제2 사용자의 얼굴 모발에 대응하고/하거나 수염에만 대응한다.

일부 실시예들에서, 제1 사용자에 의해 사용되고 있는 제1 컴퓨터 시스템은 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하고, 상이한 시각적 강조 레벨들 및/또는 시각적 강조도들로 제2 사용자의 표현의 상이한 부분들을 디스플레이한다. 예를 들어, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이된다. 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하지 않는 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되며, 여기에서 제1 시각적 외관은 제2 시각적 외관에 비해 시각적으로 강조된다. 일부 실시예들에서, 컴퓨터 시스템은 제2 사용자의 표현의 디스플레이된 시점 및/또는 관점의 변화에 기초하여 제2 사용자의 표현의 외관을 조정하여서, 제2 사용자의 표현의 제1 부분 및 제2 부분이 디스플레이된 시점 및/또는 관점의 변화에 기초하여 변화하게 한다. 일부 실시예들에서, 컴퓨터 시스템은 제2 사용자의 표현이 후방 배향으로 디스플레이될 때 제시 모드에서 제2 사용자의 표현을 디스플레이하며, 여기에서 제시 모드는 의인화된 특징부들 없이 및/또는 무생물 객체로서 제2 사용자의 표현을 디스플레이하는 것을 포함한다.

도 1 내지 도 6은 사용자들에게 XR 경험들을 제공하기 위한 예시적인 컴퓨터 시스템들의 설명을 제공한다. 도 7a 내지 도 7j는 일부 실시예들에 따른, 사용자의 표현을 생성하고 사용자의 표현을 디스플레이하기 위한 예시적인 기법들을 예시한다. 도 8은 다양한 실시예들에 따른, 사용자의 표현을 생성하기 위한 방법들의 흐름도이다. 도 9는 다양한 실시예들에 따른, 사용자의 표현을 디스플레이하는 방법들의 흐름도이다. 도 7a 내지 도 7j에서의 사용자 인터페이스들은 도 8 및 도 9에서의 프로세스들을 예시하는 데 사용된다. 도 10a 내지 도 10i는 일부 실시예들에 따른, 사용자의 표현의 외관을 조정하기 위한 예시적인 기법들을 예시한다. 도 11은 다양한 실시예들에 따른, 사용자의 표현의 외관을 조정하는 방법들의 흐름도이다. 도 12는 다양한 실시예들에 따른, 사용자의 표현의 입 표현을 디스플레이하는 방법들의 흐름도이다. 도 13은 다양한 실시예들에 따른, 사용자의 표현의 모발 표현을 디스플레이하는 방법들의 흐름도이다. 도 14는 다양한 실시예들에 따른, 사용자의 표현의 일부분을 시각적으로 강조하여 디스플레이하는 방법들의 흐름도이다. 도 10a 내지 도 10i의 사용자 인터페이스들이 도 11 내지 도 14의 프로세스들을 예시하기 위해 사용된다.

아래에서 설명되는 프로세스들은, 사용자에게 개선된 시각적 피드백을 제공하는 것, 동작을 수행하는 데 필요한 입력들의 수를 감소시키는 것, 추가의 디스플레이된 제어부들로 사용자 인터페이스를 혼란스럽게 하지 않고서 추가 제어 옵션들을 제공하는 것, 추가 사용자 입력을 요구하지 않고서 조건들의 세트가 충족되었을 때 동작을 수행하는 것, 프라이버시 및/또는 보안을 개선시키는 것, 저장 공간을 절약하면서 더 다양한, 상세한, 및/또는 사실적인 사용자 경험을 제공하는 것, 및/또는 추가 기법들을 포함한 다양한 기법들을 통해 (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스들을 더 효율적으로 만든다. 이러한 기법들은 또한, 사용자가 디바이스를 더 신속하고 효율적으로 사용할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다. 배터리 전력 및 그에 따른 중량을 절약하는 것은 디바이스의 인체공학적 특성을 개선한다. 이들 기법들은, 또한, 실시간 통신을 가능하게 하고, 더 적은 및/또는 덜 정밀한 센서들의 사용을 허용하여 더 콤팩트하고, 더 가볍고, 더 저렴한 디바이스를 생성하며, 디바이스가 다양한 조명 조건들에서 사용될 수 있게 한다. 이들 기법들은 에너지 사용을 감소시켜, 그에 의해, 디바이스에 의해 방출되는 열을 감소시키며, 이는 디바이스 컴포넌트들에 대한 동작 파라미터들 내에 있는 디바이스가 너무 많은 열을 생성하는 경우 사용자가 착용하기에 불편할 수 있는 웨어러블 디바이스에 특히 중요하다.

게다가, 하나 이상의 단계들이 하나 이상의 조건들이 충족되었음을 조건으로 하는 본 명세서에서 설명되는 방법들에서, 설명된 방법은 다수의 반복들로 반복될 수 있어서, 반복들 동안, 방법의 단계들이 조건으로 하는 조건들 모두가 방법의 상이한 반복들로 충족되게 할 수 있다는 것이 이해되어야 한다. 예를 들어, 방법이, 조건이 만족되면 제1 단계를 그리고 조건이 만족되지 않으면 제2 단계를 수행할 것을 요구하는 경우, 당업자는, 조건이 만족되고 만족되지 않을 때까지, 청구된 단계들이 특정 순서 없이 반복된다는 것을 인식할 것이다. 따라서, 하나 이상의 조건들이 충족되었음을 조건으로 하는 하나 이상의 단계들로 설명되는 방법은, 방법에서 설명되는 조건들 각각이 충족될 때까지 반복되는 방법으로서 재작성될 수 있다. 그러나, 이는, 시스템 또는 컴퓨터 판독가능 매체가 대응하는 하나 이상의 조건들의 만족에 기초하여 조건부(contingent) 동작들을 수행하기 위한 명령어들을 포함하고, 그에 따라, 방법의 단계들이 조건으로 하는 조건들 모두가 충족될 때까지 방법의 단계들을 명시적으로 반복하지 않고서 우연성(contingency)이 만족되었는지 또는 만족되지 않았는지를 결정할 수 있는 시스템 또는 컴퓨터 판독가능 매체 청구항들에서는 요구되지 않는다. 당업자는, 또한, 조건부 단계들을 갖는 방법과 유사하게, 시스템 또는 컴퓨터 판독가능 저장 매체가 조건부 단계들 모두가 수행되었음을 보장하는 데 필요한 횟수만큼 방법의 단계들을 반복할 수 있다는 것을 이해할 것이다.

일부 실시예들에서, 도 1에 도시된 바와 같이, XR 경험은 컴퓨터 시스템(101)을 포함하는 동작 환경(100)을 통해 사용자에게 제공된다. 컴퓨터 시스템(101)은 제어기(110)(예를 들어, 휴대용 전자 디바이스 또는 원격 서버의 프로세서들), 디스플레이 생성 컴포넌트(120)(예를 들어, 머리 장착형 디바이스(HMD), 디스플레이, 프로젝터, 터치-스크린 등), 하나 이상의 입력 디바이스들(125)(예를 들어, 눈 추적 디바이스(130), 손 추적 디바이스(140), 다른 입력 디바이스들(150)), 하나 이상의 출력 디바이스들(155)(예를 들어, 스피커들(160), 촉각적 출력 생성기들(170), 및 다른 출력 디바이스들(180)), 하나 이상의 센서들(190)(예를 들어, 이미지 센서들, 광 센서들, 깊이 센서들, 촉각 센서들, 배향 센서들, 근접 센서들, 온도 센서들, 위치 센서들, 모션 센서들, 속도 센서들 등), 그리고 선택적으로, 하나 이상의 주변 디바이스들(195)(예를 들어, 홈 어플라이언스들, 웨어러블 디바이스들 등)을 포함한다. 일부 실시예들에서, 입력 디바이스들(125), 출력 디바이스들(155), 센서들(190) 및 주변 디바이스들(195) 중 하나 이상은 (예를 들어, 머리-장착 디바이스 또는 핸드헬드 디바이스에서) 디스플레이 생성 컴포넌트(120)와 통합된다.

XR 경험을 설명할 때, (예를 들어, XR 경험을 생성하는 컴퓨터 시스템으로 하여금 컴퓨터 시스템(101)에 제공된 다양한 입력들에 대응하는 오디오, 시각적 및/또는 촉각적 피드백을 생성하게 하는, XR 경험을 생성하는 컴퓨터 시스템(101)에 의해 검출된 입력들로) 사용자가 감지할 수 있고/있거나 사용자가 상호작용할 수 있는 몇몇 관련되지만 구별되는 환경들을 구별하여 지칭하기 위해 다양한 용어들이 사용된다. 다음은 이들 용어의 서브세트이다:

물리적 환경: 물리적 환경은 사람들이 전자 시스템들의 도움없이 감지하고 그리고/또는 상호작용할 수 있는 물리적 세계를 지칭한다. 물리적 공원과 같은 물리적 환경들은 물리적 물품들, 예컨대 물리적 나무들, 물리적 건물들, 및 물리적 사람들을 포함한다. 사람들은, 예컨대 시각, 촉각, 청각, 미각, 및 후각을 통해, 물리적 환경을 직접 감지하고/하거나 그와 상호작용할 수 있다.

확장 현실: 대조적으로, 확장 현실(XR) 환경은 사람들이 전자 시스템을 통해 감지하고 그리고/또는 그와 상호작용하는 완전히 또는 부분적으로 시뮬레이션된 환경을 지칭한다. XR에서, 사람의 신체적 움직임들, 또는 이들의 표현들의 서브세트가 추적되고, 이에 응답하여, XR 환경에서 시뮬레이션된 하나 이상의 가상 객체들의 하나 이상의 특성들이 적어도 하나의 물리 법칙에 따르는 방식으로 조정된다. 예를 들어, XR 시스템은 사람이 고개를 돌리는 것을 검출할 수 있고, 이에 응답하여, 그 사람에게 제시되는 그래픽 콘텐츠 및 음장(acoustic field)을 물리적 환경에서 그러한 뷰들 및 소리들이 변경되는 방식과 유사한 방식으로 조정할 수 있다. 일부 상황들에서(예를 들어, 접근성 이유들 때문에), XR 환경에서의 가상 객체(들)의 특성(들)에 대한 조정들은 신체적 움직임들의 표현들(예를 들어, 음성 커맨드들)에 응답하여 이루어질 수 있다. 사람은, 시각, 청각, 촉각, 미각, 및 후각을 포함하는 그들의 감각들 중 임의의 하나를 사용하여 XR 객체를 감지하고/하거나 그와 상호작용할 수 있다. 예를 들어, 사람은 3D 공간에서 오디오 소스들의 인지 지점을 제공하는 3D 또는 공간적 오디오 환경을 생성하는 오디오 객체들을 감지하고/하거나 그와 상호작용할 수 있다. 다른 예에서, 오디오 객체들은 오디오 투명성을 가능하게 할 수 있으며, 이는 선택적으로, 물리적 환경으로부터의 주변 소리들을 컴퓨터 생성 오디오와 함께 또는 그것 없이 통합한다. 일부 XR 환경들에서, 사람은 오디오 객체들만을 감지하고/하거나 그와 상호작용할 수 있다.

XR의 예들은 가상 현실 및 혼합 현실(mixed reality)을 포함한다.

가상 현실: 가상 현실(VR) 환경은 하나 이상의 감각들에 대한 컴퓨터-생성 감각 입력들에 전적으로 기초하도록 설계된 시뮬레이션된 환경을 지칭한다. VR 환경은 사람이 감지하고/하거나 그와 상호작용할 수 있는 복수의 가상 객체들을 포함한다. 예를 들어, 나무들, 빌딩들, 및 사람들을 표현하는 아바타들의 컴퓨터 생성 형상화가 가상 객체들의 예들이다. 사람은, 컴퓨터 생성 환경에서의 사람의 존재의 시뮬레이션을 통해 그리고/또는 컴퓨터 생성 환경에서의 사람의 신체적 움직임들의 서브세트의 시뮬레이션을 통해 VR 환경에서 가상 객체들을 감지하고/하거나 그와 상호작용할 수 있다.

혼합 현실: 컴퓨터-생성 감각 입력들에 전적으로 기초하도록 설계되는 VR 환경과는 대조적으로, 혼합 현실(MR) 환경은 컴퓨터-생성 감각 입력들(예를 들어, 가상 객체들)을 포함하는 것에 부가하여, 물리적 환경으로부터의 감각 입력들, 또는 그들의 표현을 통합하도록 설계된 시뮬레이션된 환경을 지칭한다. 가상 연속체(virtuality continuum)에서, 혼합 현실 환경은 한쪽의 완전히 물리적인 환경과 다른 쪽의 가상 현실 환경 사이의 임의의 곳에 있지만, 포함하지는 않는다. 일부 MR 환경들에서, 컴퓨터 생성 감각 입력들은 물리적 환경으로부터의 감각 입력들의 변화들에 응답할 수 있다. 또한, MR 환경을 제시하기 위한 일부 전자 시스템들은 물리적 환경에 대한 위치 및/또는 배향을 추적하여 가상 객체들이 실제 객체들(즉, 물리적 환경으로부터의 물리적 물품들 또는 물리적 물품들의 표현들)과 상호작용할 수 있게 할 수 있다. 예를 들어, 시스템은 가상 나무가 물리적 땅에 대하여 고정되어 있는 것처럼 보이도록 움직임들을 고려할 수 있다.

혼합 현실들의 예들은 증강 현실 및 증강 가상을 포함한다.

증강 현실: 증강 현실(AR) 환경은 하나 이상의 가상 객체들이 물리적 환경, 또는 그의 표현 위에 중첩되어 있는 시뮬레이션된 환경을 지칭한다. 예를 들어, AR 환경을 제시하기 위한 전자 시스템은 사람이 직접 물리적 환경을 볼 수 있는 투명 또는 반투명 디스플레이를 가질 수 있다. 시스템은, 사람이 시스템을 사용하여 물리적 환경 위에 중첩된 가상 객체들을 인지하도록, 투명 또는 반투명 디스플레이 상에 가상 객체들을 제시하도록 구성될 수 있다. 대안적으로, 시스템은 불투명 디스플레이, 및 물리적 환경의 표현들인 물리적 환경의 이미지들 또는 비디오를 캡처하는 하나 이상의 이미징 센서들을 가질 수 있다. 시스템은 이미지들 또는 비디오를 가상 객체들과 합성하고, 합성물을 불투명 디스플레이 상에 제시한다. 사람은 시스템을 사용하여 물리적 환경의 이미지들 또는 비디오에 의해 물리적 환경을 간접적으로 보고, 물리적 환경 위에 중첩된 가상 객체들을 인지한다. 본 명세서에 사용되는 바와 같이, 불투명 디스플레이 상에 보여지는 물리적 환경의 비디오는 "패스 스루(pass-through) 비디오"로 불리는데, 이는 시스템이 하나 이상의 이미지 센서(들)를 사용하여 물리적 환경의 이미지들을 캡처하고, AR 환경을 불투명 디스플레이 상에 제시할 시에 이들 이미지들을 사용하는 것을 의미한다. 추가로 대안적으로, 시스템은, 사람이 시스템을 사용하여 물리적 환경 위에 중첩된 가상 객체들을 인지하도록, 가상 객체들을 물리적 환경에, 예를 들어, 홀로그램으로서 또는 물리적 표면 상에 투영하는 투영 시스템을 가질 수 있다. 증강 현실 환경은 또한 물리적 환경의 표현이 컴퓨터 생성 감각 정보에 의해 변환되는 시뮬레이션된 환경을 지칭한다. 예를 들어, 패스 스루 비디오를 제공할 시에, 시스템은 하나 이상의 센서 이미지들을 변환하여 이미징 센서들에 의해 캡처된 관점과 상이한 선택 관점(예를 들어, 시점)을 부과할 수 있다. 다른 예로서, 물리적 환경의 표현은 그것의 일부들을 그래픽적으로 수정(예를 들어, 확대)함으로써 변환될 수 있어서, 수정된 부분은 원래 캡처된 이미지들의 표현일 수 있지만, 실사 버전은 아닐 수 있다. 추가적인 예로서, 물리적 환경의 표현은 그의 일부들을 그래픽적으로 제거하거나 또는 흐리게 함으로써 변환될 수 있다.

증강 가상: 증강 가상(AV) 환경은 가상 또는 컴퓨터 생성 환경이 물리적 환경으로부터의 하나 이상의 감각 입력들을 통합하는 시뮬레이션된 환경을 지칭한다. 감각 입력들은 물리적 환경의 하나 이상의 특성들의 표현들일 수 있다. 예를 들어, AV 공원은 가상 나무들 및 가상 빌딩들을 가질 수 있지만, 사람들의 얼굴들은 물리적 사람들을 촬영한 이미지들로부터 실사처럼 재현될 수 있다. 다른 예로서, 가상 객체는 하나 이상의 이미징 센서들에 의해 이미징되는 물리적 물품의 형상 또는 색상을 채용할 수 있다. 추가적인 예로서, 가상 객체는 물리적 환경에서 태양의 위치에 부합하는 그림자들을 채용할 수 있다.

시점-록킹(viewpoint-locked) 가상 객체: 사용자의 시점이 시프트(예를 들어, 변경)되더라도, 컴퓨터 시스템이 사용자의 시점의 동일한 위치 및/또는 포지션에서 가상 객체를 디스플레이할 때 가상 객체가 시점-록킹된다. 컴퓨터 시스템이 머리 장착형 디바이스인 실시예들에서, 사용자의 시점은 사용자의 머리의 전방 대면 방향에 록킹되고(예를 들어, 사용자의 시점은 사용자가 정면을 보고 있을 때 사용자의 시야의 적어도 일부임); 따라서, 사용자의 시선이 시프트되더라도, 사용자의 머리를 이동시키지 않으면서, 사용자의 시점이 고정된 상태로 유지된다. 컴퓨터 시스템이 사용자의 머리에 대해 재위치될 수 있는 디스플레이 생성 컴포넌트(예를 들어, 디스플레이 스크린)를 갖는 실시예들에서, 사용자의 시점은 컴퓨터 시스템의 디스플레이 생성 컴포넌트 상에서 사용자에게 제시되고 있는 증강 현실 뷰이다. 예를 들어, 사용자의 시점의 상부 좌측 코너에서 디스플레이되는 시점-록킹 가상 객체는, 사용자의 시점이 제1 배향(예를 들어, 사용자의 머리가 북쪽을 향함)에 있을 때, 사용자의 시점이 제2 배향(예를 들어, 사용자의 머리가 서쪽을 향함)으로 변경되더라도, 사용자의 시점의 상부 좌측 코너에서 계속 디스플레이된다. 다시 말하면, 시점-록킹된 가상 객체가 사용자의 시점에서 디스플레이되는 위치 및/또는 포지션은 물리적 환경 내의 사용자의 포지션 및/또는 배향과 독립적이다. 컴퓨터 시스템이 머리 장착형 디바이스인 실시예들에서, 사용자의 시점은 사용자의 머리의 배향에 록킹되므로, 가상 객체는 또한 "머리-록킹 가상 객체"로 지칭된다.

환경-록킹 가상 객체: 컴퓨터 시스템이 3차원 환경(예를 들어, 물리적 환경 또는 가상 환경) 내의 위치 및/또는 객체에 기초하는(예를 들어, 이를 참조하여 선택되고 그리고/또는 이에 고정된) 사용자의 시점 내의 위치 및/또는 포지션에서 가상 객체를 디스플레이할 때, 가상 객체는 환경-록킹(대안적으로는, "세계-록킹")된다. 사용자의 시점이 시프트됨에 따라, 사용자의 시점에 대한 환경 내의 위치 및/또는 객체가 변경되며, 이는 환경-록킹된 가상 객체가 사용자의 시점 내의 상이한 위치 및/또는 포지션에서 디스플레이되는 것을 초래한다. 예를 들어, 사용자의 바로 전방에 있는 나무에 록킹되는 환경-록킹된 가상 객체는 사용자의 시점의 중심에서 디스플레이된다. 사용자의 시점이 우측으로 시프트되어(예를 들어, 사용자의 머리가 우측으로 회전되어), 나무가 이제 사용자의 시점에서 중심 좌측에 있을 때(예를 들어, 사용자의 시점 내의 나무의 포지션이 시프트될 때), 나무에 록킹되는 환경-록킹된 가상 객체는 사용자의 시점에서 중심 좌측에 디스플레이된다. 다시 말하면, 환경-록킹된 가상 객체가 사용자의 시점에서 디스플레이되는 위치 및/또는 포지션은 가상 객체가 록킹되는 환경 내의 위치 및/또는 객체의 포지션 및/또는 배향에 의존한다. 일부 실시예들에서, 컴퓨터 시스템은 사용자의 시점에서 환경-록킹된 가상 객체를 디스플레이할 포지션을 결정하기 위해 고정 기준 프레임(예를 들어, 물리적 환경 내의 고정 위치 및/또는 객체에 고정되는 좌표계)을 사용한다. 환경-록킹된 가상 객체는 환경의 고정 부분(예를 들어, 바닥, 벽, 테이블, 또는 다른 고정 객체)에 록킹될 수 있거나, 또는 환경의 이동가능 부분(예를 들어, 차량, 동물, 사람, 또는 심지어 사용자의 시점과 독립적으로 이동되는 사용자 신체의 일부, 예컨대 사용자의 손, 손목, 팔, 또는 다리의 표현)에 록킹될 수 있어서, 가상 객체는 가상 객체와 환경의 일부 사이의 고정된 관계를 유지하기 위해 시점 또는 환경의 일부가 이동됨에 따라 이동된다.

일부 실시예들에서, 환경-록킹되거나 시점-록킹된 가상 객체는 가상 객체가 따르는 기준 포인트의 이동에 대한 환경-록킹되거나 시점-록킹된 가상 객체의 모션을 감소시키거나 지연시키는 느린(lazy) 후속 거동을 나타낸다. 일부 실시예들에서, 느린 후속 거동을 나타낼 때, 컴퓨터 시스템은, 가상 객체가 따르고 있는 기준 포인트(예를 들어, 환경의 일부, 시점, 또는 시점에 대해 고정된 포인트, 예컨대 시점으로부터 5 내지 300 cm인 포인트)의 이동을 검출할 때 가상 객체의 이동을 의도적으로 지연시킨다. 예를 들어, 기준 포인트(예를 들어, 환경의 일부 또는 시점)가 제1 속도로 이동할 때, 가상 객체는 (예를 들어, 기준 포인트가 이동하는 것을 중지하거나 기준 포인트가 느려질 때까지(그 포인트에서, 가상 객체는 기준 포인트를 따라잡기 시작함)) 기준 포인트에 록킹된 상태로 유지되기 위해 디바이스에 의해 이동되지만, 제1 속도보다 느린 제2 속도로 이동한다. 일부 실시예들에서, 가상 객체가 느린 후속 거동을 나타낼 때, 디바이스는 기준 포인트의 작은 양들의 이동을 무시한다(예를 들어, 0 내지 5도만큼의 이동 또는 0 내지 50 cm만큼의 이동과 같은 임계량의 이동 미만인 기준 포인트의 이동을 무시함). 예를 들어, 기준 포인트(예를 들어, 가상 객체가 록킹되는 환경의 일부 또는 시점)가 제1 양만큼 이동할 때, (예를 들어, 가상 객체가 록킹되는 기준 포인트와 상이한 시점 또는 환경의 일부에 대해 고정된 또는 실질적으로 고정된 포지션을 유지하기 위해 가상 객체가 디스플레이되고 있기 때문에) 기준 포인트와 가상 객체 사이의 거리가 증가되고, 기준 포인트(예를 들어, 가상 객체가 록킹되는 환경의 일부 또는 시점)가 제1 양보다 큰 제2 양만큼 이동할 때, (예를 들어, 가상 객체가 록킹되는 기준 포인트와 상이한 시점 또는 환경의 일부에 대해 고정된 또는 실질적으로 고정된 포지션을 유지하기 위해 가상 객체가 디스플레이되고 있기 때문에) 기준 포인트와 가상 객체 사이의 거리는 초기에 증가되며, 이어서, 기준 포인트에 대해 고정된 또는 실질적으로 고정된 포지션을 유지하기 위해 가상 객체가 컴퓨터 시스템에 의해 이동되기 때문에, 기준 포인트의 이동의 양이 임계치(예를 들어, "느린 후속" 임계치) 초과로 증가됨에 따라 감소된다. 일부 실시예들에서, 가상 객체가 기준 포인트에 대해 실질적으로 고정된 포지션을 유지하는 것은 가상 객체가 하나 이상의 차원들(예를 들어, 기준 포인트의 포지션에 대해 위/아래, 좌측/우측, 및/또는 전방/후방)로 기준 포인트의 임계 거리(예를 들어, 1, 2, 3, 5, 15, 20, 50 cm) 내에서 디스플레이되는 것을 포함한다.

하드웨어: 사람이 다양한 XR 환경들을 감지하고/하거나 그와 상호작용할 수 있게 하는 많은 상이한 유형의 전자 시스템들이 있다. 예들은 머리 장착형 시스템들, 투영 기반 시스템들, 헤드업 디스플레이(HUD)들, 디스플레이 능력이 통합된 차량 앞유리들, 디스플레이 능력이 통합된 창문들, 사람의 눈 위에 놓이도록 설계된 렌즈들로서 형성된 디스플레이들(예를 들어, 콘택트 렌즈들과 유사함), 헤드폰들/이어폰들, 스피커 어레이들, 입력 시스템들(예를 들어, 햅틱 피드백이 있거나 또는 없는 웨어러블 또는 핸드헬드 제어기들), 스마트폰들, 태블릿들, 및 데스크톱/랩톱 컴퓨터들을 포함한다. 머리 장착형 시스템은 오디오 출력을 제공하기 위해 머리 장착형 시스템 내에 통합된 스피커들 및/또는 다른 오디오 출력 디바이스들을 포함할 수 있다. 머리 장착형 시스템은 하나 이상의 스피커(들) 및 통합된 불투명 디스플레이를 가질 수 있다. 대안적으로, 머리 장착형 시스템은 외부 불투명 디스플레이(예를 들어, 스마트폰)를 수용하도록 구성될 수 있다. 머리 장착형 시스템은 물리적 환경의 이미지들 또는 비디오를 캡처하기 위한 하나 이상의 이미징 센서들, 및/또는 물리적 환경의 오디오를 캡처하기 위한 하나 이상의 마이크로폰들을 통합할 수 있다. 머리 장착형 시스템은 불투명 디스플레이보다는, 투명 또는 반투명 디스플레이를 가질 수 있다. 투명 또는 반투명 디스플레이는 이미지들을 표현하는 광이 사람의 눈들로 지향되는 매체를 가질 수 있다. 디스플레이는 디지털 광 프로젝션, OLED들, LED들, uLED들, 실리콘 액정 표시장치, 레이저 스캐닝 광원, 또는 이들 기술들의 임의의 조합을 이용할 수 있다. 매체는 광학 도파관, 홀로그램 매체, 광학 조합기, 광학 반사기, 또는 이들의 임의의 조합일 수 있다. 일 실시예에서, 투명 또는 반투명 디스플레이는 선택적으로 불투명하게 되도록 구성될 수 있다. 투사-기반 시스템들은 그래픽 이미지들을 사람의 망막 상에 투사하는 망막 투사 기술을 채용할 수 있다. 투영 시스템들은 또한 가상 객체들을 물리적 환경에, 예를 들어, 홀로그램으로서 또는 물리적 표면 상에 투영하도록 구성될 수 있다. 일부 실시예들에서, 제어기(110)는 사용자에 대한 XR 경험을 관리 및 조정하도록 구성된다. 일부 실시예들에서, 제어기(110)는 소프트웨어, 펌웨어, 및/또는 하드웨어의 적합한 조합을 포함한다. 제어기(110)는 도 2에 관해 아래에서 더 상세히 설명된다. 일부 실시예들에서, 제어기(110)는 장면(105)(예를 들어, 물리적 환경)에 대해 로컬 또는 원격인 컴퓨팅 디바이스이다. 예를 들어, 제어기(110)는 장면(105) 내에 위치된 로컬 서버이다. 다른 예에서, 제어기(110)는 장면(105)의 외부에 위치된 원격 서버(예를 들어, 클라우드 서버, 중앙 서버 등)이다. 일부 실시예들에서, 제어기(110)는 하나 이상의 유선 또는 무선 통신 채널들(144)(예를 들어, 블루투스, IEEE 802.11x, IEEE 802.16x, IEEE 802.3x 등)을 통해 디스플레이 생성 컴포넌트(120)(예를 들어, HMD, 디스플레이, 프로젝터, 터치-스크린 등)와 통신가능하게 결합된다. 다른 예에서, 제어기(110)는 디스플레이 생성 컴포넌트(120)(예를 들어, 디스플레이 및 하나 이상의 프로세서들을 포함하는 HMD 또는 휴대용 전자 디바이스 등)의 인클로저(예를 들어, 물리적 하우징), 입력 디바이스들(125) 중 하나 이상, 출력 디바이스들(155) 중 하나 이상, 센서들(190) 중 하나 이상, 및/또는 주변 디바이스들(195) 중 하나 이상 내에 포함되거나, 상기 중 하나 이상과 동일한 물리적 인클로저 또는 지지 구조를 공유한다.

일부 실시예들에서, 디스플레이 생성 컴포넌트(120)는 XR 경험(예를 들어, 적어도 XR 경험의 시각적 컴포넌트)을 사용자에게 제공하도록 구성된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트(120)는 소프트웨어, 펌웨어, 및/또는 하드웨어의 적합한 조합을 포함한다. 디스플레이 생성 컴포넌트(120)는 도 3과 관련하여 아래에서 더욱 상세히 기술된다. 일부 실시예들에서, 제어기(110)의 기능성들은 디스플레이 생성 컴포넌트(120)에 의해 제공되고/되거나 이와 조합된다.

일부 실시예들에 따르면, 디스플레이 생성 컴포넌트(120)는 사용자가 장면(105) 내에 가상으로 그리고/또는 물리적으로 존재하는 동안 XR 경험을 사용자에게 제공한다.

일부 실시예들에서, 디스플레이 생성 컴포넌트는 사용자의 신체의 일부(예를 들어, 그의 머리에, 그의 손에 등)에 착용된다. 이와 같이, 디스플레이 생성 컴포넌트(120)는 XR 콘텐츠를 디스플레이하기 위해 제공되는 하나 이상의 XR 디스플레이들을 포함한다. 예를 들어, 다양한 실시예들에서, 디스플레이 생성 컴포넌트(120)는 사용자의 시야를 둘러싼다. 일부 실시예들에서, 디스플레이 생성 컴포넌트(120)는 XR 콘텐츠를 제시하도록 구성된 핸드헬드 디바이스(예를 들어, 스마트폰 또는 태블릿)이고, 사용자는 사용자의 시야를 향해 지향된 디스플레이 및 장면(105)을 향해 지향된 카메라를 갖는 디바이스를 유지한다. 일부 실시예들에서, 핸드헬드 디바이스는 선택적으로 사용자의 머리에 착용된 인클로저 내에 배치된다. 일부 실시예들에서, 핸드헬드 디바이스는 선택적으로 사용자 전방의 지지부(예를 들어, 삼각대) 상에 배치된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트(120)는 사용자가 디스플레이 생성 컴포넌트(120)를 착용하거나 유지하지 않는 XR 콘텐츠를 제공하도록 구성된 XR 챔버, 인클로저 또는 룸이다. XR 콘텐츠를 디스플레이하기 위한 하나의 유형의 하드웨어(예를 들어, 핸드헬드 디바이스 또는 삼각대 상의 디바이스)를 참조하여 설명된 많은 사용자 인터페이스들은 XR 콘텐츠를 디스플레이하기 위한 다른 유형의 하드웨어(예를 들어, HMD 또는 다른 웨어러블 컴퓨팅 디바이스) 상에서 구현될 수 있다. 예를 들어, 핸드헬드 또는 삼각대 장착형 디바이스 전방의 공간에서 발생하는 상호작용들에 기초하여 트리거된 XR 콘텐츠와의 상호작용들을 보여주는 사용자 인터페이스는, 상호작용들이 HMD 전방의 공간에서 발생하고 XR 콘텐츠의 응답들이 HMD를 통해 디스플레이되는 HMD를 이용하여 유사하게 구현될 수 있다. 유사하게, 물리적 환경(예를 들어, 장면(105) 또는 사용자의 신체의 일부(예를 들어, 사용자의 눈(들), 머리 또는 손)에 대한 핸드헬드 또는 삼각대 장착형 디바이스의 이동에 기초하여 트리거되는 XR 콘텐츠와의 상호작용들을 보여주는 사용자 인터페이스는 유사하게, 물리적 환경(예를 들어, 장면(105) 또는 사용자의 신체의 일부(예를 들어, 사용자의 눈(들), 머리 또는 손)에 대한 HMD의 이동에 의해 이동이 야기되는 HMD로 구현될 수 있다.

동작 환경(100)의 관련 특징부들이 도 1에 도시되어 있지만, 당업자들은 본 개시내용으로부터, 간결함을 위해 그리고 본 명세서에 개시되는 예시적인 실시예들의 더 많은 관련 태양들을 불명료하게 하지 않기 위해 다양한 다른 특징부들이 예시되지 않았음을 인식할 것이다.

도 2는 일부 실시예들에서의 제어기(110)의 일 예의 블록도이다. 소정의 특정 특징부들이 예시되어 있지만, 당업자들은 본 개시내용으로부터, 간결함을 위해 그리고 본 명세서에 개시되는 실시예들의 더 많은 관련 태양들을 불명료하게 하지 않기 위해 다양한 다른 특징부들이 예시되지 않았음을 인식할 것이다. 이를 위해, 비제한적인 예로서, 일부 실시예들에서, 제어기(110)는 하나 이상의 프로세싱 유닛들(202)(예를 들어, 마이크로프로세서들, 주문형 집적 회로(ASIC)들, 필드-프로그래밍가능 게이트 어레이(FPGA)들, 그래픽 프로세싱 유닛(GPU)들, 중앙 프로세싱 유닛(CPU)들, 프로세싱 코어들 등), 하나 이상의 입/출력(I/O) 디바이스들(206), 하나 이상의 통신 인터페이스들(208)(예를 들어, 범용 직렬 버스(USB), FIREWIRE, THUNDERBOLT, IEEE 802.3x, IEEE 802.11x, IEEE 802.16x, 모바일 통신들을 위한 글로벌 시스템(GSM), 코드 분할 다중 액세스(CDMA), 시분할 다중 액세스(TDMA), 글로벌 포지셔닝 시스템(GPS), 적외선(IR), 블루투스, 지그비, 및/또는 유사한 유형의 인터페이스), 하나 이상의 프로그래밍(예를 들어, I/O) 인터페이스들(210), 메모리(220), 및 이들 및 다양한 다른 컴포넌트들을 상호연결시키기 위한 하나 이상의 통신 버스들(204)을 포함한다.

일부 실시예들에서, 하나 이상의 통신 버스들(204)은 시스템 컴포넌트들 사이의 통신을 상호연결시키고 제어하는 회로부를 포함한다. 일부 실시예들에서, 하나 이상의 I/O 디바이스들(206)은 키보드, 마우스, 터치패드, 조이스틱, 하나 이상의 마이크로폰들, 하나 이상의 스피커들, 하나 이상의 이미지 센서들, 하나 이상의 디스플레이들 등 중 적어도 하나를 포함한다.

메모리(220)는 동적-랜덤 액세스 메모리(DRAM), 정적 랜덤-액세스 메모리(SRAM), 더블-데이터-레이트 랜덤-액세스 메모리(DDR RAM), 또는 다른 랜덤-액세스 솔리드-스테이트(solid-state) 메모리 디바이스들과 같은 고속 랜덤-액세스 메모리를 포함한다. 일부 실시예들에서, 메모리(220)는 하나 이상의 자기 디스크 저장 디바이스들, 광 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 또는 다른 비휘발성 솔리드-스테이트 저장 디바이스들과 같은 비휘발성 메모리를 포함한다. 메모리(220)는 선택적으로, 하나 이상의 프로세싱 유닛들(202)로부터 원격으로 위치된 하나 이상의 저장 디바이스들을 포함한다. 메모리(220)는 비일시적 컴퓨터 판독가능 저장 매체를 포함한다. 일부 실시예들에서, 메모리(220) 또는 메모리(220)의 비일시적 컴퓨터 판독가능 저장 매체는 다음의 프로그램들, 모듈들 및 데이터 구조들, 또는 선택적인 운영 체제(230) 및 XR 경험 모듈(240)을 포함하는 그들의 서브세트를 저장한다.

운영 체제(230)는 다양한 기본 시스템 서비스들을 처리하고 하드웨어 의존 태스크들을 수행하기 위한 명령어들을 포함한다. 일부 실시예들에서, XR 경험 모듈(240)은 하나 이상의 사용자들에 대한 하나 이상의 XR 경험들(예를 들어, 하나 이상의 사용자들에 대한 단일 XR 경험, 또는 하나 이상의 사용자들의 각자의 그룹들에 대한 다수의 XR 경험들)을 관리하고 조정하도록 구성된다. 이를 위해, 다양한 실시예들에서, XR 경험 모듈(240)은 데이터 획득 유닛(241), 추적 유닛(242), 조정 유닛(246), 및 데이터 송신 유닛(248)을 포함한다.

일부 실시예들에서, 데이터 획득 유닛(241)은 적어도 도 1의 디스플레이 생성 컴포넌트(120) 및 선택적으로, 입력 디바이스들(125), 출력 디바이스들(155), 센서들(190), 및/또는 주변 디바이스들(195) 중 하나 이상으로부터 데이터(예를 들어, 제시 데이터, 상호작용 데이터, 센서 데이터, 위치 데이터 등)를 획득하도록 구성된다. 이를 위해, 다양한 실시예들에서, 데이터 획득 유닛(241)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다.

일부 실시예들에서, 추적 유닛(242)은 장면(105)을 맵핑하도록 그리고 도 1의 장면(105)에 대해 그리고 선택적으로, 입력 디바이스들(125), 출력 디바이스들(155), 센서들(190), 및/또는 주변 디바이스들(195) 중 하나 이상에 대해 적어도 디스플레이 생성 컴포넌트(120)의 포지션/위치를 추적하도록 구성된다. 이를 위해, 다양한 실시예들에서, 추적 유닛(242)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다. 일부 실시예들에서, 추적 유닛(242)은 손 추적 유닛(244), 및 눈 추적 유닛(243)을 포함한다. 일부 실시예들에서, 손 추적 유닛(244)은 도 1의 장면(105)에 대해, 디스플레이 생성 컴포넌트(120)에 대해, 및/또는 사용자의 손에 대해 정의된 좌표계에 대해 사용자의 손들의 하나 이상의 부분들의 포지션/위치 및/또는 사용자의 손들의 하나 이상의 부분들의 모션들을 추적하도록 구성된다. 손 추적 유닛(244)은 도 4와 관련하여 아래에서 더욱 상세히 설명된다. 일부 실시예들에서, 눈 추적 유닛(243)은 장면(105)에 대해(예를 들어, 물리적 환경 및/또는 사용자(예를 들어, 사용자의 손)에 대해) 또는 디스플레이 생성 컴포넌트(120)를 통해 디스플레이되는 XR 콘텐츠에 대해 사용자의 시선(또는 더 광범위하게는 사용자의 눈들, 얼굴 또는 머리)의 위치 및 이동을 추적하도록 구성된다. 눈 추적 유닛(243)은 도 5에 관해 아래에서 더 상세히 설명된다.

일부 실시예들에서, 조정 유닛(246)은 디스플레이 생성 컴포넌트(120)에 의해 그리고 선택적으로, 출력 디바이스들(155) 및/또는 주변 디바이스들(195) 중 하나 이상에 의해 사용자에게 제시되는 XR 경험을 관리 및 조정하도록 구성된다. 이를 위해, 다양한 실시예들에서, 조정 유닛(246)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다.

일부 실시예들에서, 데이터 송신 유닛(248)은 적어도 디스플레이 생성 컴포넌트(120) 및 선택적으로, 입력 디바이스들(125), 출력 디바이스들(155), 센서들(190), 및/또는 주변 디바이스들(195) 중 하나 이상에 데이터(예를 들어, 제시 데이터, 위치 데이터 등)를 송신하도록 구성된다. 이를 위해, 다양한 실시예들에서, 데이터 송신 유닛(248)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다.

데이터 획득 유닛(241), 추적 유닛(242)(예를 들어, 눈 추적 유닛(243) 및 손 추적 유닛(244)을 포함함), 조정 유닛(246), 및 데이터 송신 유닛(248)이 단일 디바이스(예를 들어, 제어기(110)) 상에 존재하는 것으로 도시되어 있지만, 다른 실시예들에서, 데이터 획득 유닛(241), 추적 유닛(242)(예를 들어, 눈 추적 유닛(243) 및 손 추적 유닛(244)을 포함함), 조정 유닛(246), 및 데이터 송신 유닛(248)의 임의의 조합이 별개의 컴퓨팅 디바이스들 내에 위치될 수 있다는 것이 이해되어야 한다.

게다가, 도 2는 본 명세서에 설명된 실시예들의 구조적 개략도와는 대조적으로 특정 구현예에 존재할 수 있는 다양한 특징부들의 기능 설명으로서 더 의도된다. 당업자들에 의해 인식되는 바와 같이, 별개로 도시된 아이템들은 조합될 수 있고 일부 아이템들은 분리될 수 있다. 예를 들어, 다양한 실시예들에서, 도 2에 별개로 도시된 일부 기능 모듈들은 단일 모듈로 구현될 수 있고, 단일 기능 블록들의 다양한 기능들은 하나 이상의 기능 블록들에 의해 구현될 수 있다. 모듈들의 실제 수량 및 특정 기능들의 분할 그리고 특징부들이 그들 사이에서 어떻게 할당되는지는 구현예들마다 다를 것이고, 일부 실시예들에서, 특정 구현예에 대해 선택된 하드웨어, 소프트웨어, 및/또는 펌웨어의 특정 조합에 부분적으로 의존한다.

도 3은 일부 실시예들에서의 디스플레이 생성 컴포넌트(120)의 일 예의 블록도이다. 소정의 특정 특징부들이 예시되어 있지만, 당업자들은 본 개시내용으로부터, 간결함을 위해 그리고 본 명세서에 개시되는 실시예들의 더 많은 관련 태양들을 불명료하게 하지 않기 위해 다양한 다른 특징부들이 예시되지 않았음을 인식할 것이다. 이를 위해, 비제한적인 예로서, 일부 실시예들에서, 디스플레이 생성 컴포넌트(120)(예를 들어, HMD)는 하나 이상의 프로세싱 유닛들(302)(예를 들어, 마이크로프로세서들, ASIC들, FPGA들, GPU들, CPU들, 프로세싱 코어들 등), 하나 이상의 입력/출력(I/O) 디바이스들 및 센서들(306), 하나 이상의 통신 인터페이스들(308)(예를 들어, USB, FIREWIRE, THUNDERBOLT, IEEE 802.3x, IEEE 802.11x, IEEE 802.16x, GSM, CDMA, TDMA, GPS, IR, 블루투스, 지그비, 및/또는 유사한 유형의 인터페이스), 하나 이상의 프로그래밍(예를 들어, I/O) 인터페이스들(310), 하나 이상의 XR 디스플레이들(312), 하나 이상의 선택적인 내부 및/또는 외부 대면 이미지 센서들(314), 메모리(320), 및 이들 및 다양한 다른 컴포넌트들을 상호연결하기 위한 하나 이상의 통신 버스들(304)을 포함한다.

일부 실시예들에서, 하나 이상의 통신 버스들(304)은 시스템 컴포넌트들 사이의 통신을 상호연결시키고 제어하는 회로부를 포함한다. 일부 실시예들에서, 하나 이상의 I/O 디바이스들 및 센서들(306)은 관성 측정 유닛(inertial measurement unit, IMU), 가속도계, 자이로스코프, 온도계, 하나 이상의 생리학적 센서들(예를 들어, 혈압 모니터, 심박수 모니터, 혈중 산소 센서, 혈당 센서 등), 하나 이상의 마이크로폰들, 하나 이상의 스피커들, 햅틱 엔진, 하나 이상의 깊이 센서들(예를 들어, 구조화된 광, 빛의 비행시간 등) 등 중 적어도 하나를 포함한다.

일부 실시예들에서, 하나 이상의 XR 디스플레이들(312)은 XR 경험을 사용자에게 제공하도록 구성된다. 일부 실시예들에서, 하나 이상의 XR 디스플레이들(312)은 홀로그래픽, 디지털 광 프로세싱(DLP), 액정 디스플레이(LCD), 실리콘 액정 표시장치(LCoS), 유기 발광 전계-효과 트랜지터리(OLET), 유기 발광 다이오드(OLED), 표면-전도 전자-방출기 디스플레이(SED), 전계-방출 디스플레이(FED), 양자점 발광 다이오드(QD-LED), 마이크로-전자기계 시스템(MEMS), 및/또는 유사한 디스플레이 유형들에 대응한다. 일부 실시예들에서, 하나 이상의 XR 디스플레이들(312)은 회절, 반사, 편광, 홀로그래픽 등의 도파관 디스플레이들에 대응한다. 예를 들어, 디스플레이 생성 컴포넌트(120)(예를 들어, HMD)는 단일 XR 디스플레이를 포함한다. 다른 예에서, 디스플레이 생성 컴포넌트(120)는 사용자의 각각의 눈에 대한 XR 디스플레이를 포함한다. 일부 실시예들에서, 하나 이상의 XR 디스플레이들(312)은 MR 및 VR 콘텐츠를 제시할 수 있다. 일부 실시예들에서, 하나 이상의 XR 디스플레이들(312)은 MR 또는 VR 콘텐츠를 제시할 수 있다.

일부 실시예들에서, 하나 이상의 이미지 센서들(314)은 사용자의 눈들을 포함하는 사용자의 얼굴의 적어도 일부분에 대응하는 이미지 데이터를 획득하도록 구성된다(그리고 눈-추적 카메라로 지칭될 수 있음). 일부 실시예들에서, 하나 이상의 이미지 센서들(314)은 사용자의 손(들) 및 선택적으로 사용자의 팔(들)의 적어도 일부에 대응하는 이미지 데이터를 획득하도록 구성된다(그리고 손-추적 카메라로 지칭될 수 있음). 일부 실시예들에서, 하나 이상의 이미지 센서들(314)은, 디스플레이 생성 컴포넌트(120)(예를 들어, HMD)가 존재하지 않았다면 사용자가 봤을 장면에 대응하는 이미지 데이터를 획득하기 위해 전방-대면하도록 구성된다(그리고 이들은 장면 카메라로 지칭될 수 있다). 하나 이상의 선택적인 이미지 센서들(314)은 하나 이상의 RGB 카메라들(예를 들어, 상보성 금속-산화물-반도체(CMOS) 이미지 센서 또는 CCD(charge-coupled device) 이미지 센서를 가짐), 하나 이상의 적외선(IR) 카메라들, 하나 이상의 이벤트-기반 카메라들 등을 포함할 수 있다.

메모리(320)는 DRAM, SRAM, DDR RAM, 또는 다른 랜덤-액세스 솔리드-스테이트 메모리 디바이스들과 같은 고속 랜덤-액세스 메모리를 포함한다. 일부 실시예들에서, 메모리(320)는 하나 이상의 자기 디스크 저장 디바이스들, 광 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 또는 다른 비휘발성 솔리드-스테이트 저장 디바이스들과 같은 비휘발성 메모리를 포함한다. 메모리(320)는 선택적으로, 하나 이상의 프로세싱 유닛들(302)로부터 원격으로 위치된 하나 이상의 저장 디바이스들을 포함한다. 메모리(320)는 비일시적 컴퓨터 판독가능 저장 매체를 포함한다. 일부 실시예들에서, 메모리(320) 또는 메모리(320)의 비일시적 컴퓨터 판독가능 저장 매체는 다음의 프로그램들, 모듈들 및 데이터 구조들, 또는 선택적인 운영 체제(330) 및 XR 제시 모듈(340)을 포함하는 그들의 서브세트를 저장한다.

운영 체제(330)는 다양한 기본 시스템 서비스들을 처리하고 하드웨어 의존 태스크들을 수행하기 위한 명령어들을 포함한다. 일부 실시예들에서, XR 제시 모듈(340)은 하나 이상의 XR 디스플레이들(312)을 통해 XR 콘텐츠를 사용자에게 제시하도록 구성된다. 이를 위해, 다양한 실시예들에서, XR 제시 모듈(340)은 데이터 획득 유닛(342), XR 제시 유닛(344), XR 맵 생성 유닛(346), 및 데이터 송신 유닛(348)을 포함한다.

일부 실시예들에서, 데이터 획득 유닛(342)은 적어도 도 1의 제어기(110)로부터 데이터(예컨대, 제시 데이터, 상호작용 데이터, 센서 데이터, 위치 데이터 등)를 획득하도록 구성된다. 이를 위해, 다양한 실시예들에서, 데이터 획득 유닛(342)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다.

일부 실시예들에서, XR 제시 유닛(344)은 하나 이상의 XR 디스플레이들(312)을 통해 XR 콘텐츠를 제시하도록 구성된다. 이를 위해, 다양한 실시예들에서, XR 제시 유닛(344)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다.

일부 실시예들에서, XR 맵 생성 유닛(346)은 미디어 콘텐츠 데이터에 기초하여 XR 맵(예를 들어, 확장 현실을 생성하기 위해 컴퓨터 생성 객체들이 배치될 수 있는 혼합 현실 장면의 3D 맵 또는 물리적 환경의 맵)을 생성하도록 구성된다. 이를 위해, 다양한 실시예들에서, XR 맵 생성 유닛(346)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다.

일부 실시예들에서, 데이터 송신 유닛(348)은 적어도 제어기(110) 및 선택적으로, 입력 디바이스들(125), 출력 디바이스들(155), 센서들(190), 및/또는 주변 디바이스들(195) 중 하나 이상에 데이터(예를 들어, 제시 데이터, 위치 데이터 등)를 송신하도록 구성된다. 이를 위해, 다양한 실시예들에서, 데이터 송신 유닛(348)은 그에 대한 명령어들 및/또는 로직, 및 그에 대한 휴리스틱 및 메타데이터를 포함한다.

데이터 획득 유닛(342), XR 제시 유닛(344), XR 맵 생성 유닛(346), 및 데이터 송신 유닛(348)이 단일 디바이스(예컨대, 도 1의 디스플레이 생성 컴포넌트(120)) 상에 존재하는 것으로 도시되어 있지만, 다른 실시예들에서, 데이터 획득 유닛(342), XR 제시 유닛(344), XR 맵 생성 유닛(346), 및 데이터 송신 유닛(348)의 임의의 조합이 별개의 컴퓨팅 디바이스들 내에 위치될 수 있다는 것을 이해해야 한다.

게다가, 도 3은 본 명세서에 설명된 실시예들의 구조적 개략도와는 대조적으로 특정 구현예에 존재할 수 있는 다양한 특징부들의 기능 설명으로서 더 의도된다. 당업자들에 의해 인식되는 바와 같이, 별개로 도시된 아이템들은 조합될 수 있고 일부 아이템들은 분리될 수 있다. 예를 들어, 다양한 실시예들에서, 도 3에 별개로 도시된 일부 기능 모듈들은 단일 모듈로 구현될 수 있고, 단일 기능 블록들의 다양한 기능들은 하나 이상의 기능 블록들에 의해 구현될 수 있다. 모듈들의 실제 수량 및 특정 기능들의 분할 그리고 특징부들이 그들 사이에서 어떻게 할당되는지는 구현예들마다 다를 것이고, 일부 실시예들에서, 특정 구현예에 대해 선택된 하드웨어, 소프트웨어, 및/또는 펌웨어의 특정 조합에 부분적으로 의존한다.

도 4는 손 추적 디바이스(140)의 예시적인 실시예의 개략적인 그림 예시이다. 일부 실시예들에서, 손 추적 디바이스(140)(도 1)는 사용자의 손들의 하나 이상의 부분들의 포지션/위치 및/또는 도 1의 장면(105)에 대해(예를 들어, 사용자를 둘러싸는 물리적 환경의 일부에 대해, 디스플레이 생성 컴포넌트(들)(120) 중 적어도 하나에 대해, 또는 사용자의 일부(예를 들어, 사용자의 얼굴, 눈들, 또는 손)에 대해, 및/또는 사용자의 손에 대해 정의된 좌표계에 대해) 사용자의 손들의 하나 이상의 부분들의 모션들을 추적하기 위해 손 추적 유닛(244)(도 2)에 의해 제어된다. 일부 실시예들에서, 손 추적 디바이스(140)는 디스플레이 생성 컴포넌트(120)(예를 들어, 머리 장착형 디바이스에 내장되거나 그에 부착됨)의 일부이다. 일부 실시예들에서, 손 추적 디바이스(140)는 디스플레이 생성 컴포넌트(120)와 별개이다(예를 들어, 별개의 하우징들에 위치되거나 또는 별개의 물리적 지지 구조들에 부착됨).

일부 실시예들에서, 손 추적 디바이스(140)는 적어도 인간 사용자의 손(406)을 포함하는 3차원 장면 정보를 캡처하는 이미지 센서들(404)(예를 들어, 하나 이상의 IR 카메라들, 3D 카메라들, 깊이 카메라들 및/또는 컬러 카메라들 등)을 포함한다. 이미지 센서들(404)은 손가락들 및 이들 각자의 위치들이 구별될 수 있게 하기에 충분한 해상도로 손 이미지들을 캡처한다. 이미지 센서들(404)은 통상적으로, 또한 사용자의 신체의 다른 부분들, 또는 가능하게는 신체 전부의 이미지들을 캡처하고, 원하는 해상도로 손의 이미지들을 캡처하기 위한 향상된 배율을 갖는 전용 센서 또는 줌 능력들을 가질 수 있다. 일부 실시예들에서, 이미지 센서들(404)은 또한 손(406) 및 장면의 다른 요소들의 2D 컬러 비디오 이미지들을 캡처한다. 일부 실시예들에서, 이미지 센서들(404)은 장면(105)의 물리적 환경을 캡처하거나 또는 장면(105)의 물리적 환경들을 캡처하는 이미지 센서들의 역할을 하기 위해 다른 이미지 센서들과 함께 사용된다. 일부 실시예들에서, 이미지 센서들(404)은, 이미지 센서들에 의해 캡처된 손 이동이 제어기(110)로의 입력들로서 취급되는 상호작용 공간을 정의하기 위해 이미지 센서들의 시야 또는 그의 일부가 사용되는 방식으로 사용자 또는 사용자의 환경에 대해 위치설정된다.

일부 실시예들에서, 이미지 센서들(404)은 3D 맵 데이터(및 가능하게는 또한 컬러 이미지 데이터)를 포함하는 프레임들의 시퀀스를, 맵 데이터로부터 고레벨 정보를 추출하는 제어기(110)에 출력한다. 이러한 고레벨 정보는 통상적으로, 애플리케이션 프로그램 인터페이스(API)를 통해 제어기 상에서 실행되는 애플리케이션에 제공되며, 제어기는 그에 따라 디스플레이 생성 컴포넌트(120)를 구동시킨다. 예를 들어, 사용자는 자신의 손(406)을 이동시키고 자신의 손 자세를 변경함으로써 제어기(110) 상에서 실행되는 소프트웨어와 상호작용할 수 있다.

일부 실시예들에서, 이미지 센서들(404)은 손(406)을 포함하는 장면 상에 스팟들의 패턴을 투영하고 투영된 패턴의 이미지를 캡처한다. 일부 실시예들에서, 제어기(110)는 패턴 내의 스폿들의 횡방향 시프트들에 기초하여, 삼각측량에 의해 장면 내의 포인트들(사용자의 손의 표면 상의 포인트들을 포함함)의 3D 좌표들을 컴퓨팅한다. 이러한 접근법은 그것이 사용자가 임의의 종류의 비콘(beacon), 센서 또는 다른 마커를 유지하거나 착용할 것을 요구하지 않는다는 점에서 유리하다. 이는 이미지 센서들(404)로부터 특정 거리에서 미리결정된 기준 평면에 대한 장면 내의 포인트들의 깊이 좌표들을 제공한다. 본 개시내용에서, 이미지 센서들(404)은, 장면 내의 포인트들의 깊이 좌표들이 이미지 센서들에 의해 측정된 z 성분들에 대응하도록 x, y, z 축들의 직교 세트를 정의하는 것으로 가정된다. 대안적으로, 이미지 센서들(404)(예를 들어, 손 추적 디바이스)은 단일 또는 다수의 카메라들 또는 다른 유형들의 센서들에 기초하여, 입체 이미징 또는 비행 시간 측정들과 같은 다른 3D 맵핑 방법들을 사용할 수 있다.

일부 실시예들에서, 손 추적 디바이스(140)는 사용자의 손(예를 들어, 전체 손 또는 하나 이상의 손가락들)을 이동시키는 동안 사용자의 손을 포함하는 깊이 맵들의 시간적 시퀀스를 캡처 및 프로세싱한다. 이미지 센서들(404) 및/또는 제어기(110) 내의 프로세서 상에서 실행되는 소프트웨어는 이러한 깊이 맵들에서 손의 패치 디스크립터들을 추출하기 위해 3D 맵 데이터를 프로세싱한다. 소프트웨어는, 각각의 프레임에서 손의 포즈를 추정하기 위해, 이전 학습 프로세스에 기초하여, 데이터베이스(408)에 저장된 패치 디스크립터들에 이들 디스크립터들을 매칭한다. 포즈는 전형적으로 사용자의 손 관절들 및 손가락 팁들의 3D 위치들을 포함한다.

소프트웨어는 또한 제스처들을 식별하기 위해 시퀀스에서 다수의 프레임들에 걸친 손들 및/또는 손가락들의 궤적을 분석할 수 있다. 본 명세서에 설명된 포즈 추정 기능들은 모션 추적 기능들과 인터리빙될 수 있어서, 패치-기반 포즈 추정은 2개(또는 그 초과)의 프레임들마다 단 한번만 수행되는 한편, 나머지 프레임들에 걸쳐 발생하는 포즈의 변화들을 발견하기 위해 추적이 사용된다. 포즈, 모션 및 제스처 정보는 위에서 언급된 API를 통해 제어기(110) 상에서 실행되는 애플리케이션 프로그램에 제공된다. 이 프로그램은, 예를 들어, 포즈 및/또는 제스처 정보에 응답하여, 디스플레이 생성 컴포넌트(120) 상에 제시된 이미지들을 이동 및 수정하거나, 또는 다른 기능들을 수행할 수 있다.

일부 실시예들에서, 제스처는 에어 제스처를 포함한다. 에어 제스처는 디바이스(예를 들어, 컴퓨터 시스템(101), 하나 이상의 입력 디바이스(125) 및/또는 손 추적 디바이스(140))의 일부인 입력 요소를 사용자가 터치하지 않으면서(또는 이와 독립적으로) 검출되는 제스처이며, 사용자 신체의 다른 부분에 대한 절대적 기준(예를 들어, 지면에 대한 사용자의 팔의 각도 또는 지면에 대한 사용자의 손의 거리)에 대한 사용자의 신체의 모션(예를 들어, 사용자의 어깨에 대한 사용자의 손의 움직임, 사용자의 다른 손에 대한 사용자의 하나의 손의 움직임, 및/또는 사용자의 다른 손가락 또는 손의 일부에 대한 사용자의 손가락의 움직임), 및/또는 사용자의 신체의 일부의 절대적 모션(예를 들어, 미리결정된 양 및/또는 속도만큼 미리결정된 포즈에서 손의 움직임을 포함하는 탭 제스처, 또는 사용자의 신체의 일부의 미리결정된 회전 속도 또는 양을 포함하는 셰이크 제스처)을 포함하는 공중을 통한 사용자의 신체의 일부(예를 들어, 머리, 하나 이상의 팔들, 하나 이상의 손들, 하나 이상의 손가락들 및/또는 하나 이상의 다리들)의 검출된 모션에 기초한다.

일부 실시예들에서, 본 명세서에서 설명된 다양한 예들 및 실시예들에서 사용된 입력 제스처들은, 일부 실시예들에서, XR 환경(예를 들어, 가상 또는 혼합 현실 환경)과 상호작용하기 위해 다른 손가락(들)(또는 사용자의 손의 일부(들))에 대한 사용자의 손가락(들)의 움직임에 의해 수행되는 에어 제스처들을 포함한다. 일부 실시예들에서, 에어 제스처는, 사용자가 디바이스의 일부인 입력 요소를 터치하지 않으면서(또는 디바이스의 일부인 입력 요소와 독립적으로) 검출되고, 절대적 기준에 대한 사용자의 신체의 모션(예를 들어, 지면에 대한 사용자의 팔의 각도 또는 지면에 대한 사용자의 손의 거리), 사용자의 신체의, 사용자의 신체의 다른 부분에 대한 모션(예를 들어, 사용자의 손의 사용자의 어깨에 대한 이동, 사용자의 하나의 손의 사용자의 다른 손에 대한 이동, 및/또는 사용자의 손가락의 사용자의 손의 다른 손가락 또는 부분에 대한 이동), 및/또는 사용자의 신체의 일부분의 절대적 모션(예를 들어, 미리결정된 양 및/또는 속력만큼의 미리결정된 포즈의 손의 이동을 포함하는 탭 제스처, 또는 사용자의 신체의 일부분의 미리결정된 속력 또는 양의 회전을 포함하는 쉐이크 제스처)을 포함하는 에어를 통한 사용자의 신체의 일부분의 검출된 모션에 기초하는 제스처이다.

입력 제스처가 에어 제스처인 일부 실시예들에서(예를 들어, 터치스크린 상에 디스플레이된 사용자 인터페이스 요소와의 접촉 또는 사용자 인터페이스 요소에 대해 커서를 이동시키는 마우스 또는 트랙패드와의 접촉과 같이, 사용자 인터페이스 요소가 사용자 입력의 타깃인 것에 대한 정보를 컴퓨터 시스템에 제공하는 입력 디바이스와의 물리적 접촉의 부재 시에), 제스처는 (예를 들어, 아래에서 설명되는 바와 같은 직접 입력들에 대한) 사용자 입력의 타깃을 결정하기 위해 사용자의 주의(예를 들어, 시선)를 고려한다. 따라서, 에어 제스처들을 수반하는 구현들에서, 입력 제스처는, 예를 들어, 아래에서 더 상세히 설명되는 바와 같이, 핀치 및/또는 탭 입력을 수행하기 위해 사용자의 손가락(들) 및/또는 손들의 움직임과 조합하여(예를 들어, 동시에) 사용자 인터페이스 요소를 향한 검출된 주의(예를 들어, 시선)이다.

일부 실시예들에서, 사용자 인터페이스 객체로 지향되는 입력 제스처들은 사용자 인터페이스 객체를 참조하여 간접적으로 또는 직접적으로 수행된다. 예를 들어, (예를 들어, 사용자의 현재 시점에 기초하여 결정되는 바와 같이) 3차원 환경에서 사용자 인터페이스 객체의 포지션에 대응하는 포지션에서 사용자의 손으로 입력 제스처를 수행함에 있어서 사용자 인터페이스 객체 상에서 직접 사용자 입력이 수행된다. 일부 실시예들에서, 사용자 인터페이스 객체 상에서 사용자의 주의(예를 들어, 시선)를 검출하면서 사용자의 손의 포지션이 3차원 환경에서 사용자 인터페이스 객체의 포지션에 대응하는 포지션에 있지 않은 동안 사용자가 입력 제스처를 수행하는 것에 따라 사용자 인터페이스 객체 상에서 간접적으로 입력 제스처가 수행된다. 예를 들어, 직접적인 입력 제스처의 경우, 사용자는, 사용자 인터페이스 객체의 디스플레이된 포지션에 대응하는 포지션에서 또는 그 근처에서(예를 들어, 옵션의 외측 에지 또는 옵션의 중심 부분으로부터 측정되는 바와 같이 0.5 cm, 1 cm, 5 cm, 또는 0 내지 5 cm의 거리 내에서) 제스처를 개시함으로써 사용자 인터페이스 객체로 사용자의 입력을 지향시키는 것이 가능하게 된다. 간접적인 입력 제스처의 경우, 사용자는 사용자 인터페이스 객체에 주의를 기울임으로써(예를 들어, 사용자 인터페이스 객체를 응시함으로써) 사용자의 입력을 사용자 인터페이스 객체로 지향시키는 것이 가능하게 되고, 옵션에 주의를 기울이는 동안, 사용자는 (예를 들어, 컴퓨터 시스템에 의해 검출가능한 임의의 포지션에서)(예를 들어, 사용자 인터페이스 객체의 디스플레이된 포지션에 대응하지 않는 포지션에서) 입력 제스처를 개시한다.

일부 실시예들에서, 본 명세서에서 설명된 다양한 예들 및 실시예들에서 사용된 입력 제스처들(예를 들어, 에어 제스처들)은 일부 실시예들에서, 가상 또는 혼합 현실 환경과 상호작용하기 위한 핀치 입력들 및 탭 입력들을 포함한다. 예를 들어, 아래에서 설명되는 핀치 입력들 및 탭 입력들은 에어 제스처들로서 수행된다.

일부 실시예들에서, 핀치 입력은 핀치 제스처, 롱 핀치 제스처, 핀치 및 드래그 제스처 또는 더블 핀치 제스처 중 하나 이상을 포함하는 에어 제스처의 일부이다. 예를 들어, 에어 제스처인 핀치 제스처는 서로 접촉하기 위한 손의 2개 이상의 손가락들의 움직임을 포함하고, 이는, 선택적으로, 즉각적인(예를 들어, 0 내지 1 초 이내에) 서로로부터의 접촉 해제가 후속된다. 에어 제스처인 롱 핀치 제스처는, 서로로부터의 접촉 해제를 검출하기 전에 적어도 임계 시간(예를 들어, 적어도 1 초) 동안 서로 접촉하기 위한 손의 2개 이상의 손가락들의 움직임을 포함한다. 예를 들어, 롱 핀치 제스처는 사용자가 핀치 제스처를 유지하는 것(예를 들어, 2개 이상의 손가락들이 접촉함)을 포함하고, 롱 핀치 제스처는 2개 이상의 손가락들 사이의 접촉 해제가 검출될 때까지 계속된다. 일부 실시예들에서, 에어 제스처인 더블 핀치 제스처는 서로 즉각적인(예를 들어, 미리정의된 기간 내인) 연속으로 검출되는 2개(예를 들어, 또는 그 이상)의 핀치 입력들(예를 들어, 동일한 손에 의해 수행됨)을 포함한다. 예컨대, 사용자는 제1 핀치 입력(예를 들어, 핀치 입력 또는 롱 핀치 입력)을 수행하고, 제1 핀치 입력을 해제하고(예를 들어, 2개 이상의 손가락들 사이의 접촉을 해제함), 제1 핀치 입력을 해제한 이후 미리정의된 시간 내에(예를 들어, 1초 이내 또는 2초 내에) 제2 핀치 입력을 수행한다.

일부 실시예들에서, 에어 제스처인 핀치 및 드래그 제스처는, 핀치 제스처(예를 들어, 핀치 제스처 또는 롱 핀치 제스처)를 포함하고, 이는 사용자의 손의 포지션을 제1 포지션(예를 들어, 드래그의 시작 포지션)으로부터 제2 포지션(예를 들어, 드래그의 종료 포지션)으로 변경하는 드래그 입력과 함께 수행된다(예를 들어, 그에 후속함). 일부 실시예들에서, 사용자는 드래그 입력을 수행하는 동안 핀치 제스처를 유지하고, (예를 들어, 제2 포지션에서) 드래그 제스처를 종료하기 위해 핀치 제스처를 해제한다(예를 들어, 자신의 2개 이상의 손가락들을 개방함). 일부 실시예들에서, 핀치 입력 및 드래그 입력은 동일한 손에 의해 수행된다(예를 들어, 사용자는 2개 이상의 손가락들을 핀칭하여 서로 접촉하게 하고, 드래그 제스처를 이용하여 동일한 손을 공중에서 제2 포지션으로 이동시킨다). 일부 실시예들에서, 핀치 입력은 사용자의 제1 손에 의해 수행되고 드래그 입력은 사용자의 제2 손에 의해 수행된다(예를 들어, 사용자의 제2 손이 공중에서 제1 포지션으로부터 제2 포지션으로 이동하는 동안 사용자는 사용자의 제1 손으로 핀치 입력을 계속한다). 일부 실시예들에서, 에어 제스처인 입력 제스처는 사용자의 두 손들 둘 모두를 사용하여 수행되는 입력들(예를 들어, 핀치 및/또는 탭핑 입력들)을 포함한다. 예컨대, 입력 제스처는 서로 함께(예를 들어, 동시에 또는 미리정의된 기간 내에) 수행되는 2개(예를 들어, 그 이상)의 핀치 입력들을 포함한다. 예를 들어, 제1 핀치 제스처는 사용자의 제1 손을 사용하여 수행되고(예를 들어, 핀치 입력, 롱 핀치 입력 또는 핀치 및 드래그 입력), 제1 손을 사용하여 핀치 입력을 수행하는 것과 관련하여, 다른 손(예를 들어, 사용자의 두 손들 중 두 번째 손)을 사용하는 제2 핀치 입력을 수행한다. 일부 실시예들에서, 사용자의 두 손들 사이의 움직임은 (예를 들어, 사용자의 2개의 손들 사이의 거리 또는 상대적인 배향을 증가 및/또는 감소시키기 위한 것이다).

일부 실시예들에서, 에어 제스처로서 수행되는 (예를 들어, 사용자 인터페이스 요소로 지향되는) 탭 입력은 사용자 인터페이스 요소를 향한 사용자의 손가락(들)의 움직임, 선택적으로 사용자 인터페이스 요소를 향해 연장된 사용자의 손가락(들)과 함께 사용자 인터페이스 요소를 향한 사용자의 손의 움직임, 사용자의 손가락의 하향 모션(예를 들어, 터치스크린 상의 마우스 클릭 모션 또는 탭을 모방함), 또는 사용자의 손의 다른 미리정의된 움직임을 포함한다. 일부 실시예들에서, 에어 제스처로서 수행되는 탭 입력은 사용자의 시점으로부터 멀어지게 그리고/또는 탭 입력의 타깃인 객체를 향해 손가락 또는 손의 탭 제스처 움직임을 수행하는 손가락 또는 손과 후속되는 움직임의 종료의 움직임 특성들에 기초하여 검출된다. 일부 실시예들에서, 움직임의 종료는 탭 제스처를 수행하는 손가락 또는 손의 움직임 특징들의 변화(예를 들어, 사용자의 시점으로부터 멀어지는 그리고/또는 탭 입력의 타깃인 객체를 향한 움직임의 종료, 손가락 또는 손의 움직임의 방향의 반전, 및/또는 손가락 또는 손의 움직임의 가속의 방향의 반전)에 기초하여 검출된다.

일부 실시예들에서, 사용자의 주의는 (선택적으로는 다른 조건들을 요구하지 않으면서) 3차원 환경의 일부로 지향되는 시선의 검출에 기초하여 3차원 환경의 일부로 지향되는 것으로 결정된다. 일부 실시예들에서, 사용자의 주의는, 시선이 적어도 임계 지속기간(예컨대, 체류(dwell) 지속기간) 동안 3차원 환경의 일부로 지향되는 것을 요구하는 것 및/또는 사용자의 주의가 3차원 환경의 일부로 지향된다고 디바이스가 결정하기 위해 사용자의 시점이 3차원 환경의 일부로부터 거리 임계치 내에 있는 동안 시선이 3차원 환경의 일부로 지향되는 것을 요구하는 것과 같은 하나 이상의 부가적인 조건들과 함께, 3차원 환경의 일부로 지향되는 시선의 검출에 기초하여 3차원 환경의 일부로 지향되는 것으로 결정되며, 여기서 부가적인 조건들 중 하나가 충족되지 않으면, 디바이스는 (예를 들어, 하나 이상의 부가적인 조건들이 충족될 때까지) 시선이 지향되는 3차원 환경의 일부로 주의가 지향되지 않는다고 결정한다.

일부 실시예들에서, 사용자 또는 사용자의 일부의 준비 상태 구성의 검출은 컴퓨터 시스템에 의해 검출된다. 손의 준비 상태 구성의 검출은 사용자가 손에 의해 수행된 하나 이상의 에어 제스처 입력들(예를 들어, 핀치, 탭, 핀치 및 드래그, 더블 핀치, 롱 핀치, 또는 본 명세서에 설명된 다른 에어 제스처)을 사용하여 컴퓨터 시스템과 상호작용하도록 준비할 가능성이 있다는 표시로서 컴퓨터 시스템에 의해 사용된다. 예를 들어, 손이 미리결정된 손 형상(예를 들어, 엄지 및 하나 이상의 손가락들이 핀치 또는 파지(grab) 제스처를 만들 준비가 되게 펼쳐지고 간격을 두고 있는 사전-핀치 형상 또는 하나 이상의 손가락들이 펼쳐지고 손바닥이 사용자로부터 멀어지는 쪽을 향하는 사전-탭)을 갖는지 여부에 기초하여, 손이 사용자의 시점에 대해 미리결정된 포지션(예를 들어, 사용자의 머리 아래 그리고 사용자의 허리 위, 및 적어도 15, 20, 25, 30, 또는 50 cm만큼 신체로부터 펼쳐짐)에 있는지 여부에 기초하여, 그리고/또는 손이 특정 방식으로 이동되는지(예를 들어, 사용자의 허리 위 그리고 사용자의 머리 아래로 사용자의 정면의 구역을 향해 이동되는지 또는 사용자의 신체 또는 다리로부터 멀어지게 이동되는지) 여부에 기초하여, 손의 준비 상태가 결정된다. 일부 실시예들에서, 준비 상태는 사용자 인터페이스의 상호작용 요소들이 주의(예를 들어, 시선) 입력들에 응답하는지 여부를 결정하는 데 사용된다.

일부 실시예들에서, 소프트웨어는, 예를 들어 네트워크를 통해 전자적 형태로 제어기(110)에 다운로드될 수 있거나, 또는 그것은 대안적으로는 광학, 자기, 또는 전자 메모리 매체들과 같은 유형적인 비일시적 매체들 상에 제공될 수 있다. 일부 실시예들에서, 데이터베이스(408)는 마찬가지로 제어기(110)와 연관된 메모리에 저장된다. 대안적으로 또는 추가적으로, 컴퓨터의 설명된 기능들 중 일부 또는 전부는 주문형 또는 반-주문형 집적회로 또는 프로그래밍가능 디지털 신호 프로세서(DSP)와 같은 전용 하드웨어로 구현될 수 있다. 제어기(110)가 예시적으로 이미지 센서들(404)과 별개의 유닛으로서 도 4에 도시되지만, 제어기의 프로세싱 기능들의 일부 또는 전부는 적합한 마이크로프로세서 및 소프트웨어에 의해, 또는 이미지 센서들(404)(예를 들어, 손 추적 디바이스)의 하우징 내의 또는 달리 이미지 센서들(404)과 관련된 전용 회로부에 의해 수행될 수 있다. 일부 실시예들에서, 이들 프로세싱 기능들의 적어도 일부가 (예를 들어, 텔레비전 세트, 핸드헬드 디바이스, 또는 머리 장착형 디바이스 내의) 디스플레이 생성 컴포넌트(120) 또는 게임 콘솔 또는 미디어 플레이어와 같은, 임의의 다른 적합한 컴퓨터화된 디바이스와 통합된 적합한 프로세서에 의해 수행될 수 있다. 이미지 센서들(404)의 감지 기능들은 센서 출력에 의해 제어될 컴퓨터 또는 다른 컴퓨터화된 장치 내에 마찬가지로 통합될 수 있다.

도 4는 일부 실시예들에서, 이미지 센서들(404)에 의해 캡처된 깊이 맵(410)의 개략적인 표현을 더 포함한다. 위에서 설명된 바와 같이, 깊이 맵은 각자의 깊이 값들을 갖는 픽셀들의 행렬을 포함한다. 손(406)에 대응하는 픽셀들(412)은 이 맵에서 배경 및 손목으로부터 분할되었다. 깊이 맵(410) 내의 각각의 픽셀의 밝기는 그의 깊이 값, 즉, 이미지 센서들(404)로부터 측정된 z 거리에 역으로 대응하며, 회색 음영은 깊이가 증가함에 따라 더 어두워진다. 제어기(110)는 인간 손의 특성들을 갖는 이미지의 컴포넌트(즉, 이웃 픽셀들의 그룹)를 식별 및 분할하기 위해 이러한 깊이 값들을 프로세싱한다. 이러한 특성들은, 예를 들어, 깊이 맵들의 시퀀스의 프레임마다 전체 크기, 형상 및 모션을 포함할 수 있다.

도 4는 또한, 일부 실시예들에서, 제어기(110)가 궁극적으로 손(406)의 깊이 맵(410)으로부터 추출하는 손 골격(414)을 개략적으로 예시한다. 도 4에서, 손 골격(414)은 오리지널 깊이 맵으로부터 분할된 손 배경(416) 상에 중첩된다. 일부 실시예들에서, 손(예를 들어, 너클들, 손가락 팁들, 손바닥의 중심, 손목에 연결되는 손의 단부 등에 대응하는 포인트들) 및 선택적으로, 손에 연결된 손목 또는 팔 상의 핵심 특징 포인트들이 손 골격(414) 상에 식별 및 위치된다. 일부 실시예들에서, 다수의 이미지 프레임들에 걸친 이러한 핵심 특징 포인트들의 위치 및 이동들은, 일부 실시예들에서, 손에 의해 수행되는 손 제스처들 또는 손의 현재 상태를 결정하기 위해 제어기(110)에 의해 사용된다.

도 5는 눈 추적 디바이스(130)(도 1)의 예시적인 실시예를 예시한다. 일부 실시예들에서, 눈 추적 디바이스(130)는 장면(105)에 대한 또는 디스플레이 생성 컴포넌트(120)를 통해 디스플레이된 XR 콘텐츠에 대한 사용자의 시선의 위치 및 이동을 추적하기 위해 눈 추적 유닛(243)(도 2)에 의해 제어된다. 일부 실시예들에서, 눈 추적 디바이스(130)는 디스플레이 생성 컴포넌트(120)와 통합된다. 예를 들어, 일부 실시예들에서, 디스플레이 생성 컴포넌트(120)가 머리 장착형 디바이스, 예를 들어, 헤드셋, 헬멧, 고글, 또는 안경, 또는 웨어러블 프레임에 배치된 핸드헬드 디바이스일 때, 머리 장착형 디바이스는 사용자가 보기 위한 XR 콘텐츠를 생성하는 컴포넌트 및 XR 콘텐츠에 대한 사용자의 시선을 추적하기 위한 컴포넌트 둘 모두를 포함한다. 일부 실시예들에서, 눈 추적 디바이스(130)는 디스플레이 생성 컴포넌트(120)와 별개이다. 예를 들어, 디스플레이 생성 컴포넌트가 핸드헬드 디바이스 또는 XR 챔버일 때, 눈 추적 디바이스(130)는 선택적으로 핸드헬드 디바이스 또는 XR 챔버와 별개의 디바이스이다. 일부 실시예들에서, 눈 추적 디바이스(130)는 머리 장착형 디바이스 또는 머리 장착형 디바이스의 일부이다. 일부 실시예들에서, 머리 장착형 눈 추적 디바이스(130)는 선택적으로, 또한 머리 장착된 디스플레이 생성 컴포넌트 또는 머리 장착되지 않은 디스플레이 생성 컴포넌트와 함께 사용된다. 일부 실시예들에서, 눈 추적 디바이스(130)는 머리 장착형 디바이스가 아니며, 선택적으로 머리 장착형 디스플레이 생성 컴포넌트와 함께 사용된다. 일부 실시예들에서, 눈 추적 디바이스(130)는 머리 장착형 디바이스가 아니며, 선택적으로 머리 장착되지 않은 디스플레이 생성 컴포넌트의 일부이다.

일부 실시예들에서, 디스플레이 생성 컴포넌트(120)는 사용자의 눈들 전방에서 좌측 및 우측 이미지들을 포함하는 프레임들을 디스플레이하기 위한 디스플레이 메커니즘(예를 들어, 좌측 및 우측 근안 디스플레이 패널들)을 사용하여 3D 가상 뷰들을 사용자에게 제공한다. 예를 들어, 머리 장착형 디스플레이 생성 컴포넌트는 디스플레이와 사용자의 눈들 사이에 위치된 좌측 및 우측 광학 렌즈들(본 명세서에서 눈 렌즈들로 지칭됨)을 포함할 수 있다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 디스플레이를 위해 사용자의 환경의 비디오를 캡처하는 하나 이상의 외부 비디오 카메라들을 포함하거나 그에 결합될 수 있다. 일부 실시예들에서, 머리 장착형 디스플레이 생성 컴포넌트는 사용자가 물리적 환경을 직접 보고 투명 또는 반투명 디스플레이 상에 가상 객체들을 디스플레이할 수 있게 하는 투명 또는 반투명 디스플레이를 가질 수 있다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 가상 객체들을 물리적 환경에 투영한다. 가상 객체들은, 예를 들어, 물리적 표면 상에 또는 홀로그래프로서 투영되어, 개인이 시스템을 사용하여, 물리적 환경 상에 중첩된 가상 객체들을 관찰하게 할 수 있다. 그러한 경우들에서, 좌측 및 우측 눈들에 대한 별개의 디스플레이 패널들 및 이미지 프레임들이 필요하지 않을 수 있다.

도 5에 도시된 바와 같이, 일부 실시예들에서, 눈 추적 디바이스(130)(예를 들어, 시선 추적 디바이스)는 적어도 하나의 눈 추적 카메라(예를 들어, 적외선(IR) 또는 NIR(near-IR) 카메라들), 및 사용자의 눈들을 향해 광(예를 들어, IR 또는 NIR 광)을 방출하는 조명 소스들(예를 들어, LED들의 어레이 또는 링과 같은 IR 또는 NIR 광원들)을 포함한다. 눈 추적 카메라들은 눈들로부터 직접적으로 광원들로부터 반사된 IR 또는 NIR 광을 수신하기 위해 사용자의 눈들을 향해 지향될 수 있거나, 또는 대안적으로, 가시광이 통과할 수 있게 하면서 눈들로부터 눈 추적 카메라들로 IR 또는 NIR 광을 반사하는 디스플레이 패널들과 사용자의 눈들 사이에 위치된 "핫" 미러들을 향해 지향될 수 있다. 시선 추적 디바이스(130)는 선택적으로 사용자의 눈들의 이미지들을 (예를 들어, 60-120 fps(frames per second)로 캡처된 비디오 스트림으로서) 캡처하고, 이미지들을 분석하여 시선 추적 정보를 생성하고, 시선 추적 정보를 제어기(110)에 통신한다. 일부 실시예들에서, 사용자의 2개의 눈들은 각자의 눈 추적 카메라들 및 조명원들에 의해 개별적으로 추적된다. 일부 실시예들에서, 사용자의 오직 하나의 눈만이 각자의 눈 추적 카메라 및 조명원들에 의해 추적된다.

일부 실시예들에서, 눈 추적 디바이스(130)는, 특정 동작 환경(100)에 대한 눈 추적 디바이스의 파라미터들, 예를 들어 LED들, 카메라들, 핫 미러들(존재하는 경우), 눈 렌즈들 및 디스플레이 스크린의 3D 기하학적 관계 및 파라미터들을 결정하기 위해 디바이스-특정 교정 프로세스를 사용하여 교정된다. 디바이스-특정 교정 프로세스는 AR/VR 장비를 최종 사용자에게 전달하기 전에 공장 또는 다른 설비에서 수행될 수 있다. 디바이스-특정 교정 프로세스는 자동화된 교정 프로세스 또는 수동 교정 프로세스일 수 있다. 사용자-특정 교정 프로세스는 특정 사용자의 눈 파라미터들, 예를 들어 동공 위치, 중심와 위치, 광학 축, 시각 축, 눈 간격 등의 추정을 포함할 수 있다. 디바이스-특정 및 사용자-특정 파라미터들이 눈 추적 디바이스(130)에 대해 결정되면, 일부 실시예들에서, 눈 추적 카메라들에 의해 캡처된 이미지들은 디스플레이에 대한 사용자의 현재의 시각 축 및 시선 포인트를 결정하기 위해 글린트-보조 방법을 사용하여 프로세싱될 수 있다.

도 5에 도시된 바와 같이, 눈 추적 디바이스(130)(예를 들어, 130A 또는 130B)는 눈 렌즈(들)(520), 및 눈 추적이 수행되는 사용자의 얼굴의 측부 상에 위치설정된 적어도 하나의 눈 추적 카메라(540)(예를 들어, 적외선(IR) 또는 NIR(near-IR) 카메라들)를 포함하는 시선 추적 시스템, 및 사용자의 눈(들)(592)을 향해 광(예를 들어, IR 또는 NIR 광)을 방출하는 조명원(530)(예를 들어, NIR 발광 다이오드(LED)들의 어레이 또는 링과 같은 IR 또는 NIR 광원들)을 포함한다. 눈 추적 카메라들(540)은 (예를 들어, 도 5의 상단 부분에 도시된 바와 같이) 가시광이 통과하게 허용하면서 눈(들)(592)으로부터 IR 또는 NIR 광을 반사하는 디스플레이(510)(예를 들어, 머리 장착형 디스플레이의 좌측 또는 우측 디스플레이 패널, 또는 핸드헬드 디바이스의 디스플레이, 프로젝터 등)와 사용자의 눈(들)(592) 사이에 위치된 미러들(550) 쪽으로 지향될 수 있거나 또는 (예를 들어, 도 5의 하단 부분에 도시된 바와 같이) 눈(들)(592)으로부터 반사된 IR 또는 NIR 광을 수신하기 위해 사용자의 눈(들)(592)을 향해 지향될 수 있다.

일부 실시예들에서, 제어기(110)는 AR 또는 VR 프레임들(562)(예를 들어, 좌측 및 우측 디스플레이 패널들에 대한 좌측 및 우측 프레임들)을 렌더링하고, 프레임들(562)을 디스플레이(510)에 제공한다. 제어기(110)는, 예를 들어 디스플레이를 위해 프레임들(562)을 프로세싱할 때, 다양한 목적들을 위해 눈 추적 카메라들(540)로부터의 시선 추적 입력(542)을 사용한다. 제어기(110)는 선택적으로, 글린트-보조 방법들 또는 다른 적합한 방법들을 사용하여 눈 추적 카메라들(540)로부터 획득된 시선 추적 입력(542)에 기초하여 디스플레이(510) 상의 사용자의 시선 포인트를 추정한다. 시선 추적 입력(542)으로부터 추정된 시선의 포인트는 선택적으로, 사용자가 현재 보고 있는 방향을 결정하는 데 사용된다.

다음은 사용자의 현재 시선 방향에 대한 몇몇 가능한 사용 사례들을 설명하며, 제한하려는 의도가 아니다. 예시적인 사용 사례로서, 제어기(110)는 사용자의 시선의 결정된 방향에 기초하여 가상 콘텐츠를 상이하게 렌더링할 수 있다. 예를 들어, 제어기(110)는 주변 영역들에서보다 사용자의 현재 시선 방향으로부터 결정된 중심와 구역에서 더 높은 해상도로 가상 콘텐츠를 생성할 수 있다. 다른 예로서, 제어기는 사용자의 현재 시선 방향에 적어도 부분적으로 기초하여 뷰에서 가상 콘텐츠를 위치설정하거나 이동시킬 수 있다. 다른 예로서, 제어기는 사용자의 현재 시선 방향에 적어도 부분적으로 기초하여 뷰에서 특정 가상 콘텐츠를 디스플레이할 수 있다. AR 애플리케이션들에서의 다른 예시적인 사용 사례로서, 제어기(110)는 결정된 방향으로 포커싱하도록 XR 경험의 물리적 환경들을 캡처하기 위한 외부 카메라들에 지시할 수 있다. 이어서, 외부 카메라들의 자동 초점 메커니즘은 사용자가 현재 디스플레이(510) 상에서 보고 있는 환경 내의 객체 또는 표면에 포커싱할 수 있다. 다른 예시적인 사용 사례로서, 눈 렌즈들(520)은 포커싱가능한 렌즈들일 수 있고, 시선 추적 정보는, 사용자가 현재 보고 있는 가상 객체가 사용자의 눈들(592)의 수렴에 매칭하기 위해 적절한 버전스(vergence)를 갖도록 눈 렌즈들(520)의 초점을 조정하기 위해 제어기에 의해 사용된다. 제어기(110)는, 사용자가 보고 있는 가까운 객체들이 올바른 거리에 나타나게 초점을 조정하도록 눈 렌즈들(520)을 지향시키기 위해 시선 추적 정보를 레버리지할 수 있다.

일부 실시예들에서, 눈 추적 디바이스는 디스플레이(예를 들어, 디스플레이(510)), 2개의 눈 렌즈들(예를 들어, 눈 렌즈(들)(520)), 눈 추적 카메라들(예를 들어, 눈 추적 카메라(들)(540)) 및 웨어러블 하우징에 장착된 광원들(예를 들어, 광원들(530)(예를 들어, IR 또는 NIR LED들))을 포함하는 머리 장착형 디바이스의 일부이다. 광원들은 광(예를 들어, IR 또는 NIR 광)을 사용자의 눈(들)(592)을 향해 방출한다. 일부 실시예들에서, 광원들은 도 5에 도시된 바와 같이 렌즈들 각각 주위에 링들 또는 원들로 배열될 수 있다. 일부 실시예들에서, 8개의 광원들(530)(예를 들어, LED들)이 예로서 각각의 렌즈(520) 주위에 배열된다. 그러나, 더 많거나 또는 더 적은 광원들(530)이 사용될 수 있고, 광원들(530)의 다른 배열들 및 위치들이 사용될 수 있다.

일부 실시예들에서, 디스플레이(510)는 가시광 범위에서 광을 방출하고, IR 또는 NIR 범위에서 광을 방출하지 않아서, 시선 추적 시스템에 노이즈를 도입시키지 않는다. 눈 추적 카메라(들)(540)의 위치 및 각도는 예로서 주어진 것이며, 제한하려는 의도가 아님에 유의한다. 일부 실시예들에서, 단일 눈 추적 카메라(540)는 사용자의 얼굴의 각각의 측부 상에 위치된다. 일부 실시예들에서, 2개 이상의 NIR 카메라들(540)이 사용자의 얼굴의 각각의 측부 상에서 사용될 수 있다. 일부 실시예들에서, 더 넓은 시야(FOV)를 갖는 카메라(540) 및 더 좁은 FOV를 갖는 카메라(540)가 사용자의 얼굴의 각각의 측부 상에서 사용될 수 있다. 일부 실시예들에서, 하나의 파장(예를 들어, 850 nm)에서 동작하는 카메라(540) 및 상이한 파장(예를 들어, 940 nm)에서 동작하는 카메라(540)가 사용자의 얼굴의 각각의 측부 상에서 사용될 수 있다.

도 5에 예시된 바와 같은 시선 추적 시스템의 실시예들은, 예를 들어, 컴퓨터 생성 현실, 가상 현실, 증강 현실 및/또는 증강 가상 경험들을 사용자에게 제공하기 위해 컴퓨터 생성 현실, 가상 현실 및/또는 혼합 현실 애플리케이션들에서 사용될 수 있다.

도 6은 일부 실시예들에서, 글린트-보조 시선 추적 파이프라인을 예시한다. 일부 실시예들에서, 시선 추적 파이프라인은 글린트-보조 시선 추적 시스템(예를 들어, 도 1 및 도 5에 예시된 바와 같은 눈 추적 디바이스(130))에 의해 구현된다. 글린트-보조 시선 추적 시스템은 추적 상태를 유지할 수 있다. 초기에, 추적 상태는 오프 또는 "아니오"이다. 추적 상태에 있을 때, 글린트-보조 시선 추적 시스템은 현재 프레임에서 동공 윤곽 및 글린트를 추적하기 위해 현재 프레임을 분석할 때 이전 프레임으로부터의 이전 정보를 사용한다. 추적 상태에 있지 않을 때, 글린트-보조 시선 추적 시스템은 현재 프레임에서 동공 및 글린트를 검출하려고 시도하고, 성공적인 경우, 추적 상태를 "예"로 초기화하고, 추적 상태에서 다음 프레임으로 계속된다.

도 6에 도시된 바와 같이, 시선 추적 카메라들은 사용자의 좌측 및 우측 눈들의 좌측 및 우측 이미지들을 캡처할 수 있다. 이어서, 캡처된 이미지들은 610에서 시작하는 프로세싱을 위해 시선 추적 파이프라인에 입력된다. 요소(600)로 돌아가는 화살표에 의해 표시된 바와 같이, 시선 추적 시스템은, 예를 들어 초당 60 내지 120 프레임의 레이트로 사용자의 눈들의 이미지들을 캡처하는 것을 계속할 수 있다. 일부 실시예들에서, 캡처된 이미지들의 각각의 세트는 프로세싱을 위해 파이프라인에 입력될 수 있다. 그러나, 일부 실시예들에서 또는 일부 조건들 하에서, 캡처된 모든 프레임들이 파이프라인에 의해 프로세싱되는 것은 아니다.

610에서, 현재 캡처된 이미지들에 대해, 추적 상태가 예이면, 방법은 요소(640)로 진행한다. 610에서, 추적 상태가 아니오이면, 620에서 표시된 바와 같이, 이미지들에서 사용자의 동공들 및 글린트들을 검출하기 위해 이미지들이 분석된다. 630에서, 동공들 및 글린트들이 성공적으로 검출되면, 방법은 요소(640)로 진행한다. 그렇지 않으면, 방법은 사용자의 눈들의 다음 이미지들을 프로세싱하기 위해 요소(610)로 복귀한다.

640에서, 요소(610)로부터 진행하면, 이전 프레임들로부터의 이전 정보에 부분적으로 기초하여 동공들 및 글린트들을 추적하기 위해 현재 프레임들이 분석된다. 640에서, 요소(630)로부터 진행하면, 추적 상태는 현재 프레임들에서 검출된 동공들 및 글린트들에 기초하여 초기화된다. 요소(640)에서의 프로세싱의 결과들은 추적 또는 검출의 결과들이 신뢰할 수 있음을 검증하기 위해 체크된다. 예를 들어, 동공 및 시선 추정을 수행하기에 충분한 수의 글린트들이 현재 프레임들에서 성공적으로 추적되거나 검출되는지를 결정하기 위해 결과들이 체크될 수 있다. 650에서, 결과들이 신뢰될 수 없으면, 요소(660)에서 추적 상태는 아니오로 설정되고, 방법은 사용자의 눈들의 다음 이미지들을 프로세싱하기 위해 요소(610)로 복귀한다. 650에서, 결과들이 신뢰되면, 방법은 요소(670)로 진행한다. 670에서, 추적 상태는 (이미 예가 아니라면) 예로 설정되고, 동공 및 글린트 정보는 사용자의 시선 포인트를 추정하기 위해 요소(680)에 전달된다.

도 6은 특정 구현에서 사용될 수 있는 눈 추적 기술의 일 예로서의 역할을 하도록 의도된다. 당업자들에 의해 인식되는 바와 같이, 현재 존재하거나 미래에 개발될 다른 눈 추적 기술들은, 일부 실시예들에서, 사용자들에게 XR 경험들을 제공하기 위해 컴퓨터 시스템(101)에서 본 명세서에 설명된 글린트-보조 눈 추적 기술 대신에 또는 그와 조합하여 사용될 수 있다.

본 개시내용에서, 컴퓨터 시스템과의 상호작용들과 관련하여 다양한 입력 방법들이 설명된다. 하나의 입력 디바이스 또는 입력 방법을 사용하여 일 예가 제공되고 다른 입력 디바이스 또는 입력 방법을 사용하여 다른 예가 제공되는 경우, 각각의 예는 다른 예와 관련하여 설명된 입력 디바이스 또는 입력 방법과 호환가능할 수 있고 선택적으로 이를 활용한다는 것을 이해해야 한다. 유사하게, 컴퓨터 시스템과의 상호작용들과 관련하여 다양한 출력 방법들이 설명된다. 하나의 출력 디바이스 또는 출력 방법을 사용하여 일 예가 제공되고 다른 출력 디바이스 또는 출력 방법을 사용하여 다른 예가 제공되는 경우, 각각의 예는 다른 예와 관련하여 설명된 출력 디바이스 또는 출력 방법과 호환가능할 수 있고 선택적으로 이를 활용한다는 것을 이해해야 한다. 유사하게, 컴퓨터 시스템을 통한 가상 환경 또는 혼합 현실 환경과의 상호작용들과 관련하여 다양한 방법들이 설명된다. 가상 환경과의 상호작용들을 사용하여 일 예가 제공되고 혼합 현실 환경을 사용하여 다른 예가 제공되는 경우, 각각의 예는 다른 예와 관련하여 설명된 방법들과 호환가능할 수 있고 선택적으로 이를 활용한다는 것을 이해해야 한다. 따라서, 본 개시내용은, 각각의 예시적인 실시예의 설명에서 실시예의 모든 특징들을 철저히 열거하지 않으면서 다수의 예들의 특징들의 조합들인 실시예들을 개시한다.

사용자 인터페이스들 및 연관된 프로세스들

이제, 하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템, 예를 들어 휴대용 다기능 디바이스 또는 머리 장착형 디바이스 상에서 구현될 수 있는 사용자 인터페이스(user interface; "UI")들 및 연관된 프로세스들의 실시예들에 대해 주목한다.

도 7a 내지 도 7j는, 사용자의 표현을 생성하고 사용자의 표현을 디스플레이하는 예들을 예시한다. 도 8은 사용자의 표현을 생성하기 위한 예시적인 방법(800)의 흐름도이다. 도 9는 사용자의 표현을 디스플레이하기 위한 예시적인 방법(900)의 흐름도이다. 도 7a 내지 도 7j의 사용자 인터페이스들은, 도 8 및 도 9의 프로세스들을 포함하여, 아래에서 설명되는 프로세스들을 예시하기 위해 사용된다.

도 7a 내지 도 7j는 사용자의 표현을 생성하는 데 사용되는 정보를 캡처하기 위한 예들을 예시한다. 일부 실시예들에서, 사용자의 표현은 실시간 통신 세션 동안 통신하기 위해 디스플레이되고/되거나 달리 사용된다. 일부 실시예들에서, 실시간 통신 세션은 전자 디바이스의 사용자와 제1 전자 디바이스와는 상이한 제2 전자 디바이스와 연관된 제2 사용자 사이의 실시간 통신을 포함하고, 실시간 통신 세션은, 전자 디바이스 및/또는 제2 전자 디바이스를 통해, 사용자의 얼굴 및/또는 신체 표정들의 표현들을 사용자의 표현을 통해 제2 사용자에게 디스플레이 및/또는 달리 통신하는 것을 포함한다. 일부 실시예들에서, 실시간 통신 세션은 사용자의 표현을 디스플레이하는 것 및/또는 사용자의 발화들에 대응하는 오디오를 실시간으로 출력하는 것을 포함한다. 일부 실시예들에서, 제1 전자 디바이스 및 제2 전자 디바이스는 서로 통신하여(예컨대, 무선 통신), 사용자의 발화들에 대응하는 오디오 및/또는 사용자의 표현을 나타내는 정보가 서로 사이에서 송신될 수 있게 한다. 일부 실시예들에서, 실시간 통신 세션은 제1 전자 디바이스 및 제2 전자 디바이스의 디스플레이 디바이스들을 통해 확장 현실 환경 내에 사용자의 표현(및 선택적으로, 제2 사용자의 표현)을 디스플레이하는 것을 포함한다.

도 7a는 전자 디바이스(700)(예컨대, 워치 및/또는 스마트 워치)가 디스플레이(704) 상에 프롬프트(702)를 디스플레이하는 것을 예시한다. 게다가, 도 7a는, 전자 디바이스(700)를 사용하고 있고/있거나 그와 연관되는 사용자(708)의 물리적 환경(706)을 도시한다. 도 7a에서, 전자 디바이스(700)는 물리적 환경(706) 내의 사용자(708)의 손목(708a) 상에 착용되어 있다. 전자 디바이스(700)는 사용자(708)의 신체(예컨대, 사용자(708)의 손목(708a)) 상에 착용되도록 구성되는 웨어러블 디바이스이다. 도 7a에서, 전자 디바이스(700)는 워치(예컨대, 스마트 워치)이다. 일부 실시예들에서, 전자 디바이스(700)는 헤드셋, 헬멧, 고글, 안경, 또는 웨어러블 프레임 내에 배치된 핸드헬드 디바이스이다. 일부 실시예들에서, 전자 디바이스(700)는 사용자(708)의 신체 상에 착용될 때 주로 사용되도록 구성되지만, 전자 디바이스(700)는, 또한, 전자 디바이스(700)가 사용자(708)의 신체로부터 제거될 때 사용될 수 있다(예컨대, 사용자(708)를 통해 상호작용되고/되거나 정보를 캡처하는 데 사용될 수 있음).

도 7a는 디스플레이(704) 및 센서(712)(예컨대, 카메라와 같은 이미지 센서)를 포함하는 전자 디바이스(700)의 제1 부분(710)(예컨대, 제1 면 및/또는 제1 측부; 전방 측부; 및/또는 머리 장착형 디바이스(HMD)의 내부 부분)을 예시한다. 전자 디바이스(700)가 사용자(708)의 손목(708a)(또는 사용자(708)의 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 착용될 때, 디바이스(700)의 제1 부분(710)은 가시적이고/이거나 사용자(708)의 손목(708a) 및/또는 팔(708b)에 의해 가려지지 않는다. 다시 말하면, 디바이스의 제1 부분(710)은 전자 디바이스(700)가 사용자(708)의 손목(708a)(또는 사용자(708)의 신체의 다른 부분, 예를 들어 사용자(708)의 머리(708d) 및/또는 얼굴(708c)) 상에 위치될 때 디스플레이(704)가 사용자(708)에게 가시적이게(예컨대, 디스플레이(704)가 손목(708a)과 반대인 방향을 향하고/향하거나 디스플레이(704)가 사용자(708)의 눈들 위 및/또는 앞에 위치되게) 위치되도록 구성된다. 아래에서 설명되는 바와 같이, 전자 디바이스(700)는, 또한, 도 7d에 예시되어 있는 제2 부분(714)(예컨대, 제2 면 및/또는 제2 측부; 후방 측부; 및/또는 HMD의 외부 부분)을 포함한다. 전자 디바이스(700)가 사용자(708)의 손목(708a)(또는 사용자(708)의 신체의 다른 부분, 예를 들어 사용자(708)의 머리(708d) 및/또는 얼굴(708c)) 상에 착용될 때, 전자 디바이스(700)의 제2 부분(714)은 사용자(708)의 손목(708a) 및/또는 팔(708b)에 의해 가려진다(예컨대, HMD가 사용자(708)의 머리(708d) 상에 배치될 때 제1 부분(710)이 사용자(708)의 눈들을 커버하고 있고/있거나 그 앞에 있기 때문에 HMD의 제2 부분(714)은 사용자에게 가시적이지 않음). 다시 말하면, 전자 디바이스(700)의 제2 부분(714)은 전자 디바이스(700)가 사용자(708)의 손목(708a) 상에 착용되는 동안 제2 부분(714)의 표면이 사용자(708)의 손목(708a)을 향하는(예컨대, 사용자의 얼굴로부터 멀어지는) 방향을 향하도록 위치된다.

도 7a 내지 도 7j는 전자 디바이스(700)를 워치로서 예시하지만, 일부 실시예들에서, 전자 디바이스(700)는 머리 장착형 디바이스(HMD)이다. HMD는 사용자(708)의 머리(708d) 상에 착용되도록 구성되고, HMD의 내부 부분 상에 및/또는 내에 제1 디스플레이를 포함한다. 제1 디스플레이는 사용자(708)가 사용자(708)의 머리(708d) 상에 HMD를 착용하고 있을 때 사용자(708)에게 가시적이다. 예를 들어, HMD는 사용자(708)의 머리(708d) 상에 배치될 때 사용자(708)의 눈들을 적어도 부분적으로 커버하여서, 제1 디스플레이가 사용자(708)의 눈들 위 및/또는 앞에 위치되게 한다. 일부 실시예들에서, HMD는, 또한, HMD의 외부 부분 상에 및/또는 내에 위치되는 제2 디스플레이를 포함한다. 일부 실시예들에서, 제2 디스플레이는 HMD가 사용자(708)의 머리(708d) 상에 배치될 때 사용자(708)에게 가시적이지 않다. 따라서, HMD의 제1 디스플레이는 사용자(708)의 머리(708d)로부터 HMD를 제거하도록 사용자(708)에게 지시하는 프롬프트(702)를 디스플레이하고, HMD의 제2 디스플레이는, 아래에서 설명되는 바와 같이, HMD를 사용하여 사용자(708)의 하나 이상의 신체적 특성들을 캡처하기 위한 지시사항들 및/또는 안내를 사용자(708)에게 제공하는 하나 이상의 추가 프롬프트들(예컨대, 콘텐츠(722a))을 디스플레이한다.

도 7a에서, 전자 디바이스(700)는 사용자(700)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 착용되고, 디스플레이(704) 상에 프롬프트(702)를 디스플레이하고 있다. 프롬프트(702)는 전자 디바이스(700)의 등록 프로세스(예컨대, 셋업 프로세스)를 계속하기 위해 사용자(708)의 신체로부터 전자 디바이스(700)를 제거하도록(예컨대, 사용자(708)의 손목(708a)으로부터 전자 디바이스(700)를 제거하고/하거나 사용자(708)의 머리(708d) 및/또는 얼굴(708c)과 같은 사용자(708)의 신체의 다른 부분으로부터 전자 디바이스(700)를 제거하도록) 사용자(708)에게 지시하는 표시(예컨대, 텍스트 및/또는 이미지들)를 포함한다. 도 7a에서, 전자 디바이스(700)는 등록 프로세스를 진행하고 있는데, 이는 사용자(708)의 표현(726)(예컨대, 사용자(708)의 캡처된 하나 이상의 신체적 특성들에 기초하는 외관을 포함하는, 아바타와 같은 가상 표현)을 생성하기 위해 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 것을 포함하는 프로세스이다. 아래에서 설명되는 바와 같이, 전자 디바이스(700)는, 액세스불가능하고/하거나 가려지고/가려지거나 달리 전자 디바이스(700)가 사용자(708)의 신체 상에 착용되어 있을 때 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 데 적합하지 않은 사용자(708)에 대한 위치에 있는 센서들(720a 내지 720j)로 사용자(708)의 하나 이상의 신체적 특성들 중 적어도 일부분을 캡처한다(예컨대, HMD가 사용자(708)의 머리(708d) 상에 착용될 때 HMD의 센서들(720a 내지 720j)은 사용자(708)의 각자의 신체 부위를 향해 지향되지 않음). 따라서, 전자 디바이스(700)는 센서들(720a 내지 720j) 중 하나 이상이 사용자(708)의 하나 이상의 신체적 특성들 중 적어도 일부분을 캡처하는 데 효과적으로 사용될 수 있도록 사용자(708)의 신체로부터 전자 디바이스(700)를 제거하도록 사용자(708)에게 지시하는 프롬프트(702)를 출력한다. 도 7a는 프롬프트(702)를 전자 디바이스(700)의 디스플레이(704) 상에 디스플레이되는 것으로서 예시하지만, 일부 실시예들에서, 프롬프트(702)는 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 전자 디바이스(700)를 제거하도록 사용자(708)에게 지시하는 (예컨대, 전자 디바이스(700)의 스피커를 통한) 오디오 출력 및/또는 (예컨대, 전자 디바이스(700)의 하나 이상의 햅틱 출력 디바이스들을 통한) 햅틱 출력을 포함한다.

일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 전원이 켜질 때 및/또는 그에 응답하여(예컨대, 사용자(708)가 전자 디바이스(700)와 연관된 계정에 로그인하기 전에 먼저 전원이 켜지고/켜지거나 전자 디바이스(700)가 동작의 셋업 모드에 있는 동안 전원이 켜짐) 등록 프로세스를 개시한다. 일부 실시예들에서, 등록 프로세스는 전자 디바이스(700)의 초기 셋업 프로세스 내에 포함된다. 일부 실시예들에서, 전자 디바이스(700)의 초기 셋업 프로세스는 (예컨대, 센서(712) 및/또는 센서들(720a 내지 720j)을 통해) 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 것, 사용자(708)의 생체측정 정보(예컨대, 얼굴 특징부들, 눈 특징부들, 및/또는 지문들)를 캡처하는 것, 입력 캘리브레이션 프로세스(예컨대, 전자 디바이스(700)는 전자 디바이스(700)가 눈 시선 사용자 입력들, 에어 제스처들, 음성 커맨드들, 및/또는 탭 제스처들과 같은 사용자 입력들을 검출, 인식, 및/또는 그에 응답할 수 있게 하는 정보를 캡처함), 및/또는 공간 오디오 캘리브레이션 프로세스(예컨대, 전자 디바이스(700)가 전자 디바이스(700)의 스피커의 위치가 아닌 물리적 환경(706) 내의 위치로부터 생성되는 오디오를 시뮬레이션하기 위해 오디오를 출력하고, 선택적으로, 출력 오디오의 인지된 위치에 대응하는 하나 이상의 사용자 입력들을 검출하는 것을 포함하는 프로세스)를 포함한다. 일부 실시예들에서, 전자 디바이스(700)는 등록 프로세스가 시작될 것을 요청하는 하나 이상의 사용자 입력들에 기초하여 등록 프로세스를 개시한다.

도 7b에서, 전자 디바이스(700)는 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 위치된 상태로 유지되고, 디스플레이(704)를 통해, 지시사항들(716)(예를 들어, 지시들)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(700)는 프롬프트(702)를 디스플레이한 이후로 미리결정된 시간(예컨대, 10초, 15초, 30초, 및/또는 60초)이 경과한 후에 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 제거되지 않았을 때 지시사항들(716)을 디스플레이한다. 지시사항들(716)은 등록 프로세스를 완료하기 위해 사용자(708)에게 안내를 제공하는 추가 정보, 제안들, 및/또는 팁들을 포함한다. 도 7b에서, 지시사항들(716)은, 등록 프로세스에 관해 사용자(708)에게 콘텍스트를 제공하고, 등록 프로세스의 적어도 일부분을 완료하기 위해 전자 디바이스(700)를 사용하는 방법에 관해 사용자(708)에게 알려주는 텍스트를 포함한다. 도 7b에서, 지시사항들(716)은 전자 디바이스(700)의 제2 부분(714)(예컨대, HMD의 외부 부분)과 같은 후방 부분 상의 센서들(예컨대, 센서들(720a 내지 720j))을 사용자(708)의 얼굴(708c) 및/또는 머리(708d)를 향하게 하도록 사용자(708)에게 촉구한다. 도 7b는 전자 디바이스(700)의 디스플레이(704) 상에 디스플레이된 텍스트를 포함하는 지시사항들(716)을 예시하지만, 일부 실시예들에서, 지시사항들(716)은 등록 프로세스의 적어도 일부분을 완료하기 위해 전자 디바이스(700)를 배향 및/또는 사용하는 방법에 대한 안내를 사용자(708)에게 제공하는 이미지들, 심볼들, 비디오들, 애니메이션들, 오디오, 및/또는 텍스트를 포함한다. 예를 들어, 일부 실시예들에서, 지시사항들(716)은, 전자 디바이스(700)를 사용하여 등록 프로세스의 적어도 일부분을 완료하기 위해 사용자(708)에게 시각적 예를 제공하는 비디오 및/또는 애니메이션화된 일련의 이미지들을 포함한다. 일부 그러한 실시예들에서, 비디오 및/또는 애니메이션화된 일련의 이미지들은, 사람이 사람의 신체로부터 전자 디바이스(700)를 제거하는 것, 전자 디바이스(700)(예컨대, 제2 부분(714))를 사람의 신체의 일부분을 향해 배향시키는 것, 및/또는 사용자(708)가 등록 프로세스의 적어도 일부분을 완료하는 방법을 더 잘 이해할 수 있도록 사람이 그들의 신체의 일부분들을 이동 및/또는 배향시키는 것의 시각적 표시를 포함한다.

일부 실시예들에서, 지시사항들(716)은 등록 프로세스의 적어도 일부분 동안 캡처된 사용자(708)의 하나 이상의 신체적 특성들이 표현(726)을 생성하는 데 사용됨을 나타내는 정보를 포함한다. 일부 실시예들에서, 지시사항들(716)은 외부 전자 디바이스와 연관된 다른 사용자와의 실시간 통신 세션에서 표현(726)을 사용하는 것에 관한 정보를 포함하며, 이는 사용자(708)의 하나 이상의 신체적 특성들을 캡처하기 위한 목적에 관해 사용자(708)에게 콘텍스트를 제공한다.

도 7c에서, 전자 디바이스(700)는 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 위치된 상태로 유지되고, 디스플레이(704)를 통해, 프롬프트(718)를 디스플레이한다. 도 7c에서, 프롬프트(718)는 사용자(708)가 위치되는 물리적 환경(706)의 조건과 관련된 표시(예컨대, 텍스트)를 포함한다. 일부 실시예들에서, 전자 디바이스(700)의 센서(712)(및/또는 다른 센서들)는 물리적 환경(706)에 관한 정보를 캡처하고, 전자 디바이스(700)는 캡처된 정보가 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 데 영향을 미칠 수 있는 하나 이상의 조건들을 나타내는지 여부를 결정한다. 도 7c에서, 전자 디바이스(700)는 물리적 환경(706)에 관한 정보가 물리적 환경(706)이 낮은 조명을 포함함(예컨대, 전구, 램프, 및/또는 태양과 같은 하나 이상의 광원들로부터 방출된 광이 전자 디바이스가 사용자(708)의 하나 이상의 신체적 특성들을 효과적으로 캡처할 수 있게 하기에 충분한 양들로 사용자에게 도달하고 있지 않음)을 나타낸다고 결정한다. 이와 같이, 전자 디바이스(700)는 물리적 환경(706)에서의 조명 조건이 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 데 영향을 미칠 수 있다는 것을 사용자(708)에게 경고 및/또는 조언하라는 프롬프트(718)를 출력한다. 도 7c는 전자 디바이스(700)가 물리적 환경(706)의 낮은 조명 조건과 관련된 프롬프트(718)를 제공하는 것을 도시하지만, 일부 실시예들에서, 전자 디바이스(700)는, 가혹한 조명 조건, 전자 디바이스(700)와 사용자(708) 사이에 위치된 객체(예컨대, 전자 디바이스(700)의 하나 이상의 센서들이 정보를 캡처하도록 구성되는 영역을 가리는 객체), 및/또는 사용자(708)의 신체의 각자의 부분 상에 위치된 객체 및/또는 액세서리(예컨대, 안경, 얼굴 커버링, 머리 커버링, 및/또는 모자)와 같은 물리적 환경(706)의 하나 이상의 다른 조건들과 관련된 프롬프트들을 출력하도록 구성된다. 일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 하나 이상의 기준들의 세트가 만족된다고 결정할 때, 예를 들어 전자 디바이스(700)가 임계량 미만의 전력 및/또는 배터리 수명의 양을 포함할 때, 프롬프트를 출력하도록 구성된다.

도 7c에서, 프롬프트(718)는 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 데 영향을 미칠 수 있는 물리적 환경(706)에서의 조건을 나타내는 제1 부분(718a)(예컨대, 텍스트의 제1 부분)을 포함한다. 게다가, 프롬프트(718)는 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 데 영향을 미칠 수 있는 조건을 보정하는 것에 관해 사용자(708)에게 제안 및/또는 안내를 제공하는 제2 부분(718b)(예컨대, 텍스트의 제2 부분)을 포함한다. 도 7c에서, 제2 부분(718b)은 사용자(708)가 증가된 양의 조명을 포함하는 물리적 환경(706)의 영역(예컨대, 더 밝은 영역)으로 이동하라는 제안을 포함한다. 일부 실시예들에서, 제2 부분(718b)은, 추가 광원을 켜고/켜거나 광원에 공급되는 전력의 양을 증가시키라는 제안을 포함한다. 일부 실시예들에서, 제2 부분(718b)은, 덜 가혹한 조명(예컨대, 더 차가운 및/또는 더 어두운 조명)을 포함하는 물리적 환경(706) 내의 영역으로 이동하는 것, 전자 디바이스(700)와 사용자(708) 사이의 객체를 제거 및/또는 이동시키는 것, 사용자(708)의 신체의 각자의 부분 상의 객체 및/또는 액세서리를 제거 및/또는 이동시키는 것, 및/또는 전자 디바이스(700)를 충전하는 것과 같은, 다른 조건을 보정 및/또는 조정하라는 제안을 포함한다.

일부 실시예들에서, 프롬프트(718)는, 텍스트 대신에 및/또는 텍스트에 더하여, 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 데 영향을 미치는 조건에 관해 사용자(708)에게 알려주고/알려주거나 경고하는 시각적 프롬프트들, 예를 들어 비디오들, 이미지들, 심볼들, 이모지들, 애니메이션들, 오디오 프롬프트들, 및/또는 햅틱 프롬프트들을 포함한다.

도 7d에서, 사용자(708)는 물리적 환경(706) 내의 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 전자 디바이스(700)를 제거하였다. 게다가, 도 7d는 사용자(708)가 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 전자 디바이스(700)를 제거한 후에 액세스가능하고/하거나 가시적인 전자 디바이스(700)의 제2 부분(714)(예컨대, HMD의 후면 및/또는 외부 부분)을 예시한다. 전자 디바이스(700)의 제2 부분(714)은 사용자(708)에 관한 다양한 정보를 캡처하도록 구성되는 센서들(720a 내지 720j)을 포함한다. 일부 실시예들에서, 센서들(720a 내지 720j)은 하나 이상의 이미지 센서들(예컨대, IR 카메라들, 3D 카메라들, 깊이 카메라들, 컬러 카메라들, RGB 카메라들(예컨대, 상보성 금속-산화물-반도체(complimentary metal-oxide-semiconductor; CMOS) 이미지 센서 또는 전하 커플링 디바이스(charge-coupled device; CCD) 이미지 센서를 가짐), 하나 이상의 적외선(IR) 카메라들, 및/또는 하나 이상의 이벤트-기반 카메라들), 관성 측정 유닛(inertial measurement unit, IMU), 가속도계, 자이로스코프, 온도계, 하나 이상의 생리학적 센서들(예컨대, 혈압 모니터, 심박수 모니터, 혈중 산소 센서, 혈당 센서 등), 하나 이상의 마이크로폰들, 하나 이상의 스피커들, 햅틱 엔진, 하나 이상의 깊이 센서들(예컨대, 구조화된 광, 비행 시간, 및/또는 2개 이상의 카메라들의 관점들의 차이들에 기초하여 깊이를 결정하는 2개 이상의 카메라들), 하나 이상의 광 센서들, 하나 이상의 촉각 센서들, 하나 이상의 배향 센서들, 하나 이상의 근접 센서들, 하나 이상의 위치 센서들, 하나 이상의 모션 센서들, 및/또는 하나 이상의 속도 센서들을 포함한다.

도 7d에서, 제2 부분(714)은 영역(722)(예컨대, 센서들(720a 내지 720j)을 포함하지 않는 제2 부분(714)의 일부분 및/또는 디스플레이(704)와는 상이한 디스플레이를 포함하는 HMD의 외부 부분)을 포함한다. 영역(722)은, 사용자(708)가 보고/보거나 인지할 수 있는 콘텐츠(722a)(예컨대, 도 7d에 도시된 바와 같은 텍스트)를 포함한다. 일부 실시예들에서, 영역(722)은 콘텐츠(722a)를 디스플레이하는 하나 이상의 디스플레이 생성 컴포넌트들(722b)을 포함한다. 예를 들어, 영역(722)은 디스플레이이다. 일부 실시예들에서, 전자 디바이스(700)는 하나 이상의 디스플레이 생성 컴포넌트들(722b)로 하여금 전자 디바이스(700)를 사용하여 (예컨대, 센서들(720a 내지 720j)을 통해) 사용자(708)의 하나 이상의 신체적 특성들을 캡처하라는 지시사항들을 제공하고/하거나 달리 캡처하도록 사용자(708)에게 안내하는 시각적 표시들을 디스플레이하게 한다.

일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 제거되었다는 것을 검출한다. 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 제거되었다는 것을 검출하는 것에 응답하여, 전자 디바이스(700)는 하나 이상의 디스플레이 생성 컴포넌트들(722b)로 하여금 전자 디바이스(700)를 사용하여 사용자(700)의 하나 이상의 신체적 특성들을 캡처하도록 사용자(708)에게 지시 및/또는 안내하는 하나 이상의 프롬프트들을 디스플레이하게 한다. 일부 실시예들에서, 하나 이상의 프롬프트들은, 전자 디바이스(700)를 이동시키고/시키거나 사용자(708)의 신체의 일부분을 특정 배향으로 이동시키도록(예컨대, 전자 디바이스(700)를 사용자(708)의 신체에 대해 특정 배향으로 이동시키고/시키거나 사용자(708)의 신체의 일부분을 전자 디바이스(700)에 대해 특정 배향으로 이동시키도록) 사용자(708)에게 촉구하는 텍스트, 이미지들, 심볼들, 비디오들, 애니메이션들, 및/또는 다른 시각적 큐(cue)들을 포함한다. 예를 들어, 일부 실시예들에서, 하나 이상의 프롬프트들은 센서들(720a 내지 720j) 중 하나 이상이 사용자(708)의 얼굴(708c) 및/또는 머리(708d)와 같은 사용자의 특정 신체 부위를 향해 지향되도록 물리적 환경(706) 내의 전자 디바이스(700) 및/또는 사용자(708)의 신체의 위치들을 조정하도록 사용자(708)에게 지시한다. 일부 실시예들에서, 하나 이상의 프롬프트들은 센서들(720a 내지 720j)이 사용자(708)의 특정 신체 부위의 특징부들을 캡처하도록 전자 디바이스(700)에 대해 사용자(708)의 특정 신체 부위(예컨대, 얼굴(708c) 및/또는 머리(708d))를 이동시키도록 사용자(708)에게 지시한다. 일부 실시예들에서, 하나 이상의 프롬프트들은 센서들(720a 내지 720j)이 사용자(708)의 얼굴(708c)에 관한 신체적 특성들을 캡처하도록 전자 디바이스(700)에 대해 (그리고 선택적으로, 특정 속도로) 사용자(708)의 머리(708d)를 회전시키도록 사용자(708)에게 지시한다. 일부 실시예들에서, 하나 이상의 프롬프트들은 센서들(720a 내지 720j)이 사용자(708)의 몸통(708e)(예컨대, 어깨들 및/또는 가슴)을 향해 지향되도록 전자 디바이스(700)를 이동 및/또는 배향시키도록 사용자(708)에게 지시하여서, 전자 디바이스(700)가 사용자(708)가 착용하고 있는 의류(예컨대, 몸통(708e)을 커버하고/하거나 그 상에 배치된 의류) 및/또는 몸통(708e)에 관한 신체적 특성들을 캡처하게 한다.

일부 실시예들에서, 전자 디바이스(700)는 사용자(708)의 얼굴(708c)의 하나 이상의 신체적 특성들을 캡처하기 위해 하나 이상의 특정 얼굴 표정들(예컨대, 미소, 찡그림, 입 벌림, 및/또는 눈썹들 올림 및/또는 내림)을 짓도록 사용자(708)에게 지시하라는 하나 이상의 프롬프트들을 (예컨대, 하나 이상의 디스플레이 생성 컴포넌트들(722b)을 통해) 제공한다. 일부 실시예들에서, 하나 이상의 프롬프트들은, 프롬프트(718)와 유사하게, 조건을 조정 및/또는 보정하는 것에 관한 정보 및/또는 하나 이상의 신체적 특성들에 관한 정보의 캡처에 영향을 미치는 물리적 환경(706)의 조건에 관한 정보를 포함한다. 일부 실시예들에서, 하나 이상의 프롬프트들은 사용자(708)의 신체의 각자의 부분이 프레임(예컨대, 하나 이상의 디스플레이 생성 컴포넌트들(722b)을 통해 디스플레이되는, 박스 및/또는 윤곽과 같은 프레임) 내에 있도록 사용자(708)의 신체의 일부분을 이동시키고/시키거나 전자 디바이스(700)를 이동시키도록 사용자(708)에게 지시한다. 일부 실시예들에서, 하나 이상의 프롬프트들은 사용자(708)에게 전자 디바이스(700)에 더 가깝게 및/또는 그로부터 더 멀리 이동하도록 그리고/또는 전자 디바이스(700)를 사용자(708)에 더 가깝게 및/또는 그로부터 더 멀리 이동시키도록 지시한다. 일부 실시예들에서, 전자 디바이스(700)에 의해 제공되는 하나 이상의 프롬프트들은 영역(722)의 하나 이상의 디스플레이 생성 컴포넌트들(722b)을 통해 디스플레이된다. 일부 실시예들에서, 하나 이상의 프롬프트들은 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 것에 관해 사용자(708)에게 지시사항들 및/또는 안내를 제공하는 오디오 프롬프트들(예컨대, 전자 디바이스(700)의 스피커를 통해 출력됨) 및/또는 햅틱 프롬프트들(예컨대, 전자 디바이스(700)의 하나 이상의 햅틱 출력 디바이스들을 통해 출력됨)이다.

도 7d에서, 사용자(708)는 각각 화살표들(724a 및/또는 724b)에 의해 표시된 바와 같이 머리(708d)를 이동시키고/시키거나 전자 디바이스(700)를 이동시킨다. 사용자(708)가 머리(708d)(및 선택적으로, 사용자(708)의 신체의 다른 부분들) 및/또는 전자 디바이스(700)를 이동시키는 동안, 센서들(720a 내지 720j)은 사용자(708)의 하나 이상의 신체적 특성들에 관한 정보를 캡처한다. 전자 디바이스(700)의 센서들(720a 내지 720j)은, 사용자(708)의 하나 이상의 신체적 특성들, 예를 들어 하나 이상의 얼굴 특징부들, 사용자(708)의 모발의 하나 이상의 특징부들(예컨대, 사용자(708)의 머리(708d) 상의 모발 및/또는 사용자(708)의 얼굴 모발), 사용자(708)의 몸통(708e)의 하나 이상의 특징부들(예컨대, 어깨들, 가슴, 및/또는 의류), 및/또는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 배치되는 동안 달리 액세스불가능하고/하거나 센서들(720a 내지 720j)의 캡처 영역 외측에 있을 사용자(708)의 다른 신체적 특성들에 관한 정보를 캡처한다. 예를 들어, 사용자(708)가 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 전자 디바이스(700)를 착용하고 있는 동안, 센서들(720a 내지 720j)의 캡처 영역들 및/또는 필드들은 사용자(708)의 신체의 특정 부분(예컨대, 얼굴(708c), 머리(708d), 및/또는 몸통(708e))을 향해 지향되지 않고/않거나, 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 것이 차단된다. 아래에서 설명되는 바와 같이, 전자 디바이스(700)는 사용자(708)의 하나 이상의 신체적 특성들에 관한 캡처된 정보를 사용하여 사용자(708)의 표현(726)을 생성한다.

도 7e에서, 사용자(708)는 전자 디바이스(700)를 사용자(708)의 신체(예컨대, 손목(708) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 다시 배치하였다. 일부 실시예들에서, 사용자(708)의 하나 이상의 신체적 특성들을 캡처한 후에, 전자 디바이스(700)는 등록 프로세스를 계속하기 위해 전자 디바이스(700)를 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 다시 배치하도록 사용자(708)에게 지시하는 프롬프트를 출력한다(예컨대, 하나 이상의 디스플레이 생성 컴포넌트들(722b)을 통해 디스플레이하고/하거나 오디오 및/또는 햅틱들을 출력함). 도 7e에서, 전자 디바이스(700)는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 위치된다고 결정하고/하거나 위치된다는 것을 검출한다. 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 위치된다고 결정하는 것에 응답하여(그리고 선택적으로, 사용자(708)의 하나 이상의 신체적 특성들이 캡처되었다는 것을 검출하는 것에 응답하여), 전자 디바이스(700)는 디스플레이(704)를 통해 프롬프트(728)를 디스플레이한다.

도 7e에서, 프롬프트(728)는 센서(712)가 사용자(708)의 왼손(708f)을 향한 방향으로 향하고 있도록 전자 디바이스(700)(및/또는 사용자(708)의 신체의 일부분)를 이동 및/또는 배향시키도록 사용자(708)에게 지시하는 표시(예컨대, 텍스트)를 포함한다(예컨대, HMD의 센서(712)는 카메라이고, HMD가 사용자(708)의 머리(708d) 상에 착용되는 동안, 사용자(708)는 왼손(708f)이 카메라의 시야 내에 있도록 머리(708d), 왼손(708f), 및/또는 그들의 눈들을 지향시킬 수 있음). 일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 제거되는 동안 센서들(720a 내지 720j)을 통해 사용자(708)의 하나 이상의 제1 신체적 특성들에 관한 제1 정보를 캡처하고, 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 배치되는 동안 센서(712)를 통해 사용자(708)의 하나 이상의 제2 신체적 특성들에 관한 제2 정보를 캡처한다. 일부 실시예들에서, 전자 디바이스(700)는 사용자(708)의 하나 이상의 제1 신체적 특성들 및 사용자(708)의 하나 이상의 제2 신체적 특성들 둘 모두의 적어도 일부분을 사용하여 표현(726)을 생성한다. 일부 실시예들에서, 전자 디바이스(700)는 사용자(708)의 하나 이상의 제1 신체적 특성들 및 사용자(708)의 하나 이상의 제2 신체적 특성들 중 하나만을 사용하여 표현(726)을 생성한다. 일부 실시예들에서, 사용자(708)의 하나 이상의 제1 신체적 특성들은, 얼굴(708c), 머리(708d), 및/또는 몸통(708e)의 신체적 특성들과 같은, 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 있는 동안 액세스불가능하고/하거나 센서들(720a 내지 720j)의 캡처 영역 및/또는 필드 외측에 있는 사용자(708)의 신체의 일부분들의 신체적 특성들에 대응한다. 일부 실시예들에서, 사용자(708)의 하나 이상의 제1 신체적 특성들은 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))(예컨대, 전자 디바이스(700)가 사용자(708)의 신체 상에 있을 때 전자 디바이스에 의해 커버되는 사용자(708)의 신체의 일부분들(예컨대, HMD가 사용자(708)의 머리(708d) 상에 착용될 때 사용자(708)의 얼굴(708c) 및/또는 머리(708d)가 HMD에 의해 커버됨)) 상에 있는 동안 액세스불가능하고/하거나 달리 센서(712)를 통해 캡처하는 데 적합하지 않은 사용자(708)의 신체의 일부분들의 신체적 특성들에 대응한다. 일부 실시예들에서, 사용자(708)의 하나 이상의 제2 신체적 특성들은, 왼손(708f) 및/또는 오른손(708g)(예컨대, 왼손(708f) 및/또는 오른손(708g)은 HMD가 사용자(708)의 머리(708d) 상에 착용되는 동안 HMD의 카메라(예컨대, 센서(712))를 통해 캡처될 수 있음)과 같은, 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 있는 동안 액세스가능하고/하거나 센서(712)를 통해 캡처하는 데 적합한 사용자(708)의 신체의 일부분들의 신체적 특성들에 대응한다. 따라서, 전자 디바이스(700)는 사용자(708)의 하나 이상의 제1 신체적 특성들 및/또는 사용자(708)의 하나 이상의 제2 신체적 특성들을 캡처하기 위해 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 전자 디바이스(700)를 제거하도록 그리고/또는 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 전자 디바이스(700)를 배치하도록 사용자에게 지시하는 하나 이상의 프롬프트들을 출력한다.

도 7f에서, 사용자(708)는 센서(712)가 센서(712)의 캡처 영역 및/또는 필드가 왼손(708f)을 향해 지향되는 위치에 있도록 전자 디바이스(700), 왼손(708f), 및/또는 오른손(708g)을 위치시켰다(예컨대, HMD의 센서(712)는 카메라이고 사용자(708)는 왼손(708f)이 카메라의 시야 내에 있도록 머리(708d)의 위치, 왼손(708f)의 위치, 및/또는 그들의 눈들의 시선의 위치를 조정하였음). 게다가, 전자 디바이스(700)는, 디스플레이(704)를 통해, 전자 디바이스(700)(예컨대, 전자 디바이스(700)의 센서(712))에 대한 왼손(708f)의 목표 위치를 나타내는 프레임(730)을 디스플레이한다. 도 7f에서, 센서(712)는 카메라와 같은 이미지 센서를 포함하고, 전자 디바이스(700)는 디스플레이(704) 상에 센서(712)를 통해 캡처된 정보를 디스플레이한다. 따라서, 전자 디바이스(700)는 센서(712)가 사용자(708)의 왼손(708f)을 캡처 및/또는 달리 검출하였음을 나타내는 손 표현(732)을 디스플레이(704) 상에 디스플레이한다. 일부 실시예들에서, 사용자(708)는 손 표현(732)이 디스플레이(704) 상의 프레임(730) 내에 있도록 왼손(708f) 및/또는 전자 디바이스(700)의 위치를 조정할 수 있다. 일부 실시예들에서, 손 표현(732)이 프레임(730) 내에 있을 때, 사용자(708)의 왼손(708f)은 센서(712)가 왼손(708f)의 하나 이상의 신체적 특성들에 관한 정보를 캡처할 수 있게 하는 전자 디바이스(700)에 대한 목표 영역 내에 위치된다. 일부 실시예들에서, 전자 디바이스(700)는 손 표현(732)이 프레임(730) 내에 있는 것에 응답하여 그리고/또는 손 표현(732)이 미리결정된 시간 동안 프레임(730) 내에 있는 것에 응답하여 센서(712)가 사용자(708)의 왼손(708f)의 하나 이상의 신체적 특성들에 관한 정보를 캡처하게 한다.

전자 디바이스(700)가 왼손(708f)의 하나 이상의 신체적 특성들에 관한 정보를 캡처한 후에 및/또는 캡처하는 동안, 전자 디바이스(700)는 디스플레이(704)를 통해 프롬프트(734)를 디스플레이한다. 도 7f에서, 프롬프트(734)는 왼손(708f)을 뒤집도록(예컨대, 왼손(708f)을 전자 디바이스(700) 및/또는 센서(712)에 대해 대략 180도만큼 회전시키도록) 왼손(708f)의 위치를 조정하도록 사용자(708)에게 지시하는 표시(예컨대, 텍스트)를 포함한다. 일부 실시예들에서, 사용자의 왼손(708f)이 회전되었고/되었거나 뒤집혔다는 것을 검출하는 것에 응답하여, 전자 디바이스(700)는, 센서(712)를 통해, 사용자(700)의 왼손(708f)에 관한 추가적인 하나 이상의 신체적 특성들을 캡처한다. 일부 실시예들에서, 전자 디바이스(700)는 사용자(708)의 왼손(708f)에 관한 하나 이상의 신체적 특성들 및/또는 사용자(708)의 왼손(708f)에 관한 추가적인 하나 이상의 신체적 특성들을 사용하여 표현(726)의 일부분을 생성한다. 일부 실시예들에서, 전자 디바이스(700)는 입력 캘리브레이션 프로세스의 일부로서 사용자(708)의 왼손(708f)에 관한 하나 이상의 신체적 특성들 및/또는 사용자(708)의 왼손(708f)에 관한 추가적인 하나 이상의 신체적 특성들을 사용한다.

일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a), 손목(708h), 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 배치되는 동안 사용자(708)의 오른손(708g)에 관한 하나 이상의 신체적 특성들에 관한 정보를 캡처한다. 일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a), 손목(708h), 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 제거되는 동안 사용자(708)의 오른손(708g)에 관한 정보를 캡처한다(예컨대, 센서들(720a 내지 720j)을 통해 사용자(708)의 오른손(708g)에 관한 정보를 캡처함).

사용자(708)의 왼손(708f)에 관한 정보를 캡처한 후에(그리고 선택적으로, 사용자(708)의 하나 이상의 신체적 특성들에 관한 정보를 캡처하는 것의 완료 후에 및/또는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 배치된다는 것을 검출한 후에), 전자 디바이스(700)는, 도 7g에 도시된 바와 같이, 디스플레이(704)를 통해, 표현(726)을 포함하는 사용자 인터페이스(736)를 디스플레이한다. 도 7g에서, 표현(726)은, 표현(726)이 사용자(708)를 닮고/닮거나 달리 그와 유사하게 보이도록, 사용자(708)의 캡처된 하나 이상의 신체적 특성들에 기초하는 외관을 포함한다. 예를 들어, 표현(726)의 의류 표현(726i)은 사용자(708)에 의해 착용된 의류(708i)의 하나 이상의 물리적 속성들에 기초하는 하나 이상의 속성들을 포함하는 외관을 포함한다. 일부 실시예들에서, 전자 디바이스(700)는 사용자(708)의 캡처된 하나 이상의 신체적 특성들을 사용하여 입체적으로 표현(726)을 생성한다(예컨대, 사용자(708)의 2개 이상의 2차원 이미지들을 조합 및/또는 오버레이하여, 표현(726)이 3차원인 외관을 생성함).

도 7g에서, 전자 디바이스(700)는 사용자 인터페이스(736)의 제1 영역(736a)에 표현(726)을 디스플레이하고, 사용자 인터페이스(736)의 제2 영역(736b)에 선택가능 옵션들(738a 내지 738d)을 디스플레이한다. 아래에서 논의되는 바와 같이, 전자 디바이스(700)는 선택가능 옵션들(738a 내지 738d) 중 하나 이상을 선택하는 사용자 입력을 검출하는 것에 응답하여 표현(726)의 외관을 편집하도록 그리고/또는 사용자(708)의 하나 이상의 신체적 특성들을 재캡처하기 위한 프로세스를 개시하도록 구성된다.

도 7g에서, 표현(726)은 제1 영역(726a)의 환경(740) 내에 디스플레이된다. 일부 실시예들에서, 환경(740)은 가상 현실 환경이다. 일부 실시예들에서, 환경(740)은 증강 현실 환경(740)이다. 일부 실시예들에서, 환경(740)은 정적 배경이다. 일부 실시예들에서, 환경(740)은, 프레임 및/또는 미러와 같은 하나 이상의 객체들(예컨대, 가상 객체들)을 포함한다.

일부 실시예들에서, 표현(726)을 디스플레이하는 동안, 전자 디바이스(700)는 물리적 환경(706) 내에서의 사용자(708)의 이동을 나타내는 정보를 수신한다. 물리적 환경(706) 내에서의 사용자(708)의 이동을 나타내는 정보를 수신하는 것에 응답하여, 전자 디바이스(700)는 환경(740) 내에 표현(726)의 이동을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(700)는 물리적 환경(706) 내에서의 사용자(708)의 신체 이동을 미러링하도록 환경(740) 내에 표현(726)의 이동을 디스플레이한다. 다시 말하면, 전자 디바이스(700)는 마치 사용자(708)가 거울에 비친 표현(726)을 보고 있는 것처럼 표현(726)의 이동을 디스플레이한다(예컨대, 사용자(708)가 물리적 환경(706)에서 오른손(708g)을 이동시킴에 따라, 전자 디바이스는 표현(726)의 왼손의 이동을 디스플레이함). 일부 실시예들에서, 전자 디바이스(700)는 표현(726)이 사용자(708)의 물리적 신체의 미러 이미지 표현으로서 디스플레이됨을 사용자(708)에게 나타내기 위해 환경(740) 내에 프레임 및/또는 미러(예컨대, 가상 프레임 및/또는 가상 미러)를 디스플레이한다.

일부 실시예들에서, 전자 디바이스(700)는 사용자(708)가 다른 사용자와의 실시간 통신 세션에 참가하고 있는 동안, 외부 전자 디바이스를 통해, 다른 사용자에게 디스플레이될 콘텐츠의 미리보기로서 표현(726)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 제거되는 동안 하나 이상의 디스플레이 생성 컴포넌트들(722b)을 통해 표현(726) 및/또는 표현(726)의 적어도 일부분을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(700)는 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c)) 상에 배치된다는 것을 전자 디바이스(700)가 검출할 때 표현(726)을 디스플레이하고, 전자 디바이스(700)가 사용자(708)의 신체(예컨대, 손목(708a) 및/또는 신체의 다른 부분, 예를 들어 머리(708d) 및/또는 얼굴(708c))로부터 제거된다는 것을 전자 디바이스(700)가 검출할 때 표현(726)을 디스플레이하지 않는다.

위에서 설명된 바와 같이, 전자 디바이스(700)는 사용자 인터페이스(736)의 제2 영역(736b)에 선택가능 옵션들(738a 내지 738d)을 디스플레이하며, 이는 사용자(708)가 표현(726)의 외관을 편집할 수 있게 그리고/또는 사용자(708)의 하나 이상의 신체적 특성들을 재캡처하기 위한 프로세스를 개시할 수 있게 한다. 도 7g에서, 제1 선택가능 옵션(738a)은 표현(726)의 아이웨어(eyewear)(예컨대, 안경, 선글라스, 이중초점안경, 단안경, 고글, 및/또는 헤드셋들)를 편집하기 위한 옵션에 대응한다. 제1 선택가능 옵션(738a)을 선택하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는 표현(726)이 선택된 유형의 아이웨어를 착용하고 있거나(예컨대, 포함하거나) 착용하고 있지 않도록(예컨대, 포함하지 않도록) 표현(726)의 외관이 조정 및/또는 변경될 수 있게 한다. 일부 실시예들에서, 전자 디바이스(700)는 사용자(708)가 아이웨어를 착용하고 있는 동안 사용자(708)의 하나 이상의 신체적 특성들을 캡처하고, 그에 따라, 제1 선택가능 옵션(738a)은 사용자(708)가 표현(726)이 사용자(708)의 캡처된 하나 이상의 신체적 특성들에 기초한 외관을 포함하는 아이웨어를 착용하고 있는지 또는 착용하고 있지 않은지(예컨대, 표현(726)이 전자 디바이스(700)가 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 동안 사용자(708)가 착용하고 있었던 물리적 아이웨어에 대응하는 하나 이상의 속성들을 갖는 외관을 포함하는 아이웨어를 착용하고 있는지 여부)를 선택할 수 있게 한다.

제2 선택가능 옵션(738b)은 표현(726)의 접근성 액세서리들(예컨대, 아이패치(eyepatch)들, 보철 부속물들, 및/또는 보청기들)을 편집하기 위한 옵션에 대응한다. 제2 선택가능 옵션(738b)을 선택하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는 표현(726)이 선택된 접근성 액세서리를 착용하고 있거나(예컨대, 포함하거나) 착용하고 있지 않도록(예컨대, 포함하지 않도록) 표현(726)의 외관이 조정 및/또는 변경될 수 있게 한다. 일부 실시예들에서, 전자 디바이스(700)는 사용자(708)가 접근성 액세서리를 착용하고 있는 동안 사용자(708)의 하나 이상의 신체적 특성들을 캡처하고, 그에 따라, 제2 선택가능 옵션(738b)은 사용자(708)가 표현(726)이 사용자(708)의 캡처된 하나 이상의 신체적 특성들에 기초한 외관을 포함하는 접근성 액세서리를 착용하고 있는지 또는 착용하고 있지 않은지(예컨대, 표현(726)이 전자 디바이스(700)가 사용자(708)의 하나 이상의 신체적 특성들을 캡처하는 동안 사용자(708)가 착용하고 있었던 물리적 접근성 액세서리에 대응하는 하나 이상의 속성들을 갖는 외관을 포함하는 접근성 액세서리를 착용하고 있는지 여부)를 선택할 수 있게 한다.

제3 선택가능 옵션(738c)은 표현(726)의 피부 톤(예컨대, 피부 표현의 색상, 색조, 셰이드, 밝기, 및/또는 어두움)을 편집하기 위한 옵션에 대응한다. 제3 선택가능 옵션(738c)을 선택하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는 표현(726)의 하나 이상의 부분들의 피부 톤이 조정되도록 표현(726)의 외관이 조정 및/또는 변경될 수 있게 한다. 일부 실시예들에서, 사용자(708)의 캡처된 하나 이상의 신체적 특성들은 사용자(708)의 하나 이상의 신체 피부 톤들에 관한 정보를 포함하지 않고/않거나, 표현(726)의 디스플레이된 피부 톤은 달리 사용자(708)의 하나 이상의 신체 피부 톤들을 정확하게 반영하지 않는다. 따라서, 제3 선택가능 옵션(738c)은 표현(726)이 사용자(708)의 신체 피부 톤과 정확하게 유사한 피부 톤 표현을 포함하도록 사용자(708)가 표현(726)의 피부 톤 표현을 변경 및/또는 조정할 수 있게 한다.

제4 선택가능 옵션(738d)은, 사용자(708)의 하나 이상의 신체적 특성들을 재캡처하여 전자 디바이스(700)가 사용자(708)의 재캡처된 하나 이상의 신체적 특성들에 기초하여 표현(726)을 재생성 및/또는 업데이트할 수 있게 하기 위한 옵션에 대응한다. 일부 실시예들에서, 제4 선택가능 옵션(738d)을 선택하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는, 도 7a에 도시된 바와 같이, 프롬프트(702)를 디스플레이하고/하거나, 달리 사용자(708)의 하나 이상의 신체적 특성들을 재캡처하기 위한 프로세스를 개시한다.

도 7g에서, 전자 디바이스(700)는 제3 선택가능 옵션(738c)의 선택에 대응하는 사용자 입력(750a)을 검출한다. 사용자 입력(750a)을 검출하는 것에 응답하여, 전자 디바이스(700)는, 도 7h에 도시된 바와 같이, 디스플레이를 통해, 표현(726) 및 선택가능 피부 톤 옵션들(742a, 742b)을 포함하는 사용자 인터페이스(742)를 디스플레이한다.

도 7h에서, 전자 디바이스(700)는 표현(726)이 상이한 피부 톤들(예컨대, 표현(726)의 신체 부위들의 상이한 표현들 상의 피부 표현들의 색상들, 색조들, 밝기, 및/또는 어두움)을 갖는 상이한 부분들을 포함할 수 있도록 표현(726)의 상이한 부분들의 피부 톤을 편집하기 위한 제1 피부 톤 옵션(742a) 및 제2 피부 톤 옵션(742b)을 디스플레이한다. 제1 피부 톤 옵션(742a)은 표현(726)의 손 표현의 피부 톤을 편집하는 것에 대응한다. 제1 피부 톤 옵션(742a)을 선택하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는 표현(726)의 손 표현들의 피부 톤이 조정되도록 표현(726)의 외관이 조정 및/또는 변경될 수 있게 한다. 제2 피부 톤 옵션(742b)은 표현(726)의 얼굴 표현(726c)의 피부 톤을 편집하는 것에 대응한다. 제2 피부 톤 옵션(742b)을 선택하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는 표현(726)의 얼굴 표현(726c)의 피부 톤이 조정되도록 표현(726)의 외관이 조정 및/또는 변경될 수 있게 한다. 도 7h는 2개의 선택가능 피부 톤 옵션들(742a, 742b)을 포함하는 사용자 인터페이스(742)를 예시하지만, 일부 실시예들에서, 사용자 인터페이스(742)는 표현(726)의 상이한 부분들의 피부 톤을 편집하는 것에 대응하는 2개 초과의 선택가능 피부 톤 옵션들을 포함한다.

도 7h에서, 전자 디바이스(700)는 완료 사용자 인터페이스 객체(744)의 선택에 대응하는 사용자 입력(750b)을 검출한다. 사용자 입력(750b)을 검출한 후에, 전자 디바이스(700)는, 도 7i에 도시된 바와 같이, 메뉴 사용자 인터페이스(746)를 디스플레이한다. 도 7i에서, 메뉴 사용자 인터페이스(746)는 전자 디바이스(700)에 의해 실행 및/또는 디스플레이되도록 구성된 다양한 기능들, 사용자 인터페이스들, 및/또는 애플리케이션들에 대응하는 메뉴 사용자 인터페이스 객체들(746a 내지 746f)을 포함한다. 일부 실시예들에서, 메뉴 사용자 인터페이스(746)는 전자 디바이스(700)의 운영 체제의 홈 사용자 인터페이스 및/또는 디폴트 사용자 인터페이스이다.

도 7i에서, 전자 디바이스(700)는 제1 메뉴 사용자 인터페이스 객체(746a)(예컨대, "People")의 선택에 대응하는 사용자 입력(750c)을 검출한다. 사용자 입력(750c)을 검출하는 것에 응답하여, 전자 디바이스(700)는, 도 7j에 도시된 바와 같이, 디스플레이(704)를 통해, 사람 사용자 인터페이스(748)(예컨대, 표현 사용자 인터페이스)를 디스플레이한다. 사람 사용자 인터페이스(748)는 전자 디바이스(700)에 의해 생성된 사용자(708)(및 선택적으로, 전자 디바이스(700)의 다른 사용자들)의 상이한 표현들에 대응한다. 도 7j에서, 사람 사용자 인터페이스(748)는 전자 디바이스(700)에 의해 생성된 제1 표현(예컨대, 표현(726))에 대응하는 제1 사람 사용자 인터페이스 객체(748a), 및 전자 디바이스(700)에 의해 생성된 제2 표현(예컨대, 표현(726)과는 상이한 표현)에 대응하는 제2 사람 사용자 인터페이스 객체(748b)를 포함한다. 일부 실시예들에서, 제1 표현 및/또는 제2 표현은 각자의 사용자들의 하나 이상의 캡처된 신체적 특성들에 기초하여 전자 디바이스(700)에 의해 생성되는 사용자들의 표현들에 대응한다.

일부 실시예들에서, 제1 사람 사용자 인터페이스 객체(748a)의 선택에 대응하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는 제1 사람 사용자 인터페이스 객체(748a)에 대응하는 제1 표현(예컨대, 표현(726))을 포함하는 사용자 인터페이스(736)를 디스플레이한다. 유사하게, 제2 사람 사용자 인터페이스 객체(748b)의 선택에 대응하는 사용자 입력을 검출하는 것에 응답하여, 전자 디바이스(700)는 제2 사람 사용자 인터페이스 객체(748b)에 대응하는 제2 표현(예컨대, 표현(726)과는 상이한 표현)을 포함하는 사용자 인터페이스(736)를 디스플레이한다.

도 7a 내지 도 7j에 관한 추가 설명들은 도 7a 내지 도 7j와 관련하여 설명되는 방법들(800, 900)을 참조하여 아래에서 제공된다.

도 8은 일부 실시예들에 따른, 사용자의 표현을 생성하기 위한 예시적인 방법(800)의 흐름도이다. 일부 실시예들에서, 방법(800)은 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)(예컨대, 시각적 출력 디바이스, 3D 디스플레이, 및/또는 이미지들이 투영될 수 있는 투명 또는 반투명한 적어도 일부분을 갖는 디스플레이(예컨대, 시스루 디스플레이), 프로젝터, 헤드업 디스플레이, 및/또는 디스플레이 제어기)을 포함하는(그리고 선택적으로, 하나 이상의 카메라들(예컨대, 적외선 카메라; 깊이 카메라; 및/또는 가시광 카메라)과 통신하는) 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)(예컨대, 스마트폰, 태블릿, 머리 장착형 디스플레이 생성 컴포넌트)에서 수행된다. 일부 실시예들에서, 본 방법(800)은, 비일시적(또는 일시적) 컴퓨터 판독가능 저장 매체에 저장되며 컴퓨터 시스템(101)의 하나 이상의 프로세서들(202)(예를 들어, 도 1의 제어부(110))과 같은 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되는 명령어들에 의해 통제된다. 방법(800) 내의 일부 동작들은 선택적으로 조합되고 그리고/또는 일부 동작들의 순서는 선택적으로 변경된다.

컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되는 동안(예컨대, 컴퓨터 시스템은 사용자의 신체의 각자의 부분에 대해 각자의 배향 및/또는 위치로 착용됨)(예컨대, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 신체 부위 상에 착용되도록 구성되는 웨어러블 컴퓨터 시스템(예컨대, 머리 장착형 디스플레이 생성 컴포넌트, 안경, 헤드셋, 및/또는 워치)임)(일부 실시예들에서, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 손목(예컨대, 708a) 상에 착용되도록 구성된 워치임)(일부 실시예들에서, 컴퓨터 시스템은 컴퓨터 시스템이 착용가능 위치에 있는지 여부를 나타내는 데이터를 캡처하는 하나 이상의 센서들과 통신함), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 제거하도록(예컨대, 웨어러블 컴퓨터 시스템을 벗어서 그가 사용자의 신체 부위 상에 더 이상 착용되지 않게 하도록) 그리고 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)(예컨대, 컴퓨터 시스템의 하나 이상의 센서들)을 사용하여 사용자(예컨대, 708)와 관련된 정보(예컨대, 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보)를 캡처하도록 지시하는 프롬프트(예컨대, 702)(예컨대, 텍스트, 이미지들, 및/또는 지시사항들을 포함하는 사용자 인터페이스 객체들)를 디스플레이한다(802).

일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자의 표현(예컨대, 726)을 생성하기 위한 등록 프로세스(예컨대, 사용자의 하나 이상의 신체 부위들 및/또는 신체 부위들의 특징부들의 크기, 형상, 위치, 포즈, 색상, 깊이 및/또는 다른 특성을 나타내는 데이터(예컨대, 이미지 데이터, 센서 데이터, 및/또는 깊이 데이터)를 캡처하는 것을 포함하는 프로세스) 동안 착용가능 위치로부터 컴퓨터 시스템을 제거하라는 프롬프트(예컨대, 702)를 디스플레이한다.

사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 제거하도록 지시하는 프롬프트(예컨대, 702)를 디스플레이하는 것에 후속적으로(예컨대, 디스플레이하는 동안), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되었다는 것을 검출한다(예컨대, 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해 캡처된 데이터를 수신하며, 여기에서 데이터는 컴퓨터 시스템이 사용자의 신체 부위(예컨대, 특정 신체 부위) 상에 착용되어 있지 않음을 나타냄)(804).

컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되었다는 것을 검출한 후에(예컨대, 그에 응답하여), 컴퓨터 시스템은 사용자(예컨대, 708)와 관련된(예컨대, 그에 관한) 정보(예컨대, 사용자의 하나 이상의 신체 부위들(예컨대, 머리 및/또는 얼굴)의 크기, 형상, 위치, 포즈, 색상, 깊이, 및/또는 다른 특성을 나타내는 이미지 데이터, 센서 데이터, 및/또는 깊이 데이터)(예컨대, 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보)를 (예컨대, 카메라들과 같은 하나 이상의 센서들을 통해) 캡처한다(806). 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 정보를 사용하여 사용자(예컨대, 708)의 표현(예컨대, 726)(예컨대, (2D 또는 3D) 가상 표현, (2D 또는 3D) 아바타)을 생성하도록 구성된다(예컨대, 컴퓨터 시스템은 사용자와 관련된 정보에 기초하는 사용자의 표현(예컨대, 아바타)을 생성하여서, 사용자의 표현이 사용자의 신체, 모발, 의류, 및/또는 다른 특징부들의 크기들, 형상들, 위치들, 포즈들, 색상들, 깊이들, 및/또는 다른 특성들에 기초한(예컨대, 그와 유사한) 시각적 표시들을 포함하게 함).

컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 사용자와 관련된 정보를 캡처하는 것은, 컴퓨터 시스템이 그렇지 않을 경우 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안 컴퓨터 시스템에 액세스가능하지 않을 사용자의 신체의 일부분들에 관한 정보를 캡처할 수 있게 한다. 따라서, 컴퓨터 시스템은 추가 및/또는 외부 디바이스들 및/또는 센서들 없이 사용자와 관련된 정보를 캡처할 수 있다. 게다가, 컴퓨터 시스템은 사용자의 더 정확한 표현을 생성하는 데 사용되는, 사용자와 관련된 더 많은 정보를 캡처할 수 있다.

일부 실시예들에서, 사용자(예컨대, 708)의 표현(예컨대, 726)은 증강 현실 환경(예컨대, 740 및/또는 1008)(예컨대, 하나 이상의 가상 객체들이 물리적 환경 또는 그의 표현 위에 중첩되는 시뮬레이션된 환경, 및/또는 물리적 환경의 표현이 컴퓨터 생성 감각 정보에 의해 변환되는 시뮬레이션된 환경) 및/또는 가상 현실 환경(예컨대, 740 및/또는 1008)(예컨대, 사람이 감지 및/또는 상호작용할 수 있는 복수의 가상 객체들을 포함하는 하나 이상의 감각들에 대한 컴퓨터 생성 감각 입력들에 전적으로 기초하도록 설계되는 시뮬레이션된 환경) 내에 디스플레이되도록 구성된다.

일부 실시예들에서, 사용자(예컨대, 708)의 표현(예컨대, 726)은 사용자(예컨대, 708)와 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)과는 상이한 제2 컴퓨터 시스템과 연관된 제2 사용자(예컨대, 제2 표현(1012)과 연관된 사용자) 사이의 실시간 통신 세션 동안 증강 현실 환경(예컨대, 740 및/또는 1008) 및/또는 가상 현실 환경(예컨대, 740 및/또는 1008) 내에 디스플레이되도록 구성된다.

증강 현실 환경 및/또는 가상 현실 환경 내에 사용자의 표현을 디스플레이하는 것은, 표현을 보는 사용자가 디바이스의 상태에 관한 콘텍스트를 얻을 수 있게 하여, 그에 의해 디바이스의 상태에 관한 개선된 피드백을 제공한다.

일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 708)의 표현(예컨대, 726)을 입체적으로 생성하도록 구성된다(예컨대, 표현은, 함께 보고/보거나 서로 조합될 때 표현이 디스플레이되는 환경에 표현이 3차원으로 존재하는 것으로 보이게 하는 일련의 2차원 이미지들임). 사용자의 표현을 입체적으로 생성하는 것은, 컴퓨터 시스템이 사용자의 더 정확하고/하거나 사실적인 표현을 생성할 수 있게 한다.

일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되었다는 것을 검출하기 전에(예컨대, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 사용하여 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위한 지시사항들(예컨대, 716)(예컨대, 텍스트 지시사항들, 이미지 지시사항들, 비디오 지시사항들, 애니메이션화된 지시사항들, 오디오 지시사항들, 및/또는 다른 지시사항들)(예컨대, 컴퓨터 시스템의 사용자가 사용자와 관련된 정보를 캡처하기 위해 컴퓨터 시스템 및/또는 사용자의 신체를 어떻게 사용, 조작, 및/또는 달리 위치시켜야 하는지를 설명하는 지시사항들)을 제공한다(예컨대, 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트와 별개로 또는 동시에 출력 및/또는 디스플레이함). 일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 사용하여 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위한 지시사항들(예컨대, 716)은 사용자가 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위해 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 어떻게 사용하여야 하는지의 예를 제공하는 일련의 이미지들, 텍스트 지시사항들, 및/또는 비디오를 포함한다. 예를 들어, 일부 실시예들에서, 지시사항들(예컨대, 716)은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 사용하는 예, 및/또는 사용자(예컨대, 708)가 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위해 모방하여야 하는 모션들을 포함한다.

컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하기 위한 지시사항들을 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 지시사항들(예컨대, 716)을 제공하는 것은, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이, 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 사용하여 사용자(예컨대, 708)와 관련된 정보를 캡처하는 것을 시연하는(예컨대, 그의 시각적 예를 제공하는) 애니메이션(예컨대, 716)(예컨대, 일련의 시각적 표시들 및/또는 비디오)(예컨대, 컴퓨터 시스템의 사용자가 사용자와 관련된 정보를 캡처하기 위해 컴퓨터 시스템 및/또는 사용자의 신체를 어떻게 사용, 조작, 및/또는 달리 위치시켜야 하는지를 설명하는 지시사항들)을 디스플레이하는 것을 포함한다. 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 것을 시연하는 애니메이션을 디스플레이하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되었다는 것을 검출하기 전에(예컨대, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안), 그리고 기준들의 세트가 충족된다는(예컨대, 컴퓨터 시스템이 낮은 전력 및/또는 낮은 배터리 수명(예컨대, 임계량 미만의 전력 및/또는 배터리 수명의 양)을 가짐을 나타내는 정보 및/또는 데이터를 컴퓨터 시스템과 통신하는 하나 이상의 센서들로부터 수신한다는, 객체가 사용자의 신체의 하나 이상의 부분들을 차단하고 있다는(예컨대, 안경, 모자, 및/또는 얼굴 커버링), 사용자가 위치되는 환경이 가혹한 조명(예컨대, 사용자와 관련된 정보를 캡처하는 데 영향을 미칠 수 있는 밝은 조명)을 포함한다는, 사용자가 위치되는 환경이 낮은 조명(예컨대, 사용자와 관련된 정보를 정확하게 및/또는 완전히 캡처하기에 충분한 조명이 아님)을 포함한다는, 및/또는 사용자가 위치되는 환경의 다른 조건이 사용자와 관련된 정보를 캡처하는 데 영향을 미칠 수 있다는) 결정에 따라, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 사용자(예컨대, 708)와 관련된 정보의 캡처에 영향을 미치는 조건(예컨대, 컴퓨터 시스템이 낮은 전력을 가짐, 객체가 사용자의 신체의 하나 이상의 부분들을 차단하고 있음, 사용자가 위치되는 환경이 가혹한 조명을 포함함, 사용자가 위치되는 환경이 낮은 조명을 포함함, 및/또는 사용자가 위치되는 환경이 사용자와 관련된 정보를 캡처하는 데 영향을 미칠 수 있는 다른 조건을 포함함)과 연관된 표시(예컨대, 718)(예컨대, 시각적 통지 및/또는 오디오 통지와 같은 경고)를 디스플레이한다. 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체로부터 제거되었다는 것을 검출하기 전에(예컨대, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안), 그리고 기준들의 세트가 충족되지 않는다는 결정에 따라, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 708)와 관련된 정보의 캡처에 영향을 미치는 조건과 연관된 표시(예컨대, 718)를 디스플레이하는 것을 보류한다(그리고 선택적으로, 사용자의 신체로부터 컴퓨터 시스템을 제거하도록 그리고 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트(예컨대, 702)를 디스플레이하는 것을 유지함).

일부 실시예들에서, 기준들의 세트는 사용자와 관련된 정보의 캡처에 영향을 미치는 제1 조건에 대응하는 제1 세트의 기준들이고, 표시는 사용자와 관련된 정보의 캡처에 영향을 미치는 제1 조건과 연관된 제1 표시이다. 제1 세트의 기준들과는 상이한, 사용자와 관련된 정보의 캡처에 영향을 미치는 제2 조건에 대응하는 제2 세트의 기준들이 충족되는 것에 따라, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자와 관련된 정보의 캡처에 영향을 미치는 제2 조건과 연관된 제2 표시를 (예컨대, 제1 표시와 동시에, 제1 표시 전 및/또는 후에, 및/또는 제1 표시 대신에) 디스플레이한다(예컨대, 컴퓨터 시스템은 하나 이상의 다른 표시들보다 더 높은 우선순위를 포함하는 각자의 표시를 디스플레이하며, 여기에서 각자의 표시의 우선순위는 사용자와 관련된 정보의 캡처에 영향을 미치는 각자의 조건에 기초함(예컨대, 제2 조건이 사용자와 관련된 정보의 캡처에 더 높은 정도로 영향을 미칠 가능성이 더 높거나 영향을 미칠 조건과 연관되기 때문에, 제2 조건이 제1 조건보다 더 높은 우선순위를 가질 때, 컴퓨터 시스템은 제1 표시 대신에 제2 표시를 디스플레이함)). 기준들의 세트가 충족되지 않는다는 결정에 따라, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자와 관련된 정보의 캡처에 영향을 미치는 제2 조건과 연관된 제2 표시를 디스플레이하는 것을 보류한다.

사용자와 관련된 정보의 캡처에 영향을 미치는 조건과 연관된 표시를 디스플레이하는 것은, 사용자가 정보의 캡처에 영향을 미치는 조건을 선제적으로 어드레싱할 수 있게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 시간을 감소시킨다.

일부 실시예들에서, 사용자(예컨대, 708)와 관련된 정보의 캡처에 영향을 미치는 조건과 연관된 표시(예컨대, 718)는 조건을 보정하는 데 도움이 될 액션을 취하는 것(예컨대, 조건이 사용자와 관련된 정보의 캡처에 더 이상 영향을 미치지 않도록 조건을 보정 및/또는 달리 조정하는 것)에 관한 정보(예컨대, 718b)(예컨대, 제안 및/또는 지시사항들)(예컨대, 컴퓨터 시스템을 충전할 것을 제안하는 정보, 사용자가 사용자의 신체의 하나 이상의 부분들을 차단하는 객체를 제거할 것을 제안하는 정보, 및/또는 사용자가 조명 조건들을 조정하고/하거나 개선된 조명 조건들을 포함하는 상이한 위치 및/또는 환경으로 이동할 것을 제안하는 정보와 같은, 사용자와 관련된 정보를 캡처하는 것을 용이하게 하고/하거나 달리 개선할 하나 이상의 단계들 및/또는 제안들)를 포함한다. 조건을 보정하는 데 도움이 될 액션을 취하는 것에 관한 정보를 포함하는 것은, 사용자가 정보의 캡처에 영향을 미치는 조건을 선제적으로 어드레싱할 수 있게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 시간을 감소시킨다.

일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되었다는 것을 검출하는 것에 응답하여, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위한 프로세스를 개시한다(예컨대, 사용자와 관련된 정보를 캡처하기 위한 프로세스는 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하는 것에 응답하여 트리거, 개시, 및/또는 시작됨). 컴퓨터 시스템이 사용자의 신체로부터 제거되었다는 것을 검출하는 것에 응답하여, 사용자와 관련된 정보를 캡처하기 위한 프로세스를 개시하는 것은, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되었다는 것을 검출한 후에(예컨대, 사용자와 관련된 정보의 적어도 일부분을 캡처하기 전에, 동시에, 및/또는 후에), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위한 지시사항들을 포함하는 제2 프롬프트(예컨대, 722a)(예컨대, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하기 위한 지시사항들, 제안들, 및/또는 예들을 제공하는 텍스트, 이미지들, 비디오들, 오디오, 및/또는 햅틱 출력들)를 제공한다. 일부 실시예들에서, 제2 프롬프트(예컨대, 722a)는 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위한 상이한 지시사항들을 포함하는 복수의 프롬프트들을 포함한다. 일부 실시예들에서, 제2 프롬프트(예컨대, 722a)는 사용자(예컨대, 708)와 관련된 정보를 캡처하기 위한 지시사항들을 포함하는 제2 프롬프트들의 시퀀스를 포함한다.

사용자와 관련된 정보를 캡처하기 위한 지시사항들을 포함하는 제2 프롬프트를 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 제2 프롬프트(예컨대, 722a)를 제공하는 것은, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 하나 이상의 등록 지시사항들을 갖는 시각적 프롬프트(예컨대, 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하는 정보, 지시사항들, 제안들, 및/또는 예들을 제공하는 텍스트, 하나 이상의 이미지들, 및/또는 비디오)를 디스플레이하는 것을 포함한다. 일부 실시예들에서, 시각적 프롬프트(예컨대, 722a)는 사용자와 관련된 정보를 캡처하기 위한 지시사항들의 시각적 표시들을 포함하는 복수의 시각적 프롬프트들을 포함한다. 일부 실시예들에서, 시각적 프롬프트(예컨대, 722a)는 사용자와 관련된 정보를 캡처하기 위한 지시사항들의 시각적 표시들을 포함하는 시각적 프롬프트들의 시퀀스를 포함한다. 시각적 프롬프트를 디스플레이하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 사용자(예컨대, 708)의 신체로부터 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 제거하도록 그리고 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 사용하여 사용자(예컨대, 708)와 관련된 정보를 캡처하도록 지시하는 프롬프트(예컨대, 702)는 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a) 중 제1 디스플레이 생성 컴포넌트(예컨대, 704)(예컨대, 컴퓨터 시스템과 통신하고/하거나 컴퓨터 시스템의 하우징 상의 및/또는 내의 제1 위치에 포함되는 제1 디스플레이 디바이스)(일부 실시예들에서, 제1 디스플레이 생성 컴포넌트는 컴퓨터 시스템이 사용자의 신체 상에 배치될 때 컴퓨터 시스템 내측에 있음)(일부 실시예들에서, 컴퓨터 시스템은 머리 장착형 디바이스이고, 제1 디스플레이 생성 컴포넌트는 머리 장착형 디바이스가 사용자의 머리 상에 및/또는 사용자의 눈들 위에 배치될 때 사용자가 보도록 구성되는 디스플레이 생성 컴포넌트임)를 통해 디스플레이되고, 시각적 프롬프트(예컨대, 722a)는 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a) 중 제1 디스플레이 생성 컴포넌트(예컨대, 704)와는 상이한 제2 디스플레이 생성 컴포넌트(예컨대, 722 및/또는 722b)(예컨대, 컴퓨터 시스템과 통신하고/하거나 컴퓨터 시스템의 하우징 상의 및/또는 내의, 제1 위치와는 상이한 제2 위치에 포함되는 제2 디스플레이 디바이스)(일부 실시예들에서, 제2 디스플레이 생성 컴포넌트는 컴퓨터 시스템이 사용자의 신체 상에 배치될 때 컴퓨터 시스템 외측에 있음)(일부 실시예들에서, 컴퓨터 시스템은 머리 장착형 디바이스이고, 제2 디스플레이 생성 컴포넌트는 머리 장착형 디바이스가 사용자의 머리 상에 및/또는 사용자의 눈들 위에 배치되지 않을 때 사용자가 보도록 구성되는 디스플레이 생성 컴포넌트이고/이거나, 제2 디스플레이 생성 컴포넌트는 머리 장착형 디바이스가 사용자의 머리 상에 및/또는 사용자의 눈들 위에 배치될 때 사용자가 보도록 구성되지 않음)를 통해 디스플레이된다.

사용자의 신체로부터 컴퓨터 시스템을 제거하도록 지시하는 프롬프트를 제1 디스플레이 생성 컴포넌트를 통해 디스플레이하고, 제1 디스플레이 생성 컴포넌트와는 상이한 제2 디스플레이 생성 컴포넌트를 통해 시각적 프롬프트를 디스플레이하는 것은, 사용자의 시점 내에 있을 가능성이 있는 각자의 디스플레이 생성 컴포넌트 상에 사용자에게 정보를 디스플레이하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 시간을 감소시킨다.

일부 실시예들에서, 제2 프롬프트(예컨대, 722a)를 제공하는 것은, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)과 통신하는 오디오 디바이스(예컨대, 스피커 및/또는 헤드폰들)를 통해, 하나 이상의 등록 지시사항들을 갖는 오디오 프롬프트(예컨대, 오디오 경고, 음성 지시사항들을 포함하는 오디오, 및/또는 사용자가 위치되는 환경 내의 특정 위치로부터 생성되는 오디오를 시뮬레이션하도록 생성된 오디오)를 출력하는 것을 포함한다. 하나 이상의 등록 지시사항들을 갖는 오디오 프롬프트를 출력하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 제2 프롬프트(예컨대, 722a)를 제공하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대한 목표 위치(예컨대, 사용자의 신체의 일부분에 관한 정보를 캡처하는 것을 용이하게 하는, 컴퓨터 시스템과 통신하는 하나 이상의 센서들에 대한 위치) 내에 사용자(예컨대, 708)의 신체의 일부분(예컨대, 얼굴, 손, 및/또는 몸통)을 배향시키도록 사용자(예컨대, 708)에게 지시하는 표시(예컨대, 722a)(예컨대, 텍스트, 이미지, 비디오, 오디오, 및/또는 사용자 인터페이스 객체)를 제공하는 것을 포함한다. 일부 실시예들에서, 표시는 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대해 사용자(예컨대, 708)의 신체의 일부분을 이동 및/또는 배향시킬 목표 위치의 시각적 표시를 사용자(예컨대, 708)에게 제공하는, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해 디스플레이되는 프레임 및/또는 다른 사용자 인터페이스 객체를 포함한다.

컴퓨터 시스템에 대한 목표 위치 내에 사용자의 신체의 일부분을 배향시키도록 사용자에게 지시하는 표시를 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 제2 프롬프트(예컨대, 722a)를 제공하는 것은 사용자(예컨대, 708)의 정보의 캡처에 영향을 미치는 조건(예컨대, 컴퓨터 시스템이 낮은 전력을 가짐, 객체가 사용자의 신체의 하나 이상의 부분들을 차단하고 있음, 사용자가 위치되는 환경이 가혹한 조명을 포함함, 사용자가 위치되는 환경이 낮은 조명을 포함함, 및/또는 사용자가 위치되는 환경이 사용자와 관련된 정보를 캡처하는 데 영향을 미칠 수 있는 다른 조건을 포함함)을 조정하도록 사용자(예컨대, 708)에게 지시하는 표시(예컨대, 718 및/또는 722a)(예컨대, 텍스트, 이미지, 비디오, 오디오, 및/또는 사용자 인터페이스 객체)(예컨대, 컴퓨터 시스템을 충전할 것을 제안하는 정보, 사용자가 사용자의 신체의 하나 이상의 부분들을 차단하는 객체를 제거할 것을 제안하는 정보, 및/또는 사용자가 조명 조건들을 조정하고/하거나 개선된 조명 조건들을 포함하는 상이한 위치 및/또는 환경으로 이동할 것을 제안하는 정보와 같은, 사용자와 관련된 정보를 캡처하는 것을 용이하게 하고/하거나 달리 개선할 하나 이상의 단계들 및/또는 제안들)를 제공하는 것을 포함한다.

사용자의 정보의 캡처에 영향을 미치는 조건을 조정하도록 사용자에게 지시하는 표시를 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다. 게다가, 사용자의 정보의 캡처에 영향을 미치는 조건을 조정하도록 사용자에게 지시하는 표시를 제공하는 것은, 컴퓨터 시스템이 사용자와 관련된 더 정확한 정보를 캡처할 수 있게 하며, 이는 컴퓨터 시스템이 사용자의 더 정확한 표현을 생성할 수 있게 한다.

일부 실시예들에서, 제2 프롬프트(예컨대, 722a)를 제공하는 것은 사용자(예컨대, 708)의 머리(예컨대, 708d)의 위치를 이동시키도록(예컨대, 컴퓨터 시스템이 특정 각도로부터 그리고/또는 사용자의 머리가 특정 배향에 위치될 때 사용자의 머리에 관한 정보를 캡처할 수 있도록, 컴퓨터 시스템에 대해 및/또는 컴퓨터 시스템과 통신하는 하나 이상의 센서들에 대해 사용자의 머리를 이동시키도록) 사용자(예컨대, 708)에게 지시하는 표시(예컨대, 722a)(예컨대, 텍스트, 이미지, 비디오, 오디오, 및/또는 사용자 인터페이스 객체)를 제공하는 것을 포함한다. 사용자의 머리의 위치를 이동시키도록 사용자에게 지시하는 표시를 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 제2 프롬프트(예컨대, 722a)를 제공하는 것은 사용자의 얼굴 특징부들(예컨대, 708c)(예컨대, 눈들, 뺨들, 이마, 코, 입, 및/또는 입술들) 중 하나 이상의 얼굴 특징부들의 세트를 하나 이상의 얼굴 표정들의 미리정의된 세트 내에 위치시키도록 사용자(예컨대, 708)에게 지시하는 표시(예컨대, 722a)(예컨대, 텍스트, 이미지, 비디오, 오디오, 및/또는 사용자 인터페이스 객체)(예컨대, 사용자의 눈들, 뺨들, 이마, 코, 입, 및/또는 입술들로 특정 얼굴 표정을 짓도록 사용자에게 지시하는 텍스트, 이미지, 비디오, 오디오, 및/또는 사용자 인터페이스 객체)를 제공하는 것을 포함한다. 사용자의 얼굴 특징부들 중 하나 이상의 얼굴 특징부들의 세트를 하나 이상의 얼굴 표정들의 미리정의된 세트 내에 위치시키도록 사용자에게 지시하는 표시를 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 제2 프롬프트(예컨대, 722a)를 제공하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 사용자(예컨대, 708)의 신체의 미리정의된 부분(예컨대, 708e)(예컨대, 사용자의 허리 및/또는 몸통)(예컨대, 셔츠, 드레스, 바지, 반바지, 스커트, 재킷, 및/또는 의류 액세서리들과 같은 의류를 포함하는 사용자의 신체의 미리정의된 부분)을 향해 배향시키도록(예컨대, 그를 향해 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 배향시키도록) 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 위치를 조정하도록(예컨대, 사용자의 신체에 대해 컴퓨터 시스템을 이동시키도록) 사용자(예컨대, 708)에게 지시하는 표시(예컨대, 722a)(예컨대, 텍스트, 이미지, 비디오, 오디오, 및/또는 사용자 인터페이스 객체)를 제공하는 것을 포함한다. 컴퓨터 시스템을 사용자의 신체의 미리정의된 부분을 향해 배향시키도록 컴퓨터 시스템의 위치를 조정하도록 사용자에게 지시하는 표시를 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자와 관련된 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자와 관련된 정보를 캡처하는 데 필요한 입력들의 수 및/또는 시간을 감소시킨다.

일부 실시예들에서, 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 제거하도록 그리고 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)을 사용하여 사용자(예컨대, 708)와 관련된 정보를 캡처하도록 지시하는 프롬프트(예컨대, 702)는 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a) 중 제1 디스플레이 생성 컴포넌트(예컨대, 704)(예컨대, 컴퓨터 시스템과 통신하고/하거나 컴퓨터 시스템의 하우징 상의 및/또는 내의 제1 위치에 포함되는 제1 디스플레이 디바이스)를 통해 디스플레이된다. 사용자(예컨대, 708)와 관련된 정보를 캡처한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a) 중 제1 디스플레이 생성 컴포넌트(예컨대, 704)와는 상이한 제2 디스플레이 생성 컴포넌트(예컨대, 722 및/또는 722b)(예컨대, 컴퓨터 시스템과 통신하고/하거나 컴퓨터 시스템의 하우징 상의 및/또는 내의, 제1 위치와는 상이한 제2 위치에 포함되는 제2 디스플레이 디바이스)를 통해, 사용자(예컨대, 708)의 표현(예컨대, 726)의 미리보기(예컨대, 사용자와 관련된 정보에 기초한 외관을 포함하는, 사용자를 나타내는 이미지(예컨대, 아바타))(일부 실시예들에서, 사용자의 표현의 미리보기는 사용자에 의해 제공되는 하나 이상의 사용자 입력들에 기초하여 수정 및/또는 재생성될 수 있는 사용자의 초기 및/또는 예비 표현임)를 디스플레이한다.

제2 디스플레이 생성 컴포넌트를 통해, 사용자의 표현의 미리보기를 디스플레이하는 것은, 사용자가 사용자의 시점 내에 있을 가능성이 있는 디스플레이 생성 컴포넌트 상에서 사용자의 생성된 표현을 볼 수 있게 하고, 사용자가 사용자의 생성된 표현의 정확성을 결정하도록 허용하여, 그에 의해, 개선된 시각적 피드백을 제공한다.

일부 실시예들에서, 사용자(예컨대, 708)와 관련된 정보를 캡처한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되었다는 것을 (예컨대, 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해) 검출한다(예컨대, 컴퓨터 시스템은 사용자의 신체의 각자의 부분에 대해 각자의 배향 및/또는 위치로 착용됨)(예컨대, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 신체 부위 상에 착용되도록 구성되는 웨어러블 컴퓨터 시스템(예컨대, 머리 장착형 디스플레이 생성 컴포넌트, 안경, 헤드셋, 및/또는 워치)임). 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되었다는 것을 검출한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 및/또는 722b)을 통해, 사용자(예컨대, 708)의 표현(예컨대, 726)의 미리보기(예컨대, 사용자와 관련된 정보에 기초한 외관을 포함하는, 사용자를 나타내는 이미지(예컨대, 아바타))(일부 실시예들에서, 사용자의 표현의 미리보기는 사용자에 의해 제공되는 하나 이상의 사용자 입력들에 기초하여 수정 및/또는 재생성될 수 있는 사용자의 초기 및/또는 예비 표현임)를 디스플레이한다. 일부 실시예들에서, 사용자(예컨대, 708)의 표현(예컨대, 726)의 미리보기는 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 (사용자와 관련된 정보를 캡처한 후에) 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되었다는 것을 검출하기 전에 (예컨대, 제1 디스플레이 생성 컴포넌트를 통해 및/또는 제2 디스플레이 생성 컴포넌트를 통해) 디스플레이되지 않는다.

사용자의 표현의 미리보기를 디스플레이하는 것은, 사용자가 사용자의 생성된 표현의 정확성을 결정하도록 허용하여, 그에 의해, 개선된 시각적 피드백을 제공한다.

일부 실시예들에서, 사용자(예컨대, 708)와 관련된 정보를 캡처하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체의 제1 부분(예컨대, 708c, 708d, 및/또는 708e)(예컨대, 사용자의 얼굴 및/또는 머리)에 관한 제1 정보(예컨대, 사용자의 얼굴의 하나 이상의 얼굴 특징부들)를 캡처하는 것을 포함한다. 사용자(예컨대, 708)의 신체의 제1 부분(예컨대, 708c, 708d, 및/또는 708e)과 관련된 제1 정보를 캡처한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되었다는 것을 (예컨대, 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해) 검출한다(예컨대, 컴퓨터 시스템은 사용자의 신체의 각자의 부분에 대해 각자의 배향 및/또는 위치로 착용됨)(예컨대, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 신체 부위 상에 착용되도록 구성되는 웨어러블 컴퓨터 시스템(예컨대, 머리 장착형 디스플레이 생성 컴포넌트, 안경, 헤드셋, 및/또는 워치)임). 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되었다는 것을 검출한 후에(예컨대, 그에 응답하여), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 708)의 신체의 제1 부분(예컨대, 708c, 708d, 및/또는 708e)과는 상이한 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)(예컨대, 사용자의 손 및/또는 팔)과 관련된 제2 정보(예컨대, 사용자 손의 하나 이상의 특징부들)를 캡처하기 위한 프로세스를 개시한다. 일부 실시예들에서, 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)과 관련된 제2 정보는 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되는 동안 캡처된다.

컴퓨터 시스템이 사용자의 신체 상에 배치되었다는 것을 검출한 후에, 사용자의 신체의 제2 부분과 관련된 제2 정보를 캡처하기 위한 프로세스를 개시하는 것은, 사용자의 신체의 제2 부분과 관련된 제2 정보의 캡처를 수행하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)과 관련된 제2 정보를 캡처하기 위한 프로세스를 개시하는 것은, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 사용자(예컨대, 708)가 (예컨대, 컴퓨터 시스템에 대해 및/또는 컴퓨터 시스템과 통신하는 하나 이상의 센서들에 대해) 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)을 위치시키기 위한 (예컨대, 컴퓨터 시스템에 대한 및/또는 컴퓨터 시스템과 통신하는 하나 이상의 센서들에 대한) 위치를 나타내는 시각적 표시(예컨대, 730)(예컨대, 윤곽, 인간 손의 형상을 포함하는 사용자 인터페이스 객체)를 디스플레이하는 것을 포함한다.

사용자가 사용자의 신체의 제2 부분을 위치시키기 위한 위치를 나타내는 시각적 표시를 디스플레이하는 것은, 컴퓨터 시스템을 사용하여 사용자의 신체의 제2 부분과 관련된 제2 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자의 신체의 제2 부분과 관련된 제2 정보를 캡처하는 데 필요한 시간을 감소시킨다.

일부 실시예들에서, 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)과 관련된 제2 정보를 캡처하기 위한 프로세스를 개시하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)의 배향(예컨대, 컴퓨터 시스템 및/또는 컴퓨터 시스템과 통신하는 하나 이상의 센서들에 대한 사용자의 손의 포지션 및/또는 위치)을 조정하도록 사용자(예컨대, 708)에게 지시하는 프롬프트(예컨대, 734)를 (예컨대, 텍스트, 이미지, 비디오, 및/또는 사용자 인터페이스 객체와 같은 시각적 프롬프트를 통해, 및/또는 오디오 프롬프트를 통해) 제공하는 것을 포함한다. 일부 실시예들에서, 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)의 배향을 조정하도록 사용자(예컨대, 708)에게 촉구하는 것은 손(예컨대, 708f 및/또는 708g)의 손바닥 측부 및/또는 후면에 관한 정보가 캡처될 수 있도록 사용자(예컨대, 708)의 손(예컨대, 708f 및/또는 708g)을 뒤집으라는 지시사항들(예컨대, 734)을 사용자에게 제공하는 것을 포함한다.

사용자의 신체의 제2 부분의 배향을 조정하도록 사용자에게 지시하는 프롬프트를 제공하는 것은, 컴퓨터 시스템을 사용하여 사용자의 신체의 제2 부분과 관련된 제2 정보를 캡처하는 사용자의 능력을 용이하게 하여, 그에 의해, 사용자의 신체의 제2 부분과 관련된 제2 정보를 캡처하는 데 필요한 시간을 감소시킨다.

일부 실시예들에서, 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708f, 및/또는 708g)과 관련된 제2 정보를 캡처한 후에(예컨대, 그에 응답하여), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 확장 현실 환경(예컨대, 740 및/또는 1008)(예컨대, 사람의 신체 모션들, 또는 이들의 표현들의 서브세트가 추적되고, 이에 응답하여, 확장 현실 환경에서 시뮬레이션된 하나 이상의 가상 객체들의 하나 이상의 특성들이 적어도 하나의 물리 법칙에 따르는 방식으로 조정되는, 사람들이 전자 시스템을 통해 감지 및/또는 상호작용하는 전체적으로 또는 부분적으로 시뮬레이션된 환경) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)을 디스플레이한다. 일부 실시예들에서, 사용자(예컨대, 708)의 표현(예컨대, 726)은, 사용자(예컨대, 708)와 관련된 캡처된 정보 및/또는 사용자(예컨대, 708)의 신체의 제2 부분(예컨대, 708b, 708g, 및/또는 708f)과 관련된 캡처된 제2 정보에 기초하는 얼굴 표현(예컨대, 726c) 및 손 표현을 포함한다. 사용자의 신체의 제2 부분과 관련된 제2 정보를 캡처한 후에, 확장 현실 환경 내에 사용자의 표현을 디스플레이하는 것은, 사용자가 사용자의 생성된 표현의 정확성을 결정하도록 허용하여, 그에 의해, 개선된 시각적 피드백을 제공한다.

일부 실시예들에서, 방법들(900, 1100, 1200, 1300, 및/또는 1400)의 태양들/동작들은 이들 방법들 사이에서 상호교환, 대체, 및/또는 추가될 수 있다. 예를 들어, 방법(800)의 컴퓨터 시스템은, 사용자의 표현을 디스플레이하고/하거나, 사용자의 표현의 외관을 조정하고/하거나, 사용자의 표현의 입 표현을 디스플레이하고/하거나, 사용자의 표현의 모발 표현을 디스플레이하고/하거나, 시각적 강조를 갖는 사용자의 표현의 일부분을 디스플레이하는 데 사용될 수 있다. 간결함을 위해, 이러한 상세사항들은 여기서 반복되지 않는다.

도 9는 일부 실시예들에 따른, 사용자의 표현을 디스플레이하기 위한 예시적인 방법(900)의 흐름도이다. 일부 실시예들에서, 방법(900)은 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)(예컨대, 시각적 출력 디바이스, 3D 디스플레이, 이미지들이 투영될 수 있는 투명 또는 반투명한 적어도 일부분을 갖는 디스플레이(예컨대, 시스루 디스플레이), 프로젝터, 헤드업 디스플레이, 및/또는 디스플레이 제어기)을 포함하는(그리고 선택적으로, 하나 이상의 카메라들(예컨대, 적외선 카메라; 깊이 카메라; 가시광 카메라)과 통신하는) 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)(예컨대, 스마트폰, 태블릿, 머리 장착형 디스플레이 생성 컴포넌트)에서 수행된다. 일부 실시예들에서, 본 방법(900)은, 비일시적(또는 일시적) 컴퓨터 판독가능 저장 매체에 저장되며 컴퓨터 시스템(101)의 하나 이상의 프로세서들(202)(예를 들어, 도 1의 제어부(110))과 같은 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되는 명령어들에 의해 통제된다. 방법(900) 내의 일부 동작들은 선택적으로 조합되고 그리고/또는 일부 동작들의 순서는 선택적으로 변경된다.

사용자(예컨대, 708)의 표현(예컨대, 726)(예컨대, 제1 사용자의 적어도 일부분의 아바타 및/또는 가상 표현)을 생성하기 위한 등록 프로세스(예컨대, 사용자의 하나 이상의 신체 부위들 및/또는 신체 부위들의 특징부들의 크기, 형상, 위치, 포즈, 색상, 깊이 및/또는 다른 특성을 나타내는 데이터(예컨대, 이미지 데이터, 센서 데이터, 및/또는 깊이 데이터)를 캡처하는 것을 포함하는 프로세스) 동안, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보(예컨대, 사용자의 하나 이상의 신체 부위들 및/또는 신체 부위들의 특징부들의 크기, 형상, 위치, 포즈, 색상, 깊이, 및/또는 다른 특성들을 나타내는 데이터(예컨대, 이미지 데이터, 센서 데이터, 및/또는 깊이 데이터))를 (예컨대, 하나 이상의 카메라들을 통해) 검출한다(902).

컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보를 캡처한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 708)의 하나 이상의 캡처된 신체적 특성들에 기초하여 표현(예컨대, 726)의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보에 기초하여 사용자(예컨대, 708)의 표현(예컨대, 726)을 생성한다(예컨대, 컴퓨터 시스템은 컴퓨터 시스템의 사용자와 관련된 정보를 사용하여, 제1 사용자의 신체, 의류, 모발, 및/또는 특징부들의 캡처된 및/또는 검출된 크기, 형상, 위치, 포즈, 색상, 깊이, 및/또는 다른 특성들과 유사한 시각적 표시들을 포함하는 사용자의 표현(예컨대, 아바타)을 생성함)(904).

사용자(예컨대, 708)의 표현(예컨대, 726)을 생성한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 확장 현실 환경(예컨대, 740)(예컨대, 사람의 신체 모션들, 또는 이들의 표현들의 서브세트가 추적되고, 이에 응답하여, 확장 현실 환경에서 시뮬레이션된 하나 이상의 가상 객체들의 하나 이상의 특성들이 적어도 하나의 물리 법칙에 따르는 방식으로 조정되는, 사람들이 전자 시스템을 통해 감지 및/또는 상호작용하는 전체적으로 또는 부분적으로 시뮬레이션된 환경) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이한다(906). 일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 등록 프로세스가 완료된 후에 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)을 디스플레이하여서, 사용자(예컨대, 708)가 표현(예컨대, 726)을 볼 수 있게 그리고 일부 실시예들에서 표현(예컨대, 726)을 편집 및/또는 수정할 수 있게 한다.

사용자의 표현을 생성한 후에, 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이하는 것은, 사용자가 사용자의 생성된 표현의 정확성을 결정하도록 그리고 컴퓨터 시스템이 사용자와 관련된 정보를 재캡처할 것을 요청할지 여부를 결정하도록 허용하여, 그에 의해, 개선된 시각적 피드백을 제공한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 740)은 증강 현실 환경(예컨대, 하나 이상의 가상 객체들이 물리적 환경 또는 그의 표현 위에 중첩되는 시뮬레이션된 환경, 및/또는 물리적 환경의 표현이 컴퓨터 생성 감각 정보에 의해 변환되는 시뮬레이션된 환경)을 포함한다. 증강 현실 환경 내에 사용자의 표현을 디스플레이하는 것은, 표현을 보는 사용자가 디바이스의 상태에 관한 콘텍스트를 얻을 수 있게 하여, 그에 의해 디바이스의 상태에 관한 개선된 피드백을 제공한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 740)은 가상 현실 환경(예컨대, 사람이 감지 및/또는 상호작용할 수 있는 복수의 가상 객체들을 포함하는 하나 이상의 감각들에 대한 컴퓨터 생성 감각 입력들에 전적으로 기초하도록 설계되는 시뮬레이션된 환경)을 포함한다. 가상 현실 환경 내에 사용자의 표현을 디스플레이하는 것은, 표현을 보는 사용자가 디바이스의 상태에 관한 콘텍스트를 얻을 수 있게 하여, 그에 의해 디바이스의 상태에 관한 개선된 피드백을 제공한다.

일부 실시예들에서, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보를 캡처하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되는 동안 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보를 캡처하는 것을 포함한다(예컨대, 컴퓨터 시스템은 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해 캡처된 데이터를 수신하며, 여기에서 데이터는 컴퓨터 시스템이 사용자의 신체 부위(예컨대, 특정 신체 부위) 상에 착용되어 있지 않음을 나타냄)(예컨대, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 신체 부위 상에 착용되도록 구성되는 웨어러블 컴퓨터 시스템(예컨대, 머리 장착형 디스플레이 생성 컴포넌트, 안경, 헤드셋, 및/또는 워치)임)(일부 실시예들에서, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 손목 상에 착용되도록 구성된 워치임). 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치되었다는 것을 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 검출한 후에(예컨대, 그에 응답하여) 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이하는 것을 포함한다(예컨대, 컴퓨터 시스템은 사용자의 신체의 각자의 부분에 대해 각자의 배향 및/또는 위치로 착용됨).

컴퓨터 시스템이 사용자의 신체로부터 제거되는 동안 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하는 것은, 컴퓨터 시스템이 그렇지 않을 경우 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안 컴퓨터 시스템에 액세스가능하지 않을 사용자의 신체의 일부분들에 관한 정보를 캡처할 수 있게 한다. 따라서, 컴퓨터 시스템은 추가 및/또는 외부 디바이스들 및/또는 센서들 없이 사용자와 관련된 정보를 캡처할 수 있다. 게다가, 컴퓨터 시스템은 사용자의 더 정확한 표현을 생성하는 데 사용되는, 사용자와 관련된 더 많은 정보를 캡처할 수 있다.

일부 실시예들에서, 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 (예컨대, 사용자가 위치되는 물리적 환경에서의) 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 적어도 일부분에 대한 사용자(예컨대, 708)의 이동에 기초하여 표현(예컨대, 726)을 애니메이션화하는 것(예컨대, 사용자의 이동을 미러링 및/또는 모방하는 표현의 이동을 디스플레이하는 것)을 포함한다(예컨대, 컴퓨터 시스템은, 사용자의 이동을 포함하여, 사용자의 신체의 상태에 관한 정보를 수신하고, 수신된 정보에 기초하여 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이함). 일부 실시예들에서, 표현(예컨대, 726)의 애니메이션은 사용자(예컨대, 708)의 검출된 이동과 함께 디스플레이된다(예컨대, 사용자의 이동과 매칭됨). 컴퓨터 시스템의 적어도 일부분에 대한 사용자의 이동에 기초하여 표현을 애니메이션화하는 것은, 사용자가 표현이 사용자와 연관된다는 것을 이해하도록 허용하여, 그에 의해 디바이스의 상태에 관한 개선된 피드백을 제공한다.

일부 실시예들에서, 표현(예컨대, 726)을 애니메이션화하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 (예컨대, 물리적 환경에서의) 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 적어도 일부분에 대한 사용자(예컨대, 708)의 이동의 미러 이미지인 표현(예컨대, 726)의 이동을 디스플레이하는 것을 포함한다(예컨대, 표현의 이동은 마치 사용자가 거울에 비친 그들의 모습을 보고 있는 것처럼 사용자에게 디스플레이됨). 일부 실시예들에서, 표현(예컨대, 726)의 애니메이션은 사용자(예컨대, 708)의 검출된 이동과 함께 디스플레이된다(예컨대, 사용자의 이동과 매칭됨). 컴퓨터 시스템의 적어도 일부분에 대한 사용자의 이동의 미러 이미지로서 표현의 이동을 디스플레이하는 것은, 사용자가 표현이 사용자와 연관된다는 것을 이해하도록 허용하여, 그에 의해 디바이스의 상태에 관한 개선된 피드백을 제공한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)가 위치되는 물리적 환경(예컨대, 706)에서의 사용자(예컨대, 708)의 제2 배향(예컨대, 자세, 위치, 포즈, 및/또는 스탠스(stance))의 미러 이미지인(예컨대, 마치 사용자가 거울에 비친 사용자의 모습으로서 표현을 보고 있는 것처럼 디스플레이되고/되거나, 마치 사용자의 표현이 수평 축을 중심으로 뒤집히지 않고서 수직 축을 중심으로 뒤집힌 것처럼 디스플레이되는) 제1 배향(예컨대, 자세, 위치, 포즈, 및/또는 스탠스)으로 표현(예컨대, 726)을 디스플레이하는 것을 포함한다(예컨대, 컴퓨터 시스템은 사용자의 신체의 상태에 관한 정보를 수신하고, 수신된 정보에 기초하여 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 디스플레이함). 사용자가 위치되는 물리적 환경에서의 사용자의 제2 배향의 미러 이미지인 제1 배향으로 표현을 디스플레이하는 것은, 사용자가 표현이 사용자와 연관된다는 것을 이해하도록 허용하여, 그에 의해 디바이스의 상태에 관한 개선된 피드백을 제공한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 확장 현실 환경(예컨대, 740)에서 표현(예컨대, 726) 주위에 프레임(예컨대, 미러 및/또는 반사 표면을 둘러싸는 프레임과 유사한 사용자 인터페이스 객체)을 디스플레이하는 것을 포함한다. 프레임은 확장 현실 환경(예컨대, 740) 내의 사용자(예컨대, 708)의 표현(예컨대, 726)이 사용자(예컨대, 708)가 위치되는 물리적 환경(예컨대, 706)에서의 사용자(예컨대, 708)의 배향(예컨대, 물리적 및/또는 실제 자세, 위치, 포즈, 및/또는 스탠스)의 미러 이미지인(예컨대, 마치 사용자가 프레임에 의해 둘러싸인 거울에 비친 모습으로서 표현을 보고 있는 것처럼 디스플레이되는) 배향(예컨대, 자세, 위치, 포즈, 및/또는 스탠스)을 가짐을 나타낸다(예컨대, 사용자에게 나타냄). 확장 현실 환경에서 표현 주위에 프레임을 디스플레이하는 것은, 사용자가 표현이 사용자와 연관된다는 것을 이해하도록 허용하여, 그에 의해 디바이스의 상태에 관한 개선된 피드백을 제공한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이하는 동안, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 표현(예컨대, 726)의 시각적 특성을 편집하기(예컨대, 액세서리들(예컨대, 헤드웨어, 머리 커버링들, 아이웨어, 및/또는 의류)을 추가 및/또는 제거하기 위해, 보철물들, 아이패치들, 및/또는 보청기들을 추가 및/또는 제거하기 위해, 표현의 신체의 하나 이상의 부분들의 피부 톤을 조정하기 위해, 표현의 모발 색상 및/또는 모발 스타일을 조정하기 위해, 표현의 얼굴 모발 특징부들을 조정하기 위해, 사용자의 하나 이상의 신체적 특성들에 관한 정보를 재캡처하기 위해, 및/또는 사용자의 하나 이상의 신체적 특성들에 관한 정보의 캡처를 재시작하기 위해 표현의 시각적 외관을 수정, 조정, 및/또는 변경하기) 위한 하나 이상의 선택가능 옵션들(예컨대, 738a 내지 738d)(예컨대, 가상 버튼들 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체들)을 디스플레이한다. 표현의 시각적 특성을 편집하기 위한 하나 이상의 선택가능 옵션들을 디스플레이하는 것은, 별개의 편집 사용자 인터페이스로 내비게이팅하기 위한 추가 사용자 입력들을 요구하지 않고서 표현이 편집될 수 있게 하여, 그에 의해, 표현의 시각적 특성을 편집하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 하나 이상의 선택가능 옵션들(예컨대, 738a 내지 738d)은 표현(예컨대, 726)의 아이웨어를 편집하기(예컨대, 사용자의 표현이 안경(및 선택적으로, 안경의 유형), 헤드셋, 단안경, 및/또는 선글라스를 착용하고 있는지 여부 및/또는 표현 상에 포함되는 아이웨어의 유형, 형상(예컨대, 프레임 형상), 색상, 및/또는 크기를 선택하기) 위한 아이웨어 선택가능 옵션(예컨대, 738a)(예컨대, 가상 버튼 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체)을 포함한다. 아이웨어 선택가능 옵션을 포함하는 것은, 별개의 편집 사용자 인터페이스로 내비게이팅하기 위한 추가 사용자 입력들을 요구하지 않고서 표현의 아이웨어가 편집될 수 있게 하여, 그에 의해, 표현의 아이웨어를 편집하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 하나 이상의 선택가능 옵션들(예컨대, 738a 내지 738d)은 표현(예컨대, 726)의 액세서리(예컨대, 사용자의 표현이 아이패치, 보철 부속물, 및/또는 보청기를 포함하는지 여부)를 편집하기 위한 액세서리 선택가능 옵션(예컨대, 738b)(예컨대, 가상 버튼 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체)을 포함한다. 액세서리 선택가능 옵션을 포함하는 것은, 별개의 편집 사용자 인터페이스로 내비게이팅하기 위한 추가 사용자 입력들을 요구하지 않고서 표현의 액세서리가 편집될 수 있게 하여, 그에 의해, 표현의 액세서리를 편집하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 하나 이상의 선택가능 옵션들(예컨대, 738a 내지 738d)은 표현(예컨대, 726)의 피부 톤을 편집하기(예컨대, 사용자의 표현의 하나 이상의 부분들 상에 포함된 피부 표현의 색조 및/또는 색상을 조정, 수정, 및/또는 변경하기) 위한 하나 이상의 피부 톤 선택가능 옵션들(예컨대, 738c, 742a, 및/또는 742b)(예컨대, 가상 버튼들 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체들)을 포함한다. 하나 이상의 피부 톤 선택가능 옵션을 포함하는 것은, 별개의 편집 사용자 인터페이스로 내비게이팅하기 위한 추가 사용자 입력들을 요구하지 않고서 표현의 피부 톤이 편집될 수 있게 하여, 그에 의해, 표현의 피부 톤을 편집하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 하나 이상의 피부 톤 선택가능 옵션들(예컨대, 738c, 742a, 및/또는 742b)(예컨대, 가상 버튼들 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체들)은 표현(예컨대, 726)의 얼굴(예컨대, 726c)의 피부 톤을 편집하기 위한 제1 피부 톤 선택가능 옵션(예컨대, 742a)(예컨대, 가상 버튼 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체), 및 표현(예컨대, 726)의 손들의 피부 톤을 편집하기 위한 제2 피부 톤 선택가능 옵션(예컨대, 724b)(예컨대, 가상 버튼 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체)을 포함한다. 일부 실시예들에서, 사용자의 피부 톤은 사용자의 신체의 상이한 부분들 상에서 상이하고, 그에 따라, 다수의 피부 톤 선택가능 옵션들을 제공하는 것은 사용자(예컨대, 708)가 사용자(예컨대, 708)의 실제 외관을 더 정확하게 반영하도록 사용자(예컨대, 708)의 표현(예컨대, 726)의 외관을 수정할 수 있게 한다. 표현의 얼굴의 피부 톤을 편집하기 위한 제1 피부 톤 선택가능 옵션, 및 표현의 손들의 피부 톤을 편집하기 위한 제2 피부 톤 선택가능 옵션을 포함하는 것은, 별개의 편집 사용자 인터페이스로 내비게이팅하기 위한 추가 사용자 입력들을 요구하지 않고서 표현의 상이한 부분들의 피부 톤이 편집될 수 있게 하여, 그에 의해, 표현의 피부 톤을 편집하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 하나 이상의 선택가능 옵션들(예컨대, 738a 내지 738d)은, 선택될 때, 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보를 재캡처하기 위한 프로세스를 개시하는 재캡처 선택가능 옵션(예컨대, 738d)(예컨대, 가상 버튼 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체)을 포함한다(예컨대, 재캡처 선택가능 옵션의 선택은 컴퓨터 시스템이 사용자 인터페이스를 디스플레이하게 그리고/또는 달리 사용자의 하나 이상의 신체적 특성들 중 하나 이상에 관한 정보를 재캡처하기 위한 프로세스를 개시하게 함). 일부 실시예들에서, 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보의 초기 캡처는 부정확하고/하거나 달리 불완전할 수 있고, 그에 따라, 사용자(예컨대, 708)에게 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 정보의 적어도 일부분을 재캡처하는 능력을 제공하는 것은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 실제 외관을 더 정확하게 반영하도록 표현(예컨대, 726)을 생성할 수 있게 한다. 재캡처 선택가능 옵션을 포함하는 것은, 별개의 사용자 인터페이스로 내비게이팅하기 위한 추가 사용자 입력들을 요구하지 않고서 사용자의 하나 이상의 신체적 특성들에 관한 정보가 재캡처될 수 있게 하여, 그에 의해, 사용자의 하나 이상의 신체적 특성들에 관한 정보를 재캡처하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 하나 이상의 선택가능 옵션들(예컨대, 738a 내지 738d)은, 선택될 때, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 사용자(예컨대, 708)의 하나 이상의 신체적 특성들에 관한 제2 정보를 캡처하는 것을 포함하는 등록 프로세스의 단계를 개시하는 재시작 선택가능 옵션(예컨대, 738d)(예컨대, 가상 버튼 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체)을 포함한다(예컨대, 재시작 선택가능 옵션의 선택은 컴퓨터 시스템이 컴퓨터 시스템의 하나 이상의 센서들을 사용하여 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보의 캡처를 재시작하게 하고, 선택적으로, 컴퓨터 시스템이 사용자의 표현을 생성하기 위한 사용자의 하나 이상의 신체적 특성들에 관한 초기에 캡처된 정보를 삭제 및/또는 달리 사용하지 않게 함). 재시작 선택가능 옵션을 포함하는 것은, 별개의 사용자 인터페이스로 내비게이팅하기 위한 추가 사용자 입력들을 요구하지 않고서 사용자의 하나 이상의 신체적 특성들에 관한 제2 정보가 캡처될 수 있게 하여, 그에 의해, 사용자의 하나 이상의 신체적 특성들에 관한 제2 정보를 캡처하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 사용자(예컨대, 708)의 하나 이상의 신체적 특성들은 사용자(예컨대, 708)의 얼굴(예컨대, 708c)의 하나 이상의 제1 특징부들(예컨대, 얼굴 특징부들), 및 사용자(예컨대, 708)의 손(예컨대, 708f 및/또는 708g)의 하나 이상의 제2 특징부들(예컨대, 크기, 형상, 피부 톤, 및/또는 윤곽들)을 포함한다. 사용자(예컨대, 708)의 표현(예컨대, 726)을 생성하기 위한 등록 프로세스 동안 그리고 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a)로부터 제거되는 동안(예컨대, 컴퓨터 시스템은 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해 캡처된 데이터를 수신하며, 여기에서 데이터는 컴퓨터 시스템이 사용자의 신체 부위(예컨대, 특정 신체 부위) 상에 착용되어 있지 않음을 나타냄)(예컨대, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 신체 부위 상에 착용되도록 구성되는 웨어러블 컴퓨터 시스템(예컨대, 머리 장착형 디스플레이 생성 컴포넌트, 안경, 헤드셋, 및/또는 워치)임)(일부 실시예들에서, 컴퓨터 시스템은 컴퓨터 시스템의 사용자의 손목 상에 착용되도록 구성된 워치임)(일부 실시예들에서, 컴퓨터 시스템은 컴퓨터 시스템이 착용가능 위치에 있는지 여부를 나타내는 데이터를 캡처하는 하나 이상의 센서들과 통신함), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 (예컨대, 사용자 손의 특징부들을 캡처하지 않고서) 사용자(예컨대, 708)의 얼굴(예컨대, 708c)의 하나 이상의 제1 특징부들을 캡처한다. 사용자(예컨대, 708)의 얼굴(예컨대, 708c)의 하나 이상의 제1 특징부들을 캡처한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치된다는 것을 검출한다(예컨대, 컴퓨터 시스템은 사용자의 신체의 각자의 부분에 대해 각자의 배향 및/또는 위치로 착용됨). 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 사용자(예컨대, 708)의 신체(예컨대, 708a) 상에 배치된다는 것을 검출한 후에(예컨대, 그에 응답하여 및/또는 그 동안), 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 (예컨대, 사용자 얼굴의 특징부들을 캡처하지 않고서) 사용자(예컨대, 708)의 손(예컨대, 708f 및/또는 708g)의 하나 이상의 제2 특징부들을 캡처한다(예컨대, 컴퓨터 시스템과 통신하는 하나 이상의 센서들(예컨대, 카메라들)을 통해 사용자의 손의 하나 이상의 제2 특징부들을 캡처함).

컴퓨터 시스템이 사용자의 신체로부터 제거되는 동안, 사용자의 얼굴의 하나 이상의 제1 특징부들을 캡처하고, 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 사용자의 손의 하나 이상의 제2 특징부들을 캡처하는 것은, 사용자의 신체의 상이한 부분들에 관한 정보를 캡처하는 컴퓨터 시스템의 능력을 용이하게 하여, 그에 의해, 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하는 데 필요한 시간을 감소시킨다.

일부 실시예들에서, 등록 프로세스는 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대한 셋업 프로세스(예컨대, 컴퓨터 시스템이 처음 켜질 때 개시되는 셋업 프로세스, 및/또는 컴퓨터 시스템의 사용자가 컴퓨터 시스템을 사용하기 위한 계정을 생성하고/하거나 그에 처음 로그인할 때 개시되는 셋업 프로세스)의 일부이다. 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)에 대한 셋업 프로세스 동안, 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)은 사용자의 하나 이상의 생체측정 특징부들(예컨대, 사용자의 얼굴의 하나 이상의 특징부들, 사용자의 눈들의 하나 이상의 특징부들, 사용자의 손들 및/또는 손가락들의 하나 이상의 특징부들, 및/또는 사용자의 음성의 하나 이상의 특징부들)을 캡처한다. 컴퓨터 시스템에 대한 셋업 프로세스 동안, 사용자의 하나 이상의 생체측정 특징부들을 캡처하는 것은, 컴퓨터 시스템이 추가 사용자 입력들을 요구하지 않고서 추가 정보를 획득하도록 허용하여, 그에 의해, 사용자의 하나 이상의 생체측정 특징부들을 캡처하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 등록 프로세스는 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대한 셋업 프로세스(예컨대, 컴퓨터 시스템이 처음 켜질 때 개시되는 셋업 프로세스, 및/또는 컴퓨터 시스템의 사용자가 컴퓨터 시스템을 사용하기 위한 계정을 생성하고/하거나 그에 처음 로그인할 때 개시되는 셋업 프로세스)의 일부이다. 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)에 대한 셋업 프로세스 동안, 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)은 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)이 하나 이상의 입력 기법들의 검출을 캘리브레이션할 수 있게 하는 입력 캘리브레이션 프로세스(예컨대, 컴퓨터 시스템이 입력에 기초하여 하나 이상의 기능들을 검출하고 수행할 수 있도록 및/또는 컴퓨터 시스템이 입력들을 더 정확하게 검출할 수 있도록 사용자의 눈 시선에 관한 정보를 검출, 관찰, 및/또는 캡처하는 것(예컨대, 사용자는 눈 시선 입력들의 알려진 및/또는 미리결정된 시퀀스를 제공하려고 시도하고 있고, 사용자의 눈 시선에 관한 검출된, 관찰된, 및/또는 캡처된 정보는 눈 시선 입력들의 알려진 및/또는 미리결정된 시퀀스와 비교되며, 이러한 비교는 사용자의 눈 시선에 관한 검출된, 관찰된, 및/또는 캡처된 정보가 눈 시선 입력들의 알려진 및/또는 미리결정된 시퀀스와 매칭되도록 컴퓨터 시스템이 눈 시선 입력들을 해석하는 방법을 조정하는 데 사용됨) 및/또는 사용자의 손, 사용자의 손의 이동, 및/또는 사용자의 손에 의해 이루어진 제스처들에 관한 정보를 검출 및/또는 캡처하는 것(예컨대, 사용자는 손 제스처 입력들의 알려진 및/또는 미리결정된 시퀀스를 제공하려고 시도하고 있고, 사용자의 손에 관한 검출된, 관찰된, 및/또는 캡처된 정보는 손 제스처 입력들의 알려진 및/또는 미리결정된 시퀀스와 비교되며, 이러한 비교는 사용자의 손에 관한 검출된, 관찰된, 및/또는 캡처된 정보가 손 제스처 입력들의 알려진 및/또는 미리결정된 시퀀스와 매칭되도록 컴퓨터 시스템이 손 제스처 입력들을 해석하는 방법을 조정하는 데 사용됨)을 포함하는 프로세스)를 수행한다.

컴퓨터 시스템에 대한 셋업 프로세스 동안, 입력 캘리브레이션 프로세스를 수행하는 것은, 컴퓨터 시스템이 추가 사용자 입력들을 요구하지 않고서 추가 정보를 획득하도록 허용하여, 그에 의해, 입력 캘리브레이션 프로세스를 수행하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 등록 프로세스는 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대한 셋업 프로세스(예컨대, 컴퓨터 시스템이 처음 켜질 때 개시되는 셋업 프로세스, 및/또는 컴퓨터 시스템의 사용자가 컴퓨터 시스템을 사용하기 위한 계정을 생성하고/하거나 그에 처음 로그인할 때 개시되는 셋업 프로세스)의 일부이다. 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대한 셋업 프로세스 동안, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 공간 오디오 캘리브레이션 프로세스(예컨대, 컴퓨터 시스템과 통신하는 오디오 출력 디바이스(예컨대, 스피커 및/또는 헤드폰들)를 통해 오디오를 출력하는 것을 포함하는 프로세스, 여기에서 출력 오디오는 오디오 출력 디바이스의 실제 위치와는 상이한 적어도 하나의 위치로부터 생성되는 오디오를 시뮬레이션하도록 생성됨)를 수행한다(일부 실시예들에서, 공간 오디오 캘리브레이션은 오디오를 출력하는 것, 출력 오디오의 인지된 위치에 대응하는 피드백 및/또는 하나 이상의 사용자 입력들을 검출하는 것, 및 출력 오디오가 목표 위치로부터 생성되는 오디오를 시뮬레이션하게 하도록 인지된 위치를 캘리브레이션하는 것을 포함함).

컴퓨터 시스템에 대한 셋업 프로세스 동안, 공간 오디오 캘리브레이션 프로세스를 수행하는 것은, 컴퓨터 시스템이 추가 사용자 입력들을 요구하지 않고서 추가 정보를 획득하도록 허용하여, 그에 의해, 공간 오디오 캘리브레이션을 수행하는 데 필요한 입력들의 수를 감소시킨다.

일부 실시예들에서, 등록 프로세스는 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대한 셋업 프로세스(예컨대, 컴퓨터 시스템이 처음 켜질 때 개시되는 셋업 프로세스, 및/또는 컴퓨터 시스템의 사용자가 컴퓨터 시스템을 사용하기 위한 계정을 생성하고/하거나 그에 처음 로그인할 때 개시되는 셋업 프로세스)의 일부이다. 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 대한 셋업 프로세스 동안, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 실시간 통신 세션 동안 표현(예컨대, 726)을 사용하기 위한 지시사항들(예컨대, 컴퓨터 시스템의 사용자가 실시간 통신 세션(예컨대, 컴퓨터 시스템의 사용자와 제1 컴퓨터 시스템과는 상이한 제2 컴퓨터 시스템과 연관된 제2 사용자 사이의 실시간 통신 세션, 여기에서 실시간 통신 세션은, 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템을 통해, 사용자의 얼굴 및/또는 신체 표정들의 표현들을 제2 사용자에게 디스플레이 및/또는 달리 통신하는 것을 포함함) 동안 어떻게 표현을 사용하여 하나 이상의 추가 사용자들(예컨대, 외부 컴퓨터 시스템들과 연관된 추가 사용자들)과 통신할 수 있는지를 설명하는 지시사항들)의 표시를 (예컨대, 하나 이상의 디스플레이 생성 컴포넌트들을 통해) 제공한다.

컴퓨터 시스템에 대한 셋업 프로세스 동안, 실시간 통신 세션 동안 표현을 사용하기 위한 지시사항들의 표시를 제공하는 것은, 디바이스로 하여금 표현이 어떻게 사용될 수 있는지에 관해 사용자에게 추가 콘텍스트를 제공하는 동작을 자동적으로 수행하게 한다.

일부 실시예들에서, 사용자(예컨대, 708)의 하나 이상의 신체적 특성들은 사용자(예컨대, 708)의 의류(예컨대, 708i)(예컨대, 사용자가 위치되는 물리적 환경에서 사용자가 착용하고 있는 물리적 의류)를 포함하고, 표현(예컨대, 726)은 사용자(예컨대, 708)의 표현(예컨대, 726)을 생성하기 위한 등록 프로세스 동안 검출되었던 사용자(예컨대, 708)의 의류(예컨대, 708i)에 기초한 의류 표현(예컨대, 726i)(예컨대, 사용자의 물리적 의류의 하나 이상의 유사한 속성들을 닮고/닮거나 포함하는 의류의 시각적 이미지 및/또는 표시)을 포함한다. 사용자의 의류에 기초하는 의류 표현을 포함하는 표현은, 표현의 외관이 사용자의 실제 외관과 더 근사하게 유사하도록 허용하여, 그에 의해, 개선된 시각적 피드백을 제공한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 740) 내에 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이한 후에, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 메뉴 사용자 인터페이스(예컨대, 746 및/또는 748)(예컨대, 실시간 통신 세션의 개시, 표현의 편집 및/또는 수정, 및/또는 게임의 개시와 같은 컴퓨터 시스템의 기능들을 수행하기 위한 하나 이상의 선택가능 옵션들을 포함하는 사용자 인터페이스)를 디스플레이한다. 메뉴 사용자 인터페이스(예컨대, 746 및/또는 748)는, 선택될 때, 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)으로 하여금 확장 현실 환경(예컨대, 740) 내에 (예컨대, 확장 현실 환경 내의 사용자의 표현이 사용자가 위치되는 물리적 환경에서의 사용자의 배향(예컨대, 물리적 및/또는 실제 자세, 위치, 포즈, 및/또는 스탠스)의 미러 이미지인(예컨대, 마치 사용자가 프레임에 의해 둘러싸인 거울에 비친 모습으로서 표현을 보고 있는 것처럼 디스플레이되는) 배향(예컨대, 자세, 위치, 포즈, 및/또는 스탠스)을 가짐을 나타내는(예컨대, 사용자에게 나타냄) 프레임 내에 및/또는 미러링되어) 사용자(예컨대, 708)의 표현(예컨대, 726)의 적어도 일부분을 디스플레이하게(예컨대, 확장 현실 환경 내에 사용자의 표현을 디스플레이 및/또는 재디스플레이하게 그리고 선택적으로, 사용자의 표현을 편집하기 위한 하나 이상의 선택가능 옵션들을 디스플레이하게) 하는 선택가능 옵션(예컨대, 746a, 748a, 및/또는 748b)(예컨대, 가상 버튼 및/또는 텍스트와 같은 선택가능 사용자 인터페이스 객체)을 포함한다. 일부 실시예들에서, 사용자(예컨대, 708)의 표현(예컨대, 726)은 애니메이션화되고, 사용자(예컨대, 708)의 검출된 이동과 함께 디스플레이된다(예컨대, 사용자의 이동과 매칭됨). 일부 실시예들에서, 사용자(예컨대, 708)가 위치되는 물리적 환경(예컨대, 706)에서의 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 일부분에 대한 사용자(예컨대, 708)의 신체 이동은 확장 현실 환경(예컨대, 740) 내에 표현(예컨대, 726)의 이동을 통해 디스플레이된다. 일부 실시예들에서, 확장 현실 환경(예컨대, 740) 내에 표현(예컨대, 726)의 이동을 디스플레이하는 것은 사용자(예컨대, 708)가 위치되는 물리적 환경(예컨대, 706) 내에서의 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 일부분에 대한 사용자(예컨대, 708)의 신체 이동의 미러 이미지인 표현(예컨대, 726)의 이동을 디스플레이하는 것을 포함한다.

선택가능 옵션을 포함하는 메뉴 사용자 인터페이스를 디스플레이하는 것은, 컴퓨터 시스템이 확장 현실 환경 내에 사용자의 표현의 적어도 일부분을 신속하고 용이하게 디스플레이하도록 허용하여, 그에 의해, 확장 현실 환경 내에 사용자의 표현을 디스플레이하는 데 필요한 입력들의 수를 감소시킨다.

도 10a 내지 도 10i는 사용자의 표현의 외관을 조정하기 위한 기법들의 예들을 예시한다. 도 11은 사용자의 표현의 외관을 조정하기 위한 예시적인 방법(1100)의 흐름도이다. 도 12는 사용자의 표현의 입 표현을 디스플레이하기 위한 예시적인 방법(1200)의 흐름도이다. 도 13은 사용자의 표현의 모발 표현을 디스플레이하기 위한 예시적인 방법(1300)의 흐름도이다. 도 14는 사용자의 표현의 일부분을 시각적으로 강조하여 디스플레이하기 위한 예시적인 방법(1400)의 흐름도이다. 도 10a 내지 도 10i의 사용자 인터페이스들은, 도 11 내지 도 14의 프로세스들을 포함하여, 아래에서 설명되는 프로세스들을 예시하기 위해 사용된다.

도 10a 내지 도 10i는 전자 디바이스(1000)가 전자 디바이스(1000)에 의해 수신된 정보에 기초하여 상이한 외관들로 사용자(1004)의 신체의 하나 이상의 부분들의 표현(1002)을 디스플레이하는 예들을 예시한다. 도 10a 내지 도 10i는, 또한, 전자 디바이스(1000)가, 디스플레이(1000a)를 통해, 사용자(1004)에 대응하는 제1 참가자 영역(1006a) 및 제2 사용자(예컨대, 전자 디바이스(1000)와 연관되고/되거나 그를 사용하는 제2 사용자)에 대응하는 제2 참가자 영역(1006b)을 포함하는 통신 인터페이스(1006)를 디스플레이하는 예들을 예시한다. 도 10a에서, 제1 참가자 영역(1006a)은 확장 현실 환경(1008)뿐만 아니라, 확장 현실 환경(1008) 내의 사용자(1004)의 표현(1002) 및 테이블 표현(1010)(예컨대, 가상 테이블을 나타내고/나타내거나 물리적 환경(1014) 내의 테이블(1016)을 나타내는 이미지)을 포함한다. 게다가, 제2 참가자 영역(1006b)은 제2 사용자의 제2 표현(1012)(예컨대, 그를 나타내는 아바타 및/또는 이미지)을 포함한다. 일부 실시예들에서, 사용자(1004)는 제2 사용자와의, 화상 회의 및/또는 가상 화상 회의와 같은 실시간 통신 세션에 참가하고 있다(예컨대, 전자 디바이스(1000)는 사용자(1004)의 외부 전자 디바이스와 통신하고, 사용자(1004) 및/또는 제2 사용자가 전자 디바이스(1000) 및/또는 외부 전자 디바이스 상에 디스플레이된 오디오, 비디오, 및/또는 이미지들을 통해 서로 통신할 수 있게 함).

도 10a 내지 도 10i는, 또한, 물리적 환경(1014)(예컨대, 사용자(1004)가 물리적으로 위치되는 실제 환경) 내의 사용자(1004)를 예시하며, 여기에서 물리적 환경(1014)은 사용자(1004) 및 테이블(1016)(예컨대, 물리적 테이블)을 포함한다. 전자 디바이스(1000)는 물리적 환경(1014) 내에 위치되는 센서(1018a) 및 센서(1018b)와 통신(예컨대, 사용자(1004)가 연관되고/되거나 사용하는 외부 전자 디바이스를 통한 무선 통신)한다. 일부 실시예들에서, 센서들(1018a, 1018b)은 카메라, 이미지 센서, 광 센서, 깊이 센서, 촉각 센서, 배향 센서, 근접 센서, 온도 센서, 위치 센서, 모션 센서, 및/또는 속도 센서를 포함한다. 센서들(1018a, 1018b)은 물리적 환경(1014)에서의 사용자(1004)의 상태(예컨대, 위치, 배향, 자세, 및/또는 포즈)와 관련된 데이터 및/또는 정보를 캡처하도록 구성된다. 예를 들어, 센서들(1018a, 1018b)은 물리적 환경(1014) 내에서의 사용자(1004)의 다양한 신체 부위들의 위치 및/또는 이동과 관련된 정보를 검출 및 캡처하도록 구성된다. 도 10a 내지 도 10i는 전자 디바이스(1000)가 2개의 센서들(예컨대, 센서(1018a) 및 센서(1018b))과 통신하는 것을 예시하지만, 일부 실시예들에서, 전자 디바이스(1000)는 (예컨대, 사용자(1004)와 연관된 외부 전자 디바이스를 통해) 임의의 적합한 수의 센서들과 통신한다.

도 10a 내지 도 10i는 전자 디바이스(1000)가 사용자(1004)의 표현(1002)을 디스플레이하는 것을 예시하지만, 일부 실시예들에서, 전자 디바이스(700)는 디스플레이(704)를 통해 사용자(1004)의 표현(1002)을 포함하는 통신 인터페이스(1006)를 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는, 도 7a 내지 도 7j를 참조하여 위에서 설명된 바와 같이, 사용자(708)(및/또는 사용자(1004))의 하나 이상의 신체적 특성들을 캡처하도록, 표현(726)(및/또는 표현(1002))을 생성하도록, 그리고/또는 전자 디바이스(1000)의 디스플레이(1000a) 상에 표현(726)(및/또는 표현(1002))을 디스플레이하도록 구성된다. 일부 실시예들에서, 동일한 전자 디바이스(예컨대, 전자 디바이스(700) 및/또는 전자 디바이스(1000))가, 도 7a 내지 도 7j를 참조하여 위에서 설명된 바와 같이, 표현(726)을 생성 및 디스플레이하는 데 사용되고, 도 10a 내지 도 10i를 참조하여 아래에서 설명되는 바와 같이, 표현(1002)을 디스플레이하는 데 사용된다.

도 10a에서, 전자 디바이스(1000)는 (예컨대, 센서들(1018a 및/또는 1018b)을 통해 그리고/또는 외부 디바이스를 통해) 물리적 환경(1014) 내에서의 사용자(1004)의 하나 이상의 신체 부위들의 상태를 나타내는 정보를 수신한다. 정보를 수신하는 것에 응답하여, 전자 디바이스(1000)는 제1 참가자 영역(1006a)의 확장 현실 환경(1008) 내에 표현(1002)을 디스플레이한다. 도 10a에 도시된 바와 같이, 표현(1002)은 물리적 환경(1014)에서의 사용자(1004)의 물리적 외관을 모방하는 외관을 포함한다. 예를 들어, 제1 표현(1002)은 사용자(900)의 허리(1004a), 손(1004b), 손(1004c), 다리(1004d), 다리(1004e), 머리(1004f), 및 얼굴(1004g)에 대응하는 허리(1002a), 손(1002b), 손(1002c), 다리(1002d), 다리(1002e), 머리(1002f), 및 얼굴(1002g)을 포함한다. 특히, 표현(1002)의 손(1002b)은 물리적 환경(1014)에서의 사용자(1004)의 손(1004b)과 유사하게 확장 현실 환경(1008) 내에서 허리(1002a) 위로 올려져 있다. 표현(1002)의 손(1002c)은 물리적 환경(1014)에서 사용자(1004)의 허리(1004a)에 및/또는 그 근처에 위치되는 사용자(1004)의 손(1004c)과 유사하게 확장 현실 환경(1008) 내에서 표현(1002)의 허리(1002a)에 및/또는 그 근처에 위치된다.

도 10a에서, 전자 디바이스(1000)는 사용자(1004)의 신체의 상태(예컨대, 위치, 배향, 자세, 및/또는 포즈)를 나타내는 정보를 수신한다. 수신된 정보에 기초하여, 전자 디바이스(1000)는 (예컨대, 도 10a에 예시된 실선들에 의해 표시된 바와 같이) 확장 현실 환경(1008) 내에 제1 외관을 갖는 것으로서 표현(1002)을 디스플레이한다. 도 10a에서, 전자 디바이스(1000)는 제1 양의 시각적 충실도로 그리고/또는 블러(blur)가 표현(1002)의 적어도 일부분에 적용되지 않고서 표현(1002)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 표현(1002)에 임의의 양의 블러를 적용하지 않고서 사용자(1004)의 해부학적으로 정확한 표현으로서 표현(1002)을 디스플레이한다. 일부 실시예들에서, 수신된 정보는 사용자(1004)의 신체의 일부분의 상태를 나타낸다. 일부 그러한 실시예들에서, 전자 디바이스(1000)는 사용자(1004)의 신체의 일부분에 대응하는 표현(1002)의 제1 부분을 제1 외관으로 디스플레이하고, 사용자(1004)의 신체의 일부분에 대응하지 않는 표현(1002)의 제2 부분을 제1 외관과는 상이한 제2 외관으로 디스플레이한다.

도 10a에서, 전자 디바이스(1000)는, 화살표들(1019)에 의해 표시된 바와 같이, 확장 현실 환경(1008) 내에 표현(1002)의 이동을 디스플레이한다. 전자 디바이스(1000)가 사용자(1004)의 상태를 나타내는 정보를 수신하고, 사용자(1004)의 상태를 나타내는 정보가 제1 미리결정된 시간 내에 수신되는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보(예컨대, 물리적 환경(1014) 내에서의 사용자(1004)의 신체의 일부분의 위치를 나타내는, 센서들(1018a 및/또는 1018b)을 통해 직접 캡처된 정보)를 포함할 때, 전자 디바이스(1000)는 제1 외관으로 표현(1002)의 디스플레이를 유지한다. 일부 실시예들에서, 표현(1002)의 제1 외관은 투명도를 포함하지 않아서(예컨대, 표현(1002)에 적용되는 투명도의 양이 0임), 테이블 표현(1010)의 일부분(1010a)이 표현(1002)에 의해 가려지고/가려지거나 달리 차단되게 한다. 일부 실시예들에서, 전자 디바이스(1000)가 확장 현실 환경(1008) 내에 표현(1002)의 이동을 디스플레이함에 따라, 전자 디바이스(1000)는, 테이블 표현(1010)의 다른 부분들을 가리고/가리거나 달리 차단하는 것으로서 표현(1002)을 디스플레이한다.

도 10b에서, 전자 디바이스(1000)는 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보를 수신한다. 그러나, 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보(예컨대, 물리적 환경(1014) 내에서의 사용자(1004)의 신체의 일부분의 위치를 나타내는, 센서들(1018a 및/또는 1018b)을 통해 직접 캡처된 정보)를 포함하지 않는다. 일부 실시예들에서, 전자 디바이스(1000)는, 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보가 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보를 포함하지 않고/않거나 제1 미리결정된 시간 동안 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보를 포함하지 않았다고 결정한다. 일부 실시예들에서, 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보는, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 이용가능하지 않고/않거나 제1 미리결정된 시간 동안 이용가능하지 않았음을 전자 디바이스(1000)에 나타내는 지시사항들 및/또는 추가 정보를 포함한다.

도 10b에서, 전자 디바이스(1000)는, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제1 미리결정된 시간 동안 수신 및/또는 이용가능하지 않았음에 기초하여, 제1 외관과는 상이한 제2 외관을 갖는 것으로서 표현(1002)을 디스플레이한다. 일부 실시예들에서, 제1 미리결정된 시간은, 1초, 5초, 10초, 및/또는 30초와 같은 제1 시간 임계치 초과이지만 45초, 60초, 90초, 및/또는 120초와 같은 제2 시간 임계치 미만인 시간이다. 일부 실시예들에서, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제1 미리결정된 시간이 경과하기 전의 시간에(예컨대, 제1 미리결정된 시간 미만인 시간 내에) 수신(예컨대, 전자 디바이스(1000)에 의해 수신 및/또는 전자 디바이스(1000)와 통신하는 다른 전자 디바이스에 의해 수신)되었을 때, 전자 디바이스(1000)는, 도 10a에 도시된 바와 같이, 제1 외관으로 표현(1002)의 디스플레이를 유지한다.

사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제1 미리결정된 시간 동안 수신(예컨대, 전자 디바이스(1000)에 의해 수신 및/또는 전자 디바이스(1000)와 통신하는 다른 전자 디바이스에 의해 수신)되지 않았을 때, 전자 디바이스(1000)는, 도 10b에 도시된 바와 같이, 제2 외관으로 표현(1002)을 디스플레이한다. 예를 들어, 도 10b에서, 표현(1002)은 전자 디바이스가 제2 외관으로 표현(1002)을 디스플레이하고 있음을 나타내기 위해 제1 파선들로 전자 디바이스(1000)에 의해 디스플레이되는 것으로 도시되어 있다. 일부 실시예들에서, 제2 외관은 제2 양의 시각적 충실도(예컨대, 정밀도 및/또는 선명도)로 그리고/또는 제1 양의 시각적 충실도와 비교하여 증가된 양의 블러로 표현(1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제2 외관은 제1 외관의 파티클(particle) 크기 초과인 파티클 크기로 표현(1002)을 디스플레이하는 것을 포함한다. 따라서, 일부 실시예들에서, 전자 디바이스(1000)는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제1 미리결정된 시간 동안 수신(예컨대, 전자 디바이스(1000)에 의해 수신 및/또는 전자 디바이스(1000)와 통신하는 다른 전자 디바이스에 의해 수신)되지 않았을 때 표현(1002)의 덜 정확한 버전을 디스플레이한다. 도 10b는 제2 외관을 갖는 것으로서 표현(1002) 전체를 예시하지만, 일부 실시예들에서, 전자 디바이스(1000)는 표현(1002)의 제1 부분(예컨대, 직접 정보가 수신되지 않는 사용자(1004)의 신체의 일부분에 대응하는 표현(1002)의 일부분)을 제2 외관으로 그리고 표현(1002)의 제2 부분을 제1 외관으로 디스플레이한다.

일부 실시예들에서, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제1 미리결정된 시간 동안 수신(예컨대, 전자 디바이스(1000)에 의해 수신 및/또는 전자 디바이스(1000)와 통신하는 다른 전자 디바이스에 의해 수신)되지 않았을 때, 전자 디바이스(1004)는 확장 현실 환경(1008) 내에 정적 및/또는 정지 상태로서 표현(1002)을 디스플레이한다. 예를 들어, 일부 실시예들에서, 사용자(1004)의 상태에 관한 정보 및/또는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보는 물리적 환경(1014) 내에서의 사용자(1004)의 이동(예컨대, 사용자(1004)의 하나 이상의 신체 부위들의 이동)을 나타내는 정보를 포함한다. 일부 실시예들에서, 전자 디바이스(1000)가 제1 미리결정된 시간 미만인 시간 내에 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보를 수신할 때, 전자 디바이스(1000)는 물리적 환경(1014) 내에서의 사용자(1004)의 신체 이동을 나타내는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보에 기초하여 표현(1002)의 이동을 디스플레이한다. 그러나, 일부 실시예들에서, 전자 디바이스가 제1 미리결정된 시간 동안 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보를 수신하지 않을 때, 전자 디바이스(1000)는 확장 현실 환경(1008) 내의 위치에 표현(1002)의 디스플레이를 유지하고, (예컨대, 사용자(1004)가 물리적 환경(1014) 내에서 이동할 때에도) 달리 표현(1002)의 이동을 디스플레이하지 않는다.

일부 실시예들에서, 전자 디바이스(1000)는 표현(1002)을 제2 외관으로 디스플레이하고, 표현(1002)의 전반적인 형상을 유지한다. 다시 말하면, 전자 디바이스(1000)는 동일한 형상(예컨대, 사용자(1004)의 형상 및/또는 실루엣과 유사한 외관을 닮고/닮거나 달리 포함하는 형상)을 각각 갖는 것으로서 표현(1002)을 제1 외관으로 디스플레이하고 표현(1002)을 제2 외관으로 디스플레이한다.

일부 실시예들에서, 전자 디바이스(1000)는, 화살표들(1021)에 의해 표시된 바와 같이, 확장 현실 환경(1008) 내에 제2 외관을 갖는 표현(1002)의 이동을 디스플레이한다. 일부 실시예들에서, 표현(1002)의 제2 외관은 제1 양의 투명도(예컨대, 표현(1002)에 적용되는 투명도의 양이 0이 아님)를 포함하여서, 테이블 표현(1010)의 일부분(1010a)이 표현(1002)을 통해 적어도 부분적으로 가시적이고/이거나 식별가능하게 한다. 일부 실시예들에서, 전자 디바이스(1000)가 확장 현실 환경(1008) 내에 표현(1002)의 이동을 디스플레이함에 따라, 전자 디바이스(1000)는 전자 디바이스(1000)가 표현(1002)을 제2 외관으로 디스플레이하고 있을 때 표현(1002)을 통해 테이블 표현(1010)의 다른 부분들을 디스플레이한다.

도 10c에서, 전자 디바이스(1000)는 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보를 수신한다. 그러나, 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보(예컨대, 물리적 환경(1014) 내에서의 사용자(1004)의 신체의 일부분의 위치를 나타내는, 센서들(1018a 및/또는 1018b)을 통해 직접 캡처된 정보)를 포함하지 않는다. 일부 실시예들에서, 전자 디바이스(1000)는, 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보가 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보를 포함하지 않고/않거나 제1 미리결정된 시간보다 긴 제2 미리결정된 시간 동안 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보를 포함하지 않았다고 결정한다. 일부 실시예들에서, 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보는, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 이용가능하지 않고/않거나 제2 미리결정된 시간 동안 이용가능하지 않았음을 전자 디바이스(1000)에 나타내는 지시사항들 및/또는 추가 정보를 포함한다.

도 10c에서, 전자 디바이스(1000)는, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제2 미리결정된 시간 동안 수신되지 않았음 및/또는 이용가능하지 않음에 기초하여, 제1 외관 및 제2 외관과는 상이한 제3 외관을 갖는 것으로서 표현(1002)을 디스플레이한다. 일부 실시예들에서, 제2 미리결정된 시간은, 1초, 5초, 10초, 및/또는 30초와 같은 제1 시간 임계치 초과이고 또한 45초, 60초, 90초, 및/또는 120초와 같은 제2 시간 임계치 초과인 시간이다. 일부 실시예들에서, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제2 미리결정된 시간 전인 시간 내에(예컨대, 제2 미리결정된 시간 미만인 시간 내에) 수신되었을 때, 전자 디바이스(1000)는, 도 10a에 도시된 바와 같이, 제1 외관으로 표현(1002)의 디스플레이를 유지하고/하거나, 도 10b에 도시된 바와 같이, 제2 외관으로 표현(1002)의 디스플레이를 유지한다. 일부 실시예들에서, 전자 디바이스(100)는 사용자(1004)의 신체의 적어도 일부분에 관한 직접 정보가 제1 미리결정된 시간 동안 수신되지 않았을 때 표현(1002)을 제2 외관으로 디스플레이하고, 전자 디바이스(1000)는 사용자(1004)의 신체의 적어도 일부분에 관한 직접 정보가 제2 미리결정된 시간 동안 수신되지 않았을 때 표현(1002)을 제3 외관으로 디스플레이한다(예컨대, 표현(1002)을 제2 외관으로 디스플레이하는 것으로부터 표현(1002)을 제3 외관으로 디스플레이하는 것으로 전이함). 일부 실시예들에서, 전자 디바이스(1000)는 사용자(1004)의 신체의 적어도 일부분에 관한 직접 정보가 제1 미리결정된 시간 동안 수신되지 않았을 때 표현(1002)을 제2 외관으로 디스플레이하고, 전자 디바이스(1000)는 사용자(1004)의 신체의 적어도 일부분에 관한 직접 정보가 제2 미리결정된 시간 전의 시간 내에 그러나 제1 미리결정된 시간이 이미 경과한 후에 수신될 때 표현(1002)을 제1 외관으로 디스플레이한다(예컨대, 표현(1002)을 제2 외관으로 디스플레이하는 것으로부터 표현을 제1 외관으로 디스플레이하는 것으로 전이함).

사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제2 미리결정된 시간 동안 수신(예컨대, 전자 디바이스(1000)에 의해 수신 및/또는 전자 디바이스(1000)와 통신하는 다른 전자 디바이스에 의해 수신)되지 않았을 때, 전자 디바이스(1000)는, 도 10c에 도시된 바와 같이, 제3 외관으로 표현(1002)을 디스플레이한다. 예를 들어, 도 10c에서, 표현(1002)은 전자 디바이스가 제3 외관으로 표현(1002)을 디스플레이하고 있음을 나타내기 위해 제2 파선들로 전자 디바이스(1000)에 의해 디스플레이되는 것으로 도시되어 있다. 일부 실시예들에서, 제3 외관은 제3 양의 시각적 충실도(예컨대, 정밀도 및/또는 선명도)로 그리고/또는 제1 양의 시각적 충실도 및/또는 제2 양의 시각적 충실도와 비교하여 증가된 양의 블러로 표현(1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제3 외관은, 제1 외관의 파티클 크기 초과이고/이거나 제2 외관의 파티클 크기 초과인 파티클 크기로 표현(1002)을 디스플레이하는 것을 포함한다. 따라서, 일부 실시예들에서, 전자 디바이스(1000)는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제2 미리결정된 시간 동안 전자 디바이스(1000)에 의해 수신되지 않았을 때 표현(1002)의 덜 정확한 버전을 디스플레이한다. 도 10c는 제3 외관을 갖는 것으로서 표현(1002) 전체를 예시하지만, 일부 실시예들에서, 전자 디바이스(1000)는 표현(1002)의 제1 부분(예컨대, 직접 정보가 수신되지 않는 사용자(1004)의 신체의 일부분에 대응하는 표현(1002)의 일부분)을 제3 외관으로 그리고 표현(1002)의 제2 부분을 제1 외관 및/또는 제2 외관으로 디스플레이한다.

일부 실시예들에서, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제2 미리결정된 시간 동안 수신(예컨대, 전자 디바이스(1000)에 의해 수신 및/또는 전자 디바이스(1000)와 통신하는 다른 전자 디바이스에 의해 수신)되지 않았을 때, 전자 디바이스(1004)는 제시 모드에서 표현(1002)을 디스플레이한다. 일부 실시예들에서, 제시 모드는 블러링된 오브(orb) 및/또는 사용자(1004)의 다른 해부학적으로 정확하지 않은 표현으로서 표현(1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제시 모드는 오디오 존재 모드에서 표현(1002)을 디스플레이하는 것을 포함하며, 여기에서 표현(1002)은 물리적 환경(1014)에서의 사용자(1004)의 검출된 발화에 기초하는 외관을 갖는 아이콘 및/또는 모노그램(monogram)을 포함한다. 일부 실시예들에서, 제시 모드는 사용자(1004)의 이동의 변화들에 시각적으로 반응하지 않는 형상을 갖는 것으로서 표현(1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제시 모드는 제1 외관으로 및/또는 제2 외관으로 디스플레이될 때 표현(1002)의 크기 미만인 크기로 표현(1002)을 디스플레이하는 것을 포함한다.

일부 실시예들에서, 전자 디바이스(1000)는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제2 미리결정된 시간 초과인 시간 동안 수신되지 않을 때 제3 외관으로 표현(1002)의 디스플레이를 유지한다. 다시 말하면, 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제2 미리결정된 시간이 경과한 후에 수신되지 않는 한, 전자 디바이스(1000)는 제3 외관으로 표현(1002)의 디스플레이를 유지한다. 일부 실시예들에서, 전자 디바이스(1000)는 사용자(1004)의 신체의 적어도 일부분의 상태에 관한 직접 정보를 수신할 시에 표현(1002)을 제3 외관으로 디스플레이하는 것으로부터 표현(1002)을 제1 외관으로 디스플레이하는 것으로 전이한다.

일부 실시예들에서, 전자 디바이스(1000)는, 화살표들(1023)에 의해 표시된 바와 같이, 확장 현실 환경(1008) 내에 제3 외관을 갖는 표현(1002)의 이동을 디스플레이한다. 일부 실시예들에서, 표현(1002)의 제3 외관은 제2 양의 투명도(예컨대, 제1 양의 투명도 초과인, 표현(1002)에 적용되는 0이 아닌 양의 투명도)를 포함하여서, 테이블 표현(1010)의 일부분(1010a)이 표현(1002)을 통해 적어도 부분적으로 가시적이고/이거나 식별가능하게 한다. 일부 실시예들에서, 테이블 표현(1010)의 일부분(1010a)은 전자 디바이스(1000)가 제2 외관으로 표현(1002)을 디스플레이하는 것과 비교하여 제3 외관으로 표현(1002)을 디스플레이할 때 표현(1002)을 통해 더 가시적이고/이거나 식별가능하다. 일부 실시예들에서, 전자 디바이스(1000)가 확장 현실 환경(1008) 내에 표현(1002)의 이동을 디스플레이함에 따라, 전자 디바이스(1000)는 전자 디바이스(1000)가 표현(1002)을 제3 외관으로 디스플레이하고 있을 때 표현(1002)을 통해 테이블 표현(1010)의 다른 부분들을 디스플레이한다.

도 10d에서, 전자 디바이스(1000)는 제1 참가자 영역(1006a)에서 확장 현실 환경(1008) 내에 표현(1002)의 줌인된 뷰를 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 사용자 입력(예컨대, 탭 제스처, 음성 커맨드, 및/또는 에어 제스처)에 응답하여 확장 현실 환경(1008)의 특정 부분으로 제1 참가자 영역(1006a)을 주밍(zooming)한다. 일부 실시예들에서, 전자 디바이스(1000)는, 조건이 만족될 때, 예를 들어 사용자(1004)가 발화(예컨대, 스피치, 허밍(humming), 그렁거림(grunting), 및/또는 달리 구두로 다른 사운드를 생성하는 것)를 출력하고(예컨대, 말하고 및/또는 생성하고) 있을 때, 확장 현실 환경(1008)의 특정 부분으로 제1 참가자 영역(1006a)을 주밍한다.

도 10d에서, 사용자(1004)는 물리적 환경(1014) 내에서 스피치(1020)("Hi Jane, how is it going today?")를 출력하고 있다. 따라서, 사용자의 입(1004h)이 벌어져 있으며, 이는 사용자(1004)가 스피치(1020)를 말하고 있음을 나타낸다. 도 10d에서, 전자 디바이스(1000)는 물리적 환경(1014) 내에서의 사용자(1004)의 입(1004h)의 상태를 나타내는 정보를 수신한다. 게다가, 전자 디바이스(1000)는 사용자(1004)가 스피치(1020)를 출력하는 것을 나타내는 오디오 정보를 (예컨대, 사용자(1004)와 연관된 전자 디바이스(1000)의 스피커를 통해 및/또는 센서들(1018a 및/또는 1018b)을 통해) 수신한다. 사용자(1004)의 입(1004h)의 상태를 나타내는 수신된 정보에 기초하여 및/또는 사용자(1004)가 스피치(1020)를 출력하는 것을 나타내는 수신된 오디오 정보에 기초하여, 전자 디바이스(1000)는, 도 10d에 도시된 바와 같이, 제1 외관을 갖고 벌어진 위치에 있는 입(1002h)을 갖는 표현(1002)을 디스플레이한다.

도 10d에서, 전자 디바이스(1000)는 제1 양의 시각적 충실도(예컨대, 정밀도 및/또는 선명도)로 표현(1002)의 입(1002h)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 입(1002h)에 임의의 양의 블러를 적용하지 않고서 사용자(1004)의 입(1004h)의 해부학적으로 정확한 표현으로서 표현(1002)의 입(1002h)을 디스플레이한다.

일부 실시예들에서, 전자 디바이스(1000)는, 사용자(1004)의 입(1004h)의 상태를 나타내는 수신된 정보에 기초하여 그리고 사용자(1004)가 스피치(1020)를 출력하는 것을 나타내는 수신된 오디오 정보에 기초하지 않고서, 벌어진 위치에 있는 표현(1002)의 입(1002h)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 벌어진 위치에 있는 표현(1002)의 입(1002h)을 디스플레이하면서, 스피커를 통해, 스피치(1020)에 대응하는 오디오를 출력한다.

도 10e에서, 전자 디바이스(1000)는 사용자(1004)의 입(1004h)의 상태를 나타내는 정보를 수신하지만, 사용자(1004)의 입(1004h)의 상태를 나타내는 정보는 하나 이상의 기준들의 세트를 만족시키지 않는다. 예를 들어, 일부 실시예들에서, 하나 이상의 기준들의 세트는 사용자(1004)의 입(1004h)의 상태를 나타내는 정보가 미리결정된 기간 내에(예컨대, 매 1초, 매 5초, 및/또는 10초와 같은, 반복되는 미리결정된 시간 간격들 내에) 수신될 때 만족되는 제1 기준, 사용자(1004)의 입(1004h)의 상태를 나타내는 정보가 스피치(1020)가 사용자(1004)에 의해 출력된 시간(예컨대, 스피치(1020)가 마이크로폰 및/또는 센서들(1018a 및/또는 1018b)을 통해 검출된 시간)에 대응하는 시간에 입(1004h)의 움직임을 나타내는 정보를 포함할 때 만족되는 제2 기준, 및/또는 사용자(1004)의 입(1004h)의 상태를 나타내는 정보가 임계량의 정확도를 초과하는 양의 정확도를 포함할 때 만족되는 제3 기준(예컨대, 정보는, 정보의 양, 시간 경과에 따라 수신된 정보의 양, 및/또는 입(1004h)의 실제 상태를 검출 및/또는 추정하는 것에 대한 정보의 정밀도 및/또는 정확도에 적어도 부분적으로 기초하여 결정되는 신뢰 수준 임계치 초과인 입(1004h)의 위치, 포즈, 배향, 및/또는 표정을 나타내는 데이터를 포함함)을 포함한다.

사용자(1004)의 입(1004h)의 상태를 나타내는 정보가 하나 이상의 기준들의 세트를 만족시키지 않을 때, 전자 디바이스(1000)는 제2 외관을 갖는 표현(1002)의 입(1002p)을 디스플레이한다. 예를 들어, 도 10e에서, 표현(1002)의 입(1002p)은 전자 디바이스가 제2 외관으로 표현(1002)의 입(1002p)을 디스플레이하고 있음을 나타내기 위해 파선들로 전자 디바이스(1000)에 의해 디스플레이되는 것으로 도시되어 있다. 일부 실시예들에서, 제2 외관은 제2 양의 시각적 충실도(예컨대, 정밀도 및/또는 선명도)로 그리고/또는 제1 양의 시각적 충실도와 비교하여 증가된 양의 블러로 표현(1002)의 입(1002p)을 디스플레이하는 것을 포함한다.

일부 실시예들에서, 제2 외관은 스피치(1020)에 대응하는 오디오 정보에 적어도 부분적으로 기초하여 표현(1002)의 입(1002p)을 디스플레이하는 것을 포함한다. 예를 들어, 전자 디바이스(1000)는 스피치(1020)에 대응하는 오디오 정보에 적어도 부분적으로 기초한 특정 포즈, 배향, 표정, 및/또는 위치(예컨대, 스피치(1020)에 대응하는 오디오 정보에 기초한 추정된, 외삽된, 및/또는 예측된 포즈, 배향, 표정, 및/또는 위치)를 포함하도록 표현(1002)의 입(1002p)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는, 입(1004h)의 상태를 나타내는 정보가 하나 이상의 기준들의 세트를 만족시키지 않을 때, 스피치(1020)에 대응하는 오디오 정보 및 사용자(1004)의 입(1004h)의 상태를 나타내는 정보 둘 모두에 기초하여 표현(1000)의 입(1002p)을 디스플레이한다. 일부 실시예들에서, 입(1004h)의 상태를 나타내는 정보가 하나 이상의 기준들의 세트를 만족시키지 않을 때, 전자 디바이스(1000)는 사용자(1004)의 입(1004h)의 상태를 나타내는 정보에 기초하여 생성되는 제1 부분(예컨대, 제1 외관을 갖는 입(1002h))과 스피치(1020)에 대응하는 오디오 정보에 기초하여 생성되는 제2 부분의 조합인 것으로서 표현(1002)의 입(1002p)을 디스플레이한다. 예를 들어, 일부 실시예들에서, 제1 부분 및 제2 부분은 전자 디바이스(1000)에 의해 디스플레이되는 표현(1002)의 입(1002p)을 생성하기 위해 조합되고/되거나 서로 오버레이되고/되거나 달리 사용된다. 일부 실시예들에서, 제1 부분은 정적 표현이고, 제2 부분은 동적 표현이다. 일부 실시예들에서, 제1 부분 및 제2 부분은 둘 모두 동적 표현들이다.

일부 실시예들에서, 표현(1002)의 입(1002p)은 사용자(1004)의 입(1004h)의 상태를 나타내는 정보에 기초하여 제1 부분 및 제2 부분의 상이한 양들 및/또는 정도들의 강조들을 포함한다. 예를 들어, 일부 실시예들에서, 하나 이상의 기준들의 세트가 만족되지 않을 때 그리고 사용자(1004)의 입(1004h)의 상태를 나타내는 정보가 신뢰 수준 임계치 미만의 신뢰 수준을 포함하는 것으로 (예컨대, 전자 디바이스(1000)를 통해 및/또는 사용자(1004)와 연관된 다른 전자 디바이스를 통해) 결정될 때, 표현(1002)의 입(1002p)은 제1 강조량(예컨대, 제1 시각적 강조량 및/또는 제1 가중치)을 갖는 제1 부분 및 제1 강조량 초과인 제2 강조량(예컨대, 제2 시각적 강조량 및/또는 제2 가중치)을 갖는 제2 부분을 사용하여 생성된다. 유사하게, 일부 실시예들에서, 하나 이상의 기준들의 세트가 만족되지 않을 때 그리고 사용자(1004)의 입(1004h)의 상태를 나타내는 정보가 신뢰 수준 임계치 초과의 신뢰 수준을 포함하는 것으로 (예컨대, 전자 디바이스(1000)를 통해 및/또는 사용자(1004)와 연관된 다른 전자 디바이스를 통해) 결정될 때, 표현(1002)의 입(1002p)은 제3 강조량(예컨대, 제3 시각적 강조량 및/또는 제3 가중치)을 갖는 제1 부분 및 제3 강조량 미만인 제4 강조량(예컨대, 제4 시각적 강조량 및/또는 제4 가중치)을 갖는 제2 부분을 사용하여 생성된다. 일부 실시예들에서, 전자 디바이스(1000)는 입(1004h)의 상태를 나타내는 정보의 신뢰 수준이 변화함에 따라 표현(1002)의 입(1002p)의 디스플레이를 변경 및/또는 업데이트한다.

일부 실시예들에서, 입(1004h)의 상태를 나타내는 정보의 신뢰 수준은 스피치(1020)에 대응하는 오디오 정보에 기초하여 (예컨대, 전자 디바이스(1000)를 통해 및/또는 사용자(1004)와 연관된 다른 전자 디바이스를 통해) 결정된다. 예를 들어, 일부 실시예들에서, 입(1004h)의 상태를 나타내는 정보는, 입(1004h)의 움직임, 주어진 시간에서의 입(1004h)의 위치, 주어진 시간에서의 입(1004h)의 표정, 및/또는 주어진 시간에서의 입(1004h)의 배향과 관련된 정보를 포함한다. 일부 실시예들에서, 스피치(1020)에 대응하는 오디오 정보는, 스피치(1020)에 포함된 단어들 및/또는 사운드들과 관련된 정보를 포함한다. 일부 실시예들에서, 스피치(1020)에 포함된 단어들 및/또는 사운드들과 관련된 정보는 사용자(1004)가 스피치(1020)를 출력하는 동안 사용자(1004)의 입(1004h)의 위치를 추정, 외삽, 및/또는 달리 근사화하는 데 사용된다. 이어서, 스피치(1020)에 대응하는 오디오 정보에 기초한 사용자의 입(1004h)의 추정된 위치는 사용자(1004)의 입(1004h)의 상태를 나타내는 정보에 기초한 사용자(1004)의 입(1004h)의 위치와 비교되어, 사용자(1004)의 입(1004h)의 상태를 나타내는 정보가 스피치(1020)에 대응하는 오디오 정보에 대응하는지 여부(예컨대, 입(1004h)의 추적된 및/또는 검출된 위치가 스피치(1020)에 대응하는 오디오 정보에 기초한 입(1004h)의 추정된 위치에 대응 및/또는 매칭하는지 여부)를 결정한다. 일부 실시예들에서, 입(1004h)의 상태를 나타내는 정보의 신뢰 수준은 사용자(1004)의 입(1004h)의 상태를 나타내는 정보와 스피치(1020)에 대응하는 오디오 정보 사이의 대응량(예컨대, 유사성들, 매칭들, 및/또는 비슷함들)에 기초하여 결정된다.

일부 실시예들에서, 표현(1002)의 입(1002p)은 하나 이상의 기준들의 제2 세트가 충족될 때 제3 외관을 포함한다. 일부 실시예들에서, 제3 외관은 0이 아닌 양의 투명도를 포함하여서, 표현(1002)의 입(1002p) 뒤에 위치되는 확장 현실 환경(1008)의 일부분이 적어도 부분적으로 가시적이게 한다. 일부 실시예들에서, 하나 이상의 기준들의 제2 세트는 전자 디바이스(1000)가 0이 아닌 양의 투명도로 표현(1002)의 머리(1002f)의 적어도 일부분을 디스플레이할 때 충족되는 제1 기준, 및/또는 전자 디바이스(1000)가 벌어진 위치에 있는 표현(1000)의 입(1002p)을 디스플레이할 때 충족되는 제2 기준을 포함한다. 일부 실시예들에서, 하나 이상의 기준들의 제2 세트가 충족될 때, 입(1002p)의 내부 부분(1002i)은 제3 외관을 갖는 것으로서 디스플레이되고, 입(1002p)의 주연부 부분(1002j)은 제1 외관 및/또는 제2 외관을 갖는 것으로서 디스플레이된다.

전자 디바이스(1000)는, 또한, 사용자(1004)의 모발의 하나 이상의 표현들을 갖는 표현(1002)을 디스플레이하도록 구성된다. 도 10f에서, 전자 디바이스(1000)는 사용자(1004)의 머리(1004f) 상의 모발(1004k)에 대응하는 제1 모발 표현(1002k) 및 사용자(1004)의 얼굴(1004g) 상의 수염(1004l)에 대응하는 제2 모발 표현(1002l)을 갖는 표현(1002)을 디스플레이한다. 제1 모발 표현(1002k)은 (예컨대, 도 10f에 예시된 제1 해칭에 의해 표시된 바와 같이) 확장 현실 환경(1008) 내에서 제1 외관을 포함한다. 일부 실시예들에서, 제1 외관은 제1 양의 시각적 충실도로 그리고/또는 블러가 제1 모발 표현(1002k)에 적용되지 않고서 제1 모발 표현(1002k)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제1 모발 표현(1002k)은 물리적 환경(1014) 내에서의 사용자(1004)의 상태를 나타내는 정보에 기초하여서, 제1 모발 표현(1002k)의 외관이 모발(1004k)의 외관에 기초하게 한다.

도 10f에서, 제2 모발 표현(1002l)은 (예컨대, 도 10f에 제2 해칭에 의해 표시된 바와 같은) 제2 외관을 갖는 제1 부분(1022a), 및 (예컨대, 도 10f에 제3 해칭에 의해 표시된 바와 같은) 제3 외관을 갖는 제2 부분(1022b)을 포함한다. 일부 실시예들에서, 제2 모발 표현(1002l)의 제1 부분(1022a) 및 제2 부분(1022b)은 표현(1002)의 얼굴(1002g) 및/또는 목(1002m)으로부터의 거리에 기초하여 (예컨대, 전자 디바이스(1000)를 통해 및/또는 사용자(1004)와 연관된 다른 전자 디바이스를 통해) 결정된다. 예를 들어, 도 10f에서, 제2 모발 표현(1002l)의 제1 부분(1022a)은 표현(1002)의 얼굴(1002g) 및/또는 목(1002m)의 거리(1024) 내에 위치되고, 제2 모발 표현(1002l)의 제2 부분(1022b)은 표현(1002)의 얼굴(1002g) 및/또는 목(1002m)으로부터의 거리(1024)보다 더 멀리 위치된다. 일부 실시예들에서, 거리(1024)는 표현(1002)의 얼굴(1002g) 및/또는 목(1002m)의 임의의 부분으로부터 균일하게 연장되는 거리이다. 일부 실시예들에서, 거리(1024)는 표현(1002)의 턱(1002n) 및/또는 목(1002m)으로부터 더 긴 거리로 그리고 표현(1002)의 뺨들(1002o)로부터 더 짧은 거리로 연장되는 불균일한 거리이다. 일부 실시예들에서, 전자 디바이스(1000)는 표현(1002)의 머리(1002f)로부터의 거리에 기초하여 상이한 외관들 및/또는 상이한 양들의 시각적 충실도를 갖는 제1 부분 및 제2 부분으로 제1 모발 표현(1000k)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 제1 부분(1022a) 및 제2 부분(1022b)이 표현(1002)의 얼굴(1002g)로부터 위치되는 거리(1024)에 기초하여 상이한 외관들 및/또는 상이한 양들의 시각적 충실도를 갖는 제1 부분(1022a) 및 제2 부분(1022b)으로 사용자(1004)의 얼굴 모발(예컨대, 수염(1004l))에 대응하는 제2 모발 표현(1000l)만을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 거리(1024) 및/또는 일부분들이 표현(1002)의 얼굴(1002g)로부터 위치되는 다른 거리에 기초하여 상이한 외관들 및/또는 상이한 양들의 시각적 충실도를 포함하는 2개 초과의 부분들을 갖는 것으로서 제2 모발 표현(1002l)을 디스플레이한다.

도 10f에서, 제2 외관은 제2 양의 시각적 충실도 및/또는 제1 양의 블러가 제2 모발 표현(1002l)의 제1 부분(1022a)에 적용되는 것을 포함한다. 제3 외관은 제3 양의 시각적 충실도 및/또는 제1 양의 블러 초과인 제2 양의 블러가 제2 모발 표현(1002l)의 제2 부분(1022b)에 적용되는 것을 포함한다. 일부 실시예들에서, 제2 외관은 제1 파티클 크기로 제1 부분(1022a)을 디스플레이하는 것을 포함하고, 제3 외관은 제1 파티클 크기 초과인 제2 파티클 크기로 제2 부분(1022b)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제2 외관은 제1 양의 불투명도로 제1 부분(1022a)을 디스플레이하는 것을 포함하고, 제3 외관은 제1 양의 불투명도 미만인 제2 양의 불투명도로 제2 부분(1022b)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제2 외관은 제1 양의 투명도로 제1 부분(1022a)을 디스플레이하는 것을 포함하고, 제3 외관은 제1 양의 투명도 초과인 제2 양의 투명도로 제2 부분(1022b)을 디스플레이하는 것을 포함한다.

일부 실시예들에서, 전자 디바이스(1000)는 사용자(1004)의 수염(1004l)의 길이가 미리정의된 길이를 초과할 때 제4 외관으로 제2 모발 표현(1002l)을 디스플레이하고, 사용자(1004)의 수염(1004l)의 길이가 미리정의된 길이 미만일 때 제5 외관으로 제2 모발 표현(1002l)을 디스플레이한다. 일부 그러한 실시예들에서, 제4 외관은 확장 현실 환경(1008) 내에서 3개의 별개의 축들을 따라 연장되는 3차원 표현을 포함한다. 일부 실시예들에서, 제5 외관은 확장 현실 환경 내에서 2개의 축들을 따라 연장되는 텍스처화된 외관 및/또는 2차원 표현을 포함한다. 일부 실시예들에서, 3차원 표현을 포함하는 제4 외관은, 표현(1002)의 머리(1002f), 얼굴(1002g), 목(1002m), 턱(1002n), 및/또는 뺨들(1002o)과 같은 표현(1002)의 다른 부분들과는 별개이다.

전자 디바이스(1000)는, 또한, 예를 들어, 확장 현실 환경(1008)이 증가된 어두움 및/또는 감소된 밝기를 포함할 때 표현(1002)이 더 명확하게 보여질 수 있도록 시각적 강조를 포함하는 표현(1002)의 적어도 일부분을 디스플레이하도록 구성된다. 도 10g에서, 전자 디바이스(1000)는 확장 현실 환경(1008)의 제1 시점(1025)을 디스플레이하며, 여기에서 표현(1002)은 확장 현실 환경(1008) 내의 제1 위치(1027)에 있고, 제1 부분(1026a) 및 제2 부분(1026b)을 포함한다. 표현(1002)의 제1 부분(1026a)은 표현(1002)의 주연부 부분, 및/또는 표현(1002)과 확장 현실 환경(1008) 사이의 경계를 포함하는 표현(1002)의 일부분을 포함한다. 표현(1002)의 제2 부분(1026b)은 표현(1002)의 내부 부분, 및/또는 표현(1002)과 확장 현실 환경(1008) 사이의 경계를 포함하지 않는 표현(1002)의 일부분을 포함한다.

도 10g에서, 표현(1002)의 제1 부분(1026a)은, 파선들에 의해 표시된 바와 같이, 제1 외관을 포함하고, 표현(1002)의 제2 부분(1026b)은, 해칭에 의해 표시된 바와 같이, 제2 외관을 포함한다. 제1 외관은 제2 외관에 비해 시각적으로 강조되어서, 표현(1002)의 제1 부분(1026a)이 제2 부분(1026b)과 비교할 때 확장 현실 환경(1008)에 대해 대조되게 한다. 일부 실시예들에서, 제1 외관은 제2 외관과 비교할 때 하이라이팅, 증가된 밝기, 및/또는 증가된 선명도 및/또는 시각적 충실도를 포함한다. 일부 실시예들에서, 제1 외관은 프레넬(Fresnel) 시각적 효과를 포함한다. 일부 실시예들에서, 제2 외관은 제1 양의 블러링, 제1 양의 투명도, 및/또는 제1 파티클 크기를 포함하는 일정량의 시각적 충실도를 포함한다. 일부 실시예들에서, 제2 외관은 일정량의 투명도를 포함하여서, 전자 디바이스(1000)가 표현(1002)의 제2 부분(1026b) 뒤의 확장 현실 환경(1008)의 적어도 일부분을 디스플레이하게 한다. 예를 들어, 도 10g에서, 확장 현실 환경(1008)은 물리적 환경(1014) 내의 테이블(1016)을 나타내는 테이블 표현(1010)을 포함한다. 일부 실시예들에서, 표현(1002)의 제2 부분(1026b) 뒤의 테이블 표현(1010)의 일부분(1010a)은 표현(1002)의 제2 부분(1026b)을 통해 적어도 부분적으로 가시적이다. 일부 실시예들에서, 전자 디바이스(1000)는, 화살표들(1029)에 의해 표시된 바와 같이, 표현(1002)이 확장 현실 환경(1008) 내에서 이동함에 따라 표현(1002)의 제2 부분(1026b) 뒤의 테이블 표현(1010)의 상이한 부분들을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 전자 디바이스(1000)에 의해 디스플레이되는 확장 현실 환경(1008)의 시점이 변화함에 따라 표현(1002)의 제2 부분(1026b) 뒤의 테이블 표현(1010)의 상이한 부분들을 디스플레이한다.

도 10h에서, 전자 디바이스(1000)는 확장 현실 환경(1008)의 제2 시점(1028)을 디스플레이하며, 여기에서 표현(1002)은 확장 현실 환경(1008) 내의 제2 위치(1030)에 있다. 일부 실시예들에서, 전자 디바이스(1000)는 확장 현실 환경(1008)의 밴티지 포인트(vantage point), 각도, 및/또는 관점을 변경하라고 요청하는 사용자 입력에 기초하여 확장 현실 환경(1008)의 제1 시점(1025)을 디스플레이하는 것으로부터 확장 현실 환경(1008)의 제2 시점(1028)으로 전이한다. 일부 실시예들에서, 전자 디바이스(1000)는 확장 현실 환경 내에서의 표현(1002)의 이동에 기초하여 확장 현실 환경(1008)의 제1 시점(1025)을 디스플레이하는 것으로부터 확장 현실 환경(1008)의 제2 시점(1028)으로 전이한다. 일부 실시예들에서, 제1 시점(1025) 및 제2 시점(1028)은 확장 현실 환경(1008)의 동일한 밴티지 포인트, 각도, 및/또는 관점을 포함하지만, 전자 디바이스(1000)는 확장 현실 환경(1008) 내에서 하나 이상의 객체들(예컨대, 테이블 표현(1010))에 대해 상이한 위치에 표현(1002)을 디스플레이한다(예컨대, 표현(1002)은 확장 현실 환경(1008)의 하나 이상의 객체들에 대해 이동하지만, 확장 현실 환경(1008)의 밴티지 포인트, 각도, 및/또는 관점은 유지됨). 일부 실시예들에서, 제1 시점(1025) 및 제2 시점(1028)은 확장 현실 환경(1008)의 상이한 밴티지 포인트들, 각도들, 및/또는 관점들을 포함하지만, 전자 디바이스(1000)는 확장 현실 환경(1008) 내에서 하나 이상의 객체들(예컨대, 테이블 표현(1010))에 대해 특정 위치에서 표현(1002)의 디스플레이를 유지한다(예컨대, 표현(1002)은 확장 현실 환경(1008)의 하나 이상의 객체들에 대해 이동하지 않지만, 확장 현실 환경(1008)의 디스플레이된 밴티지 포인트, 각도, 및/또는 관점은 변화함). 일부 실시예들에서, 제1 시점(1025) 및 제2 시점(1028)은 확장 현실 환경(1008)의 상이한 밴티지 포인트들, 각도들, 및/또는 관점들을 포함하고, 표현(1002)은 확장 현실 환경(1008) 내에서 하나 이상의 객체들(예컨대, 테이블 표현(1010))에 대해 확장 현실 환경(1008) 내의 상이한 위치들에 디스플레이된다(예컨대, 확장 현실 환경(1008)의 디스플레이된 밴티지 포인트, 각도, 및/또는 관점이 변화하고, 확장 현실 환경(1008)의 하나 이상의 객체들에 대한 표현(1002)의 위치가 변화함).

도 10h에서, 전자 디바이스(1000)는, 제3 부분(1026c) 및 제4 부분(1026d)을 포함하는 표현(1002)의 측면 투시도를 디스플레이한다. 표현(1002)의 제3 부분(1026c)은 표현(1002)의 주연부 부분, 및/또는 표현(1002)과 확장 현실 환경(1008) 사이의 경계를 포함하는 표현(1002)의 일부분을 포함한다. 표현(1002)의 제4 부분(1026d)은 표현(1002)의 내부 부분, 및/또는 표현(1002)과 확장 현실 환경(1008) 사이의 경계를 포함하지 않는 표현(1002)의 일부분을 포함한다. 도 10h에서, 표현(1002)의 제3 부분(1026c) 및 제4 부분(1026d)은, 전자 디바이스(1000)가 확장 현실 환경(1008)의 제1 시점(1025) 대신에 확장 현실 환경(1008)의 제2 시점(1028)을 디스플레이하기 때문에, 도 10g에 예시된 표현(1002)의 제1 부분(1026a) 및 제2 부분(1026b)과는 상이하다. 따라서, 전자 디바이스(1000)는 확장 현실 환경(1008)의 디스플레이된 시점의 변화들에 기초하여 제1 외관 및 제2 외관을 갖는 표현(1002)의 상이한 부분들을 디스플레이한다.

도 10h에서, 표현(1002)의 제3 부분(1026c)은, 파선들에 의해 표시된 바와 같이, 제1 외관을 포함하고, 표현(1002)의 제4 부분(1026d)은, 해칭에 의해 표시된 바와 같이, 제2 외관을 포함한다. 위에서 설명된 바와 같이, 제1 외관은 제2 외관에 비해 시각적으로 강조되어서, 표현(1002)의 제3 부분(1026c)이 제4 부분(1026d)과 비교할 때 확장 현실 환경(1008)에 대해 대조되게 한다. 도 10h에서, 확장 현실 환경(1008)은 물리적 환경(1014) 내의 테이블(1016)을 나타내는 테이블 표현(1010)을 포함한다. 일부 실시예들에서, 표현(1002)의 제4 부분(1026d) 뒤의 테이블 표현(1010)의 일부분(1010b)은 표현(1002)의 제4 부분(1026d)을 통해 적어도 부분적으로 가시적이다. 일부 실시예들에서, 전자 디바이스(1000)는, 화살표들(1031)에 의해 표시된 바와 같이, 표현(1002)이 확장 현실 환경(1008) 내에서 이동함에 따라 표현(1002)의 제4 부분(1026d) 뒤의 테이블 표현(1010)의 상이한 부분들을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 전자 디바이스(1000)에 의해 디스플레이되는 확장 현실 환경(1008)의 시점이 변화함에 따라 표현(1002)의 제4 부분(1026d) 뒤의 테이블 표현(1010)의 상이한 부분들을 디스플레이한다.

일부 실시예들에서, 전자 디바이스(1000)는 제1 시점(1025)을 디스플레이하는 것으로부터 제2 시점(1028)으로의 변화에 기초하여 표현(1002)의 외관을 점진적으로 조정 및/또는 변경한다. 예를 들어, 전자 디바이스(1000)는 전자 디바이스(1000)가 제1 시점(1025)을 디스플레이하는 것으로부터 제2 시점(1028)으로 전이함에 따라 표현(1002)의 제1 부분(1026a) 및 제2 부분(1026b)을 디스플레이하는 것으로부터 표현(1002)의 제3 부분(1026c) 및 제4 부분(1026d)을 디스플레이하는 것으로 점진적으로 전이한다. 일부 실시예들에서, 전자 디바이스(1000)는 전자 디바이스(1000)가 제1 시점(1025)을 디스플레이하는 것으로부터 제2 시점(1028)으로 전이함에 따라 표현(1002)의 상이한 부분들에 적용되는 블러링의 양을 점진적으로 변경한다. 일부 실시예들에서, 전자 디바이스(1000)는 확장 현실 환경(1008) 내의 하나 이상의 객체들(예컨대, 테이블 표현(1010))에 대한 표현(1002)의 각도가 변화함에 따라(예컨대, 표현(1002)이 확장 현실 환경(1008) 내에서 이동하는 것으로서 디스플레이됨에 따라) 표현(1002)의 외관을 점진적으로 변경 및/또는 조정하도록 구성된다.

도 10i에서, 전자 디바이스(1000)는 확장 현실 환경(1008)의 제3 시점(1032)을 디스플레이하며, 여기에서 표현(1002)은 확장 현실 환경(1008) 내의 제3 위치(1034)에 있다. 도 10i에서, 전자 디바이스(1000)는, 제5 부분(1026e) 및 제6 부분(1026f)을 포함하는 표현(1002)의 배면(예컨대, 후방 대면) 투시도를 디스플레이한다. 표현(1002)이 배면 투시도로 디스플레이될 때, 표현(1002)의 제5 부분(1026e)은 표현(1002)의 주연부 부분, 및/또는 표현(1002)과 확장 현실 환경(1008) 사이의 경계를 포함하는 표현(1002)의 일부분을 포함한다. 표현(1002)의 제6 부분(1026f)은 표현(1002)의 내부 부분, 및/또는 표현(1002)과 확장 현실 환경(1008) 사이의 경계를 포함하지 않는 표현(1002)의 일부분을 포함한다.

도 10h에서, 표현(1002)의 제5 부분(1026e)은, 파선들에 의해 표시된 바와 같이, 제3 외관(예컨대, 제1 외관)을 포함하고, 표현(1002)의 제6 부분(1026f)은, 제2 해칭에 의해 표시된 바와 같이, 제4 외관을 포함한다. 일부 실시예들에서, 제3 외관은 제4 외관에 비해 시각적으로 강조되어서, 표현(1002)의 제5 부분(1026e)이 제6 부분(1026f)과 비교할 때 확장 현실 환경(1008)에 대해 대조되게 한다. 일부 실시예들에서, 제5 부분(1026e)의 제3 외관과 제6 부분(1026f)의 제4 외관은 동일하다. 일부 실시예들에서, 제4 외관은 제시 모드에서 표현(1002)의 제6 부분(1026f)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제시 모드는 블러링된 오브 및/또는 사용자(1004)의 다른 해부학적으로 정확하지 않은 표현으로서 표현(1002)의 제6 부분(1026f)(및 선택적으로, 제5 부분(1026e))을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제시 모드는 오디오 존재 모드에서 표현(1002)의 제6 부분(1026f)(및 선택적으로, 제5 부분(1026e))을 디스플레이하는 것을 포함하며, 여기에서 표현(1002)은 물리적 환경(1014)에서의 사용자(1004)의 검출된 발화에 기초하는 외관을 갖는 아이콘 및/또는 모노그램을 포함한다. 일부 실시예들에서, 제시 모드는 사용자(1004)의 이동의 변화들에 시각적으로 반응하지 않는 형상을 갖는 것으로서 표현(1002)의 제6 부분(1026f)(및 선택적으로, 제5 부분(1026e))을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제시 모드는 제2 외관으로 디스플레이될 때 표현(1002)의 제2 부분(1026b) 및/또는 제4 부분(1026d)의 크기 미만인 크기로 표현(1002)의 제6 부분(1026f)(및 선택적으로, 제5 부분(1026e))을 디스플레이하는 것을 포함한다.

일부 실시예들에서, 전자 디바이스(1000)가 표현(1002)의 배면 투시도를 디스플레이하는 것으로부터 표현(1002)의 정면 투시도 및/또는 측면 투시도(예컨대, 비배면 투시도)로 전이할 때, 전자 디바이스(1000)는, 제3 외관을 포함하는 제5 부분(1026e) 및 제4 외관을 포함하는 제6 부분(1026f)보다는, 제1 외관 및 제2 외관을 갖는 표현(1002)의 2개의 부분들을 디스플레이한다.

도 10i에서, 확장 현실 환경(1008)은 물리적 환경(1014) 내의 테이블(1016)을 나타내는 테이블 표현(1010)을 포함한다. 일부 실시예들에서, 표현(1002)의 제6 부분(1026f)(및 선택적으로, 제5 부분(1026e)) 뒤의 테이블 표현(1010)의 일부분(1010c)은 표현(1002)의 제6 부분(1026f)을 통해 적어도 부분적으로 가시적이다. 일부 실시예들에서, 전자 디바이스(1000)는 제2 부분(1026b) 뒤의 일부분(1010a) 및/또는 제4 부분(1026d) 뒤의 일부분(1010b)을 디스플레이하는 것과 비교할 때 증가된 레벨의 시각적 충실도로 제6 부분(1026f) 뒤의 테이블 표현(1010)의 일부분(1010c)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는, 화살표들(1036)에 의해 표시된 바와 같이, 표현(1002)이 확장 현실 환경(1008) 내에서 이동함에 따라 표현(1002)의 제6 부분(1026f) 뒤의 테이블 표현(1010)의 상이한 부분들을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 전자 디바이스(1000)에 의해 디스플레이되는 확장 현실 환경(1008)의 시점이 변화함에 따라 표현(1002)의 제6 부분(1026f) 뒤의 테이블 표현(1010)의 상이한 부분들을 디스플레이한다.

도 10a 내지 도 10i는 전자 디바이스(1000)가 제2 사용자(예컨대, 표현(1012)과 연관된 사용자)와의 실시간 통신 세션 동안 사용자(1004)의 표현(1002)을 디스플레이하는 것을 예시하지만, 일부 실시예들에서, 전자 디바이스(1000)는 추가 사용자들 및/또는 참가자들(예컨대, 2명 초과의 사용자들이 실시간 통신 세션에 참가하고 있음)과의 실시간 통신 세션 동안 사용자(1004)의 표현(1002)을 디스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 실시간 통신 세션에 참가하고 있는 다수의 사용자들에 대응하는 다수의 표현들을 동시에 디스플레이하며, 여기에서 각자의 표현은 대응하는 사용자에 의해 사용되고 있는 대응하는 전자 디바이스에 의해 수신 및/또는 캡처된 정보에 기초한다(예컨대, 제1 사용자에 의해 사용되고 있는 제1 디바이스에 의해 수신 및/또는 캡처된 정보에 기초한 제1 표현, 제2 사용자에 의해 사용되고 있는 제2 디바이스에 의해 수신 및/또는 캡처된 정보에 기초한 제2 표현, 및/또는 제3 사용자에 의해 사용되고 있는 제3 디바이스에 의해 수신 및/또는 캡처된 정보에 기초한 제3 표현, 여기에서 제1 표현, 제2 표현 및 제3 표현은 서로 상이하고, 제1 디바이스, 제2 디바이스, 및 제3 디바이스는 서로 상이하며, 제1 사용자, 제2 사용자, 및 제3 사용자는 서로 상이함). 일부 실시예들에서, 전자 디바이스(1000)는 도 10a 내지 도 10i를 참조하여 위에서 설명된 기법들에 따라 각자의 전자 디바이스에 의해 수신 및/또는 캡처된 정보에 기초하여 조정된 외관으로 표현들 중 하나 이상을 디스플레이하도록 구성된다. 다시 말하면, 전자 디바이스(1000)는, 각자의 전자 디바이스에 의해 수신 및/또는 캡처된 정보에 기초하여, 서로 동일한 및/또는 상이한 외관들을 갖고/갖거나 동일한 및/또는 상이한 시각적 효과들을 갖는 것으로서 표현들을 디스플레이할 수 있다. 예를 들어, 일부 실시예들에서, 전자 디바이스(1000)는 제1 미리결정된 시간이 경과하기 전의 시간에 제1 사용자의 신체의 적어도 일부분의 상태에 관한 직접 정보가 수신(예컨대, 제1 사용자와 연관되고/되거나 그에 의해 사용되고 있는 전자 디바이스에 의해 수신)되었을 때, 도 10a에 도시된 바와 같이, 제1 외관으로 제1 사용자의 제1 표현을 디스플레이하고, 제2 사용자의 신체의 적어도 일부분의 상태에 관한 직접 정보가 제1 미리결정된 시간 동안 수신되지 않았을(예컨대, 제2 사용자와 연관되고/되거나 그에 의해 사용되고 있는 전자 디바이스에 의해 수신되지 않았을) 때, 도 10b에 도시된 바와 같이, 제2 외관으로 제2 사용자의 제2 표현을 다스플레이한다. 일부 실시예들에서, 전자 디바이스(1000)는 제1 사용자의 입의 상태를 나타내는 수신된 정보(예컨대, 제1 사용자와 연관되고/되거나 그에 의해 사용되고 있는 전자 디바이스에 의해 수신됨)에 기초하는 제1 입 표현(예컨대, 입(1002h))을 갖는 제1 사용자의 제1 표현을 디스플레이하고, 제2 사용자가 스피치(예컨대, 스피치(1020))를 출력하는 것을 나타내는 수신된 오디오 정보(예컨대, 제2 사용자와 연관되고/되거나 그에 의해 사용되고 있는 전자 디바이스에 의해 수신됨)에 기초하는 제2 입 표현(예컨대, 입(1002p))을 갖는 제2 사용자의 제2 표현을 디스플레이한다.

도 10a 내지 도 10i에 관한 추가 설명들은 도 10a 내지 도 10i와 관련하여 설명되는 방법들(1100, 1200, 1300, 1400)을 참조하여 아래에서 제공된다.

도 11은 일부 실시예들에 따른, 사용자의 표현의 외관을 조정하기 위한 예시적인 방법(1100)의 흐름도이다. 일부 실시예들에서, 방법(1100)은 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)(예컨대, 시각적 출력 디바이스, 3D 디스플레이, 이미지들이 투영될 수 있는 투명 또는 반투명한 적어도 일부분을 갖는 디스플레이(예컨대, 시스루 디스플레이), 프로젝터, 헤드업 디스플레이, 디스플레이 제어기)을 포함하는(그리고 선택적으로, 하나 이상의 카메라들(예컨대, 적외선 카메라; 깊이 카메라; 가시광 카메라)과 통신하는) 제1 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)(예컨대, 스마트폰, 태블릿, 머리 장착형 디스플레이 생성 컴포넌트)에서 수행된다(일부 실시예들에서, 제1 컴퓨터 시스템은 제2 사용자와 연관되는(예컨대, 제2 사용자에 의해 동작되고 있는) 제2 컴퓨터 시스템과 통신하고/하거나, 제2 사용자(예컨대, 제1 컴퓨터 시스템의 제1 사용자와의 통신 세션(예컨대, 확장 현실 및/또는 화상 회의)에 있는 사용자)는 제2 컴퓨터 시스템에 로그인됨). 일부 실시예들에서, 본 방법(1100)은, 비일시적(또는 일시적) 컴퓨터 판독가능 저장 매체에 저장되며 컴퓨터 시스템(101)의 하나 이상의 프로세서들(202)(예를 들어, 도 1의 제어부(110))과 같은 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되는 명령어들에 의해 통제된다. 방법(1100) 내의 일부 동작들은 선택적으로 조합되고 그리고/또는 일부 동작들의 순서는 선택적으로 변경된다.

제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 제1 사용자(예컨대, 제2 표현(1012)과 연관된 사용자)에 의해 사용되고 있는 동안, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 제1 충실도(예컨대, 도 10a에 도시된 제1 충실도)(예컨대, 제2 사용자의 신체의 상태에 관한 정보에 기초하여 표현의 제1 추정 상태를 나타내는 블러리니스(blurriness), 불투명도, 색상, 감쇠/밀도, 및/또는 해상도의 양)로 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)(예컨대, 제2 컴퓨터 시스템의 사용자)의 표현(예컨대, 1002)(예컨대, 아바타; 가상 아바타(예컨대, 아바타는 제2 사용자의 적어도 일부분의 가상 표현임))을 디스플레이한다(일부 실시예들에서, 가상 아바타는, 확장 현실 환경 내에, 제2 사용자 대신에 디스플레이됨)(1102). 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자(예컨대, 1004)의 검출된 이동(예컨대, 물리적 환경 내에서의 제2 사용자의 검출된 이동)에 기초하여 이동한다(예컨대, 확장 현실 환경 내에서 이동함). 일부 실시예들에서, 제1 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제1 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하라는 요청을 (예컨대, 컴퓨터 시스템에서의 사용자 입력에 기초하여) 수신하는 것에 응답하여 확장 현실 환경(예컨대, 1008) 내에 디스플레이된다.

확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안, 제2 사용자(예컨대, 1004)의 신체의 상태에 관한 직접 정보의 양이 변화한다(예컨대, 제1 컴퓨터 시스템이 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화한다고 결정하고/하거나, 제2 컴퓨터 시스템이 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화한다고 결정함)(1104).

제2 사용자(예컨대, 1004)의 신체의 상태에 관한 직접 정보의 양이 변화하는 것(예컨대, 제1 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템을 통해 결정 및/또는 검출됨)에 응답하여, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 상이한 충실도로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하기 시작한다(1106). 일부 실시예들에서, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)(예컨대, 수신 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 전송 컴퓨터 시스템)은 제2 사용자(예컨대, 1004)의 신체의 상태에 관한 직접 정보의 양이 변화한다고 결정하고, 상이한 충실도로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하기 위해 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)에 의해 사용되는 제2 사용자(예컨대, 1004)의 표현의 충실도에 관한 정보를 생성한다.

제2 사용자의 신체(예컨대, 제2 사용자의 물리적 신체의 적어도 일부분)의 상태(예컨대, 위치, 배향, 자세, 및/또는 포즈)에 관한 직접 정보(예컨대, 제2 사용자의 신체의 상태에 관한 정보를 포함하는, 제2 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해 캡처된 정보는 제2 사용자의 신체의 적어도 일부분(예컨대, 전부)의 위치, 배향, 자세, 및/또는 포즈를 나타내는 데이터를 포함하지 않음)(예컨대, 제1 컴퓨터 시스템(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 송신하는 컴퓨터 시스템)은 제2 사용자의 신체의 상태에 관한 직접 정보가 제1 시간 동안 수신되지 않는다고 결정함)가, 제1 시간 임계치(예컨대, 1초, 5초, 10초, 및/또는 30초) 초과이고 제2 시간 임계치(예컨대, 45초, 60초, 90초, 및/또는 120초) 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 제1 충실도 미만인 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)(예컨대, 제2 사용자의 표현의 적어도 일부분)을 디스플레이한다(예컨대, 제2 사용자의 표현의 일부분은 0이 아닌 양의 블러링으로 디스플레이됨)(1108).

제2 사용자의 신체(예컨대, 제2 사용자의 물리적 신체의 적어도 일부분)의 상태(예컨대, 위치, 배향, 자세, 및/또는 포즈)에 관한 직접 정보(예컨대, 제2 사용자의 신체의 상태에 관한 정보를 포함하는, 제2 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해 캡처된 정보는 제2 사용자의 신체의 적어도 일부분의 위치, 배향, 자세, 및/또는 포즈를 나타내는 데이터를 포함하지 않음)(예컨대, 제1 컴퓨터 시스템(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 송신하는 컴퓨터 시스템)은 제2 사용자의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않는다고 결정함)가, 제1 시간 임계치 초과이고 제2 시간 임계치(예컨대, 45초, 60초, 90초, 및/또는 120초) 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 제2 충실도 미만인 제3 충실도(예컨대, 도 10c에 도시된 제3 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)(예컨대, 제2 사용자의 표현의 적어도 일부분)을 디스플레이한다(예컨대, 제2 사용자의 표현의 일부분은 제2 충실도의 블러링 양 초과인 0이 아닌 양의 블러링으로 디스플레이됨)(예컨대, 오디오 존재 모드; 의인화된 특징부들을 갖지 않고/않거나 무생물 객체인 렌더링(예컨대, 아이콘, 모노그램)에 의해 확장 현실 환경에서 제2 사용자가 표현되는 모드)(1110).

제2 사용자의 신체의 상태에 관한 직접 정보가 제1 시간 동안 수신되지 않는다는 결정에 따라, 제2 충실도로 제2 사용자의 표현을 디스플레이하고, 제2 사용자의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않는다는 결정에 따라, 제3 충실도로 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가 각자의 시간 동안 수신되지 않더라도, 제1 컴퓨터 시스템이 제2 사용자의 표현을 계속 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 사용자와의 실시간 통신 세션 동안 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 컴퓨터 시스템과 통신하는 디스플레이 생성 컴포넌트를 통해 (예컨대, 제1 컴퓨터 시스템과 통신하는 하나 이상의 디스플레이 생성 컴포넌트들을 통한 제2 사용자의 표현의 디스플레이와 동시에) 디스플레이된다. 실시간 통신 세션 동안 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가 각자의 시간 동안 수신되지 않더라도, 제1 컴퓨터 시스템이 제2 사용자의 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 신체의 상태에 관한 직접 정보의 양이 변화하지 않는 것에 응답하여(예컨대, 제1 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템은 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 유지되고/되거나 변화하지 않는다고 결정함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 제1 충실도(예컨대, 도 10a에 도시된 제1 충실도)로 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 유지한다(예컨대, 제2 충실도 및/또는 제3 충실도로 제2 사용자의 표현을 디스플레이하지 않음). 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하지 않는 것에 응답하여, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 것을 유지하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가 이용가능할 때 제1 컴퓨터 시스템이 제2 사용자의 더 정확한 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f)(예컨대, 얼굴 및/또는 손들)과 함께 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다. 제2 충실도 미만인 제3 충실도(예컨대, 도 10c에 도시된 제3 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f) 중 각자의 의인화된 특징부 없이(예컨대, 하나 이상의 손들 없이 및/또는 얼굴 없이) 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제3 충실도(예컨대, 도 10c에 도시된 제3 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제시 모드(예컨대, 오디오 존재 모드; 의인화된 특징부들을 갖지 않고/않거나 무생물 객체인 렌더링(예컨대, 아이콘, 모노그램)에 의해 확장 현실 환경에서 제1 사용자가 표현되는 모드)에서 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함하며, 여기에서 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은, 제시 모드에 있는 동안, 제2 사용자(예컨대, 1004)의 이동의 변화들에 시각적으로 반응하지 않는 형상(예컨대, 외관; 기하학적 구조(예컨대, 디스크, 또는 구형 형상; 입방체; 직사각형 프리즘))을 갖는다(예컨대, 제시 모드에 있을 때, 제2 사용자의 표현은 물리적 환경 및/또는 확장 현실 환경에서 검출되는 제2 사용자의 신체의 이동에 응답하여 시각적으로 반응하지 않음).

하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부 없이 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않을 때에도, 컴퓨터 시스템이 제2 사용자의 표현을 계속 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f) 중 각자의 의인화된 특징부 없이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것(예컨대, 오디오 존재 모드; 의인화된 특징부들을 갖지 않고/않거나 무생물 객체인 렌더링(예컨대, 아이콘, 모노그램)에 의해 확장 현실 환경에서 제1 사용자가 표현되는 모드)은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)이 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f)과 함께 디스플레이될 때(예컨대, 제2 사용자의 표현이 제1 충실도 및/또는 제2 충실도로 디스플레이될 때) 디스플레이되는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 (예컨대, 하나 이상의 디스플레이 생성 컴포넌트들의 에지들 및/또는 크기에 대한 그리고/또는 확장 현실 환경 내의 하나 이상의 객체들에 대한) 제2 크기 미만인 (예컨대, 하나 이상의 디스플레이 생성 컴포넌트들의 에지들 및/또는 크기에 대한 그리고/또는 확장 현실 환경 내의 하나 이상의 객체들에 대한) 제1 크기로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다.

제2 사용자의 표현이 하나 이상의 의인화된 특징부들과 함께 디스플레이될 때 디스플레이되는 제2 사용자의 표현의 제2 크기 미만인 제1 크기를 갖는 하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부 없이 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f)(예컨대, 얼굴 및/또는 손들)과 함께 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제4 시각적 충실도(예컨대, 제2 사용자의 신체의 상태에 관한 정보에 기초하여 표현의 제1 추정 상태를 나타내는 블러리니스, 불투명도, 색상, 감쇠/밀도, 및/또는 해상도의 양)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 부분(예컨대, 주연부 부분 및/또는 제2 사용자의 표현과 확장 현실 환경 사이의 경계를 포함하는 일부분)을 디스플레이하는 것을 포함한다. 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f) 중 각자의 의인화된 특징부 없이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것(예컨대, 오디오 존재 모드; 의인화된 특징부들을 갖지 않고/않거나 무생물 객체인 렌더링(예컨대, 아이콘, 모노그램)에 의해 확장 현실 환경에서 제1 사용자가 표현되는 모드)은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제4 충실도 미만인 제5 시각적 충실도로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 부분(예컨대, 주연부 부분 및/또는 제2 사용자의 표현과 확장 현실 환경 사이의 경계를 포함하는 일부분)을 디스플레이하는 것을 포함한다(예컨대, 제2 사용자의 표현의 제1 부분은 제4 충실도의 블러링 양 초과인 0이 아닌 양의 블러링으로 디스플레이됨).

제5 시각적 충실도로 제2 사용자의 표현의 제1 부분을 디스플레이하는 것은, 제2 사용자의 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제1 충실도(예컨대, 도 10a에 도시된 제1 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이, 디스플레이 생성 컴포넌트(예컨대, 120, 704, 722, 722b, 및/또는 1000a)를 통해, 제1 정확도로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것(예컨대, 제2 사용자의 신체적 특성들을 모방하고/하거나 그와 유사하도록 의도되는 하나 이상의 제1 신체적 특성들을 갖는 제2 사용자의 표현을 디스플레이하는 것, 여기에서 하나 이상의 제1 신체적 특성들은 제2 사용자의 하나 이상의 검출된 신체적 특성들(예컨대, 제2 사용자의 물리적 신체의 하나 이상의 캡처된 신체적 특성들)에 기초함)을 포함한다. 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이, 디스플레이 생성 컴포넌트(예컨대, 120, 704, 722, 722b, 및/또는 1000a)를 통해, 제1 정확도 미만인 제2 정확도로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것(예컨대, 하나 이상의 제1 신체적 특성들과 비교할 때, 증가된 블러, 증가된 파티클 크기, 및/또는 증가된 투명도와 같은 덜한 정밀도를 포함하는 하나 이상의 제2 신체적 특성들을 갖는 제2 사용자의 표현을 디스플레이하는 것)을 포함한다(일부 실시예들에서, 하나 이상의 제2 신체적 특성들은 제2 사용자의 하나 이상의 검출된 신체적 특성들(예컨대, 제2 사용자의 물리적 신체의 하나 이상의 캡처된 신체적 특성들)에 기초함).

제1 정확도 미만인 제2 정확도로 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가 제1 시간 동안 수신되지 않을 때에도, 컴퓨터 시스템이 제2 사용자의 표현을 계속 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 1004)의 각자의 유형의 이동(예컨대, 사용자가 위치되는 물리적 환경에서의 사용자의 신체의 이동 또는 사용자의 신체에 대한 사용자의 부속물의 이동)을 검출한다. 사용자(예컨대, 1004)의 각자의 유형의 이동을 검출하는 것에 응답하여, 그리고 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)이 제1 충실도(예컨대, 도 10a에 도시된 제1 시각적 충실도)로 디스플레이되고 있다는 결정에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 사용자(예컨대, 1004)의 각자의 유형의 이동에 기초한 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 이동을 디스플레이한다. 사용자(예컨대, 1004)의 각자의 유형의 이동을 검출하는 것에 응답하여, 그리고 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)이 제2 충실도(예컨대, 도 10b에 도시된 제2 시각적 충실도)로 디스플레이되고 있다는 결정에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 사용자(예컨대, 1004)의 각자의 유형의 이동에 기초한 표현(예컨대, 1002)의 이동의 디스플레이를 보류한다(예컨대, 컴퓨터 시스템은 제2 사용자가 위치되는 물리적 환경에서의 제2 사용자의 신체 이동에 관한 정보를 수신하는 것에 기초하여 확장 현실 환경에서 제2 사용자의 표현의 디스플레이가 이동하게 하지 않음).

사용자의 각자의 유형의 이동에 기초한 제2 사용자의 표현의 이동을 디스플레이하는 것을 보류하는 것을 포함하는 제2 충실도로 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제1 충실도(예컨대, 도 10a에 도시된 제1 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 평균 파티클 크기를 갖는 복수의 파티클들로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다(예컨대, 제2 사용자의 표현은 제2 정확도와 비교할 때 더 높은 해상도 및/또는 더 많은 수의 픽셀들로 디스플레이됨). 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 평균 파티클 크기 초과인 제2 평균 파티클 크기를 갖는 복수의 파티클들로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다(예컨대, 제2 사용자의 표현은 제1 정확도와 비교할 때 감소된 해상도 및/또는 감소된 수의 픽셀들로 디스플레이됨).

제1 평균 파티클 크기 초과인 제2 평균 파티클 크기를 포함하는 제2 충실도는, 제2 사용자의 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제1 충실도(예컨대, 도 10a에 도시된 제1 충실도)는 제1 양의 블러(예컨대, 0의 블러링 및/또는 제2 정확도의 0이 아닌 양의 블러링 미만인 0이 아닌 양의 블러링)를 포함하고, 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)는 제1 양의 블러 초과인 제2 양의 블러(예컨대, 제1 정확도의 블러링의 양 초과인 0이 아닌 양의 블러링)를 포함한다. 제1 양의 블러 초과인 제2 양의 블러를 포함하는 제2 충실도는, 제2 사용자의 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제2 사용자(예컨대, 1004)의 형상(예컨대, 제2 사용자의 물리적 신체의 실루엣에 의해 형성된 형상)에 기초하는 형상(예컨대, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 의해 형성된 형상)을 갖는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다. 제2 사용자의 형상에 기초하는 형상을 갖는 제2 사용자의 표현을 디스플레이하는 것을 포함하는 제2 충실도로 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가 제1 시간 동안 수신되지 않을 때에도, 컴퓨터 시스템이 제2 사용자의 표현을 계속 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안, 그리고 제2 사용자(예컨대, 1004)의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않는다는 결정에 따라(예컨대, 제1 컴퓨터 시스템(예컨대, 수신 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 전송 컴퓨터 시스템)은 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 제2 시간 동안 수신되지 않는다는 것을 결정 및/또는 검출함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 제2 충실도 미만인 제3 충실도(예컨대, 도 10c에 도시된 제3 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이한다(예컨대, 제1 컴퓨터 시스템은 제2 사용자의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않는다고 결정하는 것에 응답하여 제2 충실도로 제2 사용자의 표현을 디스플레이하는 것으로부터 제3 충실도로 제2 사용자의 표현을 디스플레이하는 것으로 전이함).

제2 사용자의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않는다는 결정에 따라, 제3 충실도로 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 신체의 상태에 관한 직접 정보가 제2 시간 동안 수신되지 않을 때에도, 컴퓨터 시스템이 제2 사용자의 표현을 계속 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 신체의 상태에 관한 직접 정보는 제2 사용자(예컨대, 1004)의 신체의 제1 부분(예컨대, 1004d 및/또는 1004e)(예컨대, 손들, 팔들, 허리, 몸통, 및/또는 다리들과 같은, 제2 사용자의 목 및/또는 어깨들 아래의 제2 사용자의 신체의 부위들)의 상태에 관한 직접 정보를 포함하고, 제2 사용자(예컨대, 1004)의 신체의 상태에 관한 직접 정보는 제2 사용자(예컨대, 1004)의 신체의 제1 부분(예컨대, 1004d 및/또는 1004e)과는 상이한 제2 사용자(예컨대, 1004)의 신체의 제2 부분(예컨대, 1004b, 1004c, 1004g, 및/또는 1004f)(예컨대, 머리 및/또는 얼굴과 같은, 제2 사용자의 목 및/또는 어깨들 위의 제2 사용자의 신체의 부위들)의 상태에 관한 직접 정보를 포함하지 않는다. 일부 실시예들에서, 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제2 사용자(예컨대, 1004)의 신체의 제1 부분(예컨대, 1004d 및/또는 1004e)과 연관된 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 부분(예컨대, 1002d 및/또는 1002e)을 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 디스플레이하고, 제2 사용자(예컨대, 1004)의 신체의 제2 부분(예컨대, 1004b, 1004c, 1004g, 및/또는 1004f)과 연관된 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제2 부분(예컨대, 1002b, 1002c, 1002g, 및/또는 1002f)을 제1 충실도(예컨대, 도 10a에 도시된 제1 충실도)로 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제3 충실도(예컨대, 도 10c에 도시된 제3 충실도)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제2 사용자(예컨대, 1004)의 신체의 제1 부분(예컨대, 1004d 및/또는 1004e)과 연관된 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 부분(예컨대, 1002d 및/또는 1002e)을 제3 충실도(예컨대, 도 10c에 도시된 제3 충실도)로 디스플레이하는 것, 및 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제2 사용자(예컨대, 1004)의 신체의 제2 부분(예컨대, 1004b, 1004c, 1004g, 및/또는 1004f)과 연관된 제2 사용자(예컨대, 1002)의 표현(예컨대, 1002)의 제2 부분(예컨대, 1002b, 1002c, 1002g, 및/또는 1002f)을 제1 충실도(예컨대, 도 10a에 도시된 제1 충실도) 및/또는 제2 충실도(예컨대, 도 10b에 도시된 제2 충실도)로 디스플레이하는 것을 포함한다.

제2 사용자의 신체의 제1 부분의 상태에 관한 직접 정보를 포함하지만 제2 사용자의 신체의 제2 부분의 상태에 관한 직접 정보를 포함하지 않는 제2 사용자의 신체의 상태에 관한 직접 정보는, 컴퓨터 시스템이 이용가능 정보에 기초하여 제2 사용자의 표현의 외관을 조정하도록 허용하여서, 제2 사용자의 표현이 제2 사용자의 신체의 적어도 일부분의 상태를 더 정확하게 표현하게 하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

도 12는 일부 실시예들에 따른, 사용자의 표현의 입 표현을 디스플레이하기 위한 예시적인 방법(1200)의 흐름도이다. 일부 실시예들에서, 방법(1200)은 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)(예컨대, 시각적 출력 디바이스, 3D 디스플레이, 이미지들이 투영될 수 있는 투명 또는 반투명한 적어도 일부분을 갖는 디스플레이(예컨대, 시스루 디스플레이), 프로젝터, 헤드업 디스플레이, 디스플레이 제어기)을 포함하는(그리고 선택적으로, 하나 이상의 카메라들(예컨대, 적외선 카메라; 깊이 카메라; 가시광 카메라)과 통신하는) 제1 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)(예컨대, 스마트폰, 태블릿, 머리 장착형 디스플레이 생성 컴포넌트)에서 수행된다(일부 실시예들에서, 제1 컴퓨터 시스템은 제2 사용자와 연관되는(예컨대, 제2 사용자(예컨대, 제1 컴퓨터 시스템의 제1 사용자와의 통신 세션(예컨대, 확장 현실 및/또는 화상 회의)에 있는 사용자)에 의해 동작되고 있는) 제2 컴퓨터 시스템과 통신함). 일부 실시예들에서, 본 방법(1200)은, 비일시적(또는 일시적) 컴퓨터 판독가능 저장 매체에 저장되며 컴퓨터 시스템(101)의 하나 이상의 프로세서들(202)(예를 들어, 도 1의 제어부(110))과 같은 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되는 명령어들에 의해 통제된다. 방법(1200) 내의 일부 동작들은 선택적으로 조합되고 그리고/또는 일부 동작들의 순서는 선택적으로 변경된다.

제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 제1 사용자(예컨대, 제2 표현(1012)과 연관된 사용자)에 의해 사용되고 있는 동안, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)(예컨대, 외부 컴퓨터 시스템의 사용자)의 표현(예컨대, 1002)(예컨대, 아바타; 가상 아바타(예컨대, 아바타는 제1 사용자의 적어도 일부분의 가상 표현임))을 디스플레이한다(일부 실시예들에서, 가상 아바타는, 확장 현실 환경 내에, 제1 사용자 대신에 디스플레이됨)(1202). 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자(예컨대, 1004)의 검출된 이동(예컨대, 물리적 환경 내에서의 제2 사용자의 검출된 이동)에 기초하여 이동한다(예컨대, 확장 현실 환경 내에서 이동함). 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하라는 요청을 (예컨대, 컴퓨터 시스템에서의 사용자 입력에 기초하여) 수신하는 것에 응답하여 확장 현실 환경(예컨대, 1008) 내에 디스플레이된다.

확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)(예컨대, 스피치)(예컨대, 컴퓨터 시스템과 통신하는 마이크로폰 및/또는 다른 오디오 감지 디바이스를 통해 캡처된 오디오 데이터)에 대응하는 정보(예컨대, 오디오 정보, 모션 정보, 제2 사용자의 입의 상태에 관한 정보, 및/또는 제2 컴퓨터 시스템에 의해 생성된 제2 사용자의 표현에 관한 정보)를 수신한다(1204).

제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 정보를 수신하는 것에 응답하여, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 정보에 기초하여 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 외관을 업데이트한다(1206).

제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는(예컨대, 입의 검출된 신체 상태에 관한 정보가 수신되지 않는다는, 입의 검출된 신체 상태에 관한 정보가 발화와 동일한 시간에 대응하지 않는다는, 및/또는 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 임계량의 정확도 미만의 양의 정확도를 포함한다는(예컨대, 정보가 입의 물리적 위치, 포즈, 배향, 및/또는 표정에 관한 캡처된 데이터를 추론하고/하거나 포함하지 않는 간접 데이터를 포함하고/하거나 입의 위치, 포즈, 배향, 및/또는 표정을 나타내는 데이터가 신뢰 수준 임계치 미만이라는(예컨대, 신뢰 수준 임계치는 데이터의 양, 미리정의된 기간에 걸친 데이터의 양, 및/또는 실제 입의 상태를 검출 및/또는 추정하는 것에 대한 데이터의 정밀도 및/또는 정확도에 적어도 부분적으로 기초하여 결정됨))) 결정에 따라(예컨대, 제1 컴퓨터 시스템(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 송신하는 컴퓨터 시스템)은 제2 사용자의 발화에 대응하는 정보가 하나 이상의 기준들의 세트를 만족시키지 않는 제2 사용자의 입의 검출된 신체 상태에 관한 정보를 포함한다고 결정함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 입 표현(예컨대, 1002p)(예컨대, 제2 사용자의 발화에 대응하는 정보에 기초하여 입의 위치, 포즈, 배향, 및/또는 표정을 추론, 근사화, 외삽, 및/또는 추정함으로써 제2 사용자의 발화에 대응하는 정보에 적어도 부분적으로 기초하여 생성되는 제2 사용자의 실제 입의 시각적 표시)을 디스플레이한다(1208). 제1 입 표현(예컨대, 1002p)은 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보에 기초하여(예컨대, 그에 적어도 부분적으로 기초하여 및/또는 그에만 기초하여) 생성된다(예컨대, 컴퓨터 시스템은 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 제1 입 표현의 위치, 포즈, 배향, 및/또는 표정을 추론, 근사화, 외삽, 및/또는 추정함)(일부 실시예들에서, 컴퓨터 시스템은 제2 사용자의 발화에 대응하는 오디오 정보에 전적으로 기초하여 및/또는 제2 사용자의 발화에 대응하는 오디오 정보 및 제2 사용자의 입의 상태에 관한 정보 둘 모두에 기초하여 제1 입 표현을 생성함).

제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태(예컨대, 위치, 배향, 자세, 표정, 및/또는 포즈)에 관한 정보가 하나 이상의 기준들의 세트를 만족시킨다는(예컨대, 입의 검출된 신체 상태에 관한 정보가 수신된다는, 입의 검출된 신체 상태에 관한 정보가 발화가 말해진 동일한 시간에 대응한다는, 및/또는 물리적 입의 검출된 신체 상태에 관한 정보가 임계량의 정확도 초과의 양의 정확도를 포함한다는(예컨대, 정보가 신뢰 수준 임계치 초과의 입의 위치, 포즈, 배향, 및/또는 표정을 나타내는 데이터를 포함한다는(예컨대, 신뢰 수준 임계치는 데이터의 양, 미리정의된 기간에 걸친 데이터의 양, 및/또는 실제 입의 상태를 검출 및/또는 추정하는 것에 대한 데이터의 정밀도 및/또는 정확도에 적어도 부분적으로 기초하여 결정됨))) 결정에 따라(예컨대, 제1 컴퓨터 시스템(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 송신하는 컴퓨터 시스템)은 제2 사용자의 발화에 대응하는 정보가 하나 이상의 기준들의 세트를 만족시키는 제2 사용자의 입의 검출된 신체 상태에 관한 정보를 포함한다고 결정함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제2 입 표현(예컨대, 1002h)(예컨대, 물리적 입의 위치, 포즈, 배향, 및/또는 표정을 나타내는 데이터에 기초하여 생성되는 제1 사용자의 실제 입의 시각적 표시)을 디스플레이한다(1210). 제2 입 표현(예컨대, 1002h)은 제2 입 표현(예컨대, 1002h)을 생성하기 위해 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보를 사용하지 않고서 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보에 기초하여 생성된다(예컨대, 컴퓨터 시스템은 입의 상태를 추정 및/또는 추론하기 위해 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고/않거나, 제2 입 표현을 생성하고 확장 현실 환경 내에 위치, 포즈, 배향, 및/또는 표정을 갖는 제2 입 표현을 디스플레이하기 위해 제2 사용자의 발화에 대응하는 오디오 정보를 달리 사용하지 않음).

제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성되는 제2 사용자의 제1 입 표현을 디스플레이하는 것은, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 이용가능하지 않고/않거나 부분적으로 이용가능할 때에도, 제1 컴퓨터 시스템이 제2 사용자의 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 사용자와의 실시간 통신 세션 동안 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 컴퓨터 시스템과 통신하는 디스플레이 생성 컴포넌트를 통해 (예컨대, 제1 컴퓨터 시스템과 통신하는 하나 이상의 디스플레이 생성 컴포넌트들을 통한 제2 사용자의 표현의 디스플레이와 동시에) 디스플레이된다. 실시간 통신 세션 동안 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 이용가능하지 않고/않거나 부분적으로 이용가능할 때에도, 제1 컴퓨터 시스템이 제2 사용자의 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제1 입 표현(예컨대, 1002p)은 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보에 기초하여 생성되는 제1 부분(예컨대, 입의 제1 이미지 및/또는 이미지들)(예컨대, 제2 사용자의 입의 위치, 포즈, 표정, 및/또는 배향의 추론, 근사화, 외삽, 및/또는 추정된 이미지), 및 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보에 기초하여 생성되는 제2 부분(예컨대, 입의 제2 이미지 및/또는 이미지들)(예컨대, 제2 사용자의 입의 검출된 신체 상태에 관한 직접 정보에 기초한 및/또는 제2 사용자의 입의 검출된 신체 상태에 관한 간접 정보에 기초한 제2 사용자의 입의 위치, 포즈, 표정, 및/또는 배향의 검출, 캡처, 및/또는 추정된 이미지)을 포함한다. 제1 부분 및 제2 부분은 조합되어(예컨대, 서로 오버레이되고/되거나 함께 병합되어) 제1 입 표현(예컨대, 1002p)을 형성한다. 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성되는 제1 부분 및 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 생성되는 제2 부분으로 제2 사용자의 제1 입 표현을 디스플레이하는 것은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템에 이용가능한 정보에 기초하여 제2 사용자의 정확한 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 부분은 정적이다(예컨대, 제1 입 표현의 제2 부분은 제2 사용자의 표현의 다른 부분들에 대해 및/또는 확장 현실 환경에 대해 움직이지 않고/않거나, 제1 입 표현의 제2 부분은 제2 사용자의 입이 움직이고 있음을 나타내는 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 움직이지 않음). 제1 입 표현의 제2 부분을 정적으로 디스플레이하는 것은, 제1 컴퓨터 시스템이 사용자의 입의 캡처된 및/또는 검출된 신체적 특성들에 기초한 외관을 포함하는 제2 사용자의 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 부분은 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보에 기초하여 움직인다(예컨대, 제2 사용자의 표현의 다른 부분들에 대해 및/또는 확장 현실 환경 내의 하나 이상의 객체들에 대해 확장 현실 환경 내에서 움직임)(예컨대, 제2 사용자의 입의 검출된 신체 상태에 관한 정보는 제2 사용자의 입이 시간 경과에 따라 움직이고 있음(예컨대, 사용자가 말하고 있고/있거나, 하품하고 있고/있거나, 립싱크하고 있고/있거나, 발화하고 있고/있거나, 얼굴 표정들을 바꾸고 있고/있거나, 달리 입을 움직이고 있음)을 나타냄). 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 제1 입 표현의 제2 부분의 움직임을 디스플레이하는 것은, 제1 컴퓨터 시스템이 제2 사용자의 더 정확한 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보에 기초하여 생성되는 제1 부분은 제1 시각적 강조도를 포함하고(예컨대, 제1 입 표현은 제1 양의 제1 부분을 사용하여 생성되고/되거나, 제1 입 표현은 하나 이상의 디스플레이 생성 컴포넌트들 상에서 가시적으로 구별가능한 제1 양의 제1 부분을 포함함), 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보에 기초하여 생성되는 제2 부분은 제2 시각적 강조도를 포함하며(예컨대, 제1 입 표현은 제2 양의 제2 부분을 사용하여 생성되고/되거나, 제1 입 표현은 하나 이상의 디스플레이 생성 컴포넌트들 상에서 가시적으로 구별가능한 제2 양의 제2 부분을 포함함), 제1 시각적 강조도 및 제2 시각적 강조도의 상대 크기는 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보에 기초한다(예컨대, 제1 입 표현은 제1 양의 제1 부분 및 제2 양의 제2 부분을 사용하여 생성되며, 여기에서 제1 양의 제1 부분 및 제2 양의 제2 부분은 제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 결정됨). 일부 실시예들에서, 제1 입 표현(예컨대, 1002p)은 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 임계치 미만의 신뢰 수준 및/또는 정확도를 포함할 때 제2 부분보다 더 많은 양의 제1 부분을 사용하여 생성된다. 일부 실시예들에서, 제1 입 표현(예컨대, 1002p)은 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 임계치 초과의 신뢰 수준 및/또는 정확도를 포함할 때 제1 부분보다 더 많은 양의 제2 부분을 사용하여 생성된다.

제1 시각적 강조도를 갖는 제1 부분 및 제2 시각적 강조도를 갖는 제2 부분으로 제2 사용자의 제1 입 표현을 디스플레이하는 것은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템에 이용가능한 정보에 기초하여 제2 사용자의 정확한 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제1 시각적 강조도 및 제2 시각적 강조도의 상대 크기는 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보에 기초하여 변화한다(예컨대, 제1 입 표현은 시간 경과에 따라 변화하고, 제1 입 표현을 생성하는데 사용되는 제1 부분 및 제2 부분의 양들은 제2 사용자의 입의 검출된 신체 상태에 관한 정보의 신뢰 수준 및/또는 정확도에 기초하여 변화함). 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 임계치 미만의 신뢰 수준 및/또는 정확도를 포함할 때, 제1 시각적 강조도의 제1 크기는 증가하고, 제2 시각적 강조도의 제2 크기는 감소한다(예컨대, 제1 크기는 제2 크기 초과임). 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 임계치 초과의 신뢰 수준 및/또는 정확도를 포함할 때, 제1 시각적 강조도의 제1 크기는 감소하고, 제2 시각적 강조도의 제2 크기는 증가한다(예컨대, 제1 크기는 제2 크기 미만임).

제2 사용자의 입의 검출된 신체 상태에 관한 정보에 기초하여 제1 시각적 강조도 및 제2 시각적 강조도를 변경하는 것은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템에 이용가능한 정보에 기초하여 제2 사용자의 정확한 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보에 기초하여 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보의 정확성을 결정한다(예컨대, 제1 입 표현 및/또는 제2 입 표현을 생성하는 데 사용될 수 있는 제2 사용자의 입의 검출된 신체 상태에 관한 정보의 신뢰 수준, 정확도, 및/또는 정밀도는 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 (예컨대, 제1 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템을 통해) 결정됨). 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보는 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보와 비교되어, 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보와 매칭되는지 여부를 결정하여서, 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보의 신뢰 수준 및/또는 정확도를 결정한다. 예를 들어, 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보가 제2 사용자(예컨대, 1004)가 말하고 있음을 나타낼 때, 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보는 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보와 일관되는 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 움직임(예컨대, 검출된 발화를 하기 위해 검출될 것으로 예상될 입 형상)을 나타내는지 여부를 결정하기 위해 평가된다. 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보에 대응 및/또는 매칭되지 않을 때, 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보의 신뢰 수준 및/또는 정확도는 제2 사용자(예컨대, 1004)의 입(예컨대, 1004h)의 검출된 신체 상태에 관한 정보가 제2 사용자(예컨대, 1004)의 발화(예컨대, 1020)에 대응하는 오디오 정보에 대응 및/또는 매칭될 때보다 감소되고/되거나 더 낮은 것으로 결정된다.

제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 제2 사용자의 입의 검출된 신체 상태에 관한 정보의 정확성을 결정하는 것은, 제1 컴퓨터 시스템이 제1 컴퓨터 시스템에 이용가능한 정보에 기초하여 제2 사용자의 정확한 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 입 표현(예컨대, 1002p)을 디스플레이하는 동안, 그리고 하나 이상의 기준들의 제2 세트가 충족된다는(예컨대, 제2 사용자의 표현의 머리 표현 및/또는 제2 사용자의 표현의 다른 부분이 0이 아닌 양의 투명도를 포함하고/하거나 제1 입 표현이 벌어진 및/또는 부분적으로 벌어진 것으로서 디스플레이된다는) 결정에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 제2 사용자(예컨대, 1004)의 입의 표현의 제1 부분(예컨대, 1002i)(예컨대, 내부 부분)을 입의 표현의 제1 부분(예컨대, 1002i)과는 상이한 입의 표현의 제2 부분(예컨대, 1002j)(예컨대, 외부 부분)의 제2 투명도와는 상이한(예컨대, 그 초과 또는 미만인) 제1 투명도로 디스플레이한다(예컨대, 제1 입 표현은 0이 아닌 양의 투명도를 포함하여서, 제1 입 표현 뒤에 위치되는 확장 현실 환경의 적어도 일부분이 제1 입 표현을 통해 가시적이고/이거나, 부분적으로 가시적이고/이거나, 부분적으로 커버되지 않고/않거나, 구별가능하게 함).

하나 이상의 기준들의 제2 세트가 충족된다는 결정에 따라, 제1 투명도를 갖는 입의 표현의 제1 부분을 디스플레이하는 것은, 제1 컴퓨터 시스템이 확장 현실 환경 및/또는 제2 사용자의 표현의 다른 부분들과 블렌딩되는 제2 사용자의 입 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

도 13은 일부 실시예들에 따른, 사용자의 표현의 모발 표현을 디스플레이하기 위한 예시적인 방법(1300)의 흐름도이다. 일부 실시예들에서, 방법(1300)은 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)(예컨대, 시각적 출력 디바이스, 3D 디스플레이, 이미지들이 투영될 수 있는 투명 또는 반투명한 적어도 일부분을 갖는 디스플레이(예컨대, 시스루 디스플레이), 프로젝터, 헤드업 디스플레이, 디스플레이 제어기)을 포함하는(그리고 선택적으로, 하나 이상의 카메라들(예컨대, 적외선 카메라; 깊이 카메라; 가시광 카메라)과 통신하는) 제1 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)(예컨대, 스마트폰, 태블릿, 머리 장착형 디스플레이 생성 컴포넌트)에서 수행된다(일부 실시예들에서, 제1 컴퓨터 시스템은 제2 사용자와 연관되는(예컨대, 제2 사용자(예컨대, 제1 컴퓨터 시스템의 제1 사용자와의 통신 세션(예컨대, 확장 현실 및/또는 화상 회의)에 있는 사용자)에 의해 동작되고 있는) 제2 컴퓨터 시스템과 통신함). 일부 실시예들에서, 본 방법(1300)은, 비일시적(또는 일시적) 컴퓨터 판독가능 저장 매체에 저장되며 컴퓨터 시스템(101)의 하나 이상의 프로세서들(202)(예를 들어, 도 1의 제어부(110))과 같은 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되는 명령어들에 의해 통제된다. 방법(1300) 내의 일부 동작들은 선택적으로 조합되고 그리고/또는 일부 동작들의 순서는 선택적으로 변경된다.

제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 제1 사용자(예컨대, 제2 표현(1012)과 연관된 사용자)에 의해 사용되고 있는 동안, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)(예컨대, 외부 컴퓨터 시스템의 사용자)의 표현(예컨대, 1002)(예컨대, 아바타; 가상 아바타(예컨대, 아바타는 제1 사용자의 적어도 일부분의 가상 표현임))을 디스플레이한다(일부 실시예들에서, 가상 아바타는, 확장 현실 환경 내에, 제1 사용자 대신에 디스플레이됨)(일부 실시예들에서, 제1 사용자의 표현은 제1 사용자의 표현을 디스플레이하라는 요청을 (예컨대, 컴퓨터 시스템에서의 사용자 입력에 기초하여) 수신하는 것에 응답하여 확장 현실 환경 내에 디스플레이됨)(1302). 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자(예컨대, 1004)의 검출된 이동(예컨대, 물리적 환경 내에서의 제2 사용자의 검출된 이동)에 기초하여 이동한다(예컨대, 확장 현실 환경 내에서 이동함).

제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 사용자(예컨대, 1004)의 모발의 시각적 표현(예컨대, 1002k 및/또는 1002l)(예컨대, 확장 현실 환경 내에 디스플레이되는 제2 사용자의 모발을 표현하는 이미지, 여기에서 제2 사용자의 모발을 표현하는 이미지는 제2 컴퓨터 시스템과 통신하는 카메라를 통해 캡처된 실제 이미지가 아님)을 포함한다(1304).

모발의 시각적 표현(예컨대, 1002k 및/또는 1002l)은 제2 사용자(예컨대, 1004)의 각자의 신체 부위(예컨대, 1004g, 1004m, 1004n, 및/또는 1004o)에 대응하는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 일부분(예컨대, 1002g, 1002m, 1002n, 및/또는 1002o)(예컨대, 제2 사용자의 모발이 아닌 제2 사용자의 신체 부위의 표현)으로부터 제1 거리에(예컨대, 거리(1024) 내에) 위치되는(예컨대, 제2 사용자의 신체에 가깝고/가깝거나 그에 연결되는 제2 사용자의 모발의 하나 이상의 가닥들의 제1 부분의 표현인) 모발의 표현(예컨대, 1002k 및/또는 1002l)의 제1 부분(예컨대, 1022a)을 포함한다(1306). 모발의 표현(예컨대, 1002k 및/또는 1002l)의 제1 부분(예컨대, 1022a)은 제1 시각적 충실도(예컨대, 제2 사용자에 관한 정보에 기초하여 모발의 표현의 제1 추정 상태를 나타내는 블러리니스, 불투명도, 색상, 감쇠/밀도, 및/또는 해상도의 양)를 포함한다. 일부 실시예들에서, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 송신하는 컴퓨터 시스템)은 제1 시각적 충실도를 포함하는 모발의 표현(예컨대, 1002k 및/또는 1002l)의 제1 부분(예컨대, 1022a)을 결정한다.

모발의 시각적 표현(예컨대, 1002k 및/또는 1002l)은 제2 사용자(예컨대, 1004)의 각자의 신체 부위(예컨대, 1004g, 1004m, 1004n, 및/또는 10054o)에 대응하는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 일부분(예컨대, 1002g, 1002m, 1002n, 및/또는 1002o)으로부터 제1 거리 초과인 제2 거리에(예컨대, 거리(1024) 너머에) 위치되는(예컨대, 제2 사용자의 신체로부터 멀리 연장되고/되거나 그로부터 멀리 위치되는 제2 사용자의 모발의 하나 이상의 가닥들의 제2 부분의 표현인) 모발의 표현(예컨대, 1002k 및/또는 1002l)의 제2 부분(예컨대, 1022b)을 포함한다(1308). 모발의 표현(예컨대, 1002k 및/또는 1002l)의 제2 부분(예컨대, 1022b)은 제1 시각적 충실도 미만인 제2 시각적 충실도(예컨대, 제2 사용자에 관한 정보에 기초하여 모발의 표현의 제2 추정 상태를 나타내는 블러리니스, 불투명도, 색상, 감쇠/밀도, 및/또는 해상도의 양)를 포함한다(예컨대, 제2 부분은 0이 아닌 양의 블러링으로 디스플레이되고/되거나, 제2 부분은 제1 부분과 비교할 때 증가된 양의 투명도로 디스플레이됨). 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 모발의 시각적 표시(예컨대, 1002k 및/또는 1002l)는 얼굴 모발에 대응한다. 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 모발의 시각적 표시(예컨대, 1002k 및/또는 1002l)는 사용자(예컨대, 1004)의 신체로부터의 모발의 거리에 기초하여 변하는 가변적인 양의 시각적 충실도(예컨대, 가변적인 양의 정밀도 및/또는 선명도)로 디스플레이된다(예컨대, 제1 사용자의 신체에 가깝고/가깝거나 그와 접촉하는 제1 사용자의 모발의 가닥의 제1 부분은 증가된 양의 시각적 충실도로 디스플레이되는 반면, 제1 사용자의 신체로부터 떨어져 있고/있거나 그에 가깝지 않은 위치에 있는 제1 사용자의 모발의 가닥의 제2 부분은 감소된 양의 시각적 충실도로 디스플레이됨). 일부 실시예들에서, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 송신하는 컴퓨터 시스템)은 제2 시각적 충실도를 포함하는 모발의 표현(예컨대, 1002k 및/또는 1002l)의 제2 부분(예컨대, 1022b)을 결정한다.

제1 시각적 충실도로 모발의 표현의 제1 부분을 디스플레이하고, 제2 시각적 충실도로 모발의 표현의 제2 부분을 디스플레이하는 것은, 제2 사용자의 표현의 다른 부분들 및/또는 확장 현실 환경의 일부분들을 가리고/가리거나 차단하지 않고서 제1 컴퓨터 시스템이 제2 사용자의 모발의 시각적 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 사용자와의 실시간 통신 세션 동안 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 컴퓨터 시스템과 통신하는 디스플레이 생성 컴포넌트를 통해 (예컨대, 제1 컴퓨터 시스템과 통신하는 하나 이상의 디스플레이 생성 컴포넌트들을 통한 제2 사용자의 표현의 디스플레이와 동시에) 디스플레이된다. 실시간 통신 세션 동안 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현의 다른 부분들 및/또는 확장 현실 환경의 일부분들을 가리고/가리거나 차단하지 않고서 제1 컴퓨터 시스템이 제2 사용자의 모발의 시각적 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 모발의 시각적 표현(예컨대, 1002l)은 제2 사용자(예컨대, 1004)의 얼굴 모발(예컨대, 1004l)의 시각적 표현(예컨대, 제2 사용자의 얼굴 상의 및/또는 제2 사용자의 얼굴로부터 연장되는 수염, 콧수염, 턱수염, 및/또는 다른 모발을 나타내는 이미지)이다. 제2 사용자의 얼굴 모발의 시각적 표현인 제2 사용자의 모발의 시각적 표현은, 제1 컴퓨터 시스템이 제2 사용자의 얼굴 모발의 시각적 표현을 디스플레이하도록 허용하여, 그에 의해 시각적 피드백을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 모발의 시각적 표현(예컨대, 1002l)은 제2 사용자(예컨대, 1004)의 수염(예컨대, 1004l)(예컨대, 제2 사용자의 얼굴 및/또는 목 상의 모발 및/또는 제2 사용자의 얼굴 및/또는 목으로부터 연장되는 모발)의 시각적 표현이고 제2 사용자(예컨대, 1004)의 다른 모발(예컨대, 1004k)의 시각적 표현이 아니다(예컨대, 수염이 아닌 모발의 시각적 표현들에 적용되지 않고/않거나, 제2 사용자의 머리의 상단 상의 및/또는 그로부터 연장되는 모발, 및/또는 사용자의 얼굴 및/또는 목 이외의 제2 사용자의 신체의 임의의 다른 부위 상에 있고/있거나 그로부터 연장되는 모발에 적용되지 않음). 제2 사용자의 수염의 시각적 표현인 제2 사용자의 모발의 시각적 표현은, 제1 컴퓨터 시스템이 제2 사용자의 수염의 시각적 표현을 디스플레이하도록 허용하여, 그에 의해 시각적 피드백을 개선한다.

일부 실시예들에서, 제1 시각적 충실도는 제1 양의 블러링(예컨대, 0의 양의 블러링 및/또는 제2 양의 블러링 미만인 0이 아닌 양의 블러링)을 포함하고, 제2 시각적 충실도는 제1 양의 블러링 초과인 제2 양의 블러링(예컨대, 제1 양의 블러링 초과인(예컨대, 그보다 더 흐릿한) 0이 아닌 양의 블러링)을 포함한다. 제1 양의 블러링 초과인 제2 양의 블러링을 포함하는 제2 시각적 충실도는, 제2 사용자의 모발의 시각적 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제1 시각적 충실도는 제1 평균 파티클 크기(예컨대, 제2 파티클 크기와 비교할 때 더 높은 해상도 및/또는 더 많은 수의 픽셀들)를 갖는 복수의 파티클들을 사용하여 모발의 표현(예컨대, 1002k 및/또는 1002l)을 디스플레이하는 것을 포함하고, 제2 시각적 충실도는 제1 평균 파티클 크기 초과인 제2 평균 파티클 크기(예컨대, 제1 파티클 크기와 비교할 때 감소된 해상도 및/또는 감소된 수의 픽셀들)를 갖는 복수의 파티클들을 사용하여 모발의 표현(예컨대, 1002k 및/또는 1002l)을 디스플레이하는 것을 포함한다. 제1 평균 파티클 크기 초과인 제2 평균 파티클 크기를 포함하는 제2 시각적 충실도는, 제2 사용자의 모발의 시각적 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제1 시각적 충실도는 제1 양의 불투명도(예컨대, 0의 투명도, 및/또는 모발의 표현의 제1 부분은 모발의 표현의 제1 부분 뒤에 위치된 제2 사용자의 표현의 하나 이상의 부분들을 완전히 차단하도록 디스플레이됨)를 포함하고, 제2 시각적 충실도는 제1 양의 불투명도 미만인 제2 양의 불투명도(예컨대, 0이 아닌 양의 투명도, 및/또는 모발의 표현의 제2 부분은 모발의 표현의 제2 부분 뒤에 위치되는 확장 현실 환경 내의 하나 이상의 객체들 및/또는 시각적 요소들 및/또는 제2 사용자의 표현의 하나 이상의 부분들을 부분적으로 커버하고/하거나 가리도록 디스플레이됨)를 포함한다. 제1 양의 불투명도 미만인 제2 양의 불투명도를 포함하는 제2 시각적 충실도는, 제2 사용자의 모발의 시각적 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 모발의 시각적 표현(예컨대, 1002l)은 제2 사용자(예컨대, 1004)의 얼굴 모발(예컨대, 1004l)의 시각적 표현(예컨대, 제2 사용자의 얼굴 상의 및/또는 그로부터 연장되는 수염, 콧수염, 턱수염, 및/또는 다른 모발을 나타내는 이미지)이고, 제2 사용자(예컨대, 1004)의 얼굴 모발의 시각적 표현(예컨대, 1002l)은 부분적으로 투명하다(예컨대, 얼굴 모발의 시각적 표현은 0이 아닌 양의 투명도를 포함하여서, 확장 현실 환경 내의 하나 이상의 객체들 및/또는 시각적 요소들 및/또는 제2 사용자의 표현의 하나 이상의 부분들이 얼굴 모발의 시각적 표현을 통해 적어도 부분적으로 가시적이게 함). 부분적으로 투명한 것으로서 제2 사용자의 얼굴 모발의 시각적 표현을 디스플레이하는 것은, 제2 사용자의 모발의 시각적 표현을 디스플레이하기 위해 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 각자의 신체 부위(예컨대, 1004g)는 제2 사용자(예컨대, 1004)의 얼굴(예컨대, 1002g)(예컨대, 제2 사용자의 물리적 얼굴의 시각적 표시)이며, 제1 시각적 충실도는 제1 양의 투명도(예컨대, 0의 투명도 및/또는 제2 양의 투명도 미만인 0이 아닌 양의 투명도)를 포함하고, 제2 시각적 충실도는 제1 양의 투명도 초과인 제2 양의 투명도(예컨대, 제1 양의 투명도 초과인 0이 아닌 양의 투명도)를 포함한다. 제1 양의 투명도 초과인 제2 양의 투명도를 포함하는 제2 시각적 충실도는, 제2 사용자의 얼굴에 대응하는 제2 사용자의 표현의 일부분을 가리고/가리거나 차단하지 않고서 제1 컴퓨터 시스템이 제2 사용자의 모발의 시각적 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 각자의 신체 부위(예컨대, 1004m)는 제2 사용자(예컨대, 1004)의 목(예컨대, 1002m)(예컨대, 제2 사용자의 물리적 목의 시각적 표시)이며, 제1 시각적 충실도는 제1 양의 투명도(예컨대, 0의 투명도 및/또는 제2 양의 투명도 미만인 0이 아닌 양의 투명도)를 포함하고, 제2 시각적 충실도는 제1 양의 투명도 초과인 제2 양의 투명도(예컨대, 제1 양의 투명도 초과인 0이 아닌 양의 투명도)를 포함한다. 제1 양의 투명도 초과인 제2 양의 투명도를 포함하는 제2 시각적 충실도는, 제2 사용자의 목에 대응하는 제2 사용자의 표현의 일부분을 가리고/가리거나 차단하지 않고서 제1 컴퓨터 시스템이 제2 사용자의 모발의 시각적 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자의 모발(예컨대, 1004k 및/또는 1004l)이 미리정의된 길이를 초과한다는(예컨대, 목, 얼굴, 뺨, 입술, 및/또는 턱과 같은 제2 사용자의 물리적 신체 부위를 나타내는 제2 사용자의 표현의 일부분으로부터 측정된 길이 및/또는 제1 길이라는)(일부 실시예들에서, 제1 길이는 임계 길이 초과임) 결정에 따라, 제2 사용자(예컨대, 1004)의 모발의 시각적 표현(예컨대, 1002k 및/또는 1002l)은 제2 사용자의 표현과는 별개인 모발의 3차원 표현(예컨대, 확장 현실 환경 내에서 3개의 별개의 축들을 따라 연장되는 것으로 보이는 체적 표현(예컨대, 3차원))을 포함한다(예컨대, 3차원 표현은 제2 사용자의 얼굴을 나타내는 제2 사용자의 표현의 적어도 일부분으로부터 분리가능함)(예컨대, 모발을 표현하기 위해 제2 사용자의 피부의 표현에 텍스처를 적용하지 않고서). 제2 사용자(예컨대, 1004)의 모발(예컨대, 1004k 및/또는 1004l)이 미리정의된 길이를 초과하지 않는다는(예컨대, 목, 얼굴, 뺨, 입술, 및/또는 턱과 같은 제2 사용자의 물리적 신체 부위를 나타내는 제2 사용자의 표현의 일부분으로부터 측정된 길이 및/또는 제1 길이 미만인 제2 길이라는)(일부 실시예들에서, 제2 길이는 임계 길이 미만임) 결정에 따라, 제2 사용자(예컨대, 1004)의 모발의 시각적 표현(예컨대, 1002k 및/또는 1002l)은 모발의 대응하는 3차원 표현 없이 제2 사용자(예컨대, 1004)의 얼굴의 표현(예컨대, 1002g) 위에 적용되는 모발의 텍스처화된 표현을 포함한다(예컨대, 제2 사용자의 표현과는 별개인 모발의 3차원 표현, 및/또는 확장 현실 환경 내에서 3개의 별개의 축들을 따라 연장되지 않는 이미지(예컨대, 2차원)를 디스플레이하지 않고서, 모발을 표현하기 위해 제2 사용자의 피부의 표현에 텍스처를 적용함)(일부 실시예들에서, 텍스처화된 표현은 제2 사용자의 표현의 다른 부분들로부터 분리가능하지 않음).

제2 사용자의 모발이 미리정의된 길이를 초과한다는 결정에 따라 3차원 표현을 포함하고, 제2 사용자의 모발이 미리정의된 길이를 초과하지 않는다는 결정에 따라 텍스처화된 표현을 포함하는 제2 사용자의 모발의 시각적 표현은, 제2 사용자의 표현의 다른 부분 및/또는 확장 현실 환경의 일부분을 가리고/가리거나 차단하지 않고서 제1 컴퓨터 시스템이 제2 사용자의 모발의 시각적 표현을 디스플레이하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

도 14는 일부 실시예들에 따른, 사용자의 표현의 일부분을 시각적으로 강조하여 디스플레이하기 위한 예시적인 방법(1400)의 흐름도이다. 일부 실시예들에서, 방법(1400)은 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)(예컨대, 시각적 출력 디바이스, 3D 디스플레이, 이미지들이 투영될 수 있는 투명 또는 반투명한 적어도 일부분을 갖는 디스플레이(예컨대, 시스루 디스플레이), 프로젝터, 헤드업 디스플레이, 디스플레이 제어기)을 포함하는(그리고 선택적으로, 하나 이상의 카메라들(예컨대, 적외선 카메라; 깊이 카메라; 가시광 카메라)과 통신하는) 제1 컴퓨터 시스템(예컨대, 101, 700 및/또는 1000)(예컨대, 스마트폰, 태블릿, 머리 장착형 디스플레이 생성 컴포넌트)에서 수행된다(일부 실시예들에서, 제1 컴퓨터 시스템은 제2 사용자와 연관되는(예컨대, 제2 사용자(예컨대, 제1 컴퓨터 시스템의 제1 사용자와의 통신 세션(예컨대, 확장 현실 및/또는 화상 회의)에 있는 사용자)에 의해 동작되고 있는) 제2 컴퓨터 시스템과 통신함). 일부 실시예들에서, 본 방법(1400)은, 비일시적(또는 일시적) 컴퓨터 판독가능 저장 매체에 저장되며 컴퓨터 시스템(101)의 하나 이상의 프로세서들(202)(예를 들어, 도 1의 제어부(110))과 같은 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되는 명령어들에 의해 통제된다. 방법(1400) 내의 일부 동작들은 선택적으로 조합되고 그리고/또는 일부 동작들의 순서는 선택적으로 변경된다.

제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)의 제1 사용자(예컨대, 제2 표현(1012)과 연관된 사용자)에 의해 사용되고 있는 동안, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)(예컨대, 외부 컴퓨터 시스템의 사용자)의 표현(예컨대, 1002)(예컨대, 아바타; 가상 아바타(예컨대, 아바타는 제1 사용자의 적어도 일부분의 가상 표현임))을 디스플레이한다(일부 실시예들에서, 가상 아바타는, 확장 현실 환경 내에, 제1 사용자 대신에 디스플레이됨)(일부 실시예들에서, 제1 사용자의 표현은 제1 사용자의 표현을 디스플레이하라는 요청을 (예컨대, 컴퓨터 시스템에서의 사용자 입력에 기초하여) 수신하는 것에 응답하여 확장 현실 환경 내에 디스플레이됨)(1402). 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 제2 사용자(예컨대, 1004)의 검출된 이동(예컨대, 물리적 환경 내에서의 제2 사용자의 검출된 이동)에 기초하여 이동한다(예컨대, 확장 현실 환경 내에서 이동함).

제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)과 확장 현실 환경(예컨대, 1008)의 다른 부분들(예컨대, 표현의 실루엣의 외부 부분) 사이의 경계에 대응하는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 부분(예컨대, 1026a 및/또는 1026c)(예컨대, 제2 사용자의 표현의 실루엣의 적어도 주연부를 포함하는 외부 부분)을 포함한다(1404). 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 부분(예컨대, 1026a 및/또는 1026c)은 제1 시각적 외관(예컨대, 제2 사용자의 표현의 제2 부분에 비해 제2 사용자의 표현의 제1 부분을 하이라이팅, 대조, 및/또는 달리 강조하는 강조된 시각적 외관)으로 디스플레이된다. 일부 실시예들에서, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 수신하는 컴퓨터 시스템)은 제1 시각적 외관으로 디스플레이되는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제1 부분(예컨대, 1026a 및/또는 1026c)을 결정한다.

제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)과 확장 현실 환경(예컨대, 1008)의 다른 부분들(예컨대, 표현의 실루엣의 내부 부분 및/또는 내부) 사이의 경계에 대응하지 않는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제2 부분(예컨대, 1026b 및/또는 1026d)(예컨대, 제2 사용자의 표현의 실루엣의 주연부를 포함하지 않는 제2 사용자의 표현의 실루엣의 내부 부분)을 포함한다(1406). 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제2 부분(예컨대, 1026b 및/또는 1026e)은 제2 시각적 외관(예컨대, 제2 사용자의 표현의 제1 부분에 비해 제2 사용자의 표현의 제2 부분을 하이라이팅, 대조, 및/또는 달리 강조하지 않는 비강조 및/또는 정상 시각적 외관)으로 디스플레이되며, 여기에서 제1 시각적 외관은 제2 시각적 외관에 비해 강조된다(예컨대, 제1 시각적 외관은 시각적 강조(예컨대, 하이라이팅, 증가된 밝기, 증가된 선명도 및/또는 시각적 충실도, 및/또는 프레넬 시각적 효과)를 포함하고, 제2 시각적 외관은 시각적 강조를 포함하지 않음(예컨대, 제2 사용자의 표현의 제1 부분은 제2 사용자의 표현의 제2 부분에 비해 시각적으로 강조됨)). 일부 실시예들에서, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)(예컨대, 정보를 수신하는 컴퓨터 시스템) 및/또는 제2 컴퓨터 시스템(예컨대, 정보를 송신하는 컴퓨터 시스템)은 제2 시각적 외관으로 디스플레이되는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제2 부분(예컨대, 1026b 및/또는 1026d)을 결정한다.

제1 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 제1 부분을 포함하고, 제2 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 경계에 대응하지 않는 제2 부분을 포함하는 제2 사용자의 표현을 디스플레이하는 것은, 제1 컴퓨터 시스템이 확장 현실 환경의 다른 부분들로부터 제2 사용자의 표현을 대조하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제1 사용자와의 실시간 통신 세션 동안 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은 제2 컴퓨터 시스템과 통신하는 디스플레이 생성 컴포넌트를 통해 (예컨대, 제1 컴퓨터 시스템과 통신하는 하나 이상의 디스플레이 생성 컴포넌트들을 통한 제2 사용자의 표현의 디스플레이와 동시에) 디스플레이된다. 실시간 통신 세션 동안 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 것은, 제1 컴퓨터 시스템이 확장 현실 환경의 다른 부분들로부터 제2 사용자의 표현을 대조하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제1 배향(예컨대, 1023)(예컨대, 확장 현실 환경에 대한 및/또는 제1 컴퓨터 시스템의 하나 이상의 디스플레이 생성 컴포넌트들의 하나 이상의 에지들에 대한 제1 시점)으로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안, 그리고 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 배향이 제1 배향(예컨대, 1023)으로부터 제2 배향(예컨대, 1028)(예컨대, 제1 시점과는 상이한, 확장 현실 환경에 대한 및/또는 하나 이상의 디스플레이 생성 컴포넌트들의 하나 이상의 에지들에 대한 제2 시점)으로 변화한다는 결정(예컨대, 제1 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템에 의해 이루어진 결정)에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 디스플레이 생성 컴포넌트(예컨대, 120, 704, 722, 722b, 및/또는 1000a)를 통해, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)과 확장 현실 환경(예컨대, 1008)의 다른 부분들(예컨대, 표현의 실루엣의 외부 부분) 사이의 제2 경계에 대응하는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제3 부분(예컨대, 1026c)(예컨대, 제2 사용자의 표현의 실루엣의 적어도 주연부를 포함하는 외부 부분)을 디스플레이한다. 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제3 부분(예컨대, 1026c)은 제1 시각적 외관(예컨대, 제2 사용자의 표현의 제4 부분에 비해 제2 사용자의 표현의 제3 부분을 하이라이팅, 대조, 및/또는 달리 강조하는 강조된 시각적 외관)으로 디스플레이된다. 확장 현실 환경(예컨대, 1008) 내에 제1 배향(예컨대, 1023)(예컨대, 확장 현실 환경에 대한 및/또는 제1 컴퓨터 시스템의 하나 이상의 디스플레이 생성 컴포넌트들의 하나 이상의 에지들에 대한 제1 시점)으로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안, 그리고 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 배향이 제1 배향(예컨대, 1023)으로부터 제2 배향(예컨대, 1028)(예컨대, 제1 시점과는 상이한, 확장 현실 환경에 대한 및/또는 하나 이상의 디스플레이 생성 컴포넌트들의 하나 이상의 에지들에 대한 제2 시점)으로 변화한다는 결정(예컨대, 제1 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템에 의해 이루어진 결정)에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 디스플레이 생성 컴포넌트(예컨대, 120, 704, 722, 722b, 및/또는 1000a)를 통해, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)과 확장 현실 환경(예컨대, 1008)의 다른 부분들(예컨대, 표현의 실루엣의 내부 부분 및/또는 내부) 사이의 제2 경계에 대응하지 않는 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제4 부분(예컨대, 1026d)(예컨대, 제2 사용자의 표현의 실루엣의 주연부를 포함하지 않는 제2 사용자의 표현의 실루엣의 내부 부분)을 디스플레이한다. 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제4 부분(예컨대, 1026d)은 제2 시각적 외관(예컨대, 제2 사용자의 표현의 제3 부분에 비해 제2 사용자의 표현의 제4 부분을 하이라이팅, 대조, 및/또는 달리 강조하지 않는 비강조 및/또는 정상 시각적 외관)으로 디스플레이되며, 여기에서 제1 시각적 외관은 제2 시각적 외관에 비해 강조된다(예컨대, 제1 시각적 외관은 시각적 강조(예컨대, 하이라이팅, 증가된 밝기, 증가된 선명도 및/또는 시각적 충실도, 및/또는 프레넬 시각적 효과)를 포함하고, 제2 시각적 외관은 시각적 강조를 포함하지 않음(예컨대, 제2 사용자의 표현의 제1 부분은 제2 사용자의 표현의 제2 부분에 비해 시각적으로 강조됨)). 확장 현실 환경(예컨대, 1008) 내에 제1 배향(예컨대, 1023)(예컨대, 확장 현실 환경에 대한 및/또는 제1 컴퓨터 시스템의 하나 이상의 디스플레이 생성 컴포넌트들의 하나 이상의 에지들에 대한 제1 시점)으로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안, 그리고 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 배향이 변화하지 않는다는(예컨대, 제2 사용자의 표현이 확장 현실 환경에 대한 및/또는 하나 이상의 디스플레이 생성 컴포넌트들의 하나 이상의 에지들에 대한 제1 배향 및/또는 제1 시점으로 유지되는 것으로서 디스플레이된다는) 결정(예컨대, 제1 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템에 의해 이루어진 결정)에 따라, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 확장 현실 환경(예컨대, 1008) 내에 제1 배향(예컨대, 1023)으로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 유지한다(예컨대, 제2 사용자의 표현의 제1 부분 및 사용자의 표현의 제2 부분으로 제2 사용자의 표현을 디스플레이하는 것을 유지함).

제1 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 제2 경계에 대응하는 제3 부분을 포함하고, 제2 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 제2 경계에 대응하지 않는 제4 부분을 포함하는 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현의 시점이 확장 현실 환경 내에서 변화함에도 제1 컴퓨터 시스템이 확장 현실 환경의 다른 부분들로부터 제2 사용자의 표현을 대조하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 배향은 제1 사용자(예컨대, 제2 표현(1012)과 연관된 사용자)의 시점의 변화에 기초하여 제1 배향(예컨대, 1023)으로부터 제2 배향(예컨대, 1028)으로 변화한다(예컨대, 제1 사용자의 시점은 확장 현실 환경 내에서의 제2 사용자의 표현의 이동에 기초하여, 제2 사용자가 위치되는 물리적 환경 내에서의 제2 사용자의 이동에 기초하여, 제1 컴퓨터 시스템의 이동에 기초하여, 제2 사용자의 제2 컴퓨터 시스템의 이동에 기초하여, 및/또는 확장 현실 환경의 시점의 조정에 기초하여 변화함(예컨대, 확장 현실 환경의 시점의 조정은 제1 컴퓨터 시스템 및/또는 제2 컴퓨터 시스템을 통해 검출된 하나 이상의 사용자 입력들에 기초하여 발생함)). 제1 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 제2 경계에 대응하는 제3 부분을 포함하고, 제2 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 제2 경계에 대응하지 않는 제4 부분을 포함하는 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현의 시점이 변화함에도 제1 컴퓨터 시스템이 확장 현실 환경의 다른 부분들로부터 제2 사용자의 표현을 대조하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 배향은 확장 현실 환경(예컨대, 1008)에서의 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 이동에 기초하여 제1 배향(예컨대, 1023)으로부터 제2 배향(예컨대, 1028)으로 변화한다(예컨대, 제2 사용자의 표현은 확장 현실 환경 내에서 이동하고, 선택적으로, 확장 현실 환경의 뷰는 유지됨). 일부 실시예들에서, 확장 현실 환경(예컨대, 1008)에서의 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 이동은 제2 사용자(예컨대, 1004)가 위치되는 물리적 환경(예컨대, 1014) 내에서의 제2 사용자 (예컨대, 1004)의 검출된 이동(예컨대, 제2 컴퓨터 시스템과 통신하는 하나 이상의 센서들을 통해 검출됨)에 기초하여 발생한다. 제1 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 제2 경계에 대응하는 제3 부분을 포함하고, 제2 시각적 외관을 갖는, 제2 사용자의 표현과 확장 현실 환경의 다른 부분들 사이의 제2 경계에 대응하지 않는 제4 부분을 포함하는 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현이 확장 현실 환경 내에서 이동함에도 제1 컴퓨터 시스템이 확장 현실 환경의 다른 부분들로부터 제2 사용자의 표현을 대조하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제1 각도(예컨대, 1023 및/또는 1027)(예컨대, 확장 현실 환경의 적어도 하나의 객체에 대해 제1 각도를 형성하는 제1 자세, 배향, 포즈, 및/또는 신장)로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, (예컨대, 제2 사용자의 표현의 제6 부분에 비해) 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제5 부분의 시각적 강조를 감소시키는 각자의 시각적 효과(예컨대, 제2 사용자의 신체의 상태에 관한 정보에 기초하여 표현의 제5 부분의 제1 추정 상태를 나타내는 블러리니스, 불투명도, 색상, 감쇠/밀도, 및/또는 해상도의 양)가 적용된 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제5 부분(예컨대, 제2 사용자의 표현이 확장 현실 환경 내에 디스플레이 및/또는 위치되는 제1 각도에 기초하여 부분적으로 가려지고/가려지거나 부분적으로 가시적인 제2 사용자의 표현의 일부분)을 디스플레이한다. 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)이 확장 현실 환경(예컨대, 1008) 내에 제1 각도(예컨대, 1023 및/또는 1027)와는 상이한 제2 각도(예컨대, 1028 및/또는 1030)(예컨대, 확장 현실 환경의 적어도 하나의 객체에 대해 제2 각도를 형성하는 제2 자세, 배향, 포즈, 및/또는 신장)로 디스플레이되는 것에 응답하여, 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, (예컨대, 제2 사용자의 표현의 제5 부분의 시각적 강조에 비해) 제2 사용자의 표현의 제6 부분의 시각적 강조를 감소시키는 각자의 시각적 효과(예컨대, 제2 사용자의 신체의 상태에 관한 정보에 기초하여 표현의 제6 부분의 제1 추정 상태를 나타내는 블러리니스, 불투명도, 색상, 감쇠/밀도, 및/또는 해상도의 양)가 적용된, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제5 부분과는 상이한 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제6 부분(예컨대, 제2 사용자의 표현이 확장 현실 환경 내에 디스플레이 및/또는 위치되는 제2 각도에 기초하여 부분적으로 가려지고/가려지거나 부분적으로 가시적인 제2 사용자의 표현의 일부분)을 디스플레이한다.

제2 사용자의 표현이 제1 각도에 있는 동안 각자의 시각적 효과가 적용된 제5 부분을 포함하고, 제2 사용자의 표현이 제2 각도로 디스플레이되는 것에 응답하여 각자의 시각적 효과가 적용된 제6 부분을 포함하는 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현의 각도가 확장 현실 환경에 대해 변화하는 동안 제1 컴퓨터 시스템이 확장 현실 환경의 다른 부분들로부터 제2 사용자의 표현을 대조하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제6 부분의 시각적 강조를 감소시키는 각자의 시각적 효과가 적용된 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제6 부분을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제5 부분의 시각적 강조를 감소시키는 각자의 시각적 효과가 적용된 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제5 부분으로부터 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제6 부분의 시각적 강조를 감소시키는 각자의 시각적 효과가 적용된 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)의 제6 부분으로의 점진적인 전이를 디스플레이하는 것(예컨대, 제2 사용자의 표현의 외관을 각자의 시각적 효과가 적용된 제2 사용자의 표현의 제5 부분으로부터 각자의 시각적 효과가 적용된 제2 사용자의 표현의 제6 부분으로 점진적으로 변경하는 것)을 포함한다. 각자의 시각적 효과를 포함하는 제2 사용자의 표현의 제5 부분으로부터 각자의 시각적 효과를 포함하는 제2 사용자의 표현의 제6 부분으로의 점진적인 전이를 디스플레이하는 것은, 제1 컴퓨터 시스템이 확장 현실 환경의 다른 부분들로부터 제2 사용자의 표현을 대조하도록 허용하여, 그에 의해, 제1 컴퓨터 시스템 및 제2 컴퓨터 시스템을 통한 제1 사용자와 제2 사용자 사이의 통신을 개선한다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제1 사용자의 시점으로부터 전방 배향(예컨대, 1023, 1027, 1028, 및/또는 1030)으로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안(예컨대, 제2 사용자의 표현의 전방 표현이 확장 현실 환경 내에 디스플레이되고 있어서, 제2 사용자의 표현의 얼굴 표현이 디스플레이되고 있게 함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f)(예컨대, 얼굴 및/또는 손들)과 함께 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이한다. 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)이 확장 현실 환경(예컨대, 1008) 내에 제1 사용자의 시점으로부터 후방 배향(예컨대, 1032 및/또는 1034)으로 디스플레이되는 것에 응답하여(예컨대, 제2 사용자의 표현의 후방 표현이 확장 현실 환경 내에 디스플레이되고 있어서, 제2 사용자의 표현의 얼굴 표현이 디스플레이되고 있지 않게 함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f)(예컨대, 얼굴 및/또는 손들) 중 각자의 의인화된 특징부 없이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이한다. 일부 실시예들에서, 각자의 의인화된 특징부들(예컨대, 1002a 내지 1002f) 없이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제시 모드(예컨대, 오디오 존재 모드; 의인화된 특징부들을 갖지 않고/않거나 무생물 객체인 렌더링(예컨대, 아이콘, 모노그램)에 의해 확장 현실 환경에서 제1 사용자가 표현되는 모드)에서 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함하며, 여기에서 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은, 제시 모드에 있는 동안, 제2 사용자(예컨대, 1004)의 이동의 변화들에 시각적으로 반응하지 않는 형상(예컨대, 외관; 기하학적 구조(예컨대, 디스크, 또는 구형 형상; 입방체; 직사각형 프리즘))을 갖는다(예컨대, 제시 모드에 있을 때, 제2 사용자의 표현은 물리적 환경 및/또는 확장 현실 환경에서 검출되는 제2 사용자의 손(들)의 이동에 응답하여 시각적으로 반응하지 않음).

제2 사용자의 표현이 확장 현실 환경 내에 후방 배향으로 디스플레이되는 것에 응답하여, 하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부 없이 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현을 디스플레이하기 위해 제1 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

일부 실시예들에서, 확장 현실 환경(예컨대, 1008) 내에 제1 사용자의 시점으로부터 후방 배향(예컨대, 1032 및/또는 1034)으로 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 동안(예컨대, 제2 사용자의 표현의 후방 표현이 확장 현실 환경 내에 디스플레이되고 있어서, 제2 사용자의 표현의 얼굴 표현이 디스플레이되고 있지 않게 함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은, 하나 이상의 디스플레이 생성 컴포넌트들(예컨대, 120, 704, 722, 722b, 및/또는 1000a)을 통해, 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f)(예컨대, 얼굴 및/또는 손들) 중 각자의 의인화된 특징부 없이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이한다. 일부 실시예들에서, 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)이 확장 현실 환경(예컨대, 1008) 내에 제1 사용자의 시점으로부터 전방 배향(예컨대, 1023, 1027, 1028, 및/또는 1030)으로 디스플레이되는 것에 응답하여(예컨대, 제2 사용자의 표현의 전방 표현이 확장 현실 환경 내에 디스플레이되고 있어서, 제2 사용자의 표현의 얼굴 표현이 디스플레이되고 있게 함), 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)은 하나 이상의 의인화된 특징부들(예컨대, 1002a 내지 1002f)(예컨대, 얼굴 및/또는 손들) 중 각자의 의인화된 특징부와 함께 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이한다. 일부 실시예들에서, 각자의 의인화된 특징부들(예컨대, 1002a 내지 1002f) 없이 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것은 제1 컴퓨터 시스템(예컨대, 101, 700, 및/또는 1000)이 제시 모드(예컨대, 오디오 존재 모드; 의인화된 특징부들을 갖지 않고/않거나 무생물 객체인 렌더링(예컨대, 아이콘, 모노그램)에 의해 확장 현실 환경에서 제1 사용자가 표현되는 모드)에서 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)을 디스플레이하는 것을 포함하며, 여기에서 제2 사용자(예컨대, 1004)의 표현(예컨대, 1002)은, 제시 모드에 있는 동안, 제2 사용자(예컨대, 1004)의 이동의 변화들에 시각적으로 반응하지 않는 형상(예컨대, 외관; 기하학적 구조(예컨대, 디스크, 또는 구형 형상; 입방체; 직사각형 프리즘))을 갖는다(예컨대, 제시 모드에 있을 때, 제2 사용자의 표현은 물리적 환경 및/또는 확장 현실 환경에서 검출되는 제2 사용자의 손(들)의 이동에 응답하여 시각적으로 반응하지 않음).

제2 사용자의 표현이 확장 현실 환경 내에 후방 배향으로 디스플레이되고 있을 때, 하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부 없이 제2 사용자의 표현을 디스플레이하는 것은, 제2 사용자의 표현을 디스플레이하기 위해 제1 컴퓨터 시스템에 의해 요구되는 프로세싱 전력의 양을 감소시킨다.

전술한 설명은, 설명의 목적을 위해, 특정 실시예들을 참조하여 기술되었다. 그러나, 상기의 예시적인 논의들은 본 발명을 개시된 정확한 형태들로 규명하거나 제한하려는 의도는 아니다. 많은 수정들 및 변형들이 상기 교시 내용들의 관점에서 가능하다. 본 발명의 원리들 및 그의 실제적인 응용들을 가장 잘 설명하여, 그에 의해 당업자들이 본 발명 및 다양한 설명된 실시예들을 고려되는 특정 용도에 적합한 바와 같은 다양한 변형들을 갖고서 가장 잘 사용하는 것을 가능하게 하도록, 실시예들이 선택 및 설명되었다.

위에서 설명된 바와 같이, 본 기술의 일 태양은 사용자들의 XR 경험들을 개선시키기 위해 다양한 소스들로부터 이용가능한 데이터의 수집 및 사용이다. 본 개시내용은, 일부 경우들에 있어서, 이러한 수집된 데이터가 특정 개인을 고유하게 식별하거나 또는 그와 연락하거나 그의 위치를 확인하는 데 이용될 수 있는 개인 정보 데이터를 포함할 수 있음을 고려한다. 그러한 개인 정보 데이터는 인구통계 데이터, 위치 기반 데이터, 전화번호들, 이메일 주소들, 트위터 ID들, 집 주소들, 사용자의 건강 또는 피트니스 레벨에 관한 데이터 또는 기록들(예를 들어, 바이탈 사인(vital sign) 측정치들, 약물 정보, 운동 정보), 생년월일, 또는 임의의 다른 식별 또는 개인 정보를 포함할 수 있다.

본 개시내용은 본 기술에서의 그러한 개인 정보 데이터의 이용이 사용자들에게 이득을 주기 위해 사용될 수 있음을 인식한다. 예를 들어, 개인 정보 데이터는 사용자의 XR 경험을 개선시키는 데 사용될 수 있다. 게다가, 사용자에게 이득을 주는 개인 정보 데이터에 대한 다른 이용들이 또한 본 개시내용에 의해 고려된다. 예를 들어, 건강 및 피트니스 데이터는 사용자의 일반적인 웰니스(wellness)에 대한 통찰력을 제공하는 데 사용될 수 있거나, 또는 웰니스 목표를 추구하기 위한 기술을 이용하여 개인들에게 긍정적인 피드백으로서 사용될 수 있다.

본 개시내용은 그러한 개인 정보 데이터의 수집, 분석, 공개, 전달, 저장, 또는 다른 사용을 담당하는 엔티티들이 잘 확립된 프라이버시 정책들 및/또는 프라이버시 관례들을 준수할 것임을 고려한다. 특히, 이러한 엔티티들은, 대체로 개인 정보 데이터를 사적이고 안전하게 유지시키기 위한 산업적 또는 행정적 요건들을 충족시키거나 넘어서는 것으로 인식되는 프라이버시 정책들 및 관례들을 구현하고 지속적으로 사용해야 한다. 그러한 정책들은 사용자들에 의해 쉽게 액세스가능해야 하고, 데이터의 수집 및/또는 사용이 변화됨에 따라 업데이트되어야 한다. 사용자들로부터의 개인 정보는 엔티티의 적법하며 합리적인 용도들을 위해 수집되어야 하고, 이들 적법한 용도들을 벗어나서 공유되거나 판매되어서는 안 된다. 추가로, 그러한 수집/공유는 사용자들의 통지된 동의를 수신한 후에 발생해야 한다. 부가적으로, 이러한 엔티티들은, 이러한 개인 정보 데이터에 대한 액세스를 보호하고 안전하게 하며 개인 정보 데이터에 대한 액세스를 갖는 다른 사람들이 그들의 프라이버시 정책들 및 절차들을 고수한다는 것을 보장하기 위한 임의의 필요한 조처들을 취하는 것을 고려해야 한다. 게다가, 이러한 엔티티들은 널리 인정된 프라이버시 정책들 및 관례들에 대한 그들의 고수를 증명하기 위해 제3자들에 의해 그들 자신들이 평가를 받을 수 있다. 부가적으로, 정책들 및 관례들은 수집된 그리고/또는 액세스된 특정 유형들의 개인 정보 데이터에 대해 조정되고, 관할구역 특정 고려사항들을 포함하여 적용가능한 법률들 및 표준들로 조정되어야 한다. 예를 들어, 미국에서, 소정 건강 데이터의 수집 또는 그에 대한 액세스는 연방법 및/또는 주의 법, 예를 들어 미국 건강 보험 양도 및 책임 법령(Health Insurance Portability and Accountability Act, HIPAA)에 의해 통제될 수 있는 반면; 다른 국가들에서의 건강 데이터는 다른 규정들 및 정책들의 적용을 받을 수 있고 그에 따라 취급되어야 한다. 따라서, 상이한 프라이버시 관례들은 각각의 국가의 상이한 개인 데이터 유형들에 대해 유지되어야 한다.

전술한 것에도 불구하고, 본 개시내용은 또한 사용자들이 개인 정보 데이터의 사용, 또는 그에 대한 액세스를 선택적으로 차단하는 실시예들을 고려한다. 즉, 본 개시내용은 그러한 개인 정보 데이터에 대한 액세스를 방지하거나 차단하기 위해 하드웨어 및/또는 소프트웨어 요소들이 제공될 수 있다는 것을 고려한다. 예를 들어, XR 경험들의 경우, 본 기술은 사용자들이 서비스를 위한 등록 중 또는 이후 임의의 시간에 개인 정보 데이터의 수집 시의 참여의 "동의함" 또는 "동의하지 않음"을 선택하는 것을 허용하도록 구성될 수 있다. 다른 예에서, 사용자들은 서비스들의 맞춤화를 위한 그리고/또는 사용자들의 표현들을 생성하기 위한 데이터를 제공하지 않도록 선택할 수 있다. "동의" 및 "동의하지 않음" 옵션들을 제공하는 것에 부가하여, 본 개시내용은 개인 정보의 액세스 또는 사용에 관한 통지들을 제공하는 것을 고려한다. 예를 들어, 사용자는 그들의 개인 정보 데이터가 액세스될 앱을 다운로드할 시에 통지받고, 이어서 개인 정보 데이터가 앱에 의해 액세스되기 직전에 다시 상기하게 될 수 있다.

또한, 의도하지 않은 또는 인가되지 않은 액세스 또는 이용의 위험을 최소화하는 방식으로 개인 정보 데이터가 관리되고 취급되어야 한다는 것이 본 개시내용의 의도이다. 데이터의 수집을 제한하고 데이터가 더 이상 필요하지 않게 되면 데이터를 삭제함으로써 위험이 최소화될 수 있다. 추가로, 그리고 소정의 건강 관련 애플리케이션들을 비롯하여, 적용가능할 때, 사용자의 프라이버시를 보호하기 위해 데이터 비식별화가 사용될 수 있다. 적절한 경우, 특정 식별자들(예컨대, 생년월일 등)을 제거함으로써, 저장된 데이터의 양 또는 특이성을 제어함으로써(예컨대, 주소 수준이라기보다는 오히려 도시 수준에서 위치 데이터를 수집함으로써), 데이터가 저장되는 방식을 제어함으로써(예컨대, 사용자들에 걸쳐 데이터를 집계함으로써), 그리고/또는 다른 방법들에 의해, 비식별화가 용이하게 될 수 있다.

따라서, 본 개시내용이 하나 이상의 다양한 개시된 실시예들을 구현하기 위해 개인 정보 데이터의 사용을 광범위하게 커버하지만, 본 개시내용은 다양한 실시예들이 또한 그러한 개인 정보 데이터에 액세스할 필요 없이 구현될 수 있다는 것을 또한 고려한다. 즉, 본 기술의 다양한 실시예들은 이러한 개인 정보 데이터의 전부 또는 일부분의 결여로 인해 동작 불가능하게 되지 않는다. 예를 들어, XR 경험은, 사용자와 연관된 디바이스에 의해 요청되는 콘텐츠, 서비스들에 이용가능한 다른 비-개인 정보, 또는 공개적으로 입수가능한 정보와 같은 비-개인 정보 데이터 또는 드러난 최소량의 개인 정보에 기초하여 선호도들을 추론하고/하거나 사용자들의 일반적인 표현들을 사용함으로써 생성될 수 있다.

Claims

방법으로서,
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템에서,
상기 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 그리고 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하는 단계;
상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 지시하는 상기 프롬프트를 디스플레이하는 것에 후속적으로, 상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출하는 단계; 및
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 상기 사용자와 관련된 정보를 캡처하는 단계 - 상기 컴퓨터 시스템은 상기 정보를 사용하여 상기 사용자의 표현을 생성하도록 구성됨 - 를 포함하는, 방법.
제1항에 있어서, 상기 사용자의 표현은 증강 현실 환경 및/또는 가상 현실 환경 내에 디스플레이되도록 구성되는, 방법.
제1항 또는 제2항에 있어서, 상기 컴퓨터 시스템은 상기 사용자의 표현을 입체적으로 생성하도록 구성되는, 방법.
제1항 내지 제3항 중 어느 한 항에 있어서,
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출하기 전에, 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 상기 정보를 캡처하기 위한 지시사항들을 제공하는 단계를 추가로 포함하는, 방법.
제4항에 있어서, 상기 지시사항들을 제공하는 단계는, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 상기 정보를 캡처하는 것을 시연하는 애니메이션을 디스플레이하는 단계를 포함하는, 방법.
제1항 내지 제5항 중 어느 한 항에 있어서,
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출하기 전에,
기준들의 세트가 충족된다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자와 관련된 상기 정보의 캡처에 영향을 미치는 조건과 연관된 표시를 디스플레이하고;
상기 기준들의 세트가 충족되지 않는다는 결정에 따라, 상기 사용자와 관련된 상기 정보의 캡처에 영향을 미치는 상기 조건과 연관된 상기 표시를 디스플레이하는 것을 보류하는 단계를 추가로 포함하는, 방법.
제6항에 있어서, 상기 사용자와 관련된 상기 정보의 캡처에 영향을 미치는 상기 조건과 연관된 상기 표시는 상기 조건을 보정하는 데 도움이 될 액션을 취하는 것에 관한 정보를 포함하는, 방법.
제1항 내지 제7항 중 어느 한 항에 있어서,
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출하는 것에 응답하여, 상기 사용자와 관련된 상기 정보를 캡처하기 위한 프로세스를 개시하는 단계를 추가로 포함하는, 방법.
제1항 내지 제8항 중 어느 한 항에 있어서,
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 상기 사용자와 관련된 상기 정보를 캡처하기 위한 지시사항들을 포함하는 제2 프롬프트를 제공하는 단계를 추가로 포함하는, 방법.
제9항에 있어서, 상기 제2 프롬프트를 제공하는 단계는, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 하나 이상의 등록 지시사항들을 갖는 시각적 프롬프트를 디스플레이하는 단계를 포함하는, 방법.
제10항에 있어서,
상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 그리고 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 정보를 캡처하도록 지시하는 상기 프롬프트는 상기 하나 이상의 디스플레이 생성 컴포넌트들 중 제1 디스플레이 생성 컴포넌트를 통해 디스플레이되고;
상기 시각적 프롬프트는 상기 하나 이상의 디스플레이 생성 컴포넌트들 중 상기 제1 디스플레이 생성 컴포넌트와는 상이한 제2 디스플레이 생성 컴포넌트를 통해 디스플레이되는, 방법.
제9항 내지 제11항 중 어느 한 항에 있어서, 상기 제2 프롬프트를 제공하는 단계는, 상기 컴퓨터 시스템과 통신하는 오디오 디바이스를 통해, 하나 이상의 등록 지시사항들을 갖는 오디오 프롬프트를 출력하는 단계를 포함하는, 방법.
제9항 내지 제12항 중 어느 한 항에 있어서, 상기 제2 프롬프트를 제공하는 단계는 상기 컴퓨터 시스템에 대한 목표 위치 내에 상기 사용자의 신체의 일부분을 배향시키도록 상기 사용자에게 지시하는 표시를 제공하는 단계를 포함하는, 방법.
제9항 내지 제13항 중 어느 한 항에 있어서, 상기 제2 프롬프트를 제공하는 단계는 상기 사용자의 정보의 캡처에 영향을 미치는 조건을 조정하도록 상기 사용자에게 지시하는 표시를 제공하는 단계를 포함하는, 방법.
제9항 내지 제14항 중 어느 한 항에 있어서, 상기 제2 프롬프트를 제공하는 단계는 상기 사용자의 머리의 위치를 이동시키도록 상기 사용자에게 지시하는 표시를 제공하는 단계를 포함하는, 방법.
제9항 내지 제15항 중 어느 한 항에 있어서, 상기 제2 프롬프트를 제공하는 단계는 상기 사용자의 얼굴 특징부들 중 하나 이상의 얼굴 특징부들의 세트를 하나 이상의 얼굴 표정들의 미리정의된 세트 내에 위치시키도록 상기 사용자에게 지시하는 표시를 제공하는 단계를 포함하는, 방법.
제9항 내지 제16항 중 어느 한 항에 있어서, 상기 제2 프롬프트를 제공하는 단계는 상기 컴퓨터 시스템을 상기 사용자의 신체의 미리정의된 부분을 향해 배향시키도록 상기 컴퓨터 시스템의 위치를 조정하도록 상기 사용자에게 지시하는 표시를 제공하는 단계를 포함하는, 방법.
제1항 내지 제17항 중 어느 한 항에 있어서, 상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 그리고 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 정보를 캡처하도록 지시하는 상기 프롬프트는 상기 하나 이상의 디스플레이 생성 컴포넌트들 중 제1 디스플레이 생성 컴포넌트를 통해 디스플레이되고, 상기 방법은,
상기 사용자와 관련된 상기 정보를 캡처한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들 중 상기 제1 디스플레이 생성 컴포넌트와는 상이한 제2 디스플레이 생성 컴포넌트를 통해, 상기 사용자의 표현의 미리보기를 디스플레이하는 단계를 추가로 포함하는, 방법.
제1항 내지 제18항 중 어느 한 항에 있어서,
상기 사용자와 관련된 상기 정보를 캡처한 후에, 상기 컴퓨터 시스템이 상기 사용자의 신체 상에 배치되었다는 것을 검출하는 단계; 및
상기 컴퓨터 시스템이 상기 사용자의 신체 상에 배치되었다는 것을 검출한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자의 표현의 미리보기를 디스플레이하는 단계를 추가로 포함하는, 방법.
제1항 내지 제19항 중 어느 한 항에 있어서, 상기 사용자와 관련된 상기 정보를 캡처하는 단계는 상기 사용자의 신체의 제1 부분에 관한 제1 정보를 캡처하는 단계를 포함하고, 상기 방법은,
상기 사용자의 신체의 제1 부분과 관련된 상기 제1 정보를 캡처한 후에, 상기 컴퓨터 시스템이 상기 사용자의 신체 상에 배치되었다는 것을 검출하는 단계; 및
상기 컴퓨터 시스템이 상기 사용자의 신체 상에 배치되었다는 것을 검출한 후에, 상기 사용자의 신체의 제1 부분과는 상이한 상기 사용자의 신체의 제2 부분과 관련된 제2 정보를 캡처하기 위한 프로세스를 개시하는 단계를 추가로 포함하는, 방법.
제20항에 있어서, 상기 사용자의 신체의 제2 부분과 관련된 상기 제2 정보를 캡처하기 위한 상기 프로세스를 개시하는 단계는, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자가 상기 사용자의 신체의 제2 부분을 위치시키기 위한 위치를 나타내는 시각적 표시를 디스플레이하는 단계를 포함하는, 방법.
제20항 또는 제21항에 있어서, 상기 사용자의 신체의 제2 부분과 관련된 상기 제2 정보를 캡처하기 위한 상기 프로세스를 개시하는 단계는 상기 사용자의 신체의 제2 부분의 배향을 조정하도록 상기 사용자에게 지시하는 프롬프트를 제공하는 단계를 포함하는, 방법.
제20항 내지 제22항 중 어느 한 항에 있어서,
상기 사용자의 신체의 제2 부분과 관련된 상기 제2 정보를 캡처한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 사용자의 표현을 디스플레이하는 단계를 추가로 포함하는, 방법.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 제1항 내지 제23항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은 제1항 내지 제23항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
제1항 내지 제23항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은,
상기 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 그리고 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하기 위한;
상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 지시하는 상기 프롬프트를 디스플레이하는 것에 후속적으로, 상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출하기 위한; 그리고
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 상기 사용자와 관련된 정보를 캡처하기 위한 - 상기 컴퓨터 시스템은 상기 정보를 사용하여 상기 사용자의 표현을 생성하도록 구성됨 - 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은,
상기 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 그리고 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하기 위한;
상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 지시하는 상기 프롬프트를 디스플레이하는 것에 후속적으로, 상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출하기 위한; 그리고
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 상기 사용자와 관련된 정보를 캡처하기 위한 - 상기 컴퓨터 시스템은 상기 정보를 사용하여 상기 사용자의 표현을 생성하도록 구성됨 - 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
상기 컴퓨터 시스템이 사용자의 신체 상에 배치되는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 그리고 상기 컴퓨터 시스템을 사용하여 상기 사용자와 관련된 정보를 캡처하도록 지시하는 프롬프트를 디스플레이하기 위한 수단;
상기 사용자의 신체로부터 상기 컴퓨터 시스템을 제거하도록 지시하는 상기 프롬프트를 디스플레이하는 것에 후속적으로, 상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출하기 위한 수단; 및
상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되었다는 것을 검출한 후에, 상기 사용자와 관련된 정보를 캡처하기 위한 수단 - 상기 컴퓨터 시스템은 상기 정보를 사용하여 상기 사용자의 표현을 생성하도록 구성됨 - 을 포함하는, 컴퓨터 시스템.
방법으로서,
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템에서,
사용자의 표현을 생성하기 위한 등록 프로세스 동안, 상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하는 단계;
상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보를 캡처한 후에, 상기 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 상기 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 상기 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보에 기초하여 상기 사용자의 표현을 생성하는 단계; 및
상기 사용자의 표현을 생성한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하는 단계를 포함하는, 방법.
제30항에 있어서, 상기 확장 현실 환경은 증강 현실 환경을 포함하는, 방법.
제30항에 있어서, 상기 확장 현실 환경은 가상 현실 환경을 포함하는, 방법.
제30항 내지 제32항 중 어느 한 항에 있어서,
상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보를 캡처하는 단계는 상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되는 동안 상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보를 캡처하는 단계를 포함하고,
상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하는 단계는 상기 컴퓨터 시스템이 상기 사용자의 신체 상에 배치되었다는 것을 검출한 후에 상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하는 단계를 포함하는, 방법.
제30항 내지 제33항 중 어느 한 항에 있어서, 상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하는 단계는 상기 컴퓨터 시스템의 적어도 일부분에 대한 상기 사용자의 이동에 기초하여 상기 표현을 애니메이션화하는 단계를 포함하는, 방법.
제34항에 있어서, 상기 표현을 애니메이션화하는 단계는 상기 컴퓨터 시스템의 적어도 일부분에 대한 상기 사용자의 이동의 미러 이미지인 상기 표현의 이동을 디스플레이하는 단계를 포함하는, 방법.
제30항 내지 제35항 중 어느 한 항에 있어서, 상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하는 단계는 상기 사용자가 위치되는 물리적 환경에서의 상기 사용자의 제2 배향의 미러 이미지인 제1 배향으로 상기 표현을 디스플레이하는 단계를 포함하는, 방법.
제30항 내지 제36항 중 어느 한 항에 있어서, 상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하는 단계는 상기 확장 현실 환경에서 상기 표현 주위에 프레임을 디스플레이하는 단계를 포함하고, 상기 프레임은 상기 확장 현실 환경 내의 상기 사용자의 표현이 상기 사용자가 위치되는 물리적 환경에서의 상기 사용자의 배향의 미러 이미지인 배향을 가짐을 나타내는, 방법.
제30항 내지 제37항 중 어느 한 항에 있어서,
상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 표현의 시각적 특성을 편집하기 위한 하나 이상의 선택가능 옵션들을 디스플레이하는 단계를 추가로 포함하는, 방법.
제38항에 있어서, 상기 하나 이상의 선택가능 옵션들은 상기 표현의 아이웨어(eyewear)를 편집하기 위한 아이웨어 선택가능 옵션을 포함하는, 방법.
제38항 또는 제39항에 있어서, 상기 하나 이상의 선택가능 옵션들은 상기 표현의 액세서리를 편집하기 위한 액세서리 선택가능 옵션을 포함하는, 방법.
제38항 내지 제40항 중 어느 한 항에 있어서, 상기 하나 이상의 선택가능 옵션들은 상기 표현의 피부 톤을 편집하기 위한 하나 이상의 피부 톤 선택가능 옵션들을 포함하는, 방법.
제41항에 있어서, 상기 하나 이상의 피부 톤 선택가능 옵션들은 상기 표현의 얼굴의 피부 톤을 편집하기 위한 제1 피부 톤 선택가능 옵션, 및 상기 표현의 손들의 피부 톤을 편집하기 위한 제2 피부 톤 선택가능 옵션을 포함하는, 방법.
제38항 내지 제42항 중 어느 한 항에 있어서, 상기 하나 이상의 선택가능 옵션들은, 선택될 때, 상기 사용자의 하나 이상의 신체적 특성들에 관한 정보를 재캡처하기 위한 프로세스를 개시하는 재캡처 선택가능 옵션을 포함하는, 방법.
제38항 내지 제43항 중 어느 한 항에 있어서, 상기 하나 이상의 선택가능 옵션들은, 선택될 때, 상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 제2 정보를 캡처하는 것을 포함하는 상기 등록 프로세스의 단계를 개시하는 재시작 선택가능 옵션을 포함하는, 방법.
제30항 내지 제44항 중 어느 한 항에 있어서, 상기 사용자의 하나 이상의 신체적 특성들은 상기 사용자의 얼굴의 하나 이상의 제1 특징부들, 및 상기 사용자의 손의 하나 이상의 제2 특징부들을 포함하고, 상기 방법은,
상기 사용자의 표현을 생성하기 위한 상기 등록 프로세스 동안 그리고 상기 컴퓨터 시스템이 상기 사용자의 신체로부터 제거되는 동안, 상기 사용자의 얼굴의 하나 이상의 제1 특징부들을 캡처하는 단계;
상기 사용자의 얼굴의 하나 이상의 제1 특징부들을 캡처한 후에, 상기 컴퓨터 시스템이 상기 사용자의 신체 상에 배치된다는 것을 검출하는 단계; 및
상기 컴퓨터 시스템이 상기 사용자의 신체 상에 배치된다는 것을 검출한 후에, 상기 사용자의 손의 하나 이상의 제2 특징부들을 캡처하는 단계를 추가로 포함하는, 방법.
제30항 내지 제45항 중 어느 한 항에 있어서, 상기 등록 프로세스는 상기 컴퓨터 시스템에 대한 셋업 프로세스의 일부이고, 상기 방법은,
상기 컴퓨터 시스템에 대한 상기 셋업 프로세스 동안, 상기 사용자의 하나 이상의 생체측정 특징부들을 캡처하는 단계를 추가로 포함하는, 방법.
제30항 내지 제46항 중 어느 한 항에 있어서, 상기 등록 프로세스는 상기 컴퓨터 시스템에 대한 셋업 프로세스의 일부이고, 상기 방법은,
상기 컴퓨터 시스템에 대한 상기 셋업 프로세스 동안, 상기 컴퓨터 시스템이 하나 이상의 입력 기법들의 검출을 캘리브레이션할 수 있게 하는 입력 캘리브레이션 프로세스를 수행하는 단계를 추가로 포함하는, 방법.
제30항 내지 제47항 중 어느 한 항에 있어서, 상기 등록 프로세스는 상기 컴퓨터 시스템에 대한 셋업 프로세스의 일부이고, 상기 방법은,
상기 컴퓨터 시스템에 대한 상기 셋업 프로세스 동안, 공간 오디오 캘리브레이션 프로세스를 수행하는 단계를 추가로 포함하는, 방법.
제30항 내지 제48항 중 어느 한 항에 있어서, 상기 등록 프로세스는 상기 컴퓨터 시스템에 대한 셋업 프로세스의 일부이고, 상기 방법은,
상기 컴퓨터 시스템에 대한 상기 셋업 프로세스 동안, 실시간 통신 세션 동안 상기 표현을 사용하기 위한 지시사항들의 표시를 제공하는 단계를 추가로 포함하는, 방법.
제30항 내지 제49항 중 어느 한 항에 있어서, 상기 사용자의 하나 이상의 신체적 특성들은 상기 사용자의 의류를 포함하고, 상기 표현은 상기 사용자의 표현을 생성하기 위한 상기 등록 프로세스 동안 검출되었던 상기 사용자의 의류에 기초한 의류 표현을 포함하는, 방법.
제30항 내지 제50항 중 어느 한 항에 있어서,
상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 메뉴 사용자 인터페이스를 디스플레이하는 단계를 추가로 포함하고, 상기 메뉴 사용자 인터페이스는,
선택될 때, 상기 컴퓨터 시스템으로 하여금 상기 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하게 하는 선택가능 옵션을 포함하는, 방법.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 제30항 내지 제51항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은 제30항 내지 제51항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
제30항 내지 제51항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은,
사용자의 표현을 생성하기 위한 등록 프로세스 동안, 상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하기 위한;
상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보를 캡처한 후에, 상기 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 상기 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 상기 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보에 기초하여 상기 사용자의 표현을 생성하기 위한; 그리고
상기 사용자의 표현을 생성한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하기 위한 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은,
사용자의 표현을 생성하기 위한 등록 프로세스 동안, 상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하기 위한;
상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보를 캡처한 후에, 상기 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 상기 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 상기 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보에 기초하여 상기 사용자의 표현을 생성하기 위한; 그리고
상기 사용자의 표현을 생성한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
사용자의 표현을 생성하기 위한 등록 프로세스 동안, 상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 정보를 캡처하기 위한 수단;
상기 컴퓨터 시스템의 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보를 캡처한 후에, 상기 사용자의 하나 이상의 캡처된 신체적 특성들에 기초하여 상기 표현의 하나 이상의 신체적 특성들을 선택하는 것을 포함하는, 상기 사용자의 하나 이상의 신체적 특성들에 관한 상기 정보에 기초하여 상기 사용자의 표현을 생성하기 위한 수단; 및
상기 사용자의 표현을 생성한 후에, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 사용자의 표현의 적어도 일부분을 디스플레이하기 위한 수단을 포함하는, 컴퓨터 시스템.
방법으로서,
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하는 단계 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하는 단계; 및
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보의 양이 변화하는 것에 응답하여, 상기 제1 컴퓨터 시스템이, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하는 단계를 포함하고, 상기 제1 컴퓨터 시스템이 상기 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하는 단계는,
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제1 충실도 미만인 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계; 및
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 상기 제1 시간 임계치 초과이고 상기 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 충실도 미만인 제3 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제58항에 있어서, 상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제1 사용자와의 실시간 통신 세션 동안 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제58항 또는 제59항에 있어서,
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보의 양이 변화하지 않는 것에 응답하여, 상기 제1 충실도로 상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 것을 유지하는 단계를 추가로 포함하는, 방법.
제58항 내지 제60항 중 어느 한 항에 있어서, 상기 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계는 하나 이상의 의인화된 특징부들과 함께 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하고, 상기 제2 충실도 미만인 상기 제3 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계는, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부 없이 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제61항에 있어서, 상기 하나 이상의 의인화된 특징부들 중 상기 각자의 의인화된 특징부 없이 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제2 사용자의 표현이 상기 하나 이상의 의인화된 특징부들과 함께 디스플레이될 때 디스플레이되는 상기 제2 사용자의 표현의 제2 크기 미만인 제1 크기로 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제61항 또는 제62항에 있어서, 상기 하나 이상의 의인화된 특징부들과 함께 상기 제2 사용자의 표현을 디스플레이하는 단계는 제4 시각적 충실도로 상기 제2 사용자의 표현의 제1 부분을 디스플레이하는 단계를 포함하고, 상기 하나 이상의 의인화된 특징부들 중 상기 각자의 의인화된 특징부 없이 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제4 충실도 미만인 제5 시각적 충실도로 상기 제2 사용자의 표현의 제1 부분을 디스플레이하는 단계를 포함하는, 방법.
제58항 내지 제63항 중 어느 한 항에 있어서,
상기 제1 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계는, 상기 디스플레이 생성 컴포넌트를 통해, 제1 정확도로 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하고;
상기 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계는, 상기 디스플레이 생성 컴포넌트를 통해, 상기 제1 정확도 미만인 제2 정확도로 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제58항 내지 제64항 중 어느 한 항에 있어서,
상기 사용자의 각자의 유형의 이동을 검출하는 단계; 및
상기 사용자의 각자의 유형의 이동을 검출하는 것에 응답하여,
상기 제2 사용자의 표현이 상기 제1 충실도로 디스플레이되고 있다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 사용자의 각자의 유형의 이동에 기초한 상기 제2 사용자의 표현의 이동을 디스플레이하고;
상기 제2 사용자의 표현이 상기 제2 충실도로 디스플레이되고 있다는 결정에 따라, 상기 사용자의 각자의 유형의 이동에 기초한 상기 제2 사용자의 표현의 이동의 디스플레이를 보류하는 단계를 포함하는, 방법.
제58항 내지 제65항 중 어느 한 항에 있어서,
상기 제1 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계는 제1 평균 파티클(particle) 크기를 갖는 복수의 파티클들로 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하고;
상기 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제1 평균 파티클 크기 초과인 제2 평균 파티클 크기를 갖는 복수의 파티클들로 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제58항 내지 제66항 중 어느 한 항에 있어서,
상기 제1 충실도는 제1 양의 블러(blur)를 포함하고;
상기 제2 충실도는 상기 제1 양의 블러 초과인 제2 양의 블러를 포함하는, 방법.
제58항 내지 제67항 중 어느 한 항에 있어서, 상기 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제2 사용자의 형상에 기초하는 형상을 갖는 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제58항 내지 제68항 중 어느 한 항에 있어서,
상기 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 동안,
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가 상기 제2 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 충실도 미만인 상기 제3 충실도로 상기 제2 사용자의 표현을 디스플레이하는 단계를 추가로 포함하는, 방법.
제58항 내지 제69항 중 어느 한 항에 있어서,
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보는 상기 제2 사용자의 신체의 제1 부분의 상태에 관한 직접 정보를 포함하고;
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보는 상기 제2 사용자의 신체의 제1 부분과는 상이한 상기 제2 사용자의 신체의 제2 부분의 상태에 관한 직접 정보를 포함하지 않는, 방법.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 제58항 내지 제70항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은 제58항 내지 제70항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
제58항 내지 제70항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하기 위한; 그리고
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보의 양이 변화하는 것에 응답하여, 상기 제1 컴퓨터 시스템이, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하기 위한 명령어들을 포함하고, 상기 제1 컴퓨터 시스템이 상기 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하는 것은,
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제1 충실도 미만인 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 것; 및
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 상기 제1 시간 임계치 초과이고 상기 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 충실도 미만인 제3 충실도로 상기 제2 사용자의 표현을 디스플레이하는 것을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하기 위한; 그리고
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보의 양이 변화하는 것에 응답하여, 상기 제1 컴퓨터 시스템이, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하기 위한 명령어들을 포함하고, 상기 제1 컴퓨터 시스템이 상기 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하는 것은,
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제1 충실도 미만인 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 것; 및
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 상기 제1 시간 임계치 초과이고 상기 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 충실도 미만인 제3 충실도로 상기 제2 사용자의 표현을 디스플레이하는 것을 포함하는, 제1 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 제1 충실도로 확장 현실 환경 내에 제2 사용자의 표현을 디스플레이하기 위한 수단 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 신체의 상태에 관한 직접 정보의 양이 변화하기 위한 수단; 및
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보의 양이 변화하는 것에 응답하여, 상기 제1 컴퓨터 시스템이, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하기 위한 수단을 포함하고, 상기 제1 컴퓨터 시스템이 상기 상이한 충실도로 상기 제2 사용자의 표현을 디스플레이하기 시작하는 것은,
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 제1 시간 임계치 초과이고 제2 시간 임계치 미만인 제1 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제1 충실도 미만인 제2 충실도로 상기 제2 사용자의 표현을 디스플레이하는 것; 및
상기 제2 사용자의 신체의 상태에 관한 상기 직접 정보가, 상기 제1 시간 임계치 초과이고 상기 제2 시간 임계치 초과인 제2 시간 동안 수신되지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 충실도 미만인 제3 충실도로 상기 제2 사용자의 표현을 디스플레이하는 것을 포함하는, 제1 컴퓨터 시스템.
방법으로서,
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 단계 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 발화(utterance)에 대응하는 정보를 수신하는 단계; 및
상기 제2 사용자의 발화에 대응하는 상기 정보를 수신하는 것에 응답하여, 상기 제2 사용자의 발화에 대응하는 상기 정보에 기초하여 상기 제2 사용자의 표현의 외관을 업데이트하는 단계를 포함하고, 상기 제2 사용자의 표현의 외관을 업데이트하는 단계는,
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 단계 - 상기 제1 입 표현은 상기 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 상기 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 단계 - 상기 제2 입 표현은 상기 제2 입 표현을 생성하기 위해 상기 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 생성됨 - 를 포함하는, 방법.
제77항에 있어서, 상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제1 사용자와의 실시간 통신 세션 동안 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제77항 또는 제78항에 있어서, 상기 제1 입 표현은 상기 제2 사용자의 발화에 대응하는 상기 오디오 정보에 기초하여 생성되는 제1 부분, 및 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 생성되는 제2 부분을 포함하고, 상기 제1 부분 및 상기 제2 부분은 조합되어 상기 제1 입 표현을 형성하는, 방법.
제79항에 있어서, 상기 제2 부분은 정적인, 방법.
제79항에 있어서, 상기 제2 부분은 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 움직이는, 방법.
제79항 내지 제81항 중 어느 한 항에 있어서,
상기 제2 사용자의 발화에 대응하는 상기 오디오 정보에 기초하여 생성되는 상기 제1 부분은 제1 시각적 강조도를 포함하고;
상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 생성되는 상기 제2 부분은 제2 시각적 강조도를 포함하며;
상기 제1 시각적 강조도 및 상기 제2 시각적 강조도의 상대 크기는 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하는, 방법.
제82항에 있어서, 상기 제1 시각적 강조도 및 상기 제2 시각적 강조도의 상대 크기는 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 변화하는, 방법.
제77항 내지 제83항 중 어느 한 항에 있어서,
상기 제2 사용자의 발화에 대응하는 상기 오디오 정보에 기초하여 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보의 정확성을 결정하는 단계를 추가로 포함하는, 방법.
제77항 내지 제84항 중 어느 한 항에 있어서,
상기 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 동안,
하나 이상의 기준들의 제2 세트가 충족된다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 입의 표현의 제1 부분을 상기 입의 표현의 제1 부분과는 상이한 상기 입의 표현의 제2 부분의 제2 투명도와는 상이한 제1 투명도로 디스플레이하는 단계를 추가로 포함하는, 방법.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 제77항 내지 제85항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은 제77항 내지 제85항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
제77항 내지 제85항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 발화에 대응하는 정보를 수신하기 위한; 그리고
상기 제2 사용자의 발화에 대응하는 상기 정보를 수신하는 것에 응답하여, 상기 제2 사용자의 발화에 대응하는 상기 정보에 기초하여 상기 제2 사용자의 표현의 외관을 업데이트하기 위한 명령어들을 포함하고, 상기 제2 사용자의 표현의 외관을 업데이트하는 것은,
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 것 - 상기 제1 입 표현은 상기 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 상기 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 것 - 상기 제2 입 표현은 상기 제2 입 표현을 생성하기 위해 상기 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 생성됨 - 을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 발화에 대응하는 정보를 수신하기 위한; 그리고
상기 제2 사용자의 발화에 대응하는 상기 정보를 수신하는 것에 응답하여, 상기 제2 사용자의 발화에 대응하는 상기 정보에 기초하여 상기 제2 사용자의 표현의 외관을 업데이트하기 위한 명령어들을 포함하고, 상기 제2 사용자의 표현의 외관을 업데이트하는 것은,
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 것 - 상기 제1 입 표현은 상기 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 상기 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 것 - 상기 제2 입 표현은 상기 제2 입 표현을 생성하기 위해 상기 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 생성됨 - 을 포함하는, 제1 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 수단 - 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동함 -;
상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 제2 사용자의 발화에 대응하는 정보를 수신하기 위한 수단; 및
상기 제2 사용자의 발화에 대응하는 상기 정보를 수신하는 것에 응답하여, 상기 제2 사용자의 발화에 대응하는 상기 정보에 기초하여 상기 제2 사용자의 표현의 외관을 업데이트하기 위한 수단을 포함하고, 상기 제2 사용자의 표현의 외관을 업데이트하는 것은,
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 하나 이상의 기준들의 세트를 만족시키지 않는다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제1 입 표현을 디스플레이하는 것 - 상기 제1 입 표현은 상기 제2 사용자의 발화에 대응하는 오디오 정보에 기초하여 생성됨 -; 및
상기 제2 사용자의 입의 검출된 신체 상태에 관한 정보가 상기 하나 이상의 기준들의 세트를 만족시킨다는 결정에 따라, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제2 입 표현을 디스플레이하는 것 - 상기 제2 입 표현은 상기 제2 입 표현을 생성하기 위해 상기 제2 사용자의 발화에 대응하는 오디오 정보를 사용하지 않고서 상기 제2 사용자의 입의 검출된 신체 상태에 관한 상기 정보에 기초하여 생성됨 - 을 포함하는, 제1 컴퓨터 시스템.
방법으로서,
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 모발의 시각적 표현을 포함하며, 상기 제2 사용자의 모발의 시각적 표현은,
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 상기 모발의 표현의 제1 부분 - 상기 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 상기 제1 거리 초과인 제2 거리에 위치되는 상기 모발의 표현의 제2 부분 - 상기 모발의 표현의 제2 부분은 상기 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함하는, 방법.
제92항에 있어서, 상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제1 사용자와의 실시간 통신 세션 동안 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제92항 또는 제93항에 있어서, 상기 제2 사용자의 모발의 시각적 표현은 상기 제2 사용자의 얼굴 모발의 시각적 표현인, 방법.
제92항 내지 제94항 중 어느 한 항에 있어서, 상기 제2 사용자의 모발의 시각적 표현은 상기 제2 사용자의 수염의 시각적 표현이고 상기 제2 사용자의 다른 모발의 시각적 표현이 아닌, 방법.
제92항 내지 제95항 중 어느 한 항에 있어서, 상기 제1 시각적 충실도는 제1 양의 블러링을 포함하고, 상기 제2 시각적 충실도는 상기 제1 양의 블러링 초과인 제2 양의 블러링을 포함하는, 방법.
제92항 내지 제96항 중 어느 한 항에 있어서, 상기 제1 시각적 충실도는 제1 평균 파티클 크기를 갖는 복수의 파티클들을 사용하여 상기 모발의 표현을 디스플레이하는 것을 포함하고, 상기 제2 시각적 충실도는 상기 제1 평균 파티클 크기 초과인 제2 평균 파티클 크기를 갖는 복수의 파티클들을 사용하여 상기 모발의 표현을 디스플레이하는 것을 포함하는, 방법.
제92항 내지 제97항 중 어느 한 항에 있어서, 상기 제1 시각적 충실도는 제1 양의 불투명도를 포함하고, 상기 제2 시각적 충실도는 상기 제1 양의 불투명도 미만인 제2 양의 불투명도를 포함하는, 방법.
제92항 내지 제98항 중 어느 한 항에 있어서,
상기 제2 사용자의 모발의 시각적 표현은 상기 제2 사용자의 얼굴 모발의 시각적 표현이고;
상기 제2 사용자의 얼굴 모발의 시각적 표현은 부분적으로 투명한, 방법.
제99항에 있어서,
상기 제2 사용자의 각자의 신체 부위는 상기 제2 사용자의 얼굴이고;
상기 제1 시각적 충실도는 제1 양의 투명도를 포함하고, 상기 제2 시각적 충실도는 상기 제1 양의 투명도 초과인 제2 양의 투명도를 포함하는, 방법.
제99항 또는 제100항에 있어서,
상기 제2 사용자의 각자의 신체 부위는 상기 제2 사용자의 목이고;
상기 제1 시각적 충실도는 제1 양의 투명도를 포함하고, 상기 제2 시각적 충실도는 상기 제1 양의 투명도 초과인 제2 양의 투명도를 포함하는, 방법.
제92항 내지 제101항 중 어느 한 항에 있어서,
상기 제2 사용자의 모발이 미리정의된 길이를 초과한다는 결정에 따라, 상기 제2 사용자의 모발의 시각적 표현은 상기 제2 사용자의 표현과는 별개인 모발의 3차원 표현을 포함하고;
상기 제2 사용자의 모발이 상기 미리정의된 길이를 초과하지 않는다는 결정에 따라, 상기 제2 사용자의 모발의 시각적 표현은 모발의 대응하는 3차원 표현 없이 상기 제2 사용자의 얼굴의 표현 위에 적용되는 모발의 텍스처화된 표현을 포함하는, 방법.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 제92항 내지 제102항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은 제92항 내지 제102항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
제92항 내지 제102항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 모발의 시각적 표현을 포함하며, 상기 제2 사용자의 모발의 시각적 표현은,
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 상기 모발의 표현의 제1 부분 - 상기 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 상기 제1 거리 초과인 제2 거리에 위치되는 상기 모발의 표현의 제2 부분 - 상기 모발의 표현의 제2 부분은 상기 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 모발의 시각적 표현을 포함하며, 상기 제2 사용자의 모발의 시각적 표현은,
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 상기 모발의 표현의 제1 부분 - 상기 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 상기 제1 거리 초과인 제2 거리에 위치되는 상기 모발의 표현의 제2 부분 - 상기 모발의 표현의 제2 부분은 상기 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함하는, 제1 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 수단을 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 모발의 시각적 표현을 포함하며, 상기 제2 사용자의 모발의 시각적 표현은,
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 제1 거리에 위치되는 상기 모발의 표현의 제1 부분 - 상기 모발의 표현의 제1 부분은 제1 시각적 충실도를 포함함 -; 및
상기 제2 사용자의 각자의 신체 부위에 대응하는 상기 제2 사용자의 표현의 일부분으로부터 상기 제1 거리 초과인 제2 거리에 위치되는 상기 모발의 표현의 제2 부분 - 상기 모발의 표현의 제2 부분은 상기 제1 시각적 충실도 미만인 제2 시각적 충실도를 포함함 - 을 포함하는, 제1 컴퓨터 시스템.
방법으로서,
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템에서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 상기 제2 사용자의 표현의 제1 부분 - 상기 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 상기 경계에 대응하지 않는 상기 제2 사용자의 표현의 제2 부분 - 상기 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 상기 제1 시각적 외관은 상기 제2 시각적 외관에 비해 강조됨 - 을 포함하는, 방법.
제109항에 있어서, 상기 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하는 단계는 상기 제1 사용자와의 실시간 통신 세션 동안 상기 제2 사용자의 표현을 디스플레이하는 단계를 포함하는, 방법.
제109항 또는 제110항에 있어서,
상기 확장 현실 환경 내에 제1 배향으로 상기 제2 사용자의 표현을 디스플레이하는 동안,
상기 제2 사용자의 표현의 배향이 상기 제1 배향으로부터 제2 배향으로 변화한다는 결정에 따라, 상기 디스플레이 생성 컴포넌트를 통해,
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 제2 경계에 대응하는 상기 제2 사용자의 표현의 제3 부분 - 상기 제2 사용자의 표현의 제3 부분은 상기 제1 시각적 외관으로 디스플레이됨 -; 및
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 상기 제2 경계에 대응하지 않는 상기 제2 사용자의 표현의 제4 부분 - 상기 제2 사용자의 표현의 제4 부분은 상기 제2 시각적 외관으로 디스플레이되고, 상기 제1 시각적 외관은 상기 제2 시각적 외관에 비해 강조됨 - 을 디스플레이하고;
상기 제2 사용자의 표현의 배향이 변화하지 않는다는 결정에 따라, 상기 확장 현실 환경 내에 상기 제1 배향으로 상기 제2 사용자의 표현을 디스플레이하는 것을 유지하는 단계를 추가로 포함하는, 방법.
제111항에 있어서, 상기 제2 사용자의 표현의 배향은 상기 제1 사용자의 시점의 변화에 기초하여 상기 제1 배향으로부터 상기 제2 배향으로 변화하는, 방법.
제111항에 있어서, 상기 제2 사용자의 표현의 배향은 상기 확장 현실 환경에서의 상기 제2 사용자의 표현의 이동에 기초하여 상기 제1 배향으로부터 상기 제2 배향으로 변화하는, 방법.
제109항 내지 제113항 중 어느 한 항에 있어서,
상기 확장 현실 환경 내에 제1 각도로 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제5 부분의 시각적 강조를 감소시키는 각자의 시각적 효과가 적용된 상기 제2 사용자의 표현의 제5 부분을 디스플레이하는 단계; 및
상기 제2 사용자의 표현이 상기 확장 현실 환경 내에 상기 제1 각도와는 상이한 제2 각도로 디스플레이되는 것에 응답하여, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 제2 사용자의 표현의 제6 부분의 시각적 강조를 감소시키는 상기 각자의 시각적 효과가 적용된, 상기 제2 사용자의 표현의 제5 부분과는 상이한 상기 제2 사용자의 표현의 제6 부분을 디스플레이하는 단계를 추가로 포함하는, 방법.
제114항에 있어서, 상기 제2 사용자의 표현의 제6 부분의 시각적 강조를 감소시키는 상기 각자의 시각적 효과가 적용된 상기 제2 사용자의 표현의 제6 부분을 디스플레이하는 단계는 상기 제2 사용자의 표현의 제5 부분의 시각적 강조를 감소시키는 상기 각자의 시각적 효과가 적용된 상기 제2 사용자의 표현의 제5 부분으로부터 상기 제2 사용자의 표현의 제6 부분의 시각적 강조를 감소시키는 상기 각자의 시각적 효과가 적용된 상기 제2 사용자의 표현의 제6 부분으로의 점진적인 전이를 디스플레이하는 단계를 포함하는, 방법.
제109항 내지 제115항 중 어느 한 항에 있어서,
상기 확장 현실 환경 내에 상기 제1 사용자의 시점으로부터 전방 배향으로 상기 제2 사용자의 표현을 디스플레이하는 동안, 하나 이상의 의인화된 특징부들과 함께 상기 제2 사용자의 표현을 디스플레이하는 단계; 및
상기 제2 사용자의 표현이 상기 확장 현실 환경 내에 상기 제1 사용자의 시점으로부터 후방 배향으로 디스플레이되는 것에 응답하여, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 상기 하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부 없이 상기 제2 사용자의 표현을 디스플레이하는 단계를 추가로 포함하는, 방법.
제109항 내지 제116항 중 어느 한 항에 있어서,
상기 확장 현실 환경 내에 상기 제1 사용자의 시점으로부터 후방 배향으로 상기 제2 사용자의 표현을 디스플레이하는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부 없이 상기 제2 사용자의 표현을 디스플레이하는 단계; 및
상기 제2 사용자의 표현이 상기 확장 현실 환경 내에 상기 제1 사용자의 시점으로부터 전방 배향으로 디스플레이되는 것에 응답하여, 상기 하나 이상의 의인화된 특징부들 중 각자의 의인화된 특징부와 함께 상기 제2 사용자의 표현을 디스플레이하는 단계를 추가로 포함하는, 방법.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 제109항 내지 제117항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은 제109항 내지 제117항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 컴퓨터 시스템으로서,
제109항 내지 제117항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는, 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 상기 제2 사용자의 표현의 제1 부분 - 상기 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 상기 경계에 대응하지 않는 상기 제2 사용자의 표현의 제2 부분 - 상기 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 상기 제1 시각적 외관은 상기 제2 시각적 외관에 비해 강조됨 - 을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
하나 이상의 프로세서들; 및
상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 상기 하나 이상의 프로그램들은,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 명령어들을 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 상기 제2 사용자의 표현의 제1 부분 - 상기 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 상기 경계에 대응하지 않는 상기 제2 사용자의 표현의 제2 부분 - 상기 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 상기 제1 시각적 외관은 상기 제2 시각적 외관에 비해 강조됨 - 을 포함하는, 제1 컴퓨터 시스템.
하나 이상의 디스플레이 생성 컴포넌트들과 통신하는 제1 컴퓨터 시스템으로서,
상기 제1 컴퓨터 시스템이 상기 제1 컴퓨터 시스템의 제1 사용자에 의해 사용되고 있는 동안, 상기 하나 이상의 디스플레이 생성 컴포넌트들을 통해, 확장 현실 환경 내에 상기 제2 사용자의 표현을 디스플레이하기 위한 수단을 포함하고, 상기 제2 사용자의 표현은 상기 제1 컴퓨터 시스템과의 라이브 통신 세션 동안 제2 컴퓨터 시스템에 의해 검출된 상기 제2 사용자의 검출된 이동에 기초하여 이동하고, 상기 제2 사용자의 표현은,
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 경계에 대응하는 상기 제2 사용자의 표현의 제1 부분 - 상기 제2 사용자의 표현의 제1 부분은 제1 시각적 외관으로 디스플레이됨 -; 및
상기 제2 사용자의 표현과 상기 확장 현실 환경의 다른 부분들 사이의 상기 경계에 대응하지 않는 상기 제2 사용자의 표현의 제2 부분 - 상기 제2 사용자의 표현의 제2 부분은 제2 시각적 외관으로 디스플레이되고, 상기 제1 시각적 외관은 상기 제2 시각적 외관에 비해 강조됨 - 을 포함하는, 제1 컴퓨터 시스템.