MR 시뮬레이션 기반 표지판 시인성을 평가하는 장치 및 그 방법
DEVICE AND METHOD FOR EVALUATION OF SIGN VISIBILITY BASED ON MR SIMULATION
특허 요약
본 개시의 일 실시예에 따른 전자 장치는, 보행 경로를 따라 이동하면서 촬영한 동영상의 특정 위치에 적어도 두 개의 테스트 표지판을 각각 정합한 MR 기반 시인성 테스트 시뮬레이션을 생성하고, 헤드 마운티드 디스플레이를 통해 MR 기반 시인성 테스트 시뮬레이션을 각각 재생하는 동안, 안구 추적 센서를 통해 사용자의 시선 데이터를 획득하고, 상기 각각의 시선 데이터에 기반하여 적어도 두 개의 테스트 표지판에 대한 시인성 파라미터를 비교할 수 있다.
청구항
번호청구항
1

전자 장치에 있어서,디스플레이;안구 추적 센서;명령어들(instructions)을 저장하는 메모리; 및적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는,제1 경로를 따라 이동하면서 촬영한 동영상의 제1 위치에 적어도 두 개의 테스트 표지판을 각각 정합하여 적어도 두 개의 시인성 테스트 시뮬레이션을 생성하고,상기 디스플레이를 통해 상기 적어도 두 개의 시인성 테스트 시뮬레이션을 재생하는 동안, 상기 안구 추적 센서를 통해 사용자의 각각의 시선 데이터를 획득하고, 및상기 각각의 시선 데이터에 기반하여 상기 적어도 두 개의 테스트 표지판에 대한 시인성 파라미터를 비교하고,상기 시인성 파라미터는 사용자가 첫 번째로 테스트 표지판을 볼 때까지 걸린 시간(Time to First Fixation), 사용자의 시선이 테스트 표지판에 머물러 있는 총 시간(Total Duration of Fixations), 전체 시뮬레이션에서의 시선 데이터의 정지 엔트로피(Scene Stationary Gaze Entropy), 전체 시뮬레이션에서 시선이 표지판에 머물러 있던 시간을 제외한 정지 엔트로피(Target Stationary Gaze Entropy), 전체 시뮬레이션에서 이동 엔트로피(Scene Transition Gaze Entropy) 중 적어도 하나를 포함하는, 전자 장치.

2

제1항에 있어서,상기 적어도 하나의 프로세서가 상기 테스트 표지판의 크기, 상기 제1 위치와 관련된 광원, 상기 광원에 따른 상기 테스트 표지판의 명도, 또는 상기 테스트 표지판의 그림자의 크기 중 적어도 하나를 고려하여 상기 제1 위치에 상기 테스트 표지판을 정합하는, 전자 장치.

3

제1항에 있어서,상기 시인성 파라미터는 시선 엔트로피 값으로 정의되고, 상기 시선 엔트로피는 상기 시선 데이터의 고정(fixation) 및 도약 안구 운동(saccade)으로 결정되는, 전자 장치.

4

삭제

5

제1항에 있어서,상기 적어도 하나의 프로세서가 상기 동영상의 화면을 일정한 면적의 영역으로 구분한 복수 개의 관심 영역(AOI)과 테스트 표지판에 대한 관심 영역에 대하여 상기 시선 엔트로피를 산출하여 상기 시인성 파라미터를 계산하는, 전자 장치.

6

제1항에 있어서,상기 디스플레이 및 상기 안구 추적 센서는 헤드 마운티드 디스플레이(Head Mounted Display, HMD)의 형태인, 전자 장치.

7

제1항에 있어서,상기 동영상은 360도 뷰를 제공하는 3차원 동영상이고, 상기 시인성 테스트 시뮬레이션은 혼합 현실(MR)기반으로 생성되는, 전자 장치.

8

MR 시뮬레이션 기반 표지판 시인성을 평가하는 방법에 있어서,복수 개의 베이스 씬(base scene) 중에서 테스트 상황에 따른 제1 경로를 따라 정해진 시간 동안 카메라로 촬영한 제1 베이스 씬을 선택하는 단계;상기 제1 베이스 씬에 적어도 두 개의 테스트 표지판을 각각 정합하여, 적어도 두 개의 시인성 테스트 시뮬레이션을 생성하는 단계;상기 적어도 두 개의 시인성 테스트 시뮬레이션을 각각 재생하는 동안, 사용자의 시선 데이터를 각각 획득하는 단계;상기 각각의 시선 데이터에 기반하여, 상기 적어도 두 개의 테스트 표지판에 대한 시인성 파라미터를 비교하는 단계; 및상기 적어도 두 개의 테스트 표지판 중 가장 시인성이 높은 표지판을 선택하는 단계를 포함하고,상기 시인성 파라미터는 사용자가 첫 번째로 테스트 표지판을 볼 때까지 걸린 시간(Time to First Fixation), 사용자의 시선이 테스트 표지판에 머물러 있는 총 시간(Total Duration of Fixations), 전체 시뮬레이션에서의 시선 데이터의 정지 엔트로피(Scene Stationary Gaze Entropy), 전체 시뮬레이션에서 시선이 표지판에 머물러 있던 시간을 제외한 정지 엔트로피(Target Stationary Gaze Entropy), 전체 시뮬레이션에서 이동 엔트로피(Scene Transition Gaze Entropy) 중 적어도 하나를 포함하는, 방법.

9

제8항에 있어서,상기 적어도 두 개의 시인성 테스트 시뮬레이션을 생성하는 단계는,상기 테스트 표지판의 크기, 광원, 상기 광원에 따른 상기 테스트 표지판의 명도, 또는 상기 테스트 표지판의 그림자의 크기 중 적어도 하나를 고려하여 제1 위치에 상기 테스트 표지판을 정합하는, 방법.

10

제8항에 있어서,상기 시인성 파라미터는 시선 엔트로피 값으로 정의되고, 상기 시선 엔트로피는 상기 시선 데이터의 고정(fixation) 및 도약 안구 운동(saccade)으로 결정되는, 방법.

11

삭제

12

제8항에 있어서,상기 시인성 파라미터를 비교하는 단계는,상기 적어도 두 개의 시인성 테스트 시뮬레이션 각각의 화면을 일정한 면적의 영역으로 구분한 복수 개의 관심 영역(AOI)과 테스트 표지판에 대한 관심 영역에 대하여 상기 시선 엔트로피를 산출하여 상기 시인성 파라미터를 각각 계산하는, 방법.

13

제8항에 있어서,상기 사용자의 시선 데이터를 각각 획득하는 단계는, 상기 사용자가 착용한 헤드 마운티드 디스플레이(HMD)를 통해 상기 시인성 테스트 시뮬레이션을 각각 재생하고, 안구 추적 센서를 통해 사용자의 시선 데이터를 수집하는, 방법.

14

제8항에 있어서,상기 베이스 씬은 360도 뷰를 제공하는 3차원 동영상이고, 상기 시인성 테스트 시뮬레이션은 혼합 현실(MR) 기반으로 생성되는, 방법.

15

컴퓨터 판독 가능한 명령어들을 저장하는 기록 매체에 있어서, 상기 명령어들은 전자 장치에 의해 실행 시 상기 전자 장치로 하여금:복수 개의 베이스 씬(base scene) 중에서 테스트 상황에 따른 제1 경로를 따라 정해진 시간 동안 카메라로 촬영한 제1 베이스 씬을 선택하는 동작;상기 제1 베이스 씬에 적어도 두 개의 테스트 표지판을 각각 정합하여, 적어도 두 개의 시인성 테스트 시뮬레이션을 생성하는 동작;상기 적어도 두 개의 시인성 테스트 시뮬레이션을 각각 재생하는 동안, 사용자의 시선 데이터를 각각 획득하는 동작;상기 각각의 시선 데이터에 기반하여, 상기 적어도 두 개의 테스트 표지판에 대한 시인성 파라미터를 비교하는 동작; 및상기 적어도 두 개의 테스트 표지판 중 가장 시인성이 높은 표지판을 선택하는 동작을 포함하도록 설정되고,상기 시인성 파라미터는 사용자가 첫 번째로 테스트 표지판을 볼 때까지 걸린 시간(Time to First Fixation), 사용자의 시선이 테스트 표지판에 머물러 있는 총 시간(Total Duration of Fixations), 전체 시뮬레이션에서의 시선 데이터의 정지 엔트로피(Scene Stationary Gaze Entropy), 전체 시뮬레이션에서 시선이 표지판에 머물러 있던 시간을 제외한 정지 엔트로피(Target Stationary Gaze Entropy), 전체 시뮬레이션에서 이동 엔트로피(Scene Transition Gaze Entropy) 중 적어도 하나를 포함하는, 기록매체.