显示控制装置、显示控制方法以及计算机可读存储介质

技术领域

本公开涉及用于控制向车辆的乘员显示的图像的显示控制装置、显示控制方法以及计算机可读存储介质。

背景技术

日本特开2019-125188号公报中公开了一种显示控制装置，其在佩戴于车辆的乘员的眼镜型的可穿戴设备进行信息显示。该显示控制装置基于显示的优先级来决定使可穿戴设备显示的信息。

然而，日本特开2019-125188号公报的显示控制装置在没有其他的优先级高的信息的情况下，使可穿戴设备显示不重要的信息。因此，在乘员正在驾驶车辆的情况下且在驾驶等没有余裕进行操作的情况下，有可能带来烦扰。

发明内容

本公开的目的在于提供一种能够在乘员没有余裕进行操作的情况下抑制对眼睛前方的显示的烦扰的显示控制装置、显示控制方法以及程序。

第一方式所涉及的显示控制装置具备：取得部，取得要在配置于乘坐车辆的乘员的眼睛前方的显示部显示的显示信息；收集部，收集与所述车辆的环境相关的环境信息；计算部，基于由所述收集部收集到的所述环境信息来计算余裕度，所述余裕度为所述乘员对操作的余力的程度；及控制部，在由所述计算部计算出的所述余裕度低于规定值的情况下，以禁止所述显示信息向所述显示部的输出的方式进行控制。

第一方式所涉及的显示控制装置通过向具有配置于乘坐车辆的乘员的眼睛前方的显示部的终端等输出显示信息，从而使该显示部显示图像。该显示控制装置在取得部中取得显示信息，并且利用收集部收集与车辆的环境相关的环境信息。这里，车辆的环境包括车辆的周边的环境和车内的环境这两者。

另外，在该显示控制装置中，计算部计算乘员执行操作的余力的程度即余裕度，在余裕度低于规定值的情况下，控制部禁止显示信息向显示部的输出。所谓余裕度，在乘员为车辆的驾驶员的情况下，表示对驾驶的余裕的程度。例如，在车辆于交叉路口右转的情况下，在驾驶员意识到对面车辆或行人时，如果对驾驶的余裕度降低，则与稳定行驶时相比，余裕度变低。另外，例如在乘员正在与其他乘员交谈的情况下，如果对汽车导航系统中的目的地设定等操作的余裕降低，则与仅就座的情况相比，余裕度变低。

根据该显示控制装置，在乘员没有余裕进行操作的情况下，在显示部不显示显示信息，因此对乘员而言能够抑制对眼睛前方的显示的烦扰。

就第二方式所涉及的显示控制装置而言，在第一方式所述的显示控制装置中，所述收集部收集与所述车辆的周边的环境相关的周边信息作为所述环境信息，所述计算部基于所述周边信息来计算相对于所述周边的环境的所述余裕度。

在第二方式所涉及的显示控制装置中，其特征在于，所收集的环境为车辆的周边的环境。对于车辆的周边的环境，例如可举出车辆正在行驶的道路的特征、道路的拥挤程度、乘员对区域的熟悉、对面车辆或行人的存在、与前车之间的距离、车速等。根据该显示控制装置，在由于车辆的周边的环境而没有余裕进行操作的情况下，对于乘员而言能够抑制对眼睛前方的显示的烦扰。特别是，在乘员为驾驶员的情况下，能够抑制对驾驶的障碍。

就第三方式所涉及的显示控制装置而言，在第一方式或第二方式所述的显示控制装置中，所述收集部收集与车内的环境相关的车内信息作为所述环境信息，所述计算部基于所述车内信息来计算相对于所述车内的环境的余裕度。

在第三方式所涉及的显示控制装置中，其特征在于，所收集的环境为车内的环境。对于车内的环境，例如可举出同乘者的属性、乘车位置、乘员彼此的交谈的等级、车内的温度、湿度、气味等。根据该显示控制装置，在由于车内的环境而没有余裕进行操作的情况下，对于乘员而言能够抑制对眼睛前方的显示的烦扰。

就第四方式所涉及的显示控制装置而言，在第一方式至第三方式中的任一方式所述的显示控制装置中，所述计算部计算要在所述显示部显示的所述显示信息的优先级，在所述余裕度低于所述规定值且优先级低于设定值的情况下，所述控制部禁止所述显示信息向所述显示部的输出。

在第四方式所涉及的显示控制装置中，计算部构成为除了余裕度以外还能够计算优先级。根据该显示控制装置，即使在乘员没有余裕进行操作的情况下，对于优先级高的信息也不会禁止向显示部的显示。因此，能够抑制与安心/安全相关的信息对乘员的漏报。

就第五方式所涉及的显示控制装置而言，在第一方式至第四方式中的任一方式所述的显示控制装置中，具备：识别部，识别其他乘员的视线；确定部，确定由所述识别部识别出的视线的对象物；及生成部，生成用于报知由所述确定部所确定的所述对象物的所述显示信息。

在第五方式所涉及的显示控制装置中，识别部识别其他乘员的视线，确定部确定视线前方的对象物。然后，控制部使显示部显示由生成部生成的显示信息，由此向乘员报知由确定部所确定的对象物的信息。根据该显示控制装置，能够通过显示部与其他乘员之间共享信息。

第六方式所涉及的显示控制方法包括：取得步骤，取得要在配置于乘坐车辆的乘员的眼睛前方的显示部显示的显示信息；收集步骤，收集与所述车辆的环境相关的环境信息；计算步骤，基于在所述收集步骤中收集到的所述环境信息来计算余裕度，所述余裕度为所述乘员对操作的余力的程度；及控制步骤，在所述计算步骤中计算出的所述余裕度低于规定值的情况下，以禁止所述显示信息向所述显示部的输出的方式进行控制。

第六方式所涉及的显示控制方法是通过向具有配置于乘坐车辆的乘员的眼睛前方的显示部的终端等输出显示信息，从而使该显示部显示图像的方法。该显示控制方法在取得步骤中取得显示信息，并且在收集步骤中收集与车辆的环境相关的环境信息。在此，所谓车辆的环境，如上所述。另外，在该显示控制方法中，在计算步骤中计算乘员对操作的余力的程度即余裕度，在余裕度低于规定值的情况下，在控制步骤中禁止显示信息向显示部的输出。所谓余裕度，如上所述。根据该显示控制方法，在乘员没有余裕进行操作的情况下，在显示部不显示显示信息，因此对乘员而言能够抑制对眼睛前方的显示的烦扰。

第七方式所涉及的程序使计算机执行处理，所述处理包括：取得步骤，取得要在配置于乘坐车辆的乘员的眼睛前方的显示部显示的显示信息；收集步骤，收集与所述车辆的环境相关的环境信息；计算步骤，基于在所述收集步骤中收集到的所述环境信息来计算余裕度，所述余裕度为所述乘员对操作的余力的程度；及控制步骤，在所述计算步骤中计算出的所述余裕度低于规定值的情况下，以禁止所述显示信息向所述显示部的输出的方式进行控制。

第七方式所涉及的程序使计算机执行处理，以通过向具有配置于乘坐车辆的乘员的眼睛前方的显示部的终端等输出显示信息，从而使该显示部显示图像。执行了该程序的计算机在取得步骤中取得显示信息，并且在收集步骤中收集与车辆的环境相关的环境信息。在此，所谓车辆的环境，如上所述。另外，在该计算机中，在计算步骤中计算乘员对操作的余力的程度即余裕度，在余裕度低于规定值的情况下，在控制步骤中禁止显示信息向显示部的输出。所谓余裕度，如上所述。根据该程序，在乘员没有余裕进行操作的情况下，在显示部不显示显示信息，因此对乘员而言能够抑制对眼睛前方的显示的烦扰。

根据本公开，在乘员没有余裕进行操作的情况下，能够抑制对眼睛前方的显示的烦扰。

附图说明

基于以下附图详细描述本发明的示例性实施例，其中：

图1是表示第一实施方式所涉及的显示控制系统的概略结构的图。

图2是表示第一实施方式的车辆及AR眼镜的硬件结构的框图。

图3是表示第一实施方式的显示控制装置的功能结构的例子的框图。

图4是表示第一实施方式的AR眼镜的外观的立体图。

图5是表示第一实施方式的车外系统的结构的例子的框图。

图6是表示在第一实施方式的显示控制装置中执行的显示控制处理的流程的流程图。

图7是表示基于第一实施方式的显示控制处理的显示的例子的图。

图8是表示第二实施方式的显示控制装置的功能结构的例子的框图。

图9是表示第二实施方式中的车内的乘员的例子的图。

图10是表示基于第二实施方式的显示控制处理的显示的例子的图。

具体实施方式

如图1所示，第一实施方式所涉及的显示控制系统10构成为包括车辆12、显示控制装置20、作为可穿戴设备的AR(Augmented Reality：增强现实)眼镜40、车外系统60。

本实施方式的显示控制装置20及AR眼镜40搭载于车辆12。在显示控制系统10中，车辆12的显示控制装置20及车外系统60经由网络N1相互连接。

(车辆)

图2是表示搭载于本实施方式的车辆12的设备以及AR眼镜40的硬件结构的框图。车辆12除了上述的显示控制装置20以外，还包括GPS(Global Positioning System：全球定位系统)装置22、外部传感器24、内部传感器26、车内照相机28、环境传感器29。

显示控制装置20构成为包括CPU(Central Processing Unit：中央处理单元)20A、ROM(Read Only Memory：只读存储器)20B、RAM(Random Access Memory：随机存取存储器)20C、存储器20D、移动通信I/F(Inter Face：接口)20E、输入输出I/F20F以及无线通信I/F20G。CPU20A、ROM20B、RAM20C、存储器20D、移动通信I/F20E、输入输出I/F20F以及无线通信I/F20G经由总线20H彼此以能够通信的方式连接。CPU20A是处理器的一例，RAM20C是存储器的一例。

CPU20A是中央运算处理单元，执行各种程序，或者控制各部分。即，CPU20A从ROM20B读出程序，并将RAM20C作为作业区域来执行程序。如图3所示，在本实施方式中，在ROM20B存储有控制程序100。通过由CPU20A执行控制程序100，显示控制装置20作为图像取得部200、信息收集部210、计算部220以及显示控制部260发挥功能。

如图2所示，ROM20B存储有各种程序和各种数据。RAM20C作为作业区域而暂时存储程序或数据。

存储器20D由HDD(Hard Disk Drive：硬盘驱动器)或SSD(Solid State Drive：固态驱动器)构成，存储有各种程序和各种数据。

移动通信I/F20E是用于与网络N1连接以与车外系统60等进行通信的接口。该接口例如应用5G、LTE、Wi-Fi(注册商标)、DSRC(Dedicated Short Range Communication：专用短程通信)、LPWA(Low Power Wide Area：低功耗广域)等通信标准。

输入输出I/F20F是用于与搭载于车辆12的各装置进行通信的接口。本实施方式的显示控制装置20经由输入输出I/F20F与GPS装置22、外部传感器24、内部传感器26、车内照相机28以及环境传感器29连接。另外，GPS装置22、外部传感器24、内部传感器26、车内照相机28以及环境传感器29也可以与总线20H直接连接。

无线通信I/F20G是用于与AR眼镜40连接的接口。该接口例如应用蓝牙(注册商标)等通信标准。

GPS装置22是测定车辆12的当前位置的装置。GPS装置22包括接收来自GPS卫星的信号的未图示的天线。

外部传感器24是检测与车辆12的周边的环境相关的周边信息的传感器组。外部传感器24包括：照相机24A，拍摄规定范围；毫米波雷达24B，向规定范围发送探测波并接收反射波；以及激光雷达(Laser Imaging Detection and Ranging：激光成像检测与测距)24C，扫描规定范围。外部传感器24也可以与自动驾驶装置或驾驶辅助装置共用。

内部传感器26是检测车辆12的行驶状态的传感器组。内部传感器26由车速传感器、加速度传感器以及横摆率传感器等构成。

车内照相机28是用于对车内14进行拍摄的拍摄装置。该车内照相机28与前窗的上部或车内后视镜相邻设置，并能够拍摄车内14的乘员P(参照图9)的状况。另外，车内照相机28也可以兼用作行车记录仪用的照相机。而且，车内照相机28内置有麦克风，能够通过该麦克风来收集车内14的声音。

环境传感器29是检测与车内14的环境相关的车内信息的传感器组。环境传感器29由温度传感器、湿度传感器、臭气传感器等构成。

图3是表示显示控制装置20的功能结构的例子的框图。如图3所示，显示控制装置20具有控制程序100、图像数据110、图像取得部200、信息收集部210、计算部220以及显示控制部260。控制程序100和图像数据110被存储于ROM20B。

控制程序100是用于执行后述的显示控制处理的程序。另外，图像数据110存储有使AR眼镜40显示的内容的数据。例如，包括作为助理显示的角色C的图像(参照图7及图10)、表示店铺的图标、车辆12的警告灯的图像、定型的文本等数据。

作为取得部的图像取得部200具有取得使后述的图像显示部46显示的显示信息的功能。在本实施方式的图像显示部46能够显示角色C的图像，所取得的显示信息包含该角色C的图像信息。角色C的图像信息被存储于ROM20B的图像数据110，图像取得部200从ROM20B取得角色C的图像信息。

作为收集部的信息收集部210具有收集与车辆12的环境相关的环境信息的功能。这里，车辆12的环境包括车辆12的周边的环境和车内14的环境这两者。

对于车辆12的周边的环境，例如可举出车辆12正在行驶的道路的特征、道路的拥挤程度、乘员P对区域的熟悉、对面车辆或行人的存在、与前车之间的距离、要与前车发生碰撞的情况下的到碰撞为止的时间、车速等。与道路的特征、道路的拥挤程度相关的环境信息例如可以从车外系统60的后述的信息服务器66取得。另外，与乘员P对区域的熟悉相关的环境信息例如可以从车外系统60的后述的个人信息数据库64取得。另外，与对面车辆或行人的存在相关的环境信息以及与前车之间的关系的环境信息例如可以从外部传感器24取得。而且，与车速相关的环境信息例如可以从内部传感器26取得。

另外，对于车内14的环境，例如可举出同乘者的属性、乘车位置、乘员彼此的交谈的等级、车内14的温度、湿度、气味等。与同乘者的属性、乘车位置相关的环境信息例如可以从车内照相机28取得。另外，与乘员彼此的交谈的等级相关的环境信息例如可以从内置于车内照相机28的麦克风取得。与车辆14的温度、湿度和气味等相关的环境信息例如可以从环境传感器29取得。

计算部220具有基于由信息收集部210收集到的环境信息来计算余裕度的功能。在此，所谓余裕度，表示车辆12的乘员P对操作的余力的程度。计算部220通过针对上述每个环境以系数进行加权来计算余裕度。例如，通过与前车之间的距离乘以第一系数，车辆12的车速乘以第二系数，交谈等级乘以第三系数，车内14的室温乘以第四系数，并将乘以各系数所得的值相加，由此计算出余裕度。另外，余裕度的计算方法并不局限于此。

乘员P为车辆12的驾驶员D(参照图9)的情况下的余裕度表示对驾驶的余裕的程度。例如，在车辆12于交叉路口右转的情况下，在驾驶员D意识到对面车辆或行人时，如果对驾驶的余裕降低，则与稳定行驶时相比，余裕度变低。另外，例如在乘员P正在与其他乘员P’交谈的情况下，如果对汽车导航系统中的目的地设定等操作的余裕降低，则与仅就座的情况相比，余裕度变低。

另外，计算部220计算使图像显示部46显示的显示信息的优先级。优先级针对每个内容包含有多个级别的等级，该多个级别的等级包含安心/安全等级、舒适等级，被赋予安心/安全等级的显示信息优先于被赋予舒适等级的显示信息而显示于图像显示部46。另外，在使图像显示部46显示的内容存在多个的情况下，计算部220可以对多个显示信息的各个等级进行相对比较来设定优先级。

作为控制部的显示控制部260具有输出使图像显示部46显示的显示信息的功能。显示控制部260在由计算部220计算出的余裕度为规定值以上、或者由计算部220计算出的优先级为设定值以上的情况下，输出显示信息。另外，显示控制部260在由计算部220计算出的余裕度低于规定值的情况下、且在由计算部220计算出的优先级低于设定值的情况下，禁止显示信息的输出。

另外，作为余裕度的阈值的规定值可以设定任意的值。另外，可以针对每个乘员P设定不同的规定值。另外，对于作为优先级的阈值的设定值，可以设定任一等级值。

如图2所示，AR眼镜40构成为包括CPU40A、ROM40B、RAM40C、输入输出I/F40F以及无线通信I/F40G。CPU40A、ROM40B、RAM40C、输入输出I/F40F以及无线通信I/F40G经由总线40H彼此以能够通信的方式连接。CPU40A、ROM40B、RAM40C、输入输出I/F40F以及无线通信I/F40G的功能与上述的显示控制装置20的CPU20A、ROM20B、RAM20C、输入输出I/F20F以及无线通信I/F20G相同。

另外，AR眼镜40包括周边拍摄照相机42、视线照相机44、图像显示部46、扬声器48以及麦克风49。

如图4所示，AR眼镜40佩戴于乘员P的头部H。AR眼镜40在框架52安装有具有透光性的左右的镜片部50L、50R，所述框架52安装有左右的镜腿54L、54R的基部。在镜片部50L、50R的内侧的面(与佩戴有AR眼镜40的乘员P的眼部相对的面)，分别设置有能够显示图像的图像显示部46。

作为显示部的图像显示部46为透视型，使得从镜片部50L、50R的外侧的面入射到镜片部50L、50R的光透过图像显示部46，入射到佩戴有AR眼镜40的乘员P的眼部。由此，当在图像显示部46显示图像时，对于佩戴有AR眼镜40的乘员P，显示于图像显示部46的图像(虚拟影像)重叠于通过镜片部50L、50R的实际视野(例如车辆12前方的真实影像)而被目视确认。

在镜片部50L、50R的外侧的面，在不遮挡佩戴有AR眼镜40的乘员P的视野的位置，安装有对AR眼镜40的前方进行拍摄的一对周边拍摄照相机42。另外，在镜片部50L、50R的内侧的面，在不遮挡佩戴有AR眼镜40的乘员P的视野的位置，安装有对佩戴着AR眼镜40的乘员P的眼部进行拍摄来检测乘员P的视线的一对视线照相机44。

另外，在镜腿54L、54R中的在AR眼镜40佩戴于乘员P的状态下与乘员P的耳部对应的位置，设置有一对扬声器48。

在本实施方式中，CPU40A根据来自显示控制装置20的指示使图像显示部46显示图像，并且将由周边拍摄照相机42拍摄到的图像、视线照相机44对视线的检测结果发送到显示控制装置20。另外，CPU40A根据需要使声音从扬声器48输出。

CPU40A、ROM40B、RAM40C、输入输出I/F40F、无线通信I/F40G以及麦克风49例如被内置于框架52。另外，例如，在镜腿54L、54R内置有电池(省略图示)，并设置有供电插孔(未图示)。AR眼镜40是可穿戴设备的一例，图像显示部46是显示部的一例。

将车外系统60的结构的例子示于图5。车外系统60至少包括声音识别服务器62、个人信息数据库64以及信息服务器66。虽然本实施方式的声音识别服务器62、存储有个人信息数据库64的服务器以及信息服务器66被独立地设置，但并不限于此，也可以构成为一个服务器。

声音识别服务器62具有识别车辆12的乘员P发出的声音的功能。

个人信息数据库64存储有车辆12的乘员P的个人信息。例如，个人信息数据库64通过具有与作为乘员P的驾驶员D相关的居住地信息，能够将驾驶员D对区域的熟悉作为环境信息提供给显示控制装置20。此外，例如个人信息数据库64通过具有乘员P的年龄和性别的信息，能够将乘员P的属性作为环境信息来提供。

信息服务器66是具有从VICS(Vehicle Information and CommunicationSystem：道路交通信息通信系统)(注册商标)中心收集到的交通信息、道路信息等的服务器。信息服务器66可以提供交通拥堵信息作为环境信息。

接着，使用图6的流程图对在本实施方式的显示控制装置20中执行的显示控制处理的例子进行说明。

在图6的步骤S100中，CPU20A取得显示信息。例如，从图像数据110取得图7所示的角色C的图像。

在步骤S101中，CPU20A收集环境信息。即，CPU20A分别收集与车辆12的周边的环境相关的环境信息和与车内14的环境相关的环境信息。

在步骤S102中，CPU20A计算余裕度和优先级。

在步骤S103中，CPU20A执行余裕度是否为规定值以上的判定。CPU20A在判定为余裕度为规定值以上的情况下，进入步骤S105。另一方面，CPU20A在判定为余裕度不为规定值以上、即小于规定值的情况下，进入步骤S104。

在步骤S104中，CPU20A执行优先级是否为设定值以上的判定。CPU20A在判定为优先级为设定值以上的情况下，进入步骤S105。另一方面，CPU20A在判定为优先级不为设定值以上、即小于设定值的情况下，返回到步骤S101。

在步骤S105中，CPU20A向AR眼镜40输出显示信息。由此，如图7所示，在AR眼镜40中，显示信息所涉及的角色C的图像被显示于图像显示部46。显示于图像显示部46的影像可以具有左右视差而立体显示，并且能够配置于空间内的任意位置。另外，通过与角色C的图像的显示一起从扬声器48输出声音，能够呈现为角色C正在说话。

在步骤S106中，CPU20A执行是否检测到乘员P的视线的判定。具体而言，CPU20A执行乘员P的视线是否朝向所显示的角色C的图像的判定。CPU20A在检测到乘员P的视线的情况下，结束显示控制处理。另一方面，CPU20A在没有检测到乘员P的视线的情况下，返回到步骤S101。即，只要余裕度为规定值以上、且优先级为设定值以上，就将角色C的图像继续显示于图像显示部46。

本实施方式的显示控制装置20通过向具有配置于乘坐车辆12的乘员P的眼睛前方的图像显示部46的AR眼镜40输出显示信息和声音信息，由此使图像显示部46显示图像，并使扬声器48输出声音。由此，例如，如图7所示，在接近交叉路口的车辆12中，能够向驾驶员D呈现出角色C说出“还有50m到交叉路口”的样子。

在此，在仪表板上使用全息技术进行角色的影像显示的情况下，全息图的投影装置的显示尺寸小，显示位置被限定。因此，在满足在驾驶过程中能够目视确认且将投影装置搭载于不与周边部件发生干扰的位置的条件的情况下，内容的显示尺寸被限定。

此外，在全息图的情况下，有时从乘员P不能清晰地看到立体显示的影像。特别是反射太阳光的情况下或在距乘员P的距离较远的情况下，难以看到。另外，在将投影装置设置于从全部乘员P容易看到的位置的情况下，如果显示具有隐匿性的信息，则内容会被泄漏给其他乘员P’。而且，如果扬声器的输出范围为车内14整个区域，则在儿童睡觉时等不希望发出声音/影像的场景下无法使用。

与此相对，根据本实施方式，通过使AR眼镜40和显示控制装置20协作，能够不受车载空间影响地例如呈现出在乘员P的视野内自由地盘旋的作为代理的角色C。另外，由于AR眼镜40的影像从其他乘员P’不易看到，因此也能够进行具有隐匿性的信息提示。

另外，显示控制装置20在图像取得部200中取得显示信息，并且在信息收集部210中收集与车辆12的环境相关的环境信息。另外，计算部220计算乘员P对操作的余力的程度即余裕度，在余裕度低于规定值的情况下，显示控制部260禁止显示信息相对于图像显示部46的输出。根据本实施方式，在乘员P没有余裕进行操作的情况下，在图像显示部46不显示显示信息，因此对乘员P而言能够抑制对眼睛前方的显示的烦扰。

在此，在收集与车辆12的周边的环境相关的周边信息作为环境信息的情况下，在由于车辆12的周边的环境而没有余裕进行操作时，对乘员P而言能够抑制对眼睛前方的显示的烦扰。特别是，在乘员P为驾驶员D的情况下，能够抑制对驾驶的障碍。

另外，在收集到与车内14的环境相关的车内信息作为环境信息的情况下，在由于车内14的环境而没有余裕进行操作时，对乘员P而言能够抑制对眼睛前方的显示的烦扰。

另外，在本实施方式中，计算部220构成为除了余裕度以外还能够计算优先级。根据本实施方式，即使在乘员P没有余裕进行操作的情况下，对于优先级高的信息也不会禁止向图像显示部46的显示。因此，能够抑制与安心/安全相关的信息对乘员P的漏报。

在第二实施方式中，构成为能够在与其他乘员P’的交谈中显示角色C。以下，对与第一实施方式的不同点进行说明。另外，对与第一实施方式相同的结构标注相同的标号，并省略详细说明。

在本实施方式中，多个乘员P、具体而言为驾驶员D及其他乘员P’乘坐车辆12，并且任一乘员P均佩戴有AR眼镜40(参照图9)。

图8是表示本实施方式的显示控制装置20的功能结构的例子的框图。如图8所示，显示控制装置20具有控制程序100、图像数据110、图像取得部200、信息收集部210、计算部220、视线识别部230、对象确定部240、图像生成部250以及显示控制部260。图像取得部200、信息收集部210、计算部220、视线识别部230、对象确定部240、图像生成部250以及显示控制部260通过由CPU20A读出存储在ROM20B中的控制程序100并执行该控制程序来实现。

作为识别部的视线识别部230具有识别佩戴有AR眼镜40的乘员P的视线的功能。视线识别部230从视线照相机44取得乘员P的视线信息来识别视线的位置。

作为确定部的对象确定部240具有确定由视线识别部230识别出的视线的对象物的功能。对象确定部240从周边拍摄照相机42取得映入佩戴有AR眼镜40的乘员P的视野的拍摄图像。然后，对象确定部240将由视线识别部230识别出的视线的位置重叠于所取得的拍摄图像，并将拍摄图像中的存在于视线的位置的物体确定为存在于视线前方的对象物。

作为生成部的图像生成部250具有生成用于报知由对象确定部240所确定的对象物的显示信息的功能。例如，图像生成部250生成在图像显示部46上包围由对象确定部240所确定的对象物的圆框等显示信息。

在本实施方式中，在其他乘员P’与驾驶员D的交谈中实现图像显示部46中的显示信息的显示。例如，如图9所示，假定就座于车内14的后座的其他乘员P’对驾驶员D说“想去那家店”。此时，驾驶员D仅通过与其他乘员P’的交谈，无法知道是对车辆12的行驶路径中的哪个店铺进行的发言。因此，驾驶员D有时会提出疑问“哪家店？”等。即，驾驶员D在与后座的其他乘员P’的交谈期间无法确定其他乘员P’的视线方向，另外由于难以听到对话，因此难以共享外界的对象物。

与此相对，在本实施方式中，视线识别部230识别其他乘员P’的视线，对象确定部240确定视线前方的对象物。然后，显示控制部260使图像显示部46显示由图像生成部250生成的显示信息，由此向乘员报知由对象确定部240所确定的对象物的信息。具体而言，如图10所示，在驾驶员D的AR眼镜40的图像显示部46中，显示角色C以围绕后座的其他乘员P’说出的“那家店”的店铺S的方式浮游的影像。由此，能够在AR眼镜40上引导后座的其他乘员P’讲出的店铺S。另外，通过扬声器48输出后座的其他乘员P’、角色C的声音，能够实现顺畅的车厢内交谈。

以上，根据本实施方式，能够通过图像显示部46与其他乘员P’之间共享信息。另外，在本实施方式中，也执行基于余裕度和优先级的显示控制处理。即，在驾驶员D没有余裕进行驾驶的情况下，不显示角色C浮游的影像。

另外，通过使本实施方式的显示控制装置20与汽车导航系统联动，能够存储由角色C引导的店铺S的位置信息。由此，即使在驾驶员D与其他乘员P’进行交谈的时刻，未能光顾所引导的店铺S的情况下，也能够作为关注的位置存储在地图上。另外，在余裕度小于规定值的情况下、且在优先级小于设定值的情况下没有引导店铺S时，也可以同样作为关注的位置存储在地图上。由此，能够在日后或有时间时光顾所存储的店铺S。

另外，也可以由CPU以外的各种处理器执行在上述实施方式中由CPU20A读入软件(程序)而执行的各种处理。作为该情况下的处理器，可例示出FPGA(Field-ProgrammableGate Array：现场可编程门阵列)等在制造后能够变更电路结构的PLD(ProgrammableLogic Device：可编程逻辑器件)、ASIC(Application Specific Integrated Circuit：专用集成电路)等具有为了执行特定的处理而专门设计的电路结构的处理器即专用电路等。另外，也可以利用上述各种处理器中的一个来执行各处理，还可以利用相同种类或不同种类的两个以上的处理器的组合(例如，多个FPGA、以及CPU与FPGA的组合等)来执行各处理。另外，更具体而言，上述各种处理器的硬件结构是将半导体元件等电路元件组合而成的电路。

另外，在上述实施方式中，以程序被预先存储(安装)于计算机可读的非暂时性记录介质的方式进行了说明。例如，在车辆12的显示控制装置20中，控制程序100被预先存储于ROM20B。然而，并不限于此，各程序也可以以记录于CD-ROM(Compact Disk Read OnlyMemory：光盘只读存储器)、DVD-ROM(Digital Versatile Disk Read Only Memory：数字通用盘只读存储器)和USB(Universal Serial Bus：通用串行总线)存储器等非暂时性记录介质的形式提供。另外，各程序也可以是经由网络从外部装置下载的形式。

在上述实施方式中所说明的处理的流程也是一例，可以在不脱离主旨的范围内删除不必要的步骤、添加新的步骤、或调换处理顺序。