掌桥专利:专业的专利平台
掌桥专利
首页

信息处理系统、装置、方法以及房间、存储介质、计算机装置

文献发布时间:2023-06-19 12:21:13


信息处理系统、装置、方法以及房间、存储介质、计算机装置

技术领域

本发明涉及信息处理系统、信息处理装置、信息处理方法以及房间、存储介质、计算机装置。

背景技术

目前已知的投影技术,可以在办公室的会议和演示中,无需用户进行繁琐的动作,而是基于人感传感器的检测结果,准备供照明装置、投影仪、格式屏幕、卷式屏幕等设备投影影像的环境(如参见专利文献1)。

【专利文献1】特开2016-32205号公报。

近年来云计算的普及,让用户可以利用远程会议服务。通过利用远程会议服务,用户可以与其他不同场所的用户进行远程会议,同时节约交通费用和移动时间。这种远程会议预计今后将更为普及。

因此,用户聚集在同一场所(直接见面)的会议有必要提供与远程会议不同的价值。而专利文献1并没有触及这样问题。

发明内容

本发明的实施方式旨在提供一种可以实施有助于同一空间中多个用户交流的有效演示的信息处理系统。

为了达成上述课题,本发明提供一种信息处理系统,其中具有,影像显示装置,用来显示被设置在空间中的影像;传感器装置,由处于所述空间中的用户持有,用来输出用来检测持有该传感器装置的用户的位置信息的信号;以及,信息处理装置,与所述影像显示装置以及所述传感器装置可数据通信地连接,所述信息处理装置具有,用户信息存储部,用于把基于在所述空间内的多个用户持有的所述传感器装置分别输出的信号所检测到的该空间中的多个用户各自的位置信息,与用户关联起来保存;以及,环境演示部,用于根据所述多个用户各自的位置信息,控制环境演示,该环境演示有助于所述影像显示装置所显示的影像带给所述多个用户之间的交流。

本发明的实施方式的效果在于,可以实施有助于同一空间下多个用户交流的有效演示。

附图说明

图1是本实施方式涉及的信息处理系统构成的示意图。

图2是本实施方式涉及的会议室的示意图。

图3是本实施方式涉及的计算机的硬件结构模块图。

图4是本实施方式涉及的智能手机的硬件结构模块图。

图5是本实施方式涉及的投影仪的硬件结构模块图。

图6是本实施方式涉及的信息处理装置的功能结构模块图。

图7是本实施方式涉及的信息处理系统中利用的表格的示意图。

图8是本实施方式涉及的信息处理系统的处理流程图。

图9是对处于发言状态的用户进行聚光处理的示意图。

图10是对于处于发言状态的用户进行聚光处理的流程图。

图11是根据用户间距离进行聚光处理的示意图。

图12是根据用户间距离进行聚光处理的具体示意图。

图13是根据用户间距离进行聚光处理的流程图。

图14是根据用户间距离进行聚光处理的另一例流程图。

图15是根据用户间距离进行声音输出处理的流程图。

图16是本实施方式涉及的信息处理系统的报告输出处理流程图。

具体实施方式

以下参考附图说明本发明的实施方式。本实施方式用会议室作为多个用户聚集的空间为例来进行说明,但本实施方式并不受到会议室限制,也可以适用于进行研讨会和讲课的房间或会议场所等各种空间。

[第一实施方式]

<系统构成>

图1是本实施方式涉及的信息处理系统的一例构成的示意图。图2是本实施方式涉及的一例会议室的示意图。图1的信息处理系统1通过信息处理装置10、影像显示装置12、传感器装置14、扬声器16、照相机18、操作设备20、照明30、扬声器32、气味输出装置34、传感器装置36通过互联网或LAN等网络40可通信地有线或无线连接。另外,操作设备20具有麦克风22、标签24以及操作按钮26。会议室备有形状和功能不同的多种操作设备20。操作设备20例如是触摸面板、陀螺传感器、触觉传感器等。操作设备20的大小和质感也可以不一样。

会议室中设有影像显示器12、传感器装置14、扬声器16、照相机18以及操作设备20。在进入会议室之前,用户通过的过道具有照明30、扬声器32、气味输出装置34以及传感器装置36。图1显示了信息处理装置10被设置在会议室外的例子,但也可以设置在会议室内。

设于过道的传感器装置36接收通过过道的用户的标签所发送的送信信标(电波),作为检测用户的位置信息的信号,通知给信息处理装置10。设于过道的照明30在信息处理装置10的控制下输出光。设于过道的扬声器32在信息处理装置10的控制下输出声音。设于过道的气味输出装置34在信息处理装置10的控制下输出气味。

信息处理装置10按照传感器装置36通知的信号来检测用户的位置信息,根据检测到的用户位置信息,进行用光、声音、气味来重置用户情绪的过道演示处理。过道是连接会议室和其出入口的通道,优选过道的宽度只允许一个人通过,可供进入会议室或从会议室出来的用户单独行走而回到个人的时间。对进入会议室的用户所进行的过道演示流程处理和对从会议室出来的用户进行的过道演示处理也可以不同。

会议室的传感器装置14接收处在会议室的用户的标签发送的电波,作为用来检测用户位置信息的信号,通知给信息处理装置10。传感器装置14只要是能够输出用来检测用户位置信息的信号的定位系统的传感器即可,也可以是对应作为测量对象一方的专用标签、智能手机和各种BLE传感器的传感器。信息处理装置10基于一个以上传感器装置14通知的用来检测用户位置信息的信号,分别检测会议室中的用户的位置信息。

会议室中的操作设备20是一例定位系统的测量对象。例如会议室的传感器装置14通过接收操作设备20的标签24发出的电波,并通知给信息处理装置10,例如如图2所示,将用于检测持有该操作设备20的用户在会议室中的位置信息的信号通知给信息处理装置10。操作设备20内置方式的标签24是一个例子,也可以使用其他方式的标签。

会议室中的照相机18拍摄会议室,将拍摄的影像数据传送给信息处理装置10。照相机18可以利用例如Kinect(注册商标)的摄像机。当用Kinect(注册商标)的摄像机作为照相机18时,通过结合距离图像传感器、红外线传感器、阵列麦克风的检测结果和姿势识别技术,可以识别用户的动作、姿势。姿势识别技术用来推定用户采取何种姿势。

会议室中的多台影像显示装置12是投影仪,在信息处理装置10的控制下在如图2所示的形成会议室一个面,如墙壁(前壁、后壁、右墙和左墙等)以及地面上显示影像。通过利用多台影像显示装置12,可以在会议室的整个墙壁和地板上投影。会议室中的多台影像显示器12也可以是埋入会议室墙壁和地板中的显示器装置。通过利用埋入墙壁和地板中的显示器装置,会议室可以显示投射到墙壁和地板上的影像。以下说明影像显示器12为投影仪的示例。会议室的扬声器16通过信息处理装置10的控制来输出声音。图2所示的会议室形状只是一个例子,也可以是其他形状。另外,会议室并不全部需要用墙壁、地板和天花板等形成,也可以有一部分不用平面隔开的开放空间。

操作设备20例如可以由用户手拿着使用,也可以是钟表和眼镜等用户身上佩戴的可穿戴设备的方式。操作设备20的麦克风22将用户的声音转换为电信号。标签24是一例定位系统的测量对象。操作按钮26接受来自用户的操作。操作设备20将从用户的声音变换的电信号作为输出信号,送往信息处理装置10。操作设备20将操作按钮26接受的用户的操作作为操作信号,送往信息处理装置10。

信息处理装置10以提高会议室中的用户团队协作为目的,根据传感器装置14发送的信号所检测到的用户的位置信息、操作设备20的麦克风22的输出信号、以及来自操作设备20的操作按钮26的操作信号,实施有助于同一空间中多个用户交流的后述环境演示处理。

信息处理装置10通过后述的环境演示处理,帮助例如团队构思创新。本实施方式的信息处理系统1通过后述的影像及音响环境演示控制,改善会议室中多个用户的团队协作。而且,信息处理装置10通过后述的环境演示处理,兼顾个人创新最大化和团队作业多样性的实现。例如,信息处理装置10通过后述的环境演示处理,能够刺激个人大脑,帮助拓展思路,提高构思创新质量。

可以实施如后述的环境演示处理控制的会议室是通过数字环境演示(环境效果),可以实现比如用户饮酒后情绪高涨而有助于创新或促进交流的效果的空间。这样的空间可称为数字酒精空间。数字酒精空间用来使得个人(用户)聚集在一起所产生的团队效果最大化,并引发创造性动机。数字酒精空间不仅提高工作本身的效率,而且通过环境效果改善工作的人自身的情感、动机,帮助创新。

图1所示的信息处理系统1的构成是一个例子。例如,信息处理装置10可以通过一台计算机或多台计算机实现,也可以利用云服务实现。信息处理装置10可以是PJ(Projector,投影仪)、IWB(Interactive White Board,具有相互通信的电子方式黑板功能的白板)、数字标牌等输出装置、HUD(Head Up Display)装置、产业机器、摄像装置、录音装置、医疗设备、网络家电、汽车(C

<硬件构成>

信息处理装置10例如是具有图3所示硬件构成的计算机500。

图3是本实施方式涉及的计算机500的一例硬件结构模块图。如图3所示,计算机500具备CPU(Central Processing Unit)501、ROM(Read Only Memory)502、RAM(RandomAccess Memory)503、HD504、HDD(Hard Disk Drive)控制器505、显示器506、外设连接I/F(Interface)508、网络I/F509、总线510、键盘511、指向设备512、DVD-RWD(DigitalVersatile Disk Rewritable)驱动器514、介质I/F516。

其中,CPU501控制整个图像管理服务器5的运行。ROM502中保存IPL等用于驱动CPU501的程序。RAM503可用来当作CPU501的工作区域使用。HD504保存程序等各种数据。HDD控制器505按照CPU501的控制来控制对HD504的各种数据的读取或写入。

显示器506显示光标、菜单、窗口、文字或图像等各种信息。外设连接I/F508是连接各种外部设备的接口。在这种情况下的外设例如为USB(Universal Serial Bus)存储器和打印机等。网络I/F509是利用通信网络100进行数据通信的接口。总线510是用电连接图5所示的CPU501等各个构成要素的地址总线和数据总线等。

键盘511是一种输入装置,具备用于输入文字、数值、各种指示等的多个键。指向装置512是一种用来进行各种指示的选择或执行、处理对象的选择、光标的移动等的输入装置。DVD-RW驱动器514作为一例可装卸的存储介质,控制各种数据在DVD-RW513的读取或写入。除了DVD-RW,也可以是DVD-R和蓝光光盘等。介质I/F516控制闪存等存储介质515的数据读取或写入(存储)。

操作设备20是通过例如图4所示硬件构成的智能手机600。

图4是本实施方式涉及的智能手机600的一例硬件结构模块图。如图4所示,智能手机600具备有CPU601、ROM602、RAM603、EEPROM604、CMOS传感器605、摄像元件I/F606、加速度方位传感器607、介质I/F609、GPS接收部611。

其中,CPU601控制智能手机600整体的操作。ROM602存储CPU601或IPL等用于驱动CPU601的程序。RAM603用于作为CPU601的工作区域。EEPROM604按照CPU601的控制,执行智能手机用程序等各种数据的读取或写入。

CMOS(Complementary Metal Oxide Semiconductor)传感器605在CPU601的控制下拍摄被摄体(主要是自拍像)而获得图像数据的一种内置型摄像器件。除了CMOS传感器以外,也可以是CCD(Charge Coupled Device)传感器等摄像器件。摄像元件I/F606是用于控制CMOS传感器605的驱动电路。加速度方位传感器607是用于检测地磁的电子磁罗盘或陀螺罗盘、加速度传感器等的各种传感器。

介质I/F609用于控制闪存等存储介质608的数据读取或写入(存储)。GPS接收部611用于从GPS卫星接收GPS信号。

智能手机600还具备远程通信电路612、CMOS传感器613、摄像元件I/F614、麦克风615、扬声器616、音频输入输出I/F617、显示器618、外设连接I/F619、近程通信电路620、近程通信电路620的天线620a、以及触摸屏621。

其中,远程通信电路612是用于借助于网络40与其它设备进行通信的电路。CMOS传感器613是在CPU601的控制下拍摄被摄体而得到图像数据的一种内置型摄影装置。摄像元件I/F614是用于控制CMOS传感器613的驱动电路。麦克风615是用于将语音转换为电信号的内置型电路。扬声器616是将电信号转换为物理振动生成音乐或声音等内置型电路。

音频输入输出I/F617是在CPU601的控制下根据麦克风615和扬声器616之间的用于处理音频信号输入输出的电路。显示器618是一种用于显示被摄体的图像或各种图标等的液晶或有机EL(Electro Luminescennce)等的显示装置。

外设连接I/F619是用于连接各种外设的接口。近程通信电路620是NFC(NearFieldCommunication)或蓝牙(注册商标)等的通信电路。触摸屏621是一种输入装置,通过用户按动显示器618,操作智能手机600。

智能手机600还具备总线610。如图4所示,总线610是用于CPU601等的各构成要素电连接的地址总线或数据总线等。

投影仪700是一例影像显示装置12,其具有例如图5所示的硬件构成。

图5是本实施方式涉及的投影仪700的一例硬件结构模块图。如图5所示,投影仪700具备CPU701、ROM702、RAM703、介质I/F707、操作部708、电源开关709、总线710、网络I/F711、LED(光电二极管,Light Emitting Diode)驱动电路714、LED光源715、投射元件716、投射镜头717、外设连接I/F718、风扇驱动电路719、冷却风扇720。

其中,CPU701控制整个投影仪700的运行。ROM702保存用来驱动CPU701的程序。RAM703可作为CPU701的工作区域使用。媒体I/F707控制闪存等存储介质706中的数据的读取或写入(存储)。

操作部708配置有各种键、按钮以及LED等,用于进行除由用户执行的投影仪电源ON/OFF以外的各种操作。例如操作部708受理投影图像大小调整操作、色调调整操作、焦点调整操作、基斯顿调整操作等指示操作,将受理了的操作内容输出到CPU701。

电源开关709用于切换投影仪700电源开启和关闭。总线710是用来电连接图5所示的CPU701等各个构成要素的地址总线和数据总线等。网络I/F711是利用互联网等通信网络9进行数据通信的接口。

LED驱动电路714在CPU701的控制下,控制LED光源715的点亮和熄灭。当受到LED驱动电路714控制而点亮时,LED光源715把投射光照射到投射元件716上。投射元件716基于外设连接I/F718等提供的图像数据,把用空间光调制方式调制来自LED光源715的投射光所得到的调制光作为图像,通过投射镜头717,投射到屏幕的投射面。可以用液晶面板或DMD(Digital Micromirror Device)等作为投射元件716。

上述LED驱动电路714、LED光源715、投射元件716以及投射镜头717作为一个整体,起到投射部的作用,用来基于图像数据,把投影图像投射到投影面上。

外设连接I/F718直接连接PC(Personal Computer),在与PC之间获取控制信号或图像数据。外设连接I/F718是用于连接各种外部设备(例如记忆棒PC730)的接口。风扇驱动电路719与CPU701及冷却风扇720连接,根据CPU701的控制信号,控制冷却风扇720的驱动和停止驱动。冷却风扇720通过旋转,排出投影仪700内部的空气,来冷却投影仪700内部。

CPU701在通电后,按照ROM702中预存的控制程序启动,向LED驱动电路714发出控制信号,使LED光源715点亮,同时向风扇驱动电路719发出控制信号,使得冷却风扇720以规定的额定转速旋转。投影仪700在电源电路开始供电后,投射元件716变为可以进行图像显示的状态,进而,电源电路向其他各种构成要素供电。而当电源开关709关闭操作后,投影仪700中电源断开信号被从电源开关709送往CPU701。

CPU701检测到电源断开信号后,向LED驱动电路714发出控制信号,使LED光源715熄灭。CPU701随后在经过规定时间后,向风扇驱动电路719发出控制信号,使得冷却风扇720停止转动,同时自身停止自己的控制处理,最后,向电源电路发出指示,使得电源停止供电。

<功能构成>

本实施方式涉及的信息处理装置10具有如图6所示的功能构成。图6是本实施方式涉及的信息处理装置的一例功能结构模块图。图6的功能构成中省略了本实施方式的说明所不必要的构成。

图6的信息处理装置10具有收信部50、用户检测部52、发言量计测部54、发言内容识别部56、环境演示部58、影像输出控制部60、声音输出控制部62、照明控制部64、气味输出控制部66、以及存储部68。

收信部50从传感器装置14、36接收用于检测用户位置信息的信号。收信部50还接收照相机18的拍摄结果。收信部50还接收经过操作设备20的麦克风22变换的用户声音的输出信号以及操作按钮26受理的用户的操作信号。

用户检测部52从用来检测传感器装置14或36收到的用户的位置信息的信号中,检测会议室中的用户的位置信息或通过过道的用户的位置信息。发言量计测部54分别从操作设备20收到的用户声音的输出信号中,测量在会议室中的用户的发言量。

发言内容识别部56根据操作设备20收到的用户声音的输出信号,分别对会议室中的用户的发言内容进行语音识别。环境演示部58根据用户检测部52检测到的用户的位置信息、发言量计测部54测量的用户的发言量、以及发言内容识别部56通过语音识别的用户的发言内容,决定会议室(数字酒精空间)的环境演示和过道的过道演示。

环境演示部58控制影像输出控制部60、声音输出控制部62、照明控制部64、以及气味输出控制部66,进行所定的环境演示及过道演示。影像输出控制部60在环境演示部58的控制下,控制影像显示装置12通过影像显示所实施的环境演示以及过道演示。声音输出控制部62在环境演示部58的控制下,控制通过扬声器16、32输出声音所实施的环境演示和过道演示。灯光控制部64在环境演示部58的控制下,控制照明30输出光所实施的过道演示。气味输出控制部66在环境演示部58的控制下,控制气味输出装置34输出的气味所实施的过道演示。

存储部68如图7所示,保存表格。图7是本实施方式涉及的信息处理系统中利用的一例表格结构示意图。表格形式并不一定需要如图7所示,只要能够保存管理同样的信息即可。

图7的(a)是一例影像显示装置信息存储部构成的示意图。影像显示装置信息管理存储部将墙壁及地板的投影范围信息作为项目与影像显示装置ID关联起来管理。影像显示装置ID是识别影像显示装置12的识别信息的一个例子。墙壁的投影范围信息表示各个影像显示装置12可以投影会议室内的哪个墙壁的哪个范围。地板的投影范围信息表示各个影像显示装置12可以投影会议室内地板的哪个范围。当影像显示装置12为投影仪时,影像显示装置ID只要与墙壁或地板的投影范围信息的至少一个相关联即可。

当影像显示装置12是显示器时,墙壁及地板的显示范围信息被与影像显示装置ID关联起来保管在影像显示装置信息存储部中。墙壁的显示范围信息表示设于会议室中的各个显示器可以在哪个墙壁的哪个范围内显示。地板的显示范围信息表示设于会议室中的各个显示器可以在哪个地板的哪个范围内显示。当影像显示装置12为显示器时,影像显示装置ID只要与墙壁或地板的投影范围信息的至少一个相关联即可。

图7的(b)是一例用户信息存储部构成的示意图。用户信息存储部中的项目包括用户ID、标签ID、位置信息、以及发言状态信息。用户ID是识别用户的识别信息的一个例子。标签ID是识别操作设备20的标签24的识别信息的一个例子。位置信息是检测到的用户位置信息。

发言状态信息是用于识别后述的发言中的用户和发言中以外的用户的信息。发言状态信息″True″表示是后述的正处于发言中的用户。发言状态信息″Fal se″表示后述的除正在发言的用户以外的其他用户。由于每当检测用户的位置信息时位置信息受到更新,因此空间内最新位置信息与用户ID关联起来管理。

图7的(c)是一例日志存储部构成的示意图。日志存储部将图7的(b)所示的用户信息作为从会议开始到结束为止的日志信息来保存。日志存储部的项目有日期、用户ID、标签ID、位置信息、发言状态信息和发言量信息。发言量信息表示发言量计测部54测量的发言量,可以如图7的(c)所示,用大小程度表示发言量的大小,或用测量值等数值表示。

如图7的(c)所示的日志存储部中,在″17∶00″已有″userA″、″userB″参加,在″17∶01″,″userC″迟到参加。

<处理>

本实施方式涉及的信息处理系统1用如图8所示的处理来实现数字酒精空间。图8是本实施方式涉及的信息处理系统的一例处理流程图。

在本实施方式的信息处理系统1中,当在步骤S10检测到通过过道的用户后,前往步骤S12,用户环境演示部58分别控制照明控制部64、声音输出控制部62、以及气味输出控制部66,实施过道演示处理,通过过道的照明30、扬声器32、以及气味输出装置34,用光、声音、气味来重置用户的情绪。关于过道演示处理,例如进行下调照明30的光量的演示处理、通过扬声器32输出具有放松效果的氛围音乐的演示处理、利用气味输出装置34输出具有放松效果的香味的演示处理等。过道演示处理还可以在进入数字酒精空间或者从数字酒精空间出来的用户通过的通道中,找出用户,对每个用户实施不同的过道演示处理。在这种情况下,事先保管把用户ID和过道演示处理的内容相关联的用户信息,根据找到的用户ID和管理的用户信息来决定过道演示处理,从而可以对每个用户实施不同的过道演示处理。过道演示处理包括光、声音、香味的演示处理中的至少一种演示处理,只要控制过道的灯光30、扬声器32和气味输出装置34的至少一个装置便可。

在本实施方式涉及的信息处理系统1中,当在步骤S14检测到会议室中的用户后,前往步骤S16,控制会议室的影像显示装置12以及扬声器16,进行后述的影像和音响的环境演示处理。环境演示处理是指,比如对后述处于发言状态的用户进行聚光处理、按照用户间距离实施的聚光处理、按照用户间距离实施的声音输出处理等。

以下说明用影像和音响实施的环境演示处理,具体来说,对处于发言状态的用户实施的聚光处理、根据用户间距离实施的聚光处理、根据用户间距离实施的声音输出处理、以及报告处理。但本实施方式涉及的环境演示处理并不局限于上述处理示例。

例如,根据表示由传感器装置14通知的信号等会议室中多个用户状态的信息,判断会议室中用户团队的状态,根据该判断结果将团队状态迁移到合适的方向即可。

在此用图9和图10描述一例对处于发言状态的用户实施的聚光处理。图9是一例对处于发言状态的用户实施聚光处理的示意图。图10是对处于发言状态的用户实施聚光处理的流程图。

对处于发言状态的用户实施的聚光处理,如图9所示,是将会议室中的多个用户分为正在发言的用户(以下称为发言用户)和除了正在发言的用户以外的其他用户(以下称为其他用户),将聚光灯会聚在其他用户看发言用户背后墙壁上的区域1000上。除了使区域1000比区域1000以外的区域更明亮的处理之外,聚光处理还可以使区域1000的颜色比区域1000以外的区域更耀眼。还有,对处于发言状态的用户实施的聚光处理也可以对发言用户脚下的区域实施聚光。

在实施如图9所示的环境演示的会议室中,可以视觉性地区分发言用户和其他用户,因此有望让其他用户关注发言用户。图9中仅显示了可以在会议室墙壁和地板上投影影像的多台影像显示装置12之中的一台影像显示装置12,而省略了其他影像显示装置12。

当除了发言用户以外有多名其他用户时,既可以分别对各个其他用户看到的发言用户背后墙上的区域1000聚光,也可以选择某个区域1000聚光。

在对区域1000照射聚光灯的影像显示装置12有多台的情况下,既可以用多台影像显示装置12对区域1000进行聚光,也可以按照优先顺序选择照射聚光灯的影像显示装置12。

图9所示的聚光处理可以通过例如图10的处理步骤来实现。在步骤S20,环境演示部58判断发言量计测部54是否测量到会议室中用户的发言量。当判断测量到了后,前往步骤S22。在步骤S22,环境演示部58根据发言量计测部54测到的用户发言量,确定正在发言的用户。在此,正在发言的用户是指,如果测量到发言量的用户是一个人,则就是这个用户。而如果测量到发言量的用户是多人,则可以按照规定的逻辑从测量到发言量的用户中进一步确定正在发言的用户。规定的逻辑包括例如将所测到的发言量为最大的用户作为正在发言的用户,或与用户ID相关联的优先度高的用户作为正在发言的用户,还可以有其他逻辑。

前往步骤S24,环境演示部58从图7的(b)所示的用户信息存储部取得正在发言的用户(即发言用户)以及除此以外的其他用户的位置信息。前往步骤S26,环境演示部58根据发言用户的位置信息以及其他用户的位置信息,控制影像输出控制部60,使其他用户看到的发言用户背后的区域1000被影像显示装置12照亮。在影像显示装置12是显示器的情况下,控制影像输出控制部60使得显示器显示的显示内容变得明亮。也可以控制成使得显示内容中至少有一部分变得明亮,而不需要整个显示内容变亮。

在会议室中用户发言结束之前或发言用户发生变化之前,环境演示部58反复进行步骤S24~S30的处理。环境演示部58判断发言是否结束(步骤S28)。如果发言没有结束,则进一步判断发言的用户是否发生变化(步骤S30)。当发言用户发生变化时,环境演示部58返回到步骤S22,确定发言用户之后反复进行步骤S24~S30的处理。在会议室内的用户发言结束后,环境演示部58结束图10的流程图处理。

在此用图11~图13,说明基于用户间距离进行聚光处理的一个示例。图11是一例基于用户间距离的聚光处理的示意图。图12是一例基于用户间距离的聚光处理的具体示意图。图13是一例基于用户间距离进行聚光处理的流程图。

根据用户之间的距离进行的聚光处理如图11所示,根据会议室中多个用户之间的距离来改变用户脚下的聚光区域1000大小。除了使区域1000比该区域1000以外的其他区域更加明亮的处理之外,聚光处理还可以使区域1000的颜色比区域1000以外的其他区域更加鲜艳。

根据会议室中多个用户之间的距离来改变用户脚下的聚光区域1000大小的处理如图12的(A)所示,控制影像输出控制部60,使得用户之间距离越远,区域1000越大。根据会议室中多个用户之间的距离来改变用户脚下的聚光区域1000大小的处理还可以如图12的(B)所示,控制影像输出控制部60,使得用户之间距离越近,区域1000越小。

图12是一个示例,也可以控制图像输出控制部60以使得用户之间的距离越大区域1000越小,控制图像输出控制部60以使得用户之间的距离越近区域1000越大。

图11和图12所示的聚光处理可以通过图13所示的步骤来实现。在步骤S40,环境演示部58在用户检测部52检测到会议室中有多个用户后,前往步骤S42。

在步骤S42,环境演示部58从例如图7的(b)的用户信息存储部取得检测到的多个用户的位置信息。在步骤S44,环境演示部58根据检测到的多个用户的位置信息,求出会议室中多个用户之间的距离。

前往步骤S46,环境演示部58根据求出的用户间距离,控制影像输出控制部60,例如如图12所示,控制照亮用户脚下的区域1000的大小。而后,环境演示部58前往步骤S48,判断会议是否结束。在会议结束之前,环境演示部58反复进行步骤S42~S48的处理。当不再检测到用户,判断会议结束后,环境演示部58结束图13所示流程的处理。

图14是根据用户间距离实施聚光处理的另一例流程图。图14所示的基于用户间距离的聚光处理,是根据会议室中多个用户之间的距离,改变照亮用户脚下的区域1000的光量。

根据会议室中多个用户之间的距离来改变照亮用户脚下区域1000的光量的处理,例如控制影像输出控制部60,使得用户间距离越远,越减小区域1000的光量,用户间距离越近,越增大区域1000光量。

根据会议室中多个用户之间的距离来改变照亮用户脚下区域1000的光量的处理,也可以例如控制图像输出控制部60,使得用户间距离越远,越增大区域1000的光量,用户间距离越近,越减小区域1000光量。

在步骤S60,环境演示部58在用户检测部52检测到会议室中有多个用户后,前往步骤S62。在步骤S62,环境演示部58从例如图7的(b)的用户信息存储部取得检测到的多个用户的位置信息。在步骤S64,环境演示部58根据检测到的多个用户的位置信息,求出会议室中多个用户之间的距离。

前往步骤S66,环境演示部58根据求出的用户间距离,控制影像输出控制部60,改变照亮用户脚下区域1000的光量。而后,环境演示部58前往步骤S68,判断会议是否结束。在会议结束之前,环境演示部58反复进行步骤S62~S68的处理。当不再检测到用户,判断会议结束后,环境演示部58结束图14所示流程的处理。

接下来说明根据用户间距离进行的声音输出处理的示例。图15是一例根据用户间距离实施声音输出处理的流程图。图15所示的基于用户间距离的声音输出处理,是根据会议室中多个用户之间的距离来改变会议室声音输出音量。

根据会议室中多个用户之间的距离改变会议室声音输出音量的处理,可以控制声音输出控制部62,例如使得用户之间距离越远,声音输出的音量越高,用户间距离越近,声音输出的音量就越低。

根据会议室中多个用户之间的距离改变会议室声音输出音量的处理,也可以控制声音输出控制部62,例如使得用户之间距离越远,声音输出的音量越低,用户间距离越近,声音输出的音量就越高。

在步骤S80,环境演示部58在用户检测部52检测到会议室中有多个用户后,前往步骤S82。在步骤S82,环境演示部58从例如图7的(b)的用户信息存储部取得检测到的多个用户的位置信息。在步骤S84,环境演示部58根据检测到的多个用户的位置信息,求出会议室中多个用户之间的距离。

前往步骤S86,环境演示部58根据求出的用户间距离,控制声音输出控制部62,改变会议室的扬声器16输出的音量。在会议室中不再有用户发言且会议结束之前,环境演示部58反复进行步骤S82~S88的处理。

如果有会议室中有用户发言(步骤S88的是),则环境演示部58前往步骤S90,控制声音输出控制部62,降低输出的音量。而后前往步骤S92,判断会议室中用户发言是否消失。在会议室中用户发言消失之前(步骤S92的否),保持输出音量降低了的状态。而在会议室中的用户发言消失后,返回到步骤S86输出的音量。而后,如果不再检测到用户(步骤S92的否),则判断会议结束,环境演示部58结束图15所示的流程处理。

接下来说明一例报告处理,根据从用户受理的操作和用户的位置信息进行环境演示,并在会议结束后输出报告。图16是一例本实施方式涉及的信息处理系统的报告输出处理的流程图。

在步骤S100,环境演示部58从用户受理会议时间(活动时间)的指定,启动会议。环境演示部58在不再收到用户的操作、且会议室中没有用户发言,再且会议时间结束之前,反复进行步骤S102~S112的处理。

在步骤S102,判断是否收到用户的操作。当判断收到用户的操作后,环境演示部58前往步骤S104,从例如图7的(b)所示的用户信息存储部取得用户的位置信息。在步骤S106中,环境演示部58根据从用户收到的操作和用户的位置信息,用影像显示装置12和扬声器16进行环境演示。

例如,在步骤S106中,可以根据用户受理的操作和用户的位置信息,在数字酒精空间的墙壁或地板上实施信息及影像内容的投影、选择投影到墙壁或地板上的信息及影像内容、移动或缩放所选的信息及影像内容等。

接着在步骤S108,环境演示部58判断会议室中是否有用户发言。当判断会议室中有用户发言,前往步骤S110,根据从操作设备20收到的用户声音的输出信号进行了语音识别的用户的发言内容,在数字酒精空间的墙壁和地板上实施信息及影像内容的追加投影。

步骤S110中在数字酒精空间的墙壁和地板上实施的追加投影不一定是基于用户发言内容的信息及影像内容,也可以是随机的信息和影像内容。通过将随机信息及影像内容追加投影到数字酒精空间的墙壁和地板上,环境演示部58能够控制参加会议的用户的思维的集中和发散。

此外,本实施方式涉及的信息处理系统1即使是相同信息及影像内容,也可以通过对于被追加投影的数字酒精空间的墙壁和地板上显示的内容(例如图像、影视等,用来刺激主管想象力、记忆力、创新力等的右脑的显示,以及,文字、数字、逻辑树等用来刺激主管语言、计算能力、逻辑思考能力等的左脑的显示等)产生不同的反馈,来控制参与会议的用户思维的集中和发散。

接着前往步骤S112,判断会议是否结束。当不再检测到用户,会议结束后,环境演示部58前往步骤S114,将会议室内的用户移动轨迹等会议中的状态作为报告输出。例如,在把用户在会议室内的移动轨迹作为报告输出时,可以通过描绘处理,参考图7的(c)的日志存储部的信息,将从会议开始到结束为止各用户的位置信息作为轨迹,映射到用户进行了交流的空间的图像数据或映像数据中,制作将用户移动轨迹可视化的图像数据或者影像数据。空间的图像数据和影像数据既可以是设置在空间内的照相机18拍摄的数据,也可以是预先保存的图像数据和影像数据。这样环境演示部58可以将制作的图像数据或影像数据作为报告输出。

还可以进一步通过参考日志存储部管理的发言状态,将处于发言状态时的日期和时间的位置信息作为轨迹所作的描绘处理,用不同于未发言状态时的颜色及形状来描绘轨迹,以作区分。同样,也可以按照测到的发言量大小,用不同的轨迹颜色和形状进行描绘处理。

通过参考上述这样的报告,可以来回顾,借助于环境演示,多个用户之间的交流的活跃程度有了多大改善。

本发明不受具体公开的上述实施方式的限制,在不脱离专利申请范围的情况下,可进行各种变形和更改。用本实施方式说明的信息处理系统l是一个示例,根据不同的用途和目的可以有各种不同的系统构成。

上述所述的实施方式的各项功能可通过一个或多个处理电路实现。在此的″处理电路″是指,如通过电子电路安装的处理器那样,经过编程,可以用软件执行各项功能的处理器、被设计成为执行上述各项功能的ASIC(Application Specific IntegratedCircuit)、DSP(Digital Signal Processor)、FPGA(Field Programmable Gate Array)和传统电路模块等的设备。

实施例中所描述的设备群仅表示用于本说明书公开的实施方式的多个计算环境之中的一个。在一些实施方式中,信息处理装置10包括服务器集群之类的多个计算设备。多个计算设备被配置为通过包括网络40或共享内存等在内的任意类型的通信链路相互通信,执行本说明书所公开的处理。

进而,信息处理装置10也可以将所公开的处理步骤进行各种组合。信息处理装置10的各个要素既可以合成为一个装置,也可以分为多个装置。

符号说明

1信息处理系统,10信息处理装置,12影像显示装置,14传感器装置,16扬声器,18照相机,20操作设备,22麦克风,24标签,26操作按钮,30照明,32扬声器,34气味输出装置,36传感器装置,50接收部,52用户检测部,54发言量检测部,56发言内容识别部,58环境演示部,60影像输出控制部,62声音输出控制部,64照明控制部,66气味输出控制部,68存储部。

相关技术
  • 信息处理系统、装置、方法以及房间、存储介质、计算机装置
  • 房间模型核查方法、装置、计算机设备和存储介质
技术分类

06120113266660