掌桥专利:专业的专利平台
掌桥专利
首页

信息显示终端、信息发送方法、计算机程序

文献发布时间:2023-06-19 10:03:37


信息显示终端、信息发送方法、计算机程序

技术领域

本公开涉及适于收集用户的WEB阅览信息的系统等的信息显示终端、信息发送方法、计算机程序。

背景技术

作为现有技术,提出了以下几种结构:根据对阅览智能手机等信息终端(PDA:个人数字助理)或者个人计算机等的用户的眼球周边进行拍摄而得的图像,检测当前该用户的眼球所意向的方向,并与当前在该信息终端显示的显示内容的信息相匹配,将当前用户在该信息终端的显示内容中具体正在注视什么作为信息来获得。

例如,在下述的专利文献1中公开了如下结构:利用对以便携式电话机、汽车导航等为对象的面向移动体的广播服务的显示画面进行视觉辨认的观众的视线信息,测定仅用现有的视听率不可知的“节目如何被看到”这样的视听质量。

另外,在同样的下述的专利文献2中公开了如下系统:确定第一用户的内容(动态图像)的时间上的关注位置,将表示所确定的时间上的关注位置的关注时间信息与内容信息及关注位置信息相对应地输出,第二用户视觉辨认的显示部再现显示内容(动态图像)时,通过公共的指标使该显示部能够识别地显示基于与该内容信息一起输出的关注时间信息的时间上的关注位置和基于关注位置信息的空间上的关注位置,其结果,使得第二用户高效地掌握第一用户在内容内的时间上的关注位置和空间上的关注位置。

并且,作为用于获得这些用户的视线信息的基础技术的视线检测技术,下述的非专利文献1公开了拍摄眼球并计算视线方向时的每个人的校准技术的改良,同样在下述的专利文献3中公开了在拍摄眼球并想要检测视线方向的技术中,使用图像模板在遗传算法下提高正确的检测率的技术。

另外,在下述的非专利文献2中示出:首先从1450名以上的对象者收集2.5兆帧以上的视线跟踪(eye tracking)图像数据(称为“GazeCapture”),使用该GazeCapture,学习作为视线跟踪用深层神经网络的“iTracker”,从而能够使基于未搭载特别的传感器的移动信息终端例如智能手机的视线跟踪的精度成为1.71cm以下。

现有技术文献

专利文献

专利文献1:日本特开2009-5094号公报

专利文献2:日本特开2017-228197号公报

专利文献3:日本特开2013-45151号公报

非专利文献

非专利文献1:大野健彦、武川直樹、吉川厚;「眼球形状モデルに基づく視線測定法」(第8回画像センシングシンポジウム、pp307-312、2002)(大野健彦、武川直树、吉川厚;"基于眼球形状模型的视线测定法"(第8次图像感测讨论会,pp307-312、2002))

非专利文献2:Kyle Krafka、et al.;“Eye Tracking for Everyone“,CVPR2016,http://gazecapture.csail.mit.edu/

发明内容

发明要解决的课题

当因特网普及、各种商业经由WEB,物品或服务的销售经由WEB进行时,作为用于知晓观众即购买层的兴趣和嗜好的基础信息,WEB页的阅览记录的重要性预计今后也会越来越高。因此,可以预想到以某种形式利用WEB进行商业的企业、或者通过WEB进行个人交易的个人今后会越来越追求附加价值更高的精细的WEB阅览信息。

此外,如果能够以多个阅览者为基础输入这些WEB阅览信息,就可以期待使用数据挖掘更高度地进行活用。

但是,由于某个人当前正在观看哪个WEB上的页的何处这一详细的阅览信息是个人信息,因此难以无阅览者同意地收集并活用。另一方面,如前面的说明那样,这些阅览信息得到多人数的信息是重要的,因此关于作为个人信息的WEB阅览信息的收集,在每次阅览时,都从信息收集侧向阅览者(用户)得到许可是繁琐的且不现实的。

而且,从提供信息的阅览者(用户)的立场来说,将自己的阅览信息提供给第三者反而是有损失的,由于不能看到好处,所以从该观点出发,信息的收集也是困难的。

另外,若WEB阅览信息附带有阅览者的属性(性别、年龄、职业等),则在想要活用商业的企业等中活用的可能性会变得广泛。

本发明是鉴于上述情况而完成的,其目的在于提供如下的信息显示终端、信息发送方法、计算机程序:不管是否是个人信息,都能够顺利地、大量收集与阅览WEB阅览设备等显示内容随时间变化的发布信息的显示物的阅览者在显示内容中具体地注视何处相关的信息(视线跟踪信息),并且能够附带收集到与阅览者的属性相关的信息。

用于解决课题的手段

为了解决上述的课题,本发明提供下述1)~10)所记载的信息显示终端、信息发送方法、计算机程序。

1)信息显示终端的特征在于具备:

(A)显示画面;

(B)视点检测部,检测操作该信息显示终端的操作者在所述显示画面上的视点位置;

(C)输出部,将确定所述显示画面的显示内容的信息和所述视点位置的检测结果相对应地向规定的发送目的地输出,

所述信息显示终端还具备询问信号接收响应部,该询问信号接收响应部接收询问信号,并根据操作者的操作发送对该询问信号的答复,其中,该询问信号向操作者请求该信息显示终端以对该信息显示终端的操作者支付报酬为条件而执行(C)中记载的输出部的功能的许可。

2)如1)所述的信息显示终端,其中,所述信息显示终端还具有第二发送部,该第二发送部发送与对所述询问信号进行了许可处理的操作者的属性有关的信息。

3)信息发送方法的特征在于包括:

(A)信息显示终端的显示画面显示内容的步骤;

(B)所述信息显示终端的视点检测部检测操作该信息显示终端的操作者在所述显示画面上的视点位置的步骤;

(C)所述信息显示终端的输出部将确定所述显示画面的显示内容的信息和所述视点位置的检测结果相对应地向规定的发送目的地输出的步骤,

所述信息发送方法还包括:该信息显示终端的询问信号接收响应部接收询问信号,并根据操作者的操作发送对该询问信号的答复的步骤,其中,该询问信号向操作者请求该信息显示终端以对该信息显示终端的操作者支付报酬为条件而执行(C)中记载的输出部的功能的许可。

4)如3)所述的信息发送方法,其中,所述信息发送方法还包括:所述信息显示终端的第二发送部发送与对所述询问信号进行了许可处理的操作者的属性相关的信息的步骤。

5)计算机程序用于执行3)或4)所述的信息发送方法所具有的各步骤。

6)信息显示终端的特征在于具备:

(A)显示画面;

(B)视点检测部,检测操作该信息显示终端的操作者在所述显示画面上的视点位置;

(C)输出部,将确定所述显示画面的显示内容的信息和所述视点位置的检测结果相对应地向规定的发送目的地输出,

所述信息显示终端还具备许可动作处理部,该许可动作处理部将所述操作者事先许可执行所述输出部所执行的向所述规定的发送目的地的输出的事实进行记录保持或向终端外部发送。

7)如6)所述的信息显示终端,其中,所述输出部进行的向所述规定的发送目的地的输出包含与所述操作者的属性相关的信息而被执行。

8)信息发送方法的特征在于包括:

(A)信息显示终端的显示画面显示内容的步骤;

(B)所述信息显示终端的视点检测部检测操作该信息显示终端的操作者在所述显示画面上的视点位置的步骤;以及

(C)所述信息显示终端的输出部将确定所述显示画面的显示内容的信息和所述视点位置的检测结果相对应地向规定的发送目的地输出的步骤,

所述信息发送方法还包括:所述信息显示终端的许可动作处理部将所述操作者事先许可执行所述输出部所执行的向所述规定的发送目的地的输出的事实进行记录保持或向终端外部发送的步骤。

9)如8)所述的信息发送方法,其中,所述输出部执行的向所述规定的发送目的地的输出包含与所述操作者的属性有关的信息而被执行。

10)计算机程序用于执行8)或9)所述的信息发送方法所具有的各步骤。

发明效果

通过具有上述那样的构成,本发明尤其能够提供如下的信息显示终端、信息发送方法、计算机程序:不管是否是个人信息,都能够顺利地、大量收集与阅览WEB阅览设备等显示内容随时间变化的发布信息的显示物的阅览者在显示内容中具体地注视何处相关的信息,并且附带收集到与阅览者的属性相关的信息。

附图说明

图1是示意性地表示作为能适当活用本发明所涉及的阅览视点信息收集系统的形势的智能手机的显示画面的图。

图2是示意性地表示作为能适当活用本发明所涉及所涉及的阅览视点信息收集系统的形势的智能手机的显示画面的图。

图3是本发明所涉及的一实施方式的阅览视点信息收集系统的构成图。

图4是图3的阅览视点信息收集系统具有的信息收集服务器的构成图。

图5是图3的阅览视点信息收集系统使用的记录形式的例子。

图6是图3的阅览视点信息收集系统执行的信息提供者登记的流程图。

图7是图3的阅览视点信息收集系统执行的信息提供者登记的流程图。

图8是图3的阅览视点信息收集系统执行的阅览视点信息发送的流程图。

图9是用于说明本发明的另一实施方式的虚拟三维空间的示意图。

图10是从各视点观察图9的虚拟三维空间的图像的示意图。

具体实施方式

[能适当活用本发明的各实施方式的形势其一]

在说明本发明所涉及的各实施方式之前,说明能适当活用这些各实施方式的几个形势。

图1是示意性地表示作为能适当活用本发明所涉及的阅览视点信息收集系统的形势的智能手机的显示画面的图。

图1是示意性地表示在智能手机中显示了个人的日志页面的形势的图。

智能手机1分别具备显示面板1a、具有能够拍摄观看显示面板1a的用户(WEB的阅览者)的视野的前置相机(in camera)1b、扬声器1c、主按键1d。

首先,前置相机1b用于以拍摄视频对话(电视会议、电视电话)或自拍(selfie)图像为目的而被搭载于大多的智能手机或便携式电话,与未图示的后置相机(out camera)(朝向与操作者相反的方向的景色拍摄用相机)相对比。

在显示面板1a中,当前显示了博客投稿者1-3所创建的博客“奥日光出发的见闻”的主页(home page)1-1,在该主页1-1中,作为图像而显示有投宿的宾馆1-2、博客投稿者1-3、载客车1-4、“安静的住宿宾馆○○”的记载所在的第一网幅(banner)广告1-5、“越野SUV就□□”的记载所在的第二网幅广告1-6。

访问了该主页1-1的阅览者通过点击被显示的菜单按键1-7加以选择,从而能够对配置在主页1-1的下层的其他页、例如照片登载的页面、记有日记的页面进行阅览。

如后所述,通过使用本发明所涉及的各实施方式,从而能够得知阅览者的眼睛100当前正在观看显示面板1a的哪个位置、视线100-1的前方的显示面板1a上的视点的移动轨迹100-2。

在现有技术中,虽然博客投稿者1-3能够识别出谁通过阅览而访问该主页1-1,但未知晓阅览者注视了主页1-1上的哪个部分。但是,在本发明的各实施方式中,由于能够得知视点的移动轨迹100-2,所以可以得知自己设计制作的主页1-1的哪个地方吸引了旁人的目光,可以得知注视了什么,从而得以回报制作了博客的劳动,同时如果自己预想很高的阅览率的地方意外地没有被注视,则能够将该部分移动到主页、或者将该部分的评价追加记载到博客,从而也可以引导“大家请看这里”。

另外,对于阅览访问了该博客的主页1-1的各个阅览者,进行阅览的动机也多种多样,某一阅览者由于与博客投稿者1-3有个人的面识而访问,虽然其他阅览者未知晓该博客,但对于“奥日光”这样的旅行目的地,也许存在知识、兴趣,这样的阅览者也注意到粘贴于主页1-1的景色的照片、投宿的宾馆1-2的照片,也许会长时间注视。或者,其他阅览者虽然与博客投稿者1-3没有面识,对“奥日光”这样的地点关注也很少,但会对博客投稿者1-3旅行中使用的载客车1-4感兴趣,也许也会长时间注视该照片,对于载客车1-4,也许不会充分地阅读博客投稿者所书写的日记的记载位置。通过博客投稿者1-3获得这样的各个阅览者的视线轨迹100-2,作为下次起博客制作的参考,从而能够以更高的阅览数的方式进行改良。

另一方面,该博客发布者1-3与因特网广告商或因特网提供者进行约定(契约),在自己的主页1-1内登载两个网幅广告1-5、1-6。在广告登载契约中,大多进行按作为第三者的阅览者访问该主页1-1的次数从广告商向博客投稿者1-3支付登载费用的按次付费(pay-per-view)的方式。

从广告商的立场出发,在现有技术中没有明确自身公司广告从阅览者出发能受到多少注目,但根据本发明实施方式,首先可以得到阅览者的视线轨迹100-2,所以明确了自身公司网幅广告实际上是否受到注目,其结果,可知将自身公司网幅广告登载于该主页1-1的效果、优点。而且,如后所说明,根据本发明的各实施方式,可以得到附带了阅览者的属性的视线轨迹100-2,因此例如对于载客车的制造商,虽然作为自身公司的网幅广告的“越野SUV就□□”确实被若干人的阅览者所关注,但是在观察这些阅览者的属性时,未必可以说是载客车的最上购买层,因此能够成为判断是否继续在该主页1-1上持续投发自身公司的网幅广告的素材。

[能适当活用本发明的各实施方式的形势其二]

图2是示意性地表示作为能适当活用本发明所涉及的阅览视点信息收集系统的形势的智能手机的显示画面的图。

图2与图1同样地在智能手机1中显示有WEB上的页面的状况,并示意性地表示不是图1那样的个人博客而是显示了“△△电子株式会社”这样的企业的门户主页2-1的状况。

主页2-1中包括几个框显示,包括“CEO贺词”框2-2、“制品线上(line up)”框2-3、“最新新闻”框2-4、对该企业的咨询信息框2-5、主页内检索框2-6。

优选作为登载了该主页2-1的企业尽可能使多数阅览者进行阅览,例如,如果多数阅览者首先关注CEO贺词框2-2,则可以判断为该CEO在业界内进行了各种活动(讲演、启蒙、发表等)这一情况与阅览有关联,从而可以进一步强化这些活动,如果对最新的新闻框的关注多,则可以知晓只要发送什么样的新闻就会受到关注、或者过去的新闻的内容分析即可。

并且,如果访问阅览了主页2-1的阅览者使视线察觉在制品线上框2-3上,未达成按下上面的标题框2-1的“制品介绍”按键而阅览下层的页面的目的,而最后在页内检索框2-6检索了例如“晶闸管”这样的部件名的话,则结果该阅览者找到了该电子部件制造商的晶闸管,未达成在首页2-1的制品线上框2-3上登载晶闸管的目的,甚至下层的制品介绍页面也无法被发现。而且,若观察该阅览者的属性可知在“对于家电制造商从事制品活跃”的情况下,存在重大的机会损失,明确应该迅速改良在主页2-1上的制品线上的登载方法,对企业的竞争贡献巨大。

[第一实施方式~推送型(push)的信息收集]

接着,使用图3至图7来说明作为本发明的第一实施方式的阅览视点信息收集系统3。本系统3是使用安装于智能手机1的专用应用软件(以下称为“专用应用”)来收集智能手机1的用户阅览WEB时的视点的信息的系统。

图3是本发明所涉及的一实施方式的阅览视点信息收集系统的构成图。

如图3的构成图所示,阅览视点信息收集系统3具有智能手机1、信息收集服务器20和应用下载服务器40,它们通过因特网通信网30以可数据交换的方式相互连接。此外,在图示中,智能手机1仅为一台,但在实际的运营中包括多个智能手机。

智能手机1是通用的智能手机,在将专用应用从应用下载服务器40下载而安装的基础上,具有以下的各构成。

也就是说,首先如图1、图2中说明的那样,智能手机1的显示面板1a显示WEB上的各页面的内容。如前面所说明的那样,前置相机1b也能够拍摄使用智能手机1的用户即WEB阅览者,特别是拍摄其眼球周边的图像来检测阅览者的视线方向。扬声器1c也可以使用专用应用进行阅览者的登记、或者用于在登记后将阅览视点信息从该智能手机1发送给服务器20时的操作的指令信息发声。

视点检测部1e使用内置相机1b拍摄到的阅览者的眼球周边的图像,检测阅览者的视线,将位于该视线之前的显示面板1a上的视点的位置生成作为坐标的值。具体的视线检测的方法能够根据之前说明过的非专利文献1及其他公知信息来利用。接口部1f是智能手机1内外的发送接收接口。

此外,视点检测部1e也可以构成为:不使用眼球周边的图像来检测阅览者的视线的方式,而使用如之前在非专利文献2中说明过那样的未搭载特别的传感器的移动信息终端例如智能手机,通过使用基于有关视线追踪的储存数据的机械学习、神经网络等的方法,从而检测智能手机阅览者的视线或位于视线之前的视点的位置。

存储部1g用于可读出地存储用于智能手机1进行的各种动作的、包含操作系统程序、阅览(浏览)程序的各种应用程序,还存储用于阅览视点信息收集的专用应用。CPU(中央处理单元)1h是统一控制智能手机1进行的各种动作的中央处理部。具体而言,操作部1i是主按键1d、显示面板1a的触摸传感器,其可以将未图示的麦克风拾取的阅览者的发声作为声音识别使用,是使用它们的用户接口功能部。这些各构成通过总线1j以能够数据交换的方式相互连接。

应用下载服务器40是如下的处理器:收纳智能电话1能够利用的各种应用而不仅限于用于视点信息收集的专用应用,根据来自智能电话1的请求响应于这些应用的下载,应用下载服务器40分别具备:进行服务器40内外的数据收发统一控制的接口部40a、存储各种应用的存储部40b、以及对服务器40的各种动作进行统一控制的中央处理部即CPU 40c,这些各构成同样地通过总线线路40d以能够进行数据交换的方式相互连接。

(信息收集服务器20的结构)

接着,使用图4的结构图、图5的记录形式说明图(阅览视点信息关联记录形式的例子),对本系统3具有的信息收集服务器20的各结构进行说明。

图4是图3的阅览视点信息收集系统具有的信息收集服务器的结构图。

图5是图3的阅览视点信息收集系统使用的记录形式的例子。

信息收集服务器20具备阅览者登记管理部20a、阅览视点信息存储部20b、阅览报酬记录部20c、阅览视点信息发布目的地管理部20e、接口部20f、阅览视点信息发布部20g、CPU(中央处理单元)20h、存储部201、阅览者报酬计算部20j、以及总线20k。

阅览者登记管理部20a是使用智能手机1的WEB阅览者管理承诺了视点信息的提供的登记者的信息的部,其保管对由作为个人信息的阅览视点信息的系统3的收集进行承诺的承诺书即电子邮件记录等,作为登记者的基本信息,如图5所例示地,收纳存储有系统赋予的登记账户(图5例示中为“123456”)、登记者的出生年和性别(同样为“1979年男”)、登记者的职业和行业(同样为“药品制造销售、营业”)、家族构成(同样为“配偶、2男、1女”)、兴趣(同样为“钓鱼、露营”)等。此外,这些项目并不限定于图5例示,也可以适当选择。

此外,本系统3在收集阅览视点信息时,作为一例,采用基于脸部认证的本人认证。理由在于如后面所说明的那样,登记者(阅览者)从系统3的经营者得到报酬作为提供这些阅览视点信息的等价,并且,这些信息的购买者会活用阅览者的属性信息,因此登记者本人阅览过的阅览视点信息这点是必须的。此外,作为本人认证,除了脸部认证之外,还可以使用虹膜认证、指纹认证等各种生物测定认证技术或其他认证技术。

因此,阅览者登记管理部20a保管有用于本人认证的例如脸部图像的数据。

阅览视点信息存储部20b是按每个登记者存储得到承诺并从登记者(WEB阅览者)收集到的阅览视点信息的部,如图5所例示,存储阅览者的登记帐户(图5例示中为“123456”)、阅览的日期(同样为“2018年8月1日”)、阅览的时刻(同样为“从7点1分0秒起每5秒”)、作为阅览的地址的URL(统一资源定位符)信息(同样为“https://○○○、https://○○○/△△”)、阅览视点在显示面板上的坐标数值(将显示面板左下作为坐标(0,0)的像素单位的数值)(同样为“(200、450)、(50、320)、(100、31)”等。另外,在实施时,无需限定于这些项目。在图5图示例中,阅览者首先在7点1分0秒从首页的阅览开始,然后将首页的相同部位每10秒注视一次持续1分15秒,然后移动到下层的页面。

阅览报酬记录部20c针对每个登记者存储正在登记的阅览者提供了按照契约得到等价的阅览信息时的等价(报酬)。被记录的报酬额如果使登记者所希望的则能够阅览,按照系统的规定,例如也可以在每月月底采取向作为登记者的银行账户转入的手续。

阅览视点信息发布目的地管理部20e作为不是与提供阅览信息的登记者有关而是与从系统的运营企业购入阅览信息的利用者有关的信息,而存储保存例如企业名、企业门户主页的URL(统一资源定位符)信息、该企业想要的阅览信息的条件(例如向自身公司主页的访问阅览者信息、或具有适合作为自身公司制品的购买层的属性的登记者的阅览信息全部等。)、信息的发送定时等。

接口部20f进行服务器20内外的信息发送接收的控制。

阅览视点信息发布部20g定期或适当生成在阅览视点信息发布目的地管理部20e中预先存储的信息购买目的地中以条件决定的阅览信息并进行发送的处理。也可以进行发送在预先指定的URL中有阅览的情况下随时进行等运用。

CPU(中央处理单元)20h进行服务器20的各种动作的统一控制。

存储部20i除了用于系统3的运营的各种数据之外,还存储执行程序。

阅览者报酬计算部20j是根据来自被登记的阅览者的阅览信息收集实际情况来计算报酬的部,例如进行阅览,并通过与发送了阅览信息的时间相应的时给制来计算报酬额。

总线20k将服务器20内的各结构以能交换数据的方式相互连接。

(阅览信息提供者的登记)

接着,使用图6、图7的流程图,说明对该商业感兴趣的人最初被作为信息提供者登记于系统3的步骤。

图6是图3的阅览视点信息收集系统执行的信息提供者登记的流程图。在图6中示出例如用于登记阅览视点信息提供者的专用应用下载流程图(其1)。

图7是图3的阅览视点信息收集系统执行的信息提供者登记的流程图。在图7中示出例如用于阅览视点信息提供者的登记的专用应用下载流程图(其2)。

在本实施方式中,使用智能手机的专用应用来进行登记,通过广告对该商业感兴趣或者找到URL的信息提供希望者访问所指定的URL来下载专用应用(步骤S101、S102)。

然后,当启动专用应用时,由于在智能手机1中显示作为登记者进行登记的菜单,所以登记希望者选择该菜单(步骤S103、S201)。

如果选择菜单,则从智能手机1向服务器20发送“由于阅览信息提供者希望登记,所以希望发送必要的输入形式”为主旨的询问(询问句、询问信号、委托句或委托信号)。以下,在相同意义上使用“询问”。)被发送(步骤S202)。

与此相应地,服务器20首先向智能手机1进行“您今后提供的阅览位置信息涉及个人信息,是否承诺提供”的询问,在希望者同意的情况下例如点击“同意”这样的显示于智能手机1的画面上的按键显示时,成为同意的证据的电文记录从智能手机1向服务器20发送,在服务器20进行保管(步骤S203、S204)。CPU(中央处理单元)1h执行接收这些来自服务器20的询问信号并向服务器20发送许可任意的内容等的控制。也就是说,CPU lh被构成为对来自服务器20的询问信号进行接收和响应。

如果希望者没有同意,则强制结束专用应用,动作结束(步骤S204、S207)。

如果希望者同意,则接下来将之前在图5中例示的希望者个人的登记信息询问从服务器20发送到智能手机1,希望者记入后发送保管到服务器20,专用应用强制结束(步骤S205、S206、S207)。

(阅览视点信息的收集)

接着,使用图8的流程图(专用应用的阅览视点信息的发送流程图)说明结束了登记的阅览者发送自己进行WEB阅览时的阅览视点信息并响应于服务器20的收集的一系列动作。

图8是图3的阅览视点信息收集系统执行的阅览视点信息发送的流程图。

在本实施方式中,在登记者启动专用应用的状态下,阅览视点信息被收集。此外,并不仅限于此,也可以在登记者用智能手机1进行WEB阅览时,始终将阅览视点信息发送给服务器20,也可以不使专用应用启动而是通过其他操作来进行阅览视点信息的发送。无论哪种方法当然都是在登记者的同意下进行收集。

首先,想要发送阅览信息的登记者启动专用应用(步骤S301),然后,通过智能手机1的前置相机1b来拍摄登记者的脸部图像(步骤S302)。进行脸部认证的理由在于,如上所述,进行阅览需要是登记者本人。另外,也可以通过脸部认证以外的方法确定是登记者本人。脸部认证用图像数据与信息发送开始询问一起从智能手机1向服务器20发送(步骤S302)。

虽然服务器20已经作为信息提供者登记完毕,但如果每次信息收集都确认目的地的信息收集承诺的证据资料(承诺为主旨的电文记录),则能够更可靠地进行登记者的意志确认(步骤S303、S304)。

如果能够确认登记者的承诺,则从智能手机1开始发送阅览视点信息(图5例示),例如以5秒的时间间隔,持续进行阅览视点信息的发送直到登记者进行停止专用应用的操作(步骤S305、S306、S307、S308)。

其结果,在服务器20记录保管与该登记者相关联的阅览视点信息,能够在购买信息的企业等中活用之前说明的信息。

[第二实施方式~拉动型(pull)的信息收集]

在之前说明的本发明的第一实施方式中,想要提供阅览视点信息的阅览者(登记者)是在自己希望的时间期间自发地进行信息的发送的所谓推送型的信息收集。

另一方面,在想要利用阅览信息的信息购买侧,重视进行阅览的登记者的属性,也许存在例如想要缩小到某年龄的女性而收集阅览信息、或者想要缩小到某职业例如仅医疗者而收集阅览信息这样的要求。

与此相对,服务器20也可以在接收到“收集由医务者进行的阅览信息”的请求的情况下,从已经在服务器20中登记的登记者的信息中仅选择医务者,仅向医务者即登记者发出“能从那里发送阅览信息?”这样的询问。在该情况下,如果较高地设定报酬,则也成为登记者要发送视线跟踪信息的动机。

[第三实施方式~个人计算机等中的实施]

在之前的实施方式中,对于想要提供作为自己阅览过的视线轨迹的信息的视线跟踪信息的用户所使用的终端,而例示智能手机1进行了说明,但不限于智能手机,能够在所有的PDA(个人数字助理)、个人计算机中实施。

在使用这些个人计算机的情况下,为了拍摄登记者的眼球周边图像并进行视线检测、或者从拍摄登记者的图像的结果通过基于神经网络的学习进行视线检测,例如若是内置了内置相机的个人计算机则能够使用前置相机,且能够使用单体的数字摄像机、具有USB连接规格的相机等。

[第四实施方式~不使用应用的实施方式]

在之前的各实施方式中,构成为预先将专用应用程序(在智能手机的情况下为智能手机(smartphone)用的专用应用)安装到所使用的智能手机、个人计算机或PDA而进行阅览视点信息的发送。

在实施本发明时,使用专用应用程序这点未必是必须的。

例如,也可以构成为在某WEB上登载的主页阅览中,由阅览者的信息终端执行广告脚本等程序,以引导提供信息并进行作为阅览信息提供者的登记、阅览视点信息的发送,该结构也包含于本发明中。

[第五实施方式~以三维空间为对象的阅览视点信息的取得]

在之前的说明中,阅览视点信息(视点的轨迹的信息)是基于进行阅览的信息终端的显示器画面这样的二维平面上的坐标信息的信息。

近年来,实现了如下的构成:在虚拟三维空间内配置虚拟的对象、例如项目(item)、化身(avatar)(人物的代理对象),能够在该虚拟三维空间包含这些对象并作为内容加以发送,在多个信息终端视听、或者正在视听这些内容的观众生成自己的化身并投入到该三维空间,进行针对内容的虚拟的参加。

对于这种虚拟的或现实的三维空间内存在的对象物或坐标位置,也能够获得阅览视点的信息。

图9是用于说明本发明的其他实施方式的、虚拟三维空间的示意图。图9是示意性地图示了这样的虚拟三维空间的一例,其是包含虚拟对象的三维虚拟空间的一例。在三维虚拟空间200内,配置有背景200-1、树木的对象200-2、房屋的对象200-3、第一化身200-4、第二化身200-5,另外,该虚拟三维空间具有X轴、Y轴、Z轴这三轴的坐标轴。

位于虚拟空间200内的各对象具有与外观有关的数据、以及与位置或姿势有关的数据(有时也将前者称为坐标数据,有时也将后者称为骨骼数据或索引数据),这些数据被保存于生成该虚拟空间200并进行发送的主办者所使用的个人计算机内或发布虚拟空间数据的服务器内。主办者经由服务器或者直接、或从服务器将这些各对象的外观数据和位置或者姿势数据发送给进行该虚拟空间的视听的观众所使用的信息终端(个人计算机、智能手机等),在观众所使用的各信息终端中,根据与这些对象相关的信息等,进行用于通过信息终端附属的显示器视觉识别虚拟空间200的描绘(绘制)。另外,绘制除了在进行视听的终端中进行之外,还可以通过发送者使用的终端或者进行发送的服务器来进行。

绘制是从虚拟空间内外的确定视点观察到的描绘,该视点例如是第一化身200-4、第二化身200-5、虚拟相机200-6,分别以视点来进行图像的描绘。观众能够从这些可利用的视点中选择期望的视点来执行绘制,或者如果能够在系统上,则可以将作为独自的视点的新的虚拟相机(未示出)新设置在空间200内外,或者可以移动作为这些视点的对象。

图10是从各视点观察图9的虚拟三维空间的图像的示意图。

图10是从各视点观察到的三维虚拟空间的绘制影像的一例。图10是示意性地表示将虚拟三维空间200作为从第一化身200-4、第二化身200-5、虚拟相机200-6这样的各个视点观察到的图像进行绘制的状况的图。

从第一化身200-4观察到的图像(图10的(A))具有以显示器的左下作为原点的两个轴x1、y1上的数值来表示的坐标系,同样地,从第二化身200-5观察到的图像(图10的(C))具有以两个轴x3、y3上的数值来表示的坐标系,同样以虚拟相机200-6为视点而得到的图像(图10的(B))具有以两个轴x2、y2上的数值来表示的坐标系。

那么,如果观众在自己使用的信息终端的显示器中,看到作为房屋的对象200-3的某个点的图9图示A点,则与之前说明的各实施例的构成同样地,作为阅览视点信息,系统在从第一化身200-4观察到的图像(图10的(A))的情况下,可以取得其坐标值(x’、y’)作为A’点,在从第二化身200-5观察到的图像(图10的(C))的情况下,可以取得其坐标值(x”’、y”’)作为A”’点,在从虚拟相机200-6观察到的图像(图10的(B))的情况下,可以取得其坐标值(x”、y”)作为A”点。

使用显示了这些绘制图像的显示器上的坐标值,在如图9所示的虚拟三维空间200中,能够将作为房屋的对象200-3对应点的A点的坐标作为以先前说明的X轴、Y轴、Z轴上的数值表示的坐标系中的坐标的值,以(X1、Y1、Z1)这样的值获得。该方法虽然有几种,但由于第一化身200-4、第二化身200-5、虚拟相机200-6这样的各个视点的位置、视线的方向、虚拟的视角(或者虚拟的焦距)被预先给出,因此通过几何学的计算,可以得到三维虚拟空间200中的、例如从第一化身200-4朝向A点的视线的矢量的信息。同样地,也可以得到从第二化身200-5朝向A点的视线的矢量的信息,这两个视线矢量的交点为A点。

或者,由于预先准备了房屋的对象200-3的外观数据、位置的数据,所以例如也可以将来自第一化身200-4的视线与该房屋的对象位置交叉的交点作为A点。

在以上的说明中,已经对三维的虚拟空间中的三维坐标值的确定进行了说明,但在三维的实际空间(现实的空间)中,也能够根据同样的手续决定三维坐标值。

另外,现在几乎都将WEB上的主页作为二维信息制作登载,与此相对,如果在作为三维信息制作WEB主页的情况下,也能够按照以上的手续生成三维空间上的阅览者的阅览视点信息,其结果,可得到与二维的阅览视点信息相同的效果。

[第五实施方式~在收集视线跟踪信息时,不需要发送接收询问信号的实施方式]

在之前进行了说明的各实施方式中,已经说明了在操作者向服务器发送自己的视线跟踪信息之前,从服务器向操作者的使用终端发送“是否承诺从该终端向服务器发送并收集您的视线跟踪信息”这样的咨询信号(也称为“询问”),如果看到这些的操作者进行了表示许可(承诺)的动作,则将进行了许可(承诺)的事实作为其他信号从使用终端向服务器发送这一点。

但是,在实施本发明时,并不需要限定于这样的方式,也可以作为与上的例示不同的其他结构来实施。

即,在将智能手机用作操作者的使用终端的情况下,事先将视线跟踪信息收集用的智能手机用应用软件(通称“应用”)下载到该智能手机中加以使用,但也可以在其下载之前从操作者接受如上所示的许可行动。

或者,也可以在应用的下载中、或下载后,作为必须的菜单,进行从安装于智能手机内的专用应用请求这样的许可的动作。

不论在哪种情况下,既可以将操作者进行了承诺的事实、例如智能手机画面中显示的“YES”(也可以是“同意”、“承诺”、“接受”等)的按键显示被操作者按下等行动的事实记录在智能手机内部的记录用构成部中,在适当的定时,向用于下载应用的服务器、或者向其他接收用构成、或者收集视线跟踪信息的服务器发送操作者进行了承诺的行动的事实,也可以不进行发送而是记录保持在操作者使用的智能手机内部。

通过这样构成,运营系统的服务器的管理者侧、提供视线跟踪信息的操作者的侧也不需要进行重复的冗余、繁杂的动作,实现作业的高效化。

此外,这样构成的点并不限于使用智能手机的应用程序的情况,在向智能手机、个人计算机发送并实现附加了用于视线跟踪信息发送的脚本语言(JavaScript)的数据、程序的情况下、或者以其他方式实现视线跟踪信息的发送的情况下也是同样的。

(发明效果的说明)

根据本发明,可以提供如下的信息显示终端、信息发送方法、计算机程序:不管是否是个人信息,都能够顺利地、大量收集与阅览WEB阅览设备等显示内容随时间变化的发布信息的显示物的阅览者在显示内容中具体地注视何处相关的信息,并且附带收集到与阅览者的属性相关的信息。

本发明能够以其他各种方式实施,能够在不脱离发明的主旨的范围内进行各种省略、替换、变更。这些实施方式及其变形被包括在发明的范围和宗旨中,同样地被包括在本发明保护范围所记载的发明及其等同的范围中。

符号的说明

1智能手机;1b前置相机;3阅览视点信息收集系统;20信息收集服务器;40应用下载服务器。

相关技术
  • 信息显示终端、信息发送方法、计算机程序
  • 合流辅助信息发送装置及方法、合流辅助系统及计算机程序
技术分类

06120112406216