图像处理装置、图像处理方法及记录介质

本申请是申请日为2020年02月13日、申请号为202010091881.8、发明名称为“图像处理装置、图像处理方法及记录介质”的发明专利申请的分案申请。

技术领域

本发明涉及一种从图像组中根据检索条件来检索图像，并使该检索结果图像显示于显示部的图像处理装置、图像处理方法及记录介质。

背景技术

例如，使用如下方法：在从智能手机中所保持的图像组中搜索用户所希望的图像的情况下，用户使包含于图像组中的图像一览(缩略图像)按时序列显示于显示部，一边按时序列回溯图像一览，一边搜索所希望的图像。并且，已知有如下方法：输入用于从图像组中检索图像的关键词，利用标签信息等图像的附加信息来搜索与关键词一致的图像。

然而，在显示并回溯图像一览的方法中，很难从包含于图像组中的大量的图像中搜索所希望的图像。并且，在输入关键词来搜索图像的方法中，在应该使用什么关键词明确的情况下，可能能够适当地检索所希望的图像，但是在关键词不明确的情况下，很难适当地搜索所希望的图像。

在此，作为与本发明有相关性的现有技术文献，有专利文献1，2。

在专利文献1中记载有：根据赋予到图像数据的附加信息进行字符串检索，由此进行图像数据检索。例如，进行欲检索的Exif(Exchangeable Image File Format，可交换图像文件格式)字符串和欲检索的便签字符串的AND/OR中的任一种检索，由此检索具有与所输入的字符串一致的附加信息的图像数据，并显示与检索结果对应的图像数据。

在专利文献2中记载有：将与数字图像相关的多个属性及属性值显示于标签上，用户通过选择显示于标签上的属性值之一而选择另一组图像等。并且，当浏览所选择的图像组时，用户检索特定人的所有图像，按时序列显示这些图像，并显示它们的相关标签。

专利文献1：日本特开2009-124270号公报

专利文献2：日本专利第5216591号公报

在专利文献1中记载有进行多个附加信息字符串的AND检索等，但是用户需要输入欲检索的字符串，无法直观地检索图像。

并且，在专利文献2中记载有通过选择一张数字图像的属性值之一而浏览其他图像组等，但是仅浏览仅与一个属性值对应的图像组，例如，无法由多个属性值来缩小图像。

并且，在现有的在线照片服务中具有如下功能：将督促浏览图像的通知发送给用户，并督促用户浏览所拥有的过去的图像。

在督促浏览图像的通知发送到用户之后，若由用户打开该通知，则如图20所示，例如使用从用户所拥有的“2015/01/10”的图像组中选择的几张图像所制作的拼贴图像显示于显示部。

接着，若由用户按下在拼贴图像的下侧显示的“显示其他照片”按钮，则如图21所示，与拼贴图像中所使用的图像相同的拍摄日期的“2015年1月10日(星期六)”的图像组以图像拍摄时刻的降序显示于显示部。

并且，用户使显示于显示部的图像组向上方向或下方向移动，由此能够使在此或此后的拍摄日期被拍摄的图像组以图像拍摄时刻的顺序依次显示。

例如，若显示于显示部的图像组向上方向移动，则“2015年1月10日(星期六)”之前的最新拍摄日期例如“2015年1月9日(星期五)”的图像组显示于显示部。另一方面，若显示于显示部的图像组向下方向移动，则“2015年1月10日(星期六)”之后的最新拍摄日期例如“2015年1月18日(星期天)”的图像组显示于显示部。

如此，在现有的在线照片服务中具有如下功能：从拼贴图像中追踪“显示其他照片”按钮，由此与该拼贴图像中所使用的图像相同的拍摄日期的图像组按时序列显示。

督促浏览图像的通知中所包括的拼贴图像在与“2015年1月10日(星期六)”的图像拍摄时刻有关的检索条件下检索到，并使用从拍摄日期为“2015年1月10日(星期六)”的图像组中选择的几张图像来制作。从而，从拼贴图像中，能够使在该拼贴图像中所使用的图像拍摄时刻的前后被拍摄的拍摄日期为“2015年1月10日(星期六)”的图像组按时序列显示。

然而，在现有的照片服务中不具备如下功能：从在除了图像拍摄时刻以外的任意条件下检索到的图像中，使在其中一张图像的拍摄时刻的前后被拍摄的图像按时序列显示。

并且，在现有的在线照片服务中，在从图像组中检索相当于关键词的图像的情况下，相当于该关键词的图像组按每个拍摄日期以图像拍摄时刻的降序显示于显示部。

从图像组中，例如若检索相当于“足球”的关键词的图像，则如图22所示，从“2015年12月5日(星期六)”的图像组中，相当于足球的9张图像选中。

在此，若按下在“2015年12月5日(星期六)”显示的右侧所显示的“朝下箭头”的按钮，则与足球无关的图像也包括在内显示“2015年12月5日(星期六)”的图像组中所包括的所有图像，“朝下箭头”按钮变更为“朝上箭头”按钮。若按下“朝上箭头”按钮，则再次显示相当于足球的9张图像，“朝上箭头”按钮返回到“朝下箭头”按钮。

如图22所示，在检索到“足球”的关键词的情况下，在相当于“足球”的图像选中“2015年12月5日(星期六)”之前，相当于“足球”的图像选中的拍摄年月日为“2015年11月28日”。

在此，包含于图像组中的所有图像返回到按拍摄时刻的顺序显示的时序列图像一览画面，在看到“2015年12月5日(星期六)”的图像组的情况下，在时序列图像一览中设为“2015年12月5日(星期六)”的下一个图像的拍摄年月日为“2015年12月6日(星期天)”，“2015年12月5日(星期六)”之前的图像的拍摄年月日为“2015年12月4日(星期五)”。

如此，在现有的在线照片服务中具有如下功能：从图像组中，在用“足球”的关键词进行了图像检索的情况下，将存在相当于“足球”的图像的拍摄日期的图像按每个该拍摄日期显示。

然而，在现有的在线照片服务中不具备如下功能：例如，通过按下按钮的一个动作，从所选中的拍摄日期的图像一览中，使在其中一张图像的拍摄时刻的前后被拍摄的图像按时序列显示。换言之，用户必须预先存储在时序列图像一览中要显示的拍摄日期，并使时序列图像一览显示，以使用户移动到要显示的拍摄日期。

发明内容

本发明的目的在于提供一种从在除了图像拍摄时刻以外的条件下检索到的图像一览中的一个图像起，能够使在该一个图像拍摄时刻的前后被拍摄的图像按时序列显示的图像处理装置、图像处理方法、程序及记录介质。

为了实现上述目的，本发明提供一种图像处理装置，其具备：指示获取部，获取由用户输入的指示；

图像检索部，从图像组中检索与根据来自用户的指示输入的检索条件一致的图像作为检索图像；

图像显示部，使包含于图像组中的图像显示于显示部；及

图像指定部，从显示于显示部的图像中，指定根据来自用户的指示选择的一个图像，

检索条件是用于从图像组中根据除了拍摄时刻以外的条件检索图像的条件，

图像指定部从显示于显示部的检索图像中，指定根据来自用户的指示所选择的一个检索图像作为指定检索图像，

在指定检索图像被指定的情况下，图像显示部在仅使指定检索图像显示于显示部之后，根据来自用户的指示，指定检索图像和图像组中所包含的在指定检索图像拍摄时刻的前后被拍摄的图像的至少一部分作为时序列图像根据时序列显示于显示部。

在此，优选图像显示部在仅使指定检索图像显示于显示部之后，每当输入来自用户的指示时，在检索图像中，仅使在指定检索图像拍摄时刻之前或之后被拍摄的一个检索图像，以从指定检索图像拍摄时刻起，按时序列被拍摄的检索图像的顺序依次显示于显示部。

并且，图像指定部从显示于显示部的时序列图像中，指定根据来自用户的指示所选择的一个时序列图像作为指定时序列图像，

优选在指定了指定时序列图像的情况下，图像显示部在仅使指定时序列图像显示于显示部之后，每当输入来自用户的指示时，在图像组中仅使在指定时序列图像拍摄时刻之前或之后被拍摄的一个图像，以从指定时序列图像拍摄时刻起，按时序列被拍摄的图像的顺序依次显示于显示部。

并且，优选图像检索部具备：

标签信息显示部，使赋予到包含于图像组中的图像的标签信息显示于显示部；

标签信息指定部，从显示于显示部的标签信息中，指定根据来自用户的指示所选择的标签信息作为选择标签信息；及

图像提取部，从图像组中提取被赋予选择标签信息的图像作为检索图像，

标签信息显示部使赋予到包含于图像组中的所有图像的所有标签信息的至少一部分显示于显示部，

标签信息指定部从显示于显示部的标签信息中，指定根据来自用户的指示所选择的第1个标签信息作为第1选择标签信息，

图像提取部从图像组中提取被赋予第1选择标签信息的图像作为第1检索图像，

图像显示部使所有第1检索图像的至少一部分显示于显示部，

标签信息显示部使赋予到所有第1检索图像的所有标签信息的至少一部分显示于显示部。

并且，优选标签信息指定部从第1选择标签信息和显示于显示部的标签信息中，同时指定根据来自用户的指示所选择的第2个标签信息作为第2选择标签信息，

图像提取部从第1检索图像中提取被赋予第2选择标签信息的第1检索图像作为第2检索图像，

图像显示部使所有第2检索图像的至少一部分显示于显示部，

标签信息显示部使赋予到所有第2检索图像的所有标签信息的至少一部分显示于显示部。

并且，优选标签信息指定部从显示于显示部的标签信息中，同时指定根据来自用户的指示所选择的两个以上的标签信息作为选择标签信息，

图像提取部从图像组中提取被赋予所有两个以上的选择标签信息的图像作为检索图像，

图像显示部使所有检索图像的至少一部分显示于显示部，

标签信息显示部使赋予到所有检索图像的所有标签信息的至少一部分显示于显示部。

并且，本发明提供一种图像处理方法，其包括：指示获取部获取由用户输入的指示的步骤；

图像检索部从图像组中检索与根据来自用户的指示输入的检索条件一致的图像作为检索图像的步骤；

及图像显示部使包含于图像组中的图像显示于显示部的步骤；及

图像指定部从显示于显示部的图像中，指定根据来自用户的指示所选择的一个图像的步骤，

检索条件是用于从图像组中根据除了拍摄时刻以外的条件检索图像的条件，

从显示于显示部的检索图像中，指定根据来自用户的指示所选择的一个检索图像作为指定检索图像，

在指定检索图像被指定的情况下，在仅使指定检索图像显示于显示部之后，根据来自用户的指示，指定检索图像和图像组中所包含的在指定检索图像拍摄时刻的前后被拍摄的图像的至少一部分作为时序列图像根据时序列显示于显示部。

并且，本发明提供一种程序，其用于使计算机执行上述图像处理方法的各步骤。

并且，本发明提供一种计算机可读取的记录介质，其记录有用于使计算机执行上述图像处理方法的各步骤的程序。

并且，本发明具备：指示获取部，获取由用户输入的指示；

图像检索部，从图像组中检索与根据来自用户的指示输入的检索条件一致的图像作为检索图像；

图像显示部，使包含于图像组中的图像显示于显示部；及

图像指定部，从显示于显示部的图像中，指定根据来自用户的指示选择的一个图像，

指示获取部、图像检索部、图像显示部及图像指定部为硬件或执行程序的处理器，

检索条件是用于从图像组中根据除了拍摄时刻以外的条件检索图像的条件，

图像指定部从显示于显示部的检索图像中，指定根据来自用户的指示所选择的一个检索图像作为指定检索图像，

在指定检索图像被指定的情况下，图像显示部在仅使指定检索图像显示于显示部之后，根据来自用户的指示，指定检索图像和图像组中所包含的在指定检索图像拍摄时刻的前后被拍摄的图像的至少一部分作为时序列图像根据时序列显示于显示部。

在此，优选图像检索部具备：

标签信息显示部，使赋予到包含于图像组中的图像的标签信息显示于显示部；

标签信息指定部，从显示于显示部的标签信息中，指定根据来自用户的指示所选择的标签信息作为选择标签信息；及

图像提取部，从图像组中提取被赋予选择标签信息的图像作为检索图像，

标签信息显示部、标签信息指定部及图像提取部为硬件或执行程序的处理器，

标签信息显示部使赋予到包含于图像组中的所有图像的所有标签信息的至少一部分显示于显示部，

标签信息指定部从显示于显示部的标签信息中，指定根据来自用户的指示所选择的第1个标签信息作为第1选择标签信息，

图像提取部从图像组中提取被赋予第1选择标签信息的图像作为第1检索图像，

图像显示部使所有第1检索图像的至少一部分显示于显示部，

标签信息显示部使赋予到所有第1检索图像的所有标签信息的至少一部分显示于显示部。

发明效果

根据本发明，用户为了显示在一个检索图像拍摄时刻的前后被拍摄的图像暂且不需要返回到图像一览画面，而能够根据来自用户的指示使在指定检索图像拍摄时刻的前后被拍摄的图像按时序列显示并浏览。

附图说明

图1是表示本发明所涉及的图像处理系统的结构的一实施方式的框图。

图2是表示客户端结构的一实施方式的框图。

图3是表示客户端的动作的一实施方式的流程图。

图4是表示在客户端的显示部显示的应用程序主画面的一实施方式的概念图。

图5是表示指定图像的浏览画面的一实施方式的概念图。

图6是表示指定图像信息的浏览画面的一实施方式的概念图。

图7是表示指定图像信息的编辑画面的一实施方式的概念图。

图8是表示新标签信息的输入画面的一实施方式的概念图。

图9是表示标签信息选择画面的一实施方式的概念图。

图10是表示在标签信息选择画面上选择了第1个标签信息的状态的一实施方式的概念图。

图11是表示在标签信息选择画面上根据第1个标签信息更新了标签信息的内容的状态的一实施方式的概念图。

图12是表示在标签信息选择画面上选择了第2个标签信息的状态的一实施方式的概念图。

图13是表示图像一览画面的一实施方式的概念图。

图14是表示在图像一览画面上选择了一个检索图像的状态的一实施方式的概念图。

图15是表示指定检索图像的浏览画面的一实施方式的概念图。

图16是表示时序列图像一览画面的一实施方式的概念图。

图17是表示在标签信息选择画面上点击了“检索标签”按钮的状态的一实施方式的概念图。

图18是表示标签信息检索画面的一实施方式的概念图。

图19是表示标签信息选择画面的一实施方式的概念图。

图20是表示使用从用户所拥有的“2015/01/10”的图像组中选择的几张图像来制作的拼贴图像的一例的概念图。

图21是表示与在拼贴图像中所使用的图像相同的拍摄日期的“2015年1月10日(星期六)”的图像组的一例的概念图。

图22是表示相当于“足球”关键词的图像的一例的概念图。

符号说明

10-图像处理系统，12-服务器，14-客户端，16-网络，18-指示获取部，20-图像保持部，22-图像分析部，24-评价值赋予部，26-标签信息赋予部，28-加权设定部，30-标签信息显示部，32-标签信息指定部，34-图像提取部，36-标签信息检索部，38-图像显示部，40-图像指定部，42-图像信息显示部，44-图像信息编辑部，46-显示部，50-通知和状态区域，52-菜单区域，54-导航区域，56-手指图标，58、66、88-“×”按钮，60-“信息”按钮，62-“垃圾箱”按钮，64-“共享”按钮，68-“编辑”按钮，70-“追加标签”按钮，72、78、90-“取消”按钮，74-“保存”按钮，76-新标签信息的输入栏，80-“检索标签”按钮，82-“日历”按钮，84-“其他”按钮，86-关键词的输入栏，92、94、96-箭头。

具体实施方式

以下，根据附图所示的优选实施方式，对本发明的图像处理装置、图像处理方法、程序及记录介质详细地进行说明。

图1是表示本发明所涉及的图像处理系统的结构的一实施方式的框图。图1所示的图像处理系统10具备服务器12、经由网络16连接于各服务器12的多个客户端14。

服务器12具有如下功能：获取利用图像处理系统10的多个用户各自所拥有的图像组，保持各用户所拥有的图像组中所包含的各图像，并将该图像仅与由各用户指定的共享对象进行共享等。

服务器12并不限定于1台，也可以是多台，并由具有控制装置、存储装置及通信装置等的工作站等构成。

客户端14为本发明的图像处理装置，具有如下功能：从用户所拥有的图像组中，根据检索条件，更详细而言，将赋予到图像的标签信息用作图像的检索条件并检索图像，将该检索结果的图像显示于显示部等。

客户端14由具有控制装置、输入装置、存储装置、通信装置及显示器等的台式电脑(个人电脑)、笔记本电脑、平板电脑或移动电话及智能手机等移动终端等构成。

以下，例举客户端14为智能手机的情况进行说明。

图2是表示客户端的结构的一实施方式的框图。图2所示的客户端14具备指示获取部18、图像保持部20、图像分析部22、评价值赋予部24、标签信息赋予部26、加权设定部28、标签信息显示部30、标签信息指定部32、图像提取部34、标签信息检索部36、图像显示部38、图像指定部40、图像信息显示部42、图像信息编辑部44及显示部46。

在客户端14中，首先，指示获取部18获取从客户端14的用户输入的指示。

用户能够通过对智能手机的触摸面板进行触摸操作而输入各种指示。另外，并不限定于触摸面板，也能够利用鼠标、键盘及触控板等输入装置输入指示。

详细内容将进行后述，来自用户的指示中包括选择标签信息的指示、选择图像的指示、输入赋予到图像的标签信息的指示、输入标签信息的检索条件(关键词)的指示、使图像显示于显示部46的指示等。

接着，图像保持部20是半导体存储器等存储装置，并保持图像组。

图像组通过用户使用智能手机的相机而被拍摄，并保持在智能手机的内部。另外，图像组并不受特别限定，例如，也可以是从外部读入到智能手机内部的图像组、保持在SNS(Social Network System：社交网络系统)及在线存储器等中的在线图像组及这些图像组的组合等。

例如，用智能手机的相机来拍摄的图像能够设定成从智能手机自动上传到服务器12。上传到服务器12的图像保持在服务器12的存储装置内的各用户的存储区域中。上传到服务器12的图像能够设定成保留在智能手机的图像保持部20中，也能够设定成删除。

并且，例如，用数码相机来拍摄的图像，保持在PC、笔记本电脑、平板电脑等中的图像，以及从影印等扫描的图像(数字图像数据)等，能够读入到智能手机内部。从外部读入到智能手机内部的图像保持在图像保持部20中，同样地，作为图像组的一部分被处理。

接着，图像分析部22对包含于图像组中的各图像进行分析。

图像的分析项目并不受特别限定，例如，包括图像中所拍摄到的被摄体的检测(人物检测及物体检测)、人物脸部的检测、人物表情的检测、人物行动的检测、场景的检测(夜景、大海、沙滩、天空、…)、活动的检测(运动会、婚礼、毕业典礼、…)及用户的嗜好(兴趣)的检测等图像内容的分析、图像的亮度、色彩、对比度及模糊程度等图像画质的分析、Exif(Exchangeable Image File Format：可交换图像文件格式)等图像的附加信息中所包含的时间信息(拍摄时刻)及位置信息(拍摄位置)等分析等。

接着，评价值赋予部24根据各图像的分析结果，对各图像赋予评价值。

评价值赋予部24对图像赋予评价值的方法并不受特别限定，例如能够对图像的各分析结果附加分数，计算多个分析结果的分数的总分数，并赋予该总分数作为该图像的评价值。

例如，人在微笑的图像比哭泣的脸部及愤怒的脸部等附加更高的分数。并且，亮度适当的图像比过亮的图像及过暗的图像附加更高的分数。

并且，评价值赋予部24根据后述标签信息的加权设定，在时间上，将被赋予后面选择的标签信息的图像的评价值设定得比被赋予前面选择的标签信息的图像更高。

接着，标签信息赋予部26根据各图像的分析结果，对各图像赋予标签信息。

标签信息为与图像有关的各种信息，例如，能够例示图像的拍摄年月日及拍摄位置、图像上所拍摄到的被摄体的名称、被摄体的行动的名称、表示从图像读取的场景、活动、人物的感情等的名称及用户嗜好的名称等。标签信息是文本信息，能够通过关键词来检索标签信息。

标签信息可以包含具有多个下位概念的标签信息的上位概念的标签信息。例如，可以包含具有“万宝龙(Mont Blanc)”及“草莓酥饼(Strawberry Shortcake)”这两个下位概念的标签信息的所谓“Sweets(甜品)”的上位概念的标签信息。

并且，标签信息可以具有表示标签信息的可靠度的可靠度信息。有时自动赋予的标签信息的内容不准确，但是能够根据可靠度信息来判断标签信息内容的准确性。

标签信息赋予部26不是必要的构成要件，但是可以对预先赋予到图像的标签信息进而赋予标签信息，也可以对未被赋予标签信息的图像重新赋予标签信息。

接着，加权设定部28对标签信息设定加权。

加权设定部28对标签信息进行加权设定的方法并不受特别限定，但是在用户使用两个以上的标签信息来检索图像的情况下，认为在时间上后面选择的标签信息可能比前面选择的标签信息更重要。相应于此，加权设定部28在从显示于显示部46的标签信息中根据来自用户的指示同时选择的两个以上的标签信息中，在时间上，能够将后面选择的标签信息的加权设定得比前面选择的标签信息更大。

接着，标签信息显示部30使赋予到包含于图像组中的图像的标签信息显示于显示部46。

标签信息显示部30显示标签信息的方法并不受特别限定，但是例如能够使显示于显示部46的标签信息分类显示为多个类别。由此，针对标签信息的每一种能够分类显示标签信息，用户从显示于显示部46的标签信息中，能够容易发现作为图像检索条件而欲使用的标签信息。

该情况下，标签信息显示部30能够使多个类别的至少一个中所包含的标签信息以被赋予标签信息的图像的数量多的顺序排列显示。由此，能够使赋予到多个图像的标签信息优选显示。另外，如图像的拍摄年月日等由连续的数字表示的标签信息可以以数字的降序或升序排列显示。

并且，标签信息显示部30可以使多个类别的至少一个中所包含的标签信息以作为用于检索图像的关键词而被使用的次数多的顺序排列显示，在标签信息具有其可靠度信息的情况下，可以使多个类别的至少一个中所包含的标签信息根据标签信息所具有的可靠度信息，以标签信息的可靠度高的顺序排列显示。

并且，标签信息显示部30在根据来自用户的指示选择了上位概念的标签信息的情况下，能够使包含于上位概念的标签信息中的多个下位概念的标签信息显示于显示部46。

并且，标签信息显示部30能够使标签信息作为按钮(链接)显示于显示部(触摸面板)46。由此，用户能够容易选择标签信息。

接着，标签信息指定部32从显示于显示部46的标签信息中，指定根据来自用户的指示所选择的标签信息作为选择标签信息。

并且，标签信息指定部32从显示于显示部46的检索标签信息中，指定根据来自用户的指示所选择的检索标签信息作为选择标签信息。

接着，图像提取部34从图像组中提取被赋予由标签信息指定部32指定的选择标签信息的图像作为检索图像。

在此，标签信息显示部30、标签信息指定部32及图像提取部34构成本发明的图像检索部，该图像检索部从图像组中检索与根据来自用户的指示所输入的检索条件一致的图像作为检索图像。

接着，标签信息检索部36从赋予到包含于图像组中的所有图像的所有标签信息中，检索至少一部分与根据来自用户的指示所输入的关键词一致的标签信息作为检索标签信息。

接着，图像显示部38使包含于图像组中的图像显示于显示部46。

图像显示部38例如显示包含于图像组中的各图像、包含于图像组中的图像一览(缩略图像)、检索图像一览(缩略图像)等。

图像显示部38在使图像一览或检索图像一览显示于显示部46的情况下，能够使图像以其拍摄时刻的顺序按时序列显示。并且，在包含于图像组中的各图像具有图像的评价值信息的情况下，图像显示部38也能够使图像以图像的评价值高的顺序显示于显示部46。

接着，图像指定部40从显示于显示部46的图像中，指定根据来自用户的指示所选择的一个图像。

用户从显示于显示部46的图像一览中，能够选择欲浏览的一个图像。在选择了一个图像的情况下，由图像显示部38在显示部46上仅显示该所选择的一个图像。

接着，图像信息显示部42使由图像指定部40指定的一个图像，即根据来自用户的指示所选择的一个图像的信息显示于显示部46。

在图像的信息中包含与该图像有关的各种信息。在本实施方式的情况下，包含图像拍摄时刻及赋予到图像的标签信息。另外，并不限定于此，也可以包含图像的文件名、图像的尺寸、分辨率、拍摄位置的信息等。

接着，图像信息编辑部44根据来自用户的指示，对通过图像信息显示部42显示于显示部46的一个图像的信息进行编辑。

用户能够对赋予到图像的标签信息等进行编辑。在由标签信息赋予部26自动赋予的标签信息中，也可能包含不准确的标签信息。用户能够修正或删除认为不准确的标签信息。

并且，用户也能够对图像赋予新标签信息。该情况下，图像信息编辑部44将根据来自用户的指示所输入的新标签信息作为显示于显示部46的一个图像的信息赋予到一个图像。

接着，显示部46显示各种信息。

在显示部46中显示图像、图像信息、图像一览、标签信息一览等。显示部46为液晶面板、有机EL(Electro Luminescence：电致发光)面板等，在本实施方式的情况下为触摸面板。

接着，一边参考图3所示的流程图，一边对在客户端14使用赋予到图像的标签信息作为检索条件，并从图像组中检索所希望的图像的情况进行说明。

首先，对选择第1个标签信息的情况的动作进行说明。

该情况下，首先，由标签信息显示部30在显示部46上显示赋予到包含于图像组中的所有图像的所有标签信息的至少一部分(步骤S1)。

若标签信息显示于显示部46，则接着由标签信息指定部32从显示于显示部46的标签信息中指定根据来自用户的指示所选择的第1个标签信息作为第1选择标签信息(选择标签信息)(步骤S2)。

若指定第1选择标签信息，则接着由图像提取部34从图像组中提取被赋予第1选择标签信息的图像作为第1检索图像(检索图像)(步骤S3)。

若提取第1检索图像，则接着由图像显示部38在显示部46上显示所有第1检索图像的至少一部分(步骤S4)。

接着，由标签信息显示部30在显示部46上显示赋予到所有第1检索图像的所有标签信息的至少一部分(步骤S5)。

接着，对同时选择第1个标签信息和第2个标签信息的情况的动作进行说明。

该情况下，接着，由标签信息指定部32从第1选择标签信息和显示于显示部46的标签信息中，同时指定根据来自用户的指示所选择的第2个标签信息作为第2选择标签信息(选择标签信息)(步骤S6)。

接着，由图像提取部34从第1检索图像中提取被赋予第2选择标签信息的第1检索图像作为第2检索图像(检索图像)(步骤S7)。

接着，通过图像显示部38在显示部46上显示所有第2检索图像的至少一部分(步骤S8)。

接着，由标签信息显示部30在显示部46上显示赋予到所有第2检索图像的所有标签信息的至少一部分(步骤S9)。

另外，在同时选择三个以上的标签信息的情况的动作也相同。即，同时选择两个以上的标签信息的情况的动作为如下。

首先，由标签信息指定部32从显示于显示部46的标签信息中同时指定根据来自用户的指示所选择的两个以上的标签信息作为选择标签信息。

接着，由图像提取部34从图像组中提取被赋予所有两个以上的选择标签信息的图像作为检索图像。

接着，由图像显示部38在显示部46上显示所有检索图像的至少一部分。

接着，由标签信息显示部30在显示部46上显示赋予到所有检索图像的所有标签信息的至少一部分。

以下，关于本发明的图像处理装置，例举对通过客户端14在智能手机上运行的应用程序(以下，也简称为APP)来实现的情况进行说明。

图4是表示在客户端的显示部显示的APP主画面的一实施方式的概念图。图4所示的智能手机的显示部46由触摸面板构成，用户通过对触摸面板进行触摸操作，能够将显示部(触摸面板)46使用为不仅显示各种信息，而且获取从用户输入的各种指示的指示获取部18。

在主画面内的上部显示有通知和状态区域50，在其下侧显示有菜单区域52。并且，在主画面内的下部显示有导航区域54。

在导航区域54内，从左侧向右侧，依次显示有“搜索”、“收集”、“主页”、“共享”及“各种”各按钮。

若点击(按下)“搜索”按钮，则标签信息的选择画面显示于显示部46。

并且，若点击“收集”按钮，则使用包含于图像组中的图像自动制作相册等合成图像。

若点击“主页”按钮，则主画面，即包含于图像组中的图像一览显示于显示部46。在图像一览中，图像例如以拍摄时刻的顺序(降序或升序)排列显示。

若点击“共享”按钮，则与其他用户共享根据来自用户的指示所选择的图像。

若点击“各种”按钮，则能够选择并执行未显示于导航区域的其他各种功能。

在菜单区域52与导航区域54之间的区域显示有图像一览。在图像检索之前，在未选择任何标签信息作为检索条件的状态下，在图像一览画面上，图像一览例如包含于图像组中的所有图像的至少一部分以图像拍摄时刻顺序，在本实施方式的情况下以拍摄时刻的降序，从图像一览画面的上侧向下侧按时序列显示。

如图4中用手指图标56表示，用户从显示于图像一览画面上的图像中点击欲浏览的一个图像，由此能够仅使该被点击的一个图像显示于显示部46并进行浏览。

该情况下，由图像指定部40从显示于显示部46的图像一览中指定根据来自用户的指示所选择的一个图像作为指定图像，并由图像显示部38在显示部46上仅显示指定图像。

图5是表示指定图像的浏览画面的一实施方式的概念图。指定图像的浏览画面显示于显示部46的整个表面。如图5所示，在指定图像的浏览画面的左上部显示有“×”按钮58，在右下部显示有“信息”按钮60。在指定图像的浏览画面的下部显示有“垃圾桶”按钮62及“共享”按钮64等。

例如，用户能够通过点击“×”按钮58而关闭指定图像的浏览画面，以返回到图像一览画面(主画面)。并且，用户能够点击“垃圾桶”按钮62以删除指定图像，或者能够点击“共享”按钮64以与其他用户共享指定图像。此外，如图5中用手指图标56表示，用户通过点击“信息”按钮60而使指定图像返回，并能够浏览指定图像信息。

图6是表示指定图像信息的浏览画面的一实施方式的概念图。在指定图像信息的浏览画面的左上部显示有“×”按钮66，在右上部显示有“编辑”按钮68。并且，在指定图像信息的浏览画面的上部显示有指定图像的缩略图像，在其下侧依次显示有指定图像拍摄时刻、自动附加的标签、自行附加的标签及“追加标签”按钮70。

自动附加的标签分类为各类别，如日历、人物、拍摄位置、自动赋予标签及服务标签，自行附加的标签分类为手动赋予标签的类别。

在日历类别中，作为指定图像的拍摄年份及拍摄月份而包含“2018”及“12月”的标签信息按钮。

人物类别中包含“太郎”的标签信息按钮。

拍摄位置类别中包含“公园”、“港区”及“台场海滨公园”的标签信息按钮。

自动赋予标签类别中包含“室外”、“男孩”及“晴天”的标签信息按钮。

扫描标签类别中包含“扫描服务”的标签信息按钮。

手动赋予标签类别中包含“少儿编程”的标签信息按钮。

例如，用户能够通过点击“×”按钮66而关闭指定图像信息的浏览画面，以返回到指定图像的浏览画面。并且，如用手指图标56表示，用户通过点击“编辑”按钮68而能够编辑指定图像信息。

图7是表示指定图像信息的编辑画面的一实施方式的概念图。在图7所示的指定图像信息的编辑画面的左上部显示有“取消”按钮72，在右上部显示有“保存”按钮74。

在指定图像信息的浏览画面中，在点击了“编辑”按钮68的情况下，在指定图像信息的编辑画面上，在能够删除的标签信息按钮内显示“×”按钮。在由用户点击了标签信息按钮内的“×”按钮的情况下，由图像信息编辑部44删除该标签信息按钮。并且，如图7中用手指图标56表示，在由用户点击了“追加标签”按钮70的情况下，显示新标签信息的输入画面。

在指定图像信息的编辑画面上，在点击了“取消”按钮72的情况下，舍弃对指定图像信息的编辑内容，并返回到指定图像信息的浏览画面。在点击了“保存”按钮74的情况下，保存对指定图像信息的编辑内容。

图8是表示新标签信息的输入画面的一实施方式的概念图。在图8所示的新标签信息的输入画面的上部显示有指定图像的缩略图像，在其下侧显示有新标签信息的输入栏76。在新标签信息的输入栏76中显示有用于督促输入新标签信息的“追加标签”的消息。在新标签信息的输入栏76的右侧显示有“取消”按钮78。

在由用户点击了新标签信息的输入栏76的情况下，在新标签信息的输入栏76的下侧显示最近赋予的新标签信息的履历，在新标签信息的输入画面的下部显示软件键盘。用户能够使用软件键盘在新标签信息的输入栏76中输入新标签信息的名称。

该情况下，每当用户在新标签信息的输入栏76中输入字符时执行部分一致检索，从赋予到包含于图像组中的所有图像的所有标签信息中，检索与输入到新标签信息的输入栏76中的字符部分一致的标签信息，并显示于新标签信息的输入画面内。用户也能够从在新标签信息的输入画面内显示的标签信息一览中选择新标签信息。

在由用户点击了“取消”按钮78的情况下，新标签信息的输入画面被关闭，返回到指定图像信息的编辑画面。

接着，对标签信息的选择画面进行说明。

如前所述，若点击“搜索”按钮，则标签信息的选择画面显示于显示部46。

图9是表示标签信息的选择画面的一实施方式的概念图。标签信息的选择画面以重叠于除了图像一览画面内的上侧一部分区域以外的区域的上层、且以一定的透射率透明地看见下层的图像一览的方式显示。在未选择标签信息的状态下，在标签信息的选择画面上，赋予到包含于图像组中的所有图像的所有标签信息的一部分分类显示为多个类别。各标签信息作为按钮显示于标签信息的选择画面内。并且，在标签信息的选择画面内的下部显示有“检索标签”按钮80。

在多个类别中包括日历、人物、拍摄位置、自动赋予标签、手动赋予标签、服务标签等各类别。

日历类别中包含图像的拍摄年份及拍摄月份的标签信息按钮。

人物类别中包含在图像上拍摄到的人物名称的标签信息按钮。

拍摄位置类别中包含图像被拍摄的位置标签信息按钮。

自动赋予标签类别中包含由标签信息赋予部26自动赋予的标签信息按钮。

手动赋予标签类别中包含由用户手动赋予的标签信息按钮，即，由图像信息编辑部44赋予的标签信息按钮。

服务标签类别中例如包含如扫描打印以制作数字图像数据等与由本发明所涉及的图像处理系统10提供的服务相关的标签信息按钮。

在标签信息的选择画面上，在日历类别中，作为图像的拍摄年份，“2018”、“2017”及“2016”的标签信息按钮依次从左侧向右侧显示，作为图像的拍摄月份，“12月”、“11月”、“10月”及“9月”的标签信息按钮依次从左侧向右侧显示。

在人物类别中，作为人物名称，“TAKASHI”、“AKIRA”及“富士花子”的标签信息按钮依次从左侧向右侧显示。

在拍摄位置类别中未包含标签信息。

在自动赋予标签类别中，“自行车”、“拉面”及“酒会”的标签信息按钮依次从左侧向右侧显示。

在手动赋予标签类别中，“团体”、“今天的午餐”及“美景”的标签信息按钮依次从左侧向右侧显示。

服务标签类别中显示有“扫描图像”的标签信息按钮。

除了日历类别以外的其他各类别中所包含的标签信息按钮以横向一列排列显示。在日历类别中，图像的拍摄年份及拍摄月份的标签信息按钮分别以横向一列排列，以拍摄年份及拍摄月份的数字的降序显示。其他各类别中所包含的标签信息按钮以被赋予各标签信息的图像的数量多的顺序显示。

另外，在各类别中包含无法在左右方向上全部显示的数量的标签信息的情况下，用户在点击了各类别中所包含的标签信息按钮的状态下向左方向或右方向进行滑动，由此能够将显示于标签信息的选择画面上的标签信息按钮向外侧推出，并且能够将未显示于标签信息的选择画面上的标签信息按钮移动到标签信息的选择画面内而显示。

用户无需键入关键词以检索图像，能够从显示于显示部46的标签信息中点击与欲检索的所希望的图像对应的标签信息而进行选择，因此能够直观地进行检索。

在此，在由用户未选择任何标签信息作为检索条件的状态下，如图10中用手指图标56表示，从显示于标签信息的选择画面上的标签信息按钮中点击“自行车”的标签信息按钮作为第1个标签信息。

该情况下，由标签信息指定部32指定与根据来自用户的指示所选择的“自行车”的标签信息按钮对应的“自行车”的标签信息作为第1选择标签信息。并且，由标签信息显示部30变更“自行车”的标签信息按钮的颜色，并且在未被标签信息的选择画面覆盖的图像一览画面的上部区域内的左侧显示为“自行车”。

接着，由图像提取部34从图像组中提取被赋予作为第1选择标签信息的“自行车”的标签信息的图像作为第1检索图像，由图像显示部38在图像一览画面上显示所有第1检索图像的至少一部分。

并且，如图11所示，由标签信息显示部30在标签信息的选择画面上显示赋予到所有第1检索图像的所有标签信息的至少一部分。即，更新显示于标签信息的选择画面上的标签信息的内容。

在本实施方式的情况下，日历类别从“2018”、“2017”及“2016”变更为“2018”及“2017”的标签信息按钮作为图像的拍摄年份。

并且，人物类别从“TAKASHI”、“AKIRA”及“富士花子”变更为“TAKA SHI”、“AKIRA”及“山田”的标签信息按钮。

自动赋予标签类别从“自行车”、“拉面”及“酒会”变更为“自行车”、“山”及“护栏”的标签信息按钮。

手动赋予标签类别从“团体”、“今天的午餐”及“美景”变更为“团体”、“美景”及“自行车旅行”的标签信息按钮。

即，从显示于标签信息的选择画面上的标签信息按钮中，在仅选择了“自行车”的标签信息按钮的情况下，从图像组中仅缩小到被赋予“自行车”标签信息的检索图像，并且从赋予到包含于图像组中的所有图像的所有标签信息中，仅缩小到赋予到被赋予“自行车”标签信息的所有检索图像的所有标签信息。

接着，如图12中用手指图标56表示，由用户从显示于标签信息的选择画面上的标签信息按钮中点击第一个“自行车”的标签信息按钮，而且作为第2个标签信息而点击“自行车旅行”的标签信息按钮。即，在选择了“自行车”的标签信息按钮的状态下，还追加选择“自行车旅行”的标签信息按钮，同时选择两个标签信息。

该情况下，由标签信息指定部32指定第一个“自行车”的标签信息和与根据来自用户的指示所选择的“自行车旅行”的标签信息按钮对应的第2个“自行车旅行”的标签信息作为第2选择标签信息。即，“自行车”及“自行车旅行”的标签信息两者同时指定为选择标签信息。并且，由标签信息显示部30变更“自行车”的标签信息按钮和“自行车旅行”的标签信息按钮的颜色，而且在未被标签信息的选择画面覆盖的图像一览画面的上部区域内所显示的“自行车”的右侧显示为“自行车旅行”。

接着，由图像提取部34从被赋予“自行车”的标签信息的第1检索图像中提取被赋予“自行车旅行”的标签信息的第1检索图像作为第2检索图像，如图13所示，由图像显示部38在图像一览画面上显示第2检索图像的至少一部分。

并且，虽然省略图示，但是由标签信息显示部30在标签信息的选择画面上显示赋予到所有第2检索图像的所有标签信息的至少一部分。

即，在同时选择了“自行车”及“自行车旅行”两个标签信息按钮的情况下，从图像组中仅缩小到被赋予“自行车”及“自行车旅行”两个标签信息的检索图像，而且从赋予到包含于图像组中的所有图像的所有标签信息中仅缩小到被赋予“自行车”及“自行车旅行”两个标签信息的所有检索图像的所有标签信息。

用户将显示于标签信息的选择画面上部的朝下的箭头92向下方滑动，由此能够随时关闭标签信息的选择画面。在标签信息的选择画面关闭的情况下，如图13所示，显示被标签信息的选择画面覆盖的区域的图像一览画面。由此，用户能够浏览检索图像一览。

在图像一览画面中包括无法完全显示的数量的检索图像的情况下，用户使显示于图像一览画面的检索图像向上下方向滑动，以使检索图像向上下方向移动，由此能够将显示于图像一览画面的检索图像的一部分向外侧推出，而且能够将未显示于图像一览画面的检索图像的一部分移动到图像一览画面内而显示。

并且，在标签信息的选择画面关闭的情况下，如图13所示，在标签信息的选择画面的下部显示朝上的箭头94。用户将该朝上的箭头94向上方滑动，由此能够随时打开标签信息的选择画面。在本实施方式的情况下，标签信息的选择画面能够切换为图9～12所示的全开状态、图13所示的全关状态及其中间位置三个阶段。另外，可以将标签信息的选择画面切换为三个阶段以上的多个阶段。

并且，在显示了图像一览画面的状态下，用户点击“搜索”按钮，由此能够随时显示标签信息的选择画面。或者，用户在选择了“自行车”及“自行车旅行”这两个标签信息的状态下，还追加选择其他标签信息按钮，并进一步缩小标签信息，由此能够进一步缩小图像。

指定为选择标签信息的“自行车”及“自行车旅行”这两个标签信息由标签信息指定部32根据来自用户的指示维持指定为选择标签信息，直至解除指定为选择标签信息为止。

例如，在标签信息的选择画面上预先设置“解除”按钮，用户通过点击“解除”按钮而能够一次解除指定为选择标签信息的“自行车”及“自行车旅行”两个标签信息的选择。

并且，用户每当点击标签信息按钮时，能够在选择和解除该标签信息作为选择标签信息之间进行切换。

该情况下，由标签信息指定部32根据来自用户的指示，每当按下按钮时，在指定与按钮对应的标签信息作为选择标签信息和解除指定与按钮对应的标签信息作为选择标签信息之间进行切换。

换言之，标签信息的选择维持到被解除为止，因此在维持选择标签信息的状态下，即，在使用所选择的标签信息进行图像检索之后切换到其他表示画面，在再次切换为标签信息的选择画面而返回的情况下，能够使用所选择的标签信息随时浏览作为所检索到的结果的检索图像。

并且，用户在标签信息作为按钮显示于显示部46的状态下，通过长按(long tap)一个标签信息按钮而能够选择被长按的一个按钮的标签信息的上位概念的标签信息。

该情况下，在从显示于显示部46的标签信息按钮中按下一定时间以上根据来自用户的指示所选择的一个标签信息按钮的情况下，由标签信息指定部32指定与被按下的一个标签信息按钮对应的标签信息的上位概念的标签信息中所包含的所有下位概念的标签信息作为选择标签信息。

例如，在长按“Mont Blanc”的标签信息按钮的情况下，选择作为“Mont Blanc”的上位概念的所有“甜品”的标签信息。

或者，在由标签信息指定部32从显示于显示部46的标签信息中根据来自用户的指示选择了一个标签信息的情况下，可以解除已指定的其他标签信息的指定，并仅将所选择的一个标签信息指定为选择标签信息。

接着，如图14中用手指图标56表示，用户从显示于图像一览画面上的检索图像中点击欲浏览的一个检索图像，由此能够仅使该被点击的一个检索图像显示于显示部46并进行浏览。

该情况下，由图像指定部40从显示于显示部46的检索图像中指定根据来自用户的指示所选择的一个检索图像作为指定检索图像，由图像显示部38在显示部46上仅显示指定检索图像。

图15是表示指定检索图像的浏览画面的一实施方式的概念图。指定检索图像的浏览画面显示于显示部46的整个表面。在图15所示的指定检索图像的浏览画面的左上部显示有“×”按钮58，在左下部显示有“日历”按钮82，在右下部显示有“信息”按钮60。在指定检索图像的浏览画面的下部显示有“垃圾桶”按钮62、“共享”按钮64及“其他”按钮84。

指定检索图像的浏览画面除了在其左下部显示有“日历”按钮82以外，与指定图像的浏览画面为相同的结构。

例如，用户能够通过点击“×”按钮58而关闭指定检索图像的浏览画面，以返回到检索图像一览画面。并且，用户能够点击“垃圾桶”按钮62以删除指定检索图像，或者点击“共享”按钮64以与其他用户共享指定检索图像，或者点击“其他”按钮84以执行其他功能。此外，用户通过点击“信息”按钮60而能够浏览指定检索图像的信息。

并且，用户能够使检索图像按每一张依次显示而进行浏览。

该情况下，在显示部46上仅显示指定检索图像之后，每当输入来自用户的指示时，通过图像显示部38，以从所有检索图像中只有在指定检索图像拍摄时刻之前或之后被拍摄的一个检索图像从指定检索图像拍摄时刻起，按时序列被拍摄的检索图像的顺序依次显示于显示部46。

例如，在由用户将指定检索图像向右侧滑动的情况下，从所有检索图像中，仅显示在指定检索图像的前一个拍摄时刻被拍摄的一个检索图像。此后，每当检索图像根据用户的指示向右侧滑动时，以从指定检索图像拍摄时刻起，按时序列被拍摄的检索图像的顺序依次仅显示每前一个检索图像。

另一方面，在由用户将指定检索图像向左侧滑动的情况下，从所有检索图像中，仅显示在指定检索图像的后一个拍摄时刻被拍摄的一个检索图像。此后，每当检索图像根据用户的指向左侧滑动时，以从指定检索图像拍摄时刻起，按时序列被拍摄的检索图像的顺序依次显示每后一个检索图像。

并且，如图15所示，用户点击在检索图像的浏览画面上显示的“日历”按钮82，由此能够从图像组中使在指定检索图像拍摄时刻的前后被拍摄的图像显示于显示部46并进行浏览。

该情况下，在指定检索图像被指定的情况下，在显示部46上仅指定检索图像之后，通过图像显示部38，根据来自用户的指示，指定检索图像和图像组中所包含的在指定检索图像拍摄时刻的前后被拍摄的图像的至少一部分作为时序列图像根据时序列显示于显示部46。

如此，用户不需要为了显示在一个检索图像拍摄时刻的前后被拍摄的图像而暂且返回到主画面等图像一览画面，根据来自用户的指示，在本实施方式的情况下，通过点击“日历”按钮82的一个动作便能够使在指定检索图像拍摄时刻的前后被拍摄的图像按时序列显示并进行浏览。

在此，根据来自用户的指示，例如，只要返回到主画面等图像一览画面，以使在指定检索图像拍摄时刻的前后被拍摄的图像按时序列显示，则能够进行相同的操作。然而，在这种操作方法中，在智能手机中保存有多年的大量的图像组的情况下，在主画面等的图像一览画面上，迫使用户在多年的图像组之间移动，直至所希望的图像的拍摄日期为止。

相对于此，通过使用本实施方式的图像处理装置，能够通过点击“日历”按钮82的一个动作使在指定检索图像拍摄时刻的前后被拍摄的图像按时序列显示并进行浏览，与使用现有技术如前所述返回到主画面等图像一览画面以使在指定检索图像拍摄时刻的前后被拍摄的图像按时序列显示的情况相比更方便。

图16是表示时序列图像一览画面的一实施方式的概念图。时序列图像一览画面显示于菜单区域52与导航区域54之间的区域。

同样地，用户从显示于时序列图像一览画面上的时序列图像中点击欲浏览的一个时序列图像，由此能够仅使该被点击的一个时序列图像显示于显示部46并进行浏览。

该情况下，由图像指定部40从显示于显示部46的时序列图像中指定根据来自用户的指示所选择的一个时序列图像作为指定时序列图像，由图像显示部38在显示部46上仅显示指定时序列图像。

并且，在指定了指定时序列图像的情况下，在显示部46上仅显示指定时序列图像之后，每当输入来自用户的指示时，通过图像显示部38，在图像组中只有在指定时序列图像拍摄时刻之前或之后被拍摄的一个图像以从指定时序列图像拍摄时刻起，按时序列被拍摄的图像的顺序依次显示于显示部46。

在指定时序列图像向右侧或左侧滑动的情况下的动作与指定检索图像向右侧或左侧滑动的情况下的动作相同。

另外，可以通过特定的触摸操作来代替设置“日历”按钮82，以发挥与“日历”按钮82相同的功能。

用户在时序列图像一览画面上，能够通过点击“主页”按钮而返回到检索图像一览画面。

如前所述，标签信息的选择维持到被解除为止，因此在返回到检索图像一览画面的情况下，使用所选择的标签信息来检索到的结果即检索图像一览显示于检索图像一览画面。

另外，在使时序列图像显示于显示部46之前，用于从图像组中检索图像的检索条件只要是从图像组中根据除了图像拍摄时刻以外的条件用于检索图像的条件，则并不受特别限定。

图像的拍摄时刻的条件不仅包括图像的拍摄时刻，而且还包括与图像的拍摄时刻相关的各种条件，如图像的拍摄年份、拍摄月份、拍摄周、拍摄日期及拍摄时刻等，除了图像的拍摄时刻以外的条件包括除了与图像的拍摄时刻有关的条件以外的所有条件。

作为检索条件，能够使用基于图像分析部22的图像的分析内容、以及由标签信息赋予部26赋予的标签信息的名称等，能够例示在图像上拍摄到的被摄体的名称(人物名称及物体名称)、人物表情的名称、人物行动的名称、人物感情的名称、场景名称、活动名称、用户嗜好的名称、拍摄位置名等。

并且，用户在标签信息的选择画面上无法发现欲用作检索条件的标签信息按钮的情况下，如图17中用手指图标56表示，通过点击“检索标签”按钮80而能够输入关键词以检索标签信息。

在点击了“检索标签”按钮80的情况下，如图18所示，标签信息检索画面显示于显示部46。

标签信息检索画面以重叠于除了图像一览画面的上侧的一部分区域以外的区域的上层，且以一定的透射率透明地看见下层的检索图像一览的方式显示。在标签信息检索画面的上部显示有关键词的输入栏86。在关键词的输入栏86中显示有用于督促输入关键词的“检索标签”的消息。在关键词的输入栏86内的右端部中显示有“×”按钮88，在关键词的输入栏86的右侧显示有“取消”按钮90。

接着，设为由用户在关键词的输入栏86中输入了关键词。

该情况下，由标签信息检索部36从赋予到包含于图像组中的所有图像的所有标签信息中，检索至少一部分与根据来自用户中的指示所输入的关键词一致的标签信息作为检索标签信息。

接着，由标签信息显示部30在显示部46上显示检索标签信息的至少一部分。

接着，由标签信息指定部32从显示于显示部46的检索标签信息中，指定根据来自用户的指示所选择的一个检索标签信息。

接着，由图像提取部34从图像组中提取被赋予一个检索标签信息的图像作为检索图像。

接着，由图像显示部38在显示部46上显示所有检索图像的至少一部分。

接着，由标签信息显示部30在显示部46上显示赋予到所有检索图像的所有标签信息的至少一部分。

例如，如图18所示，为了检索“アイスクリ一ム：冰淇淋”的标签信息而在关键词的输入栏86中输入了“あ”的情况下进行部分一致检索，从赋予到包含于图像组中的所有图像的所有标签信息中检索与“あ”部分一致的标签信息作为检索标签信息。

接着，作为检索标签信息的候选，如图18所示，在标签信息检索画面上，例如“あいちやん”、“あ一ちやん”、“あまおぅ”及“アイスクリ一ム：冰淇淋”的标签信息按钮依次从上侧向下侧显示。

在标签信息检索画面上包含无法全部显示的数量的检索标签信息的情况下，用户将显示于标签信息检索画面上的检索标签信息向上下方向滑动以使检索标签信息的候选一览向上下方向移动，由此将显示于标签信息检索画面上的检索标签信息的一部向外侧推出，而且使未显示于标签信息检索画面上的检索标签信息的一部分移动到标签信息检索画面内并显示。

并且，通过用户点击“×”按钮88而能够一次删除输入到输入栏86中的关键词。并且，通过点击“取消”按钮90而能够关闭标签信息检索画面以返回到标签信息的选择画面。此外，用户将显示于标签信息检索画面的上部的朝下的箭头96进行滑动，由此能够随时关闭标签信息检索画面。

接着，如图18在用手指图标56表示，由用户从显示于标签信息检索画面上的检索标签信息的候选按钮中例如点击“アイスクリ一ム：冰淇淋”的标签信息按钮。

该情况下，如图19所示，标签信息的选择画面显示于显示部46。此后的动作与在未选择任何标签信息的状态下选择了“自行车”的标签信息按钮之后的状态的情况相同。

即，“アイスクリ一ム：冰淇淋”的标签信息指定为选择标签信息，如图19所示，在未被标签信息的选择画面覆盖的图像一览画面的上部区域的左侧显示为“アイスクリ一ム：冰淇淋”。

接着，从图像组中提取被赋予作为选择标签信息的“アイスクリ一ム：冰淇淋”的标签信息的图像作为检索图像，检索图像显示于图像一览画面。

并且，对被赋予作为选择标签信息的“アイスクリ一ム：冰淇淋”的标签信息的检索图像赋予的所有标签信息显示于标签信息的选择画面。

此后的动作与在选择了“自行车”的标签信息按钮的状态下进一步追加点击“自行车旅行”的标签信息按钮的情况相同，用户能够追加选择要用作检索条件的标签信息按钮。

另外，在由用户拍摄新图像，或者对图像赋予新标签信息，或者删除已赋予到图像的标签信息的情况下，根据这些新图像、新标签信息及所删除的标签信息等，例如，可以通过利用了AI(Artificial Intelligence：人工知能)等的机械学习而提高标签信息的可靠度。

并且，例如服务器12可以具备客户端14所具备的功能中的至少一部分，如分析图像、赋予评价值、赋予标签信息、设定加权、提取图像及检索标签信息等，以使服务器12执行至少一部分功能。

在本发明的装置中，例如指示获取部18、图像分析部22、评价值赋予部24、标签信息赋予部26、加权设定部28、标签信息显示部30、标签信息指定部32、图像提取部34、标签信息检索部36、图像显示部38、图像指定部40、图像信息显示部42及图像信息编辑部44等执行各种处理的处理部(Processing Unit)的硬件结构可以是专用硬件，也可以是执行程序的各种处理器或计算机。

各种处理器中包括：执行软件(程序)而作为各种处理部发挥功能的通用的处理器即CPU(Central Processing Unit：中央处理单元)、FPGA(Field Programmable GateArray：现场可编程门阵列)等在制造之后能够变更电路结构的处理器，即可编程逻辑器件(Programmable Logic Device：PLD)、ASIC(Application Specific Integrated Circuit：专用集成电路)等具有为了执行特定的处理而专门设计的电路结构的处理器，即专用电路等。

可以由这些各种处理器中的1个来构成1个处理部，也可以通过相同种类或不同种类的2个以上的处理器的组合，例如由多个FPGA的组合、或FPGA及CPU的组合等来构成。并且，可以由各种处理器中的1个来构成多个处理部，也可以将多个处理部中的2个以上进行归类以使用1个处理器来构成。

例如有如下方式：如以服务器及客户端等计算机为代表，由1个以上的CPU和软件的组合来构成1个处理器，该处理器作为多个处理部而发挥功能。并且，有如下方式：以片上系统(System on Chip：SoC)等为代表，使用由一个IC(Integrated Circuit：集成电路)芯片来实现包括多个处理部的系统整体的功能的处理器。

而且，更具体而言，这些各种处理器的硬件结构是将半导体元件等电路元件进行了组合的电路(Circuitry)。

并且，例如能够通过用于使计算机执行该各步骤的程序而实施本发明的方法。并且，也能够提供记录有该程序的计算机可读取的记录介质。

以上，对本发明详细地进行了说明，但本发明并不限定于上述实施方式，在不脱离本发明的主旨的范围内，当然可以进行各种改进或变更。