首页> 中国专利> 显示控制装置、管理装置、显示控制系统、显示控制方法、管理方法及程序

显示控制装置、管理装置、显示控制系统、显示控制方法、管理方法及程序

摘要

本发明提供一种显示控制装置(1),其取得在设置于店铺的显示器(3)的周边或显示器(3)设置的相机(4)生成的图像,从该图像提取人物,基于工作中店员信息来判定从图像提取到的人物是否是店员,并根据是否是店员,使显示器(3)的显示控制不同,所述工作中店员信息包含工作中的店员(7)的面部图像和外观的特征量中的至少一方。

著录项

  • 公开/公告号CN114930366A

    专利类型发明专利

  • 公开/公告日2022-08-19

    原文格式PDF

  • 申请/专利权人 夏普NEC显示器解决方案株式会社;

    申请/专利号CN202080091996.5

  • 发明设计人 浅野贵广;

    申请日2020-01-16

  • 分类号G06Q10/10(2012.01);G06Q30/06(2012.01);G06T7/00(2017.01);

  • 代理机构中原信达知识产权代理有限责任公司 11219;中原信达知识产权代理有限责任公司 11219;

  • 代理人季莹;方应星

  • 地址 日本东京

  • 入库时间 2023-06-19 16:25:24

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2022-09-06

    实质审查的生效 IPC(主分类):G06Q10/10 专利申请号:2020800919965 申请日:20200116

    实质审查的生效

说明书

技术领域

本发明涉及显示控制装置、管理装置、显示控制系统、显示控制方法、管理方法及程序。

背景技术

专利文献1公开了在设置于店铺的显示装置上显示广告或优惠券等的技术。专利文献2公开了管理职员的上下班数据的技术。专利文献3公开了基于面部图像进行认证并判别认证的人物是店员还是顾客的技术。

现有技术文献

专利文献

专利文献1:日本特开2010-20051号

专利文献2:日本特开2006-107101号

专利文献3:日本特开2009-230565号

发明内容

发明所要解决的课题

存在如下技术,对显示装置(数字标牌)的周边进行拍摄,根据拍摄图像来推定观众的属性(年龄、性別等),将与推定出的属性对应的信息(广告或优惠券等)显示在显示装置上。根据该技术,能够将观众感兴趣的可能性高的信息显示在显示装置上。

然后,在将这样的显示装置设置于店铺的情况下,顾客与店员位于显示装置的周边,有可能被拍摄。顾客为了享受内容的收看而位于显示装置的周边,另一方面,工作中的店员出于显示装置的维护等业务目的位于显示装置的周边。这样,顾客和店员位于显示装置的周边的目的不同。尽管如此,在店员位于显示装置的周边时,与顾客位于显示装置的周边的情况同样地,若进行根据拍摄图像来推定属性(年龄、性別等)并将与推定出的属性对应的信息输入到显示装置这样的无用的处理,则计算机的负担变大。另外,还存在不能对出于业务目的而位于显示装置的周边的店员显示适当的信息的问题。

本发明的目的在于提供一种在设置于店铺的显示装置显示适当的信息的技术。

用于解决课题的技术方案

根据本发明,提供一种显示控制装置,其具有:

取得单元,取得相机生成的图像;

人物提取单元,从所述图像提取人物;

判断单元,基于提取到的所述人物的面部图像或外观的特征量以及工作中店员信息,判断提取到的所述人物是否是工作中的店员,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

显示控制单元,根据提取到的所述人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

另外,根据本发明,提供一种显示控制方法,其中,

计算机进行如下处理:

取得相机生成的图像;

从所述图像提取人物;

基于提取到的所述人物的面部图像或外观的特征量以及工作中店员信息,判断提取到的所述人物是否是工作中的店员,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

根据提取到的所述人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

另外,根据本发明,提供一种程序,其使计算机作为如下单元发挥功能:

取得单元,取得相机生成的图像;

人物提取单元,从所述图像提取人物;

判断单元,基于提取到的所述人物的面部图像或外观的特征量以及工作中店员信息,判断提取到的所述人物是否是工作中的店员,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

显示控制单元,根据提取到的所述人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

另外,根据本发明,提供一种管理装置,其具有:

上下班检测单元,检测店员的上班及下班;

生成单元,基于所述上下班检测单元的检测结果生成工作中店员信息,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

发送单元,将所述工作中店员信息发送到显示控制装置,所述显示控制装置根据从图像提取到的人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

另外,根据本发明,提供一种管理方法,其中,

计算机进行如下处理:

检测店员的上班及下班;

基于所述检测的结果生成工作中店员信息,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

将所述工作中店员信息发送到显示控制装置,所述显示控制装置根据从图像提取到的人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

另外,根据本发明,提供一种程序,其使计算机作为如下单元发挥功能:

上下班检测单元,检测店员的上班及下班;

生成单元,基于所述上下班检测单元的检测结果生成工作中店员信息,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

发送单元,将所述工作中店员信息发送到显示控制装置,所述显示控制装置根据从图像提取到的人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

另外,根据本发明,提供具有所述显示控制装置和所述管理装置的显示控制系统。

发明效果

根据本发明,实现在设置于店铺的显示装置上显示适当的信息的技术。

附图说明

上述目的及其他目的、特征及优点通过以下叙述的优选实施方式及其附带的以下附图将进一步明确。

图1是用于说明本实施方式的显示控制系统的整体图及概要的图。

图2是表示本实施方式的显示控制装置及管理装置的硬件结构的一例的图。

图3是本实施方式的管理装置的功能框图的一例。

图4是示意性地表示本实施方式的显示控制系统处理的信息的一例的图。

图5是表示本实施方式的管理装置的处理的流程的一例的流程图。

图6是本实施方式的显示控制装置的功能框图的一例。

图7是表示本实施方式的显示控制装置的处理的流程的一例的流程图。

图8是示意性地表示本实施方式的显示控制系统处理的信息的一例的图。

图9是示意性地表示本实施方式的显示控制系统处理的信息的一例的图。

图10是示意性地表示本实施方式的显示控制系统处理的信息的一例的图。

具体实施方式

<第一实施方式>

首先,使用图1对本实施方式的显示控制系统的整体图及概要进行说明。显示控制系统具有显示控制装置1及管理装置2。显示控制系统还可以包括显示器3、相机4及相机5中的至少一个。

相机5是用于拍摄上班了的店员7及下班的店员7的相机。相机5生成的影像数据通过有线及/或无线的通信被发送到管理装置2。

管理装置2基于从相机5接收到的影像数据来检测店员7的上班及下班。然后,管理装置2基于检测结果生成工作中的店员7的列表(工作中店员信息)。工作中店员信息包含工作中的店员7的面部图像和外观的特征量中的至少一方。管理装置2将工作中店员信息、在显示器3上显示的显示数据、分发时间表等通过有线及/或无线的通信发送到显示控制装置1。管理终端2也可以在每次更新工作中店员信息时,将更新后的工作中店员信息发送到显示控制装置1。

显示数据包含向顾客6显示的顾客用的显示数据。顾客用的显示数据也可以包含每个目标(成人女性用、成人男性用、儿童用等)的显示数据。另外,显示数据也可以包含向店员7显示的店员用的显示数据。另外,显示数据也可以包含未检测出店员7及顾客6时用的显示数据。

显示器3设置于店铺。相机4设置于显示器3的周边或显示器3,对显示器3的周边进行拍摄。例如,相机4以对被认为存在正在收看显示器3的人的位置进行拍摄的位置及朝向设置。相机4生成的影像数据通过有线及/或无线的通信被发送到显示控制装置1。

显示控制装置1对从相机4接收到的影像数据进行解析。首先,显示控制装置1从影像数据提取人物。在提取到人物的情况下,显示控制装置1基于提取到的人物的面部图像或外观的特征量以及工作中店员信息,判断提取到的人物是否是工作中的店员。然后,显示控制装置1根据提取到的人物是否是工作中的店员,使显示器3的显示控制不同。

例如,在提取到的人物表示工作中的店员的情况下,显示控制装置1将顾客用的显示数据输入到显示器3,显示顾客用的信息。例如,显示控制装置1可以从图像推定提取到的人物的属性(年龄、性別等),并将与所推定出的属性对应的显示数据输入到显示器3。

另一方面,在提取到的人物是工作中的店员7的情况下,显示控制装置1不进行上述那样的处理(将顾客用的显示数据输入到显示器3,显示顾客用的信息的处理)。在该情况下,例如,显示控制装置1也可以将店员用的显示数据输入到显示器3,显示店员用的信息。

这样,本实施方式的处理系统能够识别位于显示器3的周边的人物是店员7还是顾客6,并根据识别结果使显示器3的显示控制不同。

接下来,对显示控制装置1及管理装置2的结构详细地进行说明。首先,对显示控制装置1及管理装置2的硬件结构的一例进行说明。

显示控制装置1及管理装置2的各功能部以任意的计算机的CPU(CentralProcessing Unit:中央处理器)、存储器、加载到存储器中的程序、存储该程序的硬盘等存储单元(除了预先从装置出厂阶段存储的程序之外,也可以存储从CD(Compact Disc:光盘)等存储介质或因特网上的服务器等下载的程序)、网络连接用接口为中心而通过硬件和软件的任意的组合来实现。而且,本领域技术人员能够理解其实现方法、装置中有各种变形例。

图2是例示显示控制装置1及管理装置2的硬件结构的框图。如图2所示,显示控制装置1及管理装置2分别具有处理器1A、存储器2A、输入输出接口3A、周边电路4A及总线5A。周边电路4A中包括各种模块。显示控制装置1及管理装置2中的至少一方也可以不具有周边电路4A。此外,显示控制装置1及管理装置2分别可以由物理上及/或逻辑上分开的多个装置构成,也可以由物理上及/或逻辑上一体的1个装置构成。在显示控制装置1及管理装置2中的至少一方由物理上及/或逻辑上分开的多个装置构成的情况下,多个装置各自可以具备上述硬件结构。

总线5A是用于处理器1A、存储器2A、周边电路4A及输入输出接口3A相互收发数据的数据传送路径。处理器1A例如是CPU、GPU(Graphics Processing Unit:图形处理器)等运算处理装置。存储器2A例如是RAM(Random Access Memory:随机存取存储器)、ROM(ReadOnly Memory:只读存储器)等存储器。输入输出接口3A包括用于从输入装置、外部装置、外部服务器、外部传感器、相机等取得信息的接口及用于向输出装置、外部装置、外部服务器等输出信息的接口等。输入装置例如是键盘、鼠标、麦克风、物理按钮、触摸面板等。输出装置例如是显示器、扬声器、打印机、邮件发送机等。处理器1A能够向各模块发出指令,并基于它们的运算结果来进行运算。

接下来,对管理装置2的功能结构进行说明。图3中示出管理装置2的功能框图的一例。如图所示,管理装置2具有上下班检测部16、生成部17、发送部18以及存储部19。管理装置2优选设置于设置有显示器3的店铺。特别是,优选存储部19位于设置在店铺中的局域网(通信网络)中,并置于无法从该局域网的外部访问的环境中。例如,存储部19可以置于局域网中,在该局域网与外部网络之间设置有管理来自外部网络的访问的装置(防火墙等)。

上下班检测部16检测店员7的上班及下班。在本实施方式中,上下班检测部16基于相机5生成的图像来检测店员7的上班及下班。相机5是用于拍摄上班了的店员7及下班的店员7的相机。例如,相机5可以设置于职员室的出入口或用于管理上下班的时间记录器附近等,也可以设置于其他场所。店员7也可以在上班时及下班时操作相机5来拍摄自身。即,相机5也可以根据位于相机5前的店员7的拍摄指示输入,拍摄该店员7的面部图像(静止图像)。拍摄指示输入通过触摸面板、物理按钮、麦克风、鼠标、键盘等所有的输入装置来实现。此外,相机5例如也可以如监视相机那样始终拍摄动态图像。监视相机也可以设置于例如职员室的出入口等上下班时店员7通过的场所。

在此,对上下班检测部16判断图像中包含的店员7是上班时和下班时的哪一种情况的方法的一例进行说明。如上所述,在本实施方式中,生成并管理工作中店员信息(工作中的店员7的列表),该工作中店员信息包含工作中的店员7的面部图像和外观的特征量中的至少一方。因此,上下班检测部16也可以在图像中包含的店员7的面部图像或外观的特征量未登记在工作中店员信息中的情况下判断为“上班时”,在已登记的情况下,判断为“下班时”。

此外,店员7也可以在相机5的拍摄时,将是上班时和下班时的哪一种情况输入到相机5或任意的输入装置中。而且,上下班检测部16也可以基于该输入内容,判断图像中包含的店员7是上班时和下班时的哪一种情况。

生成部17基于上下班检测部16的检测结果生成工作中店员信息,并存储到存储部19中,该工作中店员信息包含工作中的店员7的面部图像和外观的特征量中的至少一方。图4中示意性地示出工作中店员信息的一例。图示的工作中店员信息包含工作中的店员7的面部图像和外观的特征量。

当通过上下班检测部16检测到店员7的上班时,生成部17将相机生成的图像中包含的该店员7的面部图像和从该面部图像提取到的外观的特征量中的至少一方登记到工作中店员信息中。然后,当通过上下班检测部16检测到店员7的下班时,生成部17删除登记在工作中店员信息中的该店员7的信息(面部图像和外观的特征量中的至少一方)。

发送部18将工作中店员信息发送到显示控制装置1。发送部18也可以在每次工作中店员信息被更新时,将更新后的工作中店员信息发送到显示控制装置1。

接下来,使用图5的流程图对管理装置2的处理的流程的一例进行说明。

上下班检测部16在取得由相机5生成的图像时(S10),进行从该图像提取人物(店员)的处理(S11)。然后,在提取到人物(店员7)的情况下(S11的是),上下班检测部16判断图像中包含的店员7是上班时和下班时的哪一种情况(S12)。

在判断为上班时的情况下(S12的是),生成部17在工作中店员信息(参照图4)中登记图像中包含的店员7的面部图像和从该面部图像提取到的外观的特征量中的至少一方(S13)。

另一方面,在判断为下班时的情况下(S12的否),生成部17删除工作中店员信息(参照图4)中登记的该店员7的信息(面部图像和外观的特征量中的至少一方)(S14)。

之后,发送部18将更新后的工作中店员信息发送到显示控制装置1(S15)。而且,如果没有结束处理的输入(S16的否),则管理装置2返回S10,重复同样的处理。

接下来,对显示控制装置1的功能结构进行说明。图6中示出显示控制装置1的功能框图的一例。如图所示,显示控制装置1具有取得部11、人物提取部12、判断部13、显示控制部14以及存储部15。显示控制装置1优选设置于设置有显示器3的店铺。特别是,存储部15优选位于设置在店铺中的局域网(通信网络)中,并置于无法从该局域网的外部访问的环境中。例如,存储部15可以置于局域网中,在该局域网与外部网络之间设置有管理来自外部网络的访问的装置(防火墙等)。

存储部15存储从管理装置2发送到显示控制装置1的各种信息。例如,存储部15存储工作中店员信息(参照图4)、在显示器3上显示的显示数据、分发时间表等。

取得部11取得相机4生成的图像(以下,有时称为“显示器周边图像”)。相机4设置于显示器3的周边或设置于显示器3,对显示器3的周边进行拍摄。例如,相机4以对被认为存在正在收看显示器3的人的位置进行拍摄的位置及朝向设置。此外,在图1中,示出了显示器3和相机4物理性地分开的例子,但它们也可以物理性地成为一体。例如,也可以将相机4内置于显示器3,在显示器3的任意的位置设置相机4的镜头。此外,也可以在显示器3的任意的位置安装相机4(后安装有相机4的显示器3)。

相机4也可以始终拍摄动态图像。此外,例如也可以根据由人感传感器等任意的传感器检测到显示器3的周边有人的情况,相机4进行静止图像的拍摄或规定时间量的动态图像的拍摄。

人物提取部12从显示器周边图像提取人物。人物提取部12能够使用现有的所有图像解析技术来进行该提取。

判断部13通过将提取到的人物的显示器周边图像中的面部图像或外观的特征量与登记在工作中店员信息中的工作中的店员7的面部图像或外观的特征量进行对照,来判断提取到的人物是否是工作中的店员。具体而言,在工作中店员信息中登记有与提取到的人物的显示器周边图像中的面部图像或外观的特征量匹配(一致或规定等级以上类似)的数据的情况下,判断部13判断为提取到的人物是工作中的店员。而且,在工作中店员信息中未登记有与提取到的人物的显示器周边图像中的面部图像或外观的特征量匹配的数据的情况下,判断为提取到的人物不是工作中的店员。

显示控制部14根据提取到的人物是否是工作中的店员,使设置于店铺的显示器3的显示控制不同。以下,对显示控制的例子进行说明。

“显示控制例1”

例如,显示控制部14也可以在提取到的人物是工作中的店员7的情况下,将第一信息输入显示器3并显示。而且,显示控制部14也可以在提取到的人物不是工作中的店员7的情况下,将与第一信息不同的第二信息输入显示器3并显示。

第一信息是向店员7提供的信息。第一信息也可以是业务建议。例如,也可以在显示器3上显示“利用空闲时间,进行商品的前方摆放、垃圾箱检查、清扫等”等业务建议。

另外,在显示器3上显示的业务建议也可以根据当前时刻等而变化。例如,也可以在13时至14时之间将“商品的前方摆放是否结束?”等业务建议在显示器3上显示,在14时至15时之间,将“已确认垃圾箱是否已满?”等业务建议在显示器3上显示。例如,显示控制部14能够基于预先存储在存储部15中的确定按每个时间段输出的业务建议而得到的信息,实现上述那样的按每个时间段的业务建议的输出。

此外,也可以在显示器3上显示店员用的菜单画面作为第一信息。菜单画面也可以包含“业务建议”、“显示器设定”、“显示器操作方法”等各种菜单。在选择了“业务建议”的情况下,也可以在显示器3上显示上述的业务建议。在选择了“显示器设定”的情况下,也可以在显示器3上显示调整显示器3的设定(亮度、音量等)的画面。在选择了“显示器操作方法”的情况下,也可以在显示器3上显示显示器3的操作方法的向导。

此外,上述的第一信息仅是一例,并不限定于此。

第二信息是向顾客6提供的信息。第二信息是商品或商店等的广告、商店的宣传活动信息等,但并不限定于此。

例如,也可以按每个目标对象准备第二信息(显示数据),并存储在存储部15中。目标对象可以根据顾客6的属性来定义,例如,可例示“成人女性”、“成人男性”、“儿童”等。显示控制部14在判断为提取到的人物不是店员7的情况、即判断为提取到的人物是顾客6的情况下,根据基于显示器周边图像推定出的该顾客6的属性(年龄、性別等)来确定该顾客6属于哪个目标对象。然后,显示控制部14将与确定的目标对象对应的第二信息输入显示器3。

此外,也可以按每个目标对象准备多个第二信息及分发时间表(确定在各时间段显示于显示器3的第二信息而得到的时间表),并存储在存储部15中。在该情况下,显示控制部14基于与从显示器周边图像提取到的顾客6所属的目标对象对应的分发时间表和当前日期时间,决定向显示器3输入的第二信息。

另外,显示控制部14也可以在未从显示器周边图像提取到人物的情况、即在显示器3的周边没有人物的情况下,将与第一及第二信息不同的第三信息输入显示器3并显示。可例示第三信息是天气预报或新闻等,但并不限定于此。

“显示控制例2”

显示控制部14也可以在提取到的人物不是工作中的店员7的情况下,与上述显示控制例1同样地,将第二信息输入显示器3并显示。而且,显示控制部14也可以在提取到的人物是工作中的店员7的情况下,使显示器3成为休眠状态或休止状态。另外,显示控制部14也可以在未从显示器周边图像提取到人物的情况、即在显示器3的周边没有人物的情况下,同样地使显示器3成为休眠状态或休止状态。

接下来,使用图7的流程图对显示控制装置1的处理的流程的一例进行说明。

当取得部11取得由相机4生成的显示器周边图像时(S20),人物提取部12进行从该显示器周边图像提取人物的处理。

在提取到人物的情况下(S21的是),判断部13通过判断提取到的人物的面部图像或外观的特征量是否登记在工作中店员信息(参照图4)中,来判断提取到的人物是否是工作中的店员7。

在判断为登记在工作中店员信息中的情况下、即由人物提取部12提取到的人物是工作中的店员7的情况下(S22的是),显示控制部14将第一信息输入显示器3(S23)。另一方面,在判断为未登记在工作中店员信息中的情况、即由人物提取部12提取到的人物不是工作中的店员7的情况下(S22的否),显示控制部14将第二信息输入显示器3(S24)。

另外,在S21中未从显示器周边图像提取到人物的情况下(S21的否),显示控制部14将第三信息输入显示器3(S25)。第1至第三信息的详细内容及将它们输入显示器3的处理的详细内容如上所述,因此在此省略说明。

接下来,对本实施方式的显示控制系统的作用效果进行说明。本实施方式的显示控制系统在显示器3的周边检测到人物时,判断该人物是否是工作中的店员7,能够根据判断结果使显示器3的显示控制不同。

例如,在显示器3的周边检测到的人物不是工作中的店员7的情况下,通过在显示器3上显示广告等,可期待促进销售等。另外,在显示器3的周边检测到的人物是工作中的店员7的情况下,例如通过在显示器3上显示与业务相关的信息,可期待业务效率、业务品质的提高等。此外,在显示器3的周边检测到的人物是工作中的店员7的情况下,例如通过使显示器3成为休眠状态或休止状态,避免无用的信息显示,实现节电效果、显示控制系统的处理负担的减轻等。

另外,在本实施方式的情况下,与上班对应,将店员7的面部图像和外观的特征量中的至少一方作为工作中店员信息登记在系统中,与下班对应,将登记的店员7的面部图像、外观的特征量从系统删除。即,工作中的店员7的面部图像或外观的特征量向系统的登记仅限定于工作中。因此,与将店员7的面部图像、外观的特征量不需要地长时间存储在系统中的情况相比,能够降低使它们流出到通信网络上的风险。

另外,在本实施方式的情况下,显示控制装置1、管理装置2不需要设置在云端等中心,可以设置于设置有显示器3的店铺(本地)中。而且,可以使这些存储部(存储部15、存储部19)位于设置在店铺中的局域网中,置于不能从外部访问的环境中。因此,能够进一步降低店员7的面部图像、外观的特征量流出到通信网络上的风险。

另外,在本实施方式的情况下,能够自动地检测店员7的上班及下班,根据检测结果自动地生成工作中店员信息。因此,不需要该信息的生成、存储该信息的数据库的维护等,减轻了作业者负担。

<第二实施方式>

本实施方式的管理装置2的存储部19存储图8所示的店员信息。店员信息是与所属于店铺的店员7相关的信息。在图8所示的例子的情况下,店员信息包含姓名、性別、年龄、面部图像、外观的特征量(从面部图像提取到的特征量)等。此外,店员信息也可以不包含例示的信息的一部分,也可以包含联系方式(电话号码、住址)等其他的信息。

而且,上下班检测部16通过店员认证来确定相机5生成的图像中包含的店员7,该店员认证基于相机5生成的图像中包含的店员7的面部图像或其特征量以及店员信息中包含的各店员7的面部图像和外观的特征量中的至少一方。并且,上下班检测部16通过与第一实施方式相同的方式来对确定为包含在图像中的店员7是上班时还是下班时进行确定。

生成部17将相机5生成的图像中包含的上班了的店员7的面部图像和外观的特征量中的至少一方、或者店员信息中包含的上班了的店员7的面部图像和外观的特征量中的至少一方登记到工作中店员信息中。此外,生成部17在基于相机5生成的图像的店员认证失败从而未能确定相机5生成的图像中包含的店员7的情况下,不进行工作中店员信息的登记处理。例如,在相机5生成的图像中包含与店员7不同的人物的情况下,店员认证失败。而且,这样的人物的面部图像或外观的特征量不在工作中店员信息中登记。

作为本实施方式的变形例,上下班检测部16也可以不利用相机5生成的图像来检测店员7的上班及下班。而且,生成部17也可以将店员信息中包含的上班了的店员7的面部图像和外观的特征量中的至少一方登记到工作中店员信息中。

作为不利用相机5生成的图像来检测店员7的上班及下班的处理例,例如,管理装置2也可以与记录店员7的上班时刻及下班时刻的时间记录器可通信地连接,并取得时间记录器的登记内容。而且,上下班检测部16也可以基于时间记录器的登记内容来检测各店员7的上班及下班。此外,也可以预先生成图9所示的表示各店员7的工作日期时间的工作时间表,并存储在存储部19中。根据图示的工作时间表可知,香川道子从2019年11月20日7时工作到9时等。而且,上下班检测部16也可以根据该工作时间表检测各店员7的上班及下班。

本实施方式的显示控制系统的其他结构与第一实施方式相同。根据本实施方式的显示控制系统,实现与第一实施方式相同的作用效果。另外,本实施方式的显示控制系统进行使用了店员信息的店员认证,因此能够抑制将与店员7不同的人物的面部图像或外观的特征量登记到工作中店员信息中的不良情况。

另外,如果作为店员信息预先登记有店员7的面部图像或外观的特征量,则只要将它们登记到工作中店员信息中即可,所以不需要以生成在工作中店员信息中登记的信息为目的的上班时的店员7的拍摄。另外,如上所述,如果采用不利用相机5生成的图像来检测店员7的上班及下班的结构,则也不需要以检测店员7的上班及下班为目的的上下班时的店员7的拍摄。结果,不需要相机5,减轻了成本负担、维护所需的劳力负担。

<第三实施方式>

本实施方式的存储部19存储表示各店员7的工作日的休息定时的休息时间表。在图10中示意性地示出休息时间表的一例。根据图示的休息时间表可知,德岛景子及高知升在2019年11月20日的工作中,从13时到14时休息。

然后,生成部17基于该休息时间表生成包含处于工作中且未处于休息中的店员7的面部图像和外观的特征量中的至少一方的工作中店员信息。具体而言,生成部17通过在第一或第二实施方式中说明的方法生成工作中店员信息,并且基于休息时间表来监视各店员7的休息开始定时及休息结束定时的到来。然后,当到了处于工作中的店员7的休息开始定时时,将该店员7的面部图像和外观的特征量中的至少一方从工作中店员信息中删除。然后,当到了该店员7的休息结束定时时,将该店员7的面部图像和外观的特征量中的至少一方登记到工作中店员信息中。

显示控制系统的其他结构与第一或第二实施方式相同。

根据本实施方式的显示控制系统,实现与第一或第二实施方式相同的作用效果。另外,由于休息中的店员7能够购入商店的商品,因此优选设为与顾客6同等的处理。根据本实施方式的显示控制系统,能够使处于休息中且远离业务的店员7的信息不包含在工作中店员信息中。由此,显示控制系统能够与顾客6同样地对待休息中的店员7,能够对休息中的店员7提供与顾客6相同的信息。结果,由于能够向休息中的店员7提供有益的信息(广告等),因此能够期待提高销售额等。

以上,参照实施方式(及实施例)对本发明进行了说明,但本发明不限于上述实施方式(及实施例)。本发明的结构、详细内容能够在本发明的范围内进行本领域技术人员能够理解的各种变更。

此外,在本说明书中,“取得”是指基于用户输入或基于程序的指示,“本装置去取得其他装置或存储介质中存储的数据(主动的取得)”,例如,也可以包括向其他装置请求或询问并接收、访问其他装置或存储介质并读出等。另外,“取得”是指基于用户输入或基于程序的指示,“向本装置输入从其他装置输出的数据(被动的取得)”,例如,也可以包括接收所分发(或者,发送、推送通知等)的数据等。另外,“取得”也可以包括从接收到的数据或信息中选择并取得以及“对数据进行编辑(文本化、数据的重新排列、一部分数据的提取、文件形式的变更等)等而生成新的数据,并取得该新的数据”。

上述的实施方式的一部分或全部也可以如以下的附记那样记载,但并不限于以下内容。

1.一种显示控制装置,具有:

取得单元,取得相机生成的图像;

人物提取单元,从所述图像提取人物;

判断单元,基于提取到的所述人物的面部图像或外观的特征量以及工作中店员信息,判断提取到的所述人物是否是工作中的店员,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

显示控制单元,根据提取到的所述人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

2.根据1所述的显示控制装置,其中,

所述相机设置于所述显示器的周边或所述显示器。

3.根据1或2所述的显示控制装置,其中,

在提取到的所述人物是工作中的店员的情况下,所述显示控制单元将第一信息输入到所述显示器,在提取到的所述人物不是工作中的店员的情况下,所述显示控制单元将与所述第一信息不同的第二信息输入到所述显示器。

4.根据3所述的显示控制系统,其中,

所述第一信息是业务建议。

5.根据4所述的显示控制系统,其中,

所述显示控制单元基于当前时刻和按每个时间段确定所述业务建议而得到的信息,决定使所述显示器显示的所述业务建议。

6.根据3至5中任一项所述的显示控制系统,其中,

所述第二信息是广告或宣传活动信息。

7.根据6所述的显示控制系统,其中,

所述显示控制单元基于所述图像来推定所述人物的属性,并基于推定出的所述属性来决定使显示器显示的所述广告或所述宣传活动信息。

8.根据1至7中任一项所述的显示控制装置,其中,

所述显示控制装置还具有存储单元,所述存储单元存储所述工作中店员信息,并设置于设置有所述显示器的店铺,

所述判断单元基于存储于所述存储单元的所述工作中店员信息来进行所述判断。

9.根据1至8中任一项所述的显示控制装置,其中,

所述工作中店员信息包含处于工作中且未处于休息中的店员的面部图像和外观的特征量中的至少一方。

10.一种显示控制方法,其中,

计算机进行如下处理:

取得相机生成的图像;

从所述图像提取人物;

基于提取到的所述人物的面部图像或外观的特征量以及工作中店员信息,判断提取到的所述人物是否是工作中的店员,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

根据提取到的所述人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

11.一种程序,使计算机作为如下单元发挥功能:

取得单元,取得相机生成的图像;

人物提取单元,从所述图像提取人物;

判断单元,基于提取到的所述人物的面部图像或外观的特征量以及工作中店员信息,判断提取到的所述人物是否是工作中的店员,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

显示控制单元,根据提取到的所述人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

12.一种管理装置,具有:

上下班检测单元,检测店员的上班及下班;

生成单元,基于所述上下班检测单元的检测结果生成工作中店员信息,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

发送单元,将所述工作中店员信息发送到显示控制装置,所述显示控制装置根据从图像提取到的人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

13.根据12所述的管理装置,其中,

所述上下班检测单元基于相机生成的图像来检测店员的上班,

所述生成单元将所述相机生成的图像中包含的上班了的店员的面部图像和外观的特征量中的至少一方登记到所述工作中店员信息中。

14.根据12所述的管理装置,其中,

所述上下班检测单元通过店员认证来检测店员的上班,所述店员认证基于相机生成的图像和店员信息,所述店员信息包含店员的面部图像和外观的特征量中的至少一方,

所述生成单元将所述相机生成的图像中包含的上班了的店员的面部图像和外观的特征量中的至少一方、或者所述店员信息中包含的上班了的店员的面部图像和外观的特征量中的至少一方登记到所述工作中店员信息中。

15.根据12至14中任一项所述的管理装置,其中,

所述生成单元根据所述上下班检测单元对店员的下班的检测,从所述工作中店员信息中删除该下班的店员的面部图像和外观的特征量中的至少一方。

16.根据12至15中任一项所述的管理装置,其中,

所述生成单元基于休息时间表生成所述工作中店员信息,所述休息时间表表示各店员的工作日的休息定时,所述工作中店员信息包含处于工作中且未处于休息中的店员的面部图像和外观的特征量中的至少一方。

17.一种管理方法,其中,

计算机进行如下处理:

检测店员的上班及下班;

基于所述检测的结果生成工作中店员信息,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

将所述工作中店员信息发送到显示控制装置,所述显示控制装置根据从图像提取到的人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

18.一种程序,使计算机作为如下单元发挥功能:

上下班检测单元,检测店员的上班及下班;

生成单元,基于所述上下班检测单元的检测结果生成工作中店员信息,所述工作中店员信息包含工作中的店员的面部图像和外观的特征量中的至少一方;及

发送单元,将所述工作中店员信息发送到显示控制装置,所述显示控制装置根据从图像提取到的人物是否是工作中的店员,使设置于店铺的显示器的显示控制不同。

19.一种显示控制系统,具有:1至9中任一项所述的显示控制装置;及12至16中任一项所述的管理装置。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号