JP2020036109A - Information processing apparatus, information processing method, program, and dwelling unit terminal - Google Patents

Information processing apparatus, information processing method, program, and dwelling unit terminal Download PDF

Info

Publication number
JP2020036109A
JP2020036109A JP2018158899A JP2018158899A JP2020036109A JP 2020036109 A JP2020036109 A JP 2020036109A JP 2018158899 A JP2018158899 A JP 2018158899A JP 2018158899 A JP2018158899 A JP 2018158899A JP 2020036109 A JP2020036109 A JP 2020036109A
Authority
JP
Japan
Prior art keywords
visitor
terminal
type
unit
operator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018158899A
Other languages
Japanese (ja)
Other versions
JP7176297B2 (en
Inventor
厚司 福田
Koji Fukuda
厚司 福田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2018158899A priority Critical patent/JP7176297B2/en
Publication of JP2020036109A publication Critical patent/JP2020036109A/en
Application granted granted Critical
Publication of JP7176297B2 publication Critical patent/JP7176297B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Interconnected Communication Systems, Intercoms, And Interphones (AREA)

Abstract

To provide a technology capable of grasping a visit by a visitor important to a resident while reducing unnecessary efforts by a resident to respond to the visitor and reducing the likelihood that the resident will incur any disadvantage from the visitor by responding to the visitor.SOLUTION: The information processing apparatus includes: an acquisition unit for acquiring a captured image of a visitor; a determination unit for determining a visitor type by analyzing the captured image; and an output control unit for controlling connection of a device used by the visitor when the visitor type is a first type to a terminal of an operator having a predetermined attribute of a contact center.SELECTED DRAWING: Figure 1

Description

本発明は、情報処理装置、情報処理方法、プログラムおよび住戸端末に関する。   The present invention relates to an information processing device, an information processing method, a program, and a dwelling unit terminal.

近年、訪問者に対して居住者が応答を行うためのインターホンシステムに関する技術が知られている。ここで、訪問者は、居住者にとって顔見知りの人物であるとは限らない。一例として、訪問者が不審者である場合もあり得る。かかる場合への対策の例として、不審者を映像から検出して通知するインターホンシステムが開示されている(例えば、特許文献1参照)。また、過去の不審者の映像と一致したら通報するインターホンシステムが開示されている(例えば、特許文献2参照)。   2. Description of the Related Art In recent years, a technology regarding an intercom system for allowing a resident to respond to a visitor has been known. Here, the visitor is not necessarily a person known to the resident. As an example, a visitor may be a suspicious individual. As an example of a countermeasure against such a case, an intercom system that detects and notifies a suspicious person from a video is disclosed (for example, see Patent Document 1). Also, there is disclosed an intercom system that issues a notification if the image matches a past image of a suspicious individual (for example, see Patent Document 2).

特開2014−187560号公報JP 2014-187560 A 特開2006−155273号公報JP 2006-155273 A

しかしながら、居住者は、必ずしもインターホンから聞こえる訪問者の音声または映像から、訪問者が重要であるかを瞬時に把握できるとは限らない。そのため、居住者は、実際には自身にとって重要ではない訪問者に応対してしまう場合もあり得る。かかる場合には、居住者による訪問者への応対の不要な手間が掛かってしまう。また、居住者が訪問者に応対することによって訪問者から何らかの不利益を被るのではないかという不安を抱いてしまう可能性もあり得る。   However, a resident cannot always instantly recognize whether a visitor is important from a voice or a video of the visitor that can be heard from the intercom. As a result, a resident may respond to a visitor who is not actually important to himself. In such a case, it is unnecessary for the resident to respond to the visitor. In addition, there is a possibility that the resident may have an anxiety that the visitor may suffer some disadvantage by responding to the visitor.

そこで、居住者が訪問者への応対の不要な手間を低減させ、居住者が訪問者に応対することによって訪問者から何らかの不利益を被るのではないかという不安を抱いてしまう可能性を低減させつつ、居住者にとって重要な訪問者による訪問を把握することが可能な技術が提供されることが望まれる。   Therefore, the resident reduces unnecessary efforts to respond to the visitor, and reduces the possibility that the resident will have any fear that the visitor will suffer any disadvantage by responding to the visitor. It is desirable to provide a technology that allows a visitor important to a resident to recognize a visit by a visitor.

上記問題を解決するために、本発明のある観点によれば、訪問者を撮像した撮像画像を取得する取得部と、前記撮像画像を解析して訪問者種別の判定を行う判定部と、前記訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御する出力制御部と、を備える、情報処理装置が提供される。   In order to solve the above problem, according to an aspect of the present invention, an acquisition unit that acquires a captured image of a visitor, a determination unit that analyzes the captured image and determines a visitor type, When the visitor type is the first type, an output control unit that controls a device used by the visitor and a terminal of an operator having a predetermined attribute of a contact center to be connected, An information processing device is provided.

前記出力制御部は、前記訪問者種別が前記第1の種別ではない場合に、前記訪問者によって利用される機器と住戸端末とが接続されるように制御してもよい。   The output control unit may perform control such that a device used by the visitor and a dwelling unit terminal are connected when the visitor type is not the first type.

前記出力制御部は、前記訪問者によって利用される機器と前記住戸端末とが接続された後、居住者からの転送操作が前記住戸端末に入力された場合、前記訪問者によって利用される機器と前記住戸端末とは異なる端末とが接続されるように制御してもよい。   The output control unit, after the device used by the visitor and the dwelling unit terminal is connected, when a transfer operation from the resident is input to the dwelling unit terminal, the device used by the visitor Control may be performed so that a terminal different from the dwelling unit terminal is connected.

前記出力制御部は、前記訪問者によって利用される機器と前記住戸端末とが接続された後、前記訪問者から入力された音声から所定のテキストデータが認識された場合、前記訪問者によって利用される機器と前記住戸端末とは異なる端末とが接続されるように制御してもよい。   The output control unit is used by the visitor when predetermined text data is recognized from voice input from the visitor after the device used by the visitor and the dwelling unit terminal are connected. And a terminal different from the dwelling unit terminal may be connected.

前記第1の種別は、性別が男性であるという種別を含み、前記所定の属性は、性別が男性であるという属性を含んでもよい。   The first type may include a type that the gender is male, and the predetermined attribute may include an attribute that the gender is male.

前記出力制御部は、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された場合、前記所定の属性を有するオペレータの端末から受信された音声を前記訪問者によって利用される機器に送信してもよい。   When the device used by the visitor and the terminal of the operator having the predetermined attribute are connected, the output control unit outputs the sound received from the terminal of the operator having the predetermined attribute by the visitor. It may be transmitted to a device to be used.

前記出力制御部は、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された場合、前記所定の属性を有するオペレータの端末から受信された音声を住戸端末に送信してもよい。   When the device used by the visitor and the terminal of the operator having the predetermined attribute are connected, the output control unit transmits a voice received from the terminal of the operator having the predetermined attribute to the dwelling unit terminal. May be.

前記出力制御部は、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された後、居住者からの応答操作が住戸端末に入力された場合、前記住戸端末から受信された音声を前記訪問者によって利用される機器に送信してもよい。   The output control unit, after a device used by the visitor and the terminal of the operator having the predetermined attribute is connected, when a response operation from the resident is input to the dwelling unit terminal, from the dwelling unit terminal The received voice may be transmitted to a device used by the visitor.

前記第1の種別は、事前に居住者によって設定された情報であってもよい。   The first type may be information set in advance by a resident.

前記出力制御部は、前記訪問者種別が前記第1の種別ではない場合に、前記訪問者種別と同一種別または前記訪問者の特徴データと一致または類似する特徴データに対する過去の行動情報が登録されている場合、前記過去の行動情報に基づいて動作してもよい。   When the visitor type is not the first type, the output control unit registers past behavior information for the same type as the visitor type or for feature data that matches or is similar to the visitor's feature data. If so, the operation may be performed based on the past behavior information.

前記出力制御部は、前記訪問者種別が前記第1の種別である場合、かつ、前記撮像画像から抽出された特徴データと一致または類似する過去の訪問者の特徴データが登録されていない場合、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続されるように制御してもよい。   The output control unit, when the visitor type is the first type, and when the characteristic data of the past visitor that matches or is similar to the characteristic data extracted from the captured image is not registered, Control may be performed so that a device used by the visitor is connected to a terminal of an operator having the predetermined attribute.

前記出力制御部は、前記訪問者種別が前記第1の種別である場合、かつ、事前に居住者によって転送設定が行われている場合、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続されるように制御してもよい。   The output control unit, when the visitor type is the first type, and when the transfer setting is performed by the resident in advance, the device used by the visitor and the predetermined attribute It may be controlled so that it is connected to the terminal of the operator having the terminal.

前記判定部は、居住者種別の判定を行い、前記出力制御部は、前記訪問者種別が前記第1の種別である場合、かつ、前記居住者種別が第2の種別である場合に、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続されるように制御してもよい。   The determination unit determines a resident type, the output control unit, when the visitor type is the first type, and when the resident type is a second type, Control may be performed so that a device used by a visitor is connected to an operator terminal having the predetermined attribute.

前記第2の種別は、性別が女性であるという種別を含んでもよい。   The second type may include a type that the gender is female.

また、本発明の他の観点によれば、訪問者を撮像した撮像画像を取得することと、前記撮像画像を解析して訪問者種別の判定を行うことと、前記訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御することと、を含む、情報処理方法が提供される。   According to another aspect of the present invention, acquiring a captured image of a visitor, analyzing the captured image to determine a visitor type, and setting the visitor type to a first In the case of a type, an information processing method is provided, which includes: controlling so that a device used by the visitor is connected to a terminal of an operator having a predetermined attribute of a contact center.

また、本発明の他の観点によれば、コンピュータを、訪問者を撮像した撮像画像を取得する取得部と、前記撮像画像を解析して訪問者種別の判定を行う判定部と、前記訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御する出力制御部と、を備える情報処理装置として機能させるためのプログラムが提供される。   Further, according to another aspect of the present invention, an acquisition unit configured to acquire a captured image of a visitor by a computer, a determination unit configured to analyze the captured image and determine a visitor type, An information processing apparatus comprising: an output control unit configured to control connection between a device used by the visitor and a terminal of an operator having a predetermined attribute of a contact center when the type is the first type. A program for functioning as a program is provided.

また、本発明の他の観点によれば、居住者によって利用される住戸端末であって、訪問者を撮像した撮像画像の解析に基づいて判定された訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御され、前記訪問者種別が前記第1の種別ではない場合に、前記訪問者によって利用される機器と前記住戸端末とが接続されるように制御され、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された場合、前記所定の属性を有するオペレータの端末から音声を受信する通信部と、前記音声を前記居住者に提示する提示部と、を備える、住戸端末が提供される。   According to another aspect of the present invention, a dwelling unit terminal used by a resident, wherein the visitor type determined based on analysis of a captured image of the visitor is the first type The device used by the visitor is controlled to be connected to a terminal of an operator having a predetermined attribute of a contact center, and when the visitor type is not the first type, Is controlled so that the device used by the visitor and the dwelling unit terminal are connected, and when the device used by the visitor and the terminal of the operator having the predetermined attribute are connected, the terminal has the predetermined attribute. A dwelling unit terminal is provided that includes a communication unit that receives a voice from a terminal of an operator and a presentation unit that presents the voice to the resident.

以上説明したように本発明によれば、居住者が訪問者への応対の不要な手間を低減させ、居住者が訪問者に応対することによって訪問者から何らかの不利益を被るのではないかという不安を抱いてしまう可能性を低減させつつ、居住者にとって重要な訪問者による訪問を把握することが可能となる。   As described above, according to the present invention, it is possible that the resident may reduce unnecessary work of responding to the visitor, and the resident may receive some disadvantage from the visitor by responding to the visitor. It is possible to grasp visits by a visitor who is important to a resident while reducing the possibility of having anxiety.

本発明の実施形態に係る情報処理システムの構成例を示した説明図である。FIG. 1 is an explanatory diagram illustrating a configuration example of an information processing system according to an embodiment of the present invention. 同実施形態に係る集合住宅サーバの機能構成例を示すブロック図である。It is a block diagram showing an example of functional composition of an apartment house server concerning the embodiment. 同実施形態に係る玄関機の機能構成例を示すブロック図である。FIG. 3 is a block diagram illustrating a functional configuration example of the entrance machine according to the embodiment. 同実施形態に係る住戸端末の機能構成例を示すブロック図である。It is a block diagram showing the example of functional composition of the dwelling unit terminal concerning the embodiment. 同実施形態に係るコンタクトセンタサーバの機能構成例を示すブロック図である。FIG. 3 is a block diagram illustrating a functional configuration example of a contact center server according to the embodiment. 同実施形態に係るオペレータ端末の機能構成例を示すブロック図である。FIG. 3 is a block diagram illustrating a functional configuration example of an operator terminal according to the embodiment. 同実施形態に係る携帯端末の機能構成例を示すブロック図である。FIG. 3 is a block diagram illustrating an example of a functional configuration of the mobile terminal according to the embodiment. 同実施形態に係る情報処理システムの動作例を示すフローチャートである。4 is a flowchart illustrating an operation example of the information processing system according to the embodiment. 同実施形態に係る情報処理システムの動作例を示すフローチャートである。4 is a flowchart illustrating an operation example of the information processing system according to the embodiment. 同実施形態に係る情報処理システムの動作例を示すフローチャートである。4 is a flowchart illustrating an operation example of the information processing system according to the embodiment. 同実施形態に係る情報処理システムの動作例を示すフローチャートである。4 is a flowchart illustrating an operation example of the information processing system according to the embodiment. 同実施形態に係る情報処理システムの動作例を示すフローチャートである。4 is a flowchart illustrating an operation example of the information processing system according to the embodiment. 同実施形態に係る情報処理システムの動作例を示すフローチャートである。4 is a flowchart illustrating an operation example of the information processing system according to the embodiment. 同実施形態に係る情報処理装置のハードウェア構成を示す図である。FIG. 2 is a diagram illustrating a hardware configuration of the information processing apparatus according to the embodiment.

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。   Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the specification and the drawings, components having substantially the same function and configuration are denoted by the same reference numerals, and redundant description is omitted.

また、本明細書および図面において、実質的に同一または類似の機能構成を有する複数の構成要素を、同一の符号の後に異なる数字を付して区別する。また、異なる実施形態の類似する構成要素については、同一の符号の後に異なるアルファベットを付して区別する。ただし、実質的に同一の機能構成を有する複数の構成要素等の各々を特に区別する必要がない場合、同一符号のみを付する。   In this specification and the drawings, a plurality of components having substantially the same or similar functional configuration are distinguished from each other by the same reference numerals followed by different numbers. Further, similar components in different embodiments are distinguished by adding different alphabets to the same reference numerals. However, when it is not necessary to particularly distinguish each of a plurality of components having substantially the same functional configuration, only the same reference numerals are given.

(1.実施形態の詳細)
まず、本発明の実施形態の詳細について説明する。
(1. Details of Embodiment)
First, details of the embodiment of the present invention will be described.

(1−1.情報処理システムの構成)
図1を参照しながら、本発明の実施形態に係る情報処理システムの構成例について説明する。図1は、本発明の実施形態に係る情報処理システムの構成例を示した説明図である。図1に示したように、本発明の実施形態に係る情報処理システム1は、集合住宅サーバ10と、玄関機20と、住戸端末30と、通信装置40と、ネットワーク50と、コンタクトセンタサーバ60と、オペレータ端末70と、携帯端末80と、通信装置90とを備える。
(1-1. Configuration of Information Processing System)
A configuration example of an information processing system according to an embodiment of the present invention will be described with reference to FIG. FIG. 1 is an explanatory diagram showing a configuration example of an information processing system according to an embodiment of the present invention. As shown in FIG. 1, the information processing system 1 according to the embodiment of the present invention includes an apartment house server 10, a front door 20, a dwelling unit terminal 30, a communication device 40, a network 50, and a contact center server 60. , An operator terminal 70, a mobile terminal 80, and a communication device 90.

通信装置40は、ネットワーク50に接続されており、集合住宅サーバ10によるネットワーク50を介した通信を中継する。通信装置90は、ネットワーク50に接続されており、コンタクトセンタサーバ60によるネットワーク50を介した通信を中継する。なお、以下の説明においては、説明を簡便にするため、集合住宅サーバ10による通信のネットワーク50および通信装置40による中継は適宜に省略される。同様に、コンタクトセンタサーバ60による通信のネットワーク50および通信装置90による中継は、適宜に省略される。   The communication device 40 is connected to the network 50, and relays communication by the collective housing server 10 via the network 50. The communication device 90 is connected to the network 50, and relays communication via the network 50 by the contact center server 60. In the following description, for the sake of simplicity, the relay of the communication by the collective housing server 10 by the network 50 and the communication device 40 is appropriately omitted. Similarly, the relay of the communication by the contact center server 60 by the network 50 and the communication device 90 is appropriately omitted.

玄関機20は、集合住宅の玄関に設置され、集合住宅内の住戸に居住する人物(以下、「居住者」とも言う。)に訪問する人物(以下、「訪問者」とも言う。)によって利用される機器である。しかし、玄関機20が設置される位置は、集合住宅の玄関でなくてもよい。例えば、玄関機20は、何らかの建物(例えば、オフィスビルなど)の玄関に設置されればよい。すなわち、集合住宅は、建物に置き換えられてよく、住戸は、建物内の部屋に置き換えられてよく、居住者は、建物内の部屋に存在する人物に置き換えられてよく、訪問者は、建物内の部屋に存在する人物に訪問する人物に置き換えられてよい。玄関機20は、集合住宅サーバ10に接続される。   The entrance machine 20 is installed at the entrance of an apartment house, and is used by a person (hereinafter, also referred to as a “visitor”) visiting a person (hereinafter, also referred to as a “resident”) resident in a dwelling unit in the apartment house. Equipment. However, the position where the entrance machine 20 is installed may not be the entrance of the apartment house. For example, the entrance machine 20 may be installed at the entrance of any building (for example, an office building). That is, an apartment house may be replaced by a building, a dwelling unit may be replaced by a room in the building, a resident may be replaced by a person present in a room in the building, and a visitor may be replaced by a person in the building. May be replaced by a person who visits a person present in the room. The entrance machine 20 is connected to the collective housing server 10.

住戸端末30は、住戸内に設置され、居住者によって利用される。住戸端末30は、集合住宅サーバ10に接続されている。なお、図1に示された例では、図の簡便にするために、1台の住戸端末30が集合住宅サーバ10に接続されている。しかし、集合住宅サーバ10に接続されている住戸端末30の数は限定されない。例えば、複数の住戸端末30が集合住宅サーバ10に接続されていてもよい。   The dwelling unit terminal 30 is installed in a dwelling unit and is used by a resident. The dwelling unit terminal 30 is connected to the apartment house server 10. In the example shown in FIG. 1, one dwelling unit terminal 30 is connected to the apartment house server 10 to simplify the drawing. However, the number of dwelling unit terminals 30 connected to the collective housing server 10 is not limited. For example, a plurality of dwelling unit terminals 30 may be connected to the apartment house server 10.

集合住宅サーバ10は、コンピュータによって構成され、各種の情報処理を行う情報処理装置として機能し得る。集合住宅サーバ10は、集合住宅内に設置されている。しかし、集合住宅サーバ10が設置される位置は限定されない。例えば、集合住宅サーバ10の機能の一部または全部は、集合住宅サーバ10の代わりに、集合住宅の外部のコンピュータ(例えば、サーバ)が有していてもよい。   The collective housing server 10 is configured by a computer, and can function as an information processing device that performs various types of information processing. The apartment house server 10 is installed in the apartment house. However, the position where the collective housing server 10 is installed is not limited. For example, some or all of the functions of the apartment house server 10 may be provided by a computer (for example, a server) outside the apartment house instead of the apartment house server 10.

オペレータ端末70は、コンタクトセンタに設置されており、コンタクトセンタに存在するオペレータによって利用される端末(オペレータの端末)である。オペレータ端末70は、コンタクトセンタサーバ60に接続されている。図1に示された例では、図の簡便にするために、1台のオペレータ端末70がコンタクトセンタサーバ60に接続されている。しかし、コンタクトセンタサーバ60に接続されているオペレータ端末70の数は限定されない。例えば、複数のオペレータ端末70がコンタクトセンタサーバ60に接続されていてもよい。   The operator terminal 70 is a terminal (operator's terminal) installed at a contact center and used by an operator existing at the contact center. The operator terminal 70 is connected to the contact center server 60. In the example shown in FIG. 1, one operator terminal 70 is connected to the contact center server 60 to simplify the drawing. However, the number of operator terminals 70 connected to the contact center server 60 is not limited. For example, a plurality of operator terminals 70 may be connected to the contact center server 60.

コンタクトセンタサーバ60は、コンピュータによって構成される。コンタクトセンタサーバ60は、コンタクトセンタに設置されている。しかし、コンタクトセンタサーバ60が設置される位置は限定されない。例えば、コンタクトセンタサーバ60の機能の一部または全部は、コンタクトセンタサーバ60の代わりに、コンタクトセンタの外部のコンピュータ(例えば、サーバ)が有していてもよい。   The contact center server 60 is configured by a computer. The contact center server 60 is installed in a contact center. However, the position where the contact center server 60 is installed is not limited. For example, some or all of the functions of the contact center server 60 may be provided by a computer (for example, a server) outside the contact center, instead of the contact center server 60.

携帯端末80は、居住者と関連する人物が利用する端末である。例えば、携帯端末80の種類は限定されない。例えば、携帯端末80は、スマートフォンであってもよいし、携帯電話であってもよいし、タブレット端末であってもよいし、パーソナルコンピュータ(例えば、ノート型のパーソナルコンピュータなど)であってもよい。居住者と関連する人物は、実際に住戸に居住していないが、居住者と何らかの関連性を有する人物であってよく、例えば、居住者の父親であってもよいし、居住者の母親であってよいし、居住者の兄または弟であってもよいし、居住者の姉または妹であってもよい。   The mobile terminal 80 is a terminal used by a person associated with a resident. For example, the type of the mobile terminal 80 is not limited. For example, the mobile terminal 80 may be a smartphone, a mobile phone, a tablet terminal, or a personal computer (for example, a notebook personal computer). . The person associated with the resident may not be actually resident in the dwelling unit, but may be a person having any relationship with the resident, for example, may be the resident's father or the resident's mother. It may be, may be a resident's brother or brother, or may be a resident's sister or sister.

以上、本発明の実施形態に係る情報処理システム1の構成例について説明した。   The configuration example of the information processing system 1 according to the embodiment of the present invention has been described above.

(1−2.集合住宅サーバの機能構成)
続いて、本発明の実施形態に係る集合住宅サーバ10の機能構成例について説明する。図2は、本発明の実施形態に係る集合住宅サーバ10の機能構成例を示すブロック図である。図2に示したように、本発明の実施形態に係る集合住宅サーバ10は、制御部110、記憶部120および通信部130を備える。
(1-2. Functional Configuration of Apartment House Server)
Subsequently, an example of a functional configuration of the collective housing server 10 according to the embodiment of the present invention will be described. FIG. 2 is a block diagram illustrating a functional configuration example of the collective housing server 10 according to the embodiment of the present invention. As shown in FIG. 2, the collective housing server 10 according to the embodiment of the present invention includes a control unit 110, a storage unit 120, and a communication unit 130.

制御部110は、集合住宅サーバ10の動作全体を制御する機能を有する。制御部110は、専用のハードウェアによって構成されてもよいし、集合住宅サーバ10に内蔵されたCPU(Central Processing Unit)がROM(Read Only Memory)に記憶されたプログラムをRAM(Random Access Memory)に展開して実行することにより実現されてもよい。かかるプログラムが提供され得る他、かかるプログラムを記憶させた記憶媒体も提供され得る。制御部110は、取得部112、判定部113および出力制御部114を有する。これらの各ブロックが有する機能の詳細は、後に説明する。   The control unit 110 has a function of controlling the entire operation of the collective housing server 10. The control unit 110 may be configured by dedicated hardware, or a CPU (Central Processing Unit) built in the apartment house server 10 may execute a program stored in a ROM (Read Only Memory) by a RAM (Random Access Memory). And may be realized by executing the program. In addition to providing such a program, a storage medium storing such a program may also be provided. The control unit 110 has an acquisition unit 112, a determination unit 113, and an output control unit 114. Details of the functions of these blocks will be described later.

記憶部120は、制御部110を動作させるためのプログラムやデータを記憶することができる。また、記憶部120は、制御部110の動作の過程で必要となる各種データを一時的に記憶することもできる。例えば、記憶部120は、事前に居住者によって設定された情報を、事前設定情報121として記憶する。また、記憶部120は、訪問者種別と居住者による過去の行動情報とが関連付けられた情報を、行動履歴情報122として記憶する。   The storage unit 120 can store programs and data for operating the control unit 110. In addition, the storage unit 120 can also temporarily store various data required during the operation of the control unit 110. For example, the storage unit 120 stores information previously set by the resident as the pre-setting information 121. Further, the storage unit 120 stores, as the action history information 122, information in which the visitor type is associated with past action information of the resident.

通信部130は、ネットワーク50に接続された各種装置との間で各種情報を送受信するための通信インタフェースである。例えば、通信部130は、ネットワークに接続された各種装置に情報を送信する送信部として機能し得る。また、通信部130は、ネットワークに接続された各種装置から送信された情報を受信する受信部として機能し得る。その他、通信部130は、玄関機20と通信を行う機能、および、住戸端末30と通信を行う機能を有する。   The communication unit 130 is a communication interface for transmitting and receiving various information to and from various devices connected to the network 50. For example, the communication unit 130 can function as a transmission unit that transmits information to various devices connected to a network. In addition, the communication unit 130 can function as a receiving unit that receives information transmitted from various devices connected to the network. In addition, the communication unit 130 has a function of communicating with the entrance device 20 and a function of communicating with the dwelling unit terminal 30.

以上、本発明の実施形態に係る集合住宅サーバ10の機能構成例について説明した。   The example of the functional configuration of the collective housing server 10 according to the embodiment of the present invention has been described above.

(1−3.玄関機の機能構成)
続いて、本発明の実施形態に係る玄関機20の機能構成例について説明する。図3は、本発明の実施形態に係る玄関機20の機能構成例を示すブロック図である。図3に示したように、本発明の実施形態に係る玄関機20は、制御部210、センサ部220、操作部230、記憶部240、通信部250および提示部260を備える。
(1-3. Functional configuration of entrance machine)
Subsequently, an example of a functional configuration of the entrance device 20 according to the embodiment of the present invention will be described. FIG. 3 is a block diagram illustrating a functional configuration example of the entrance device 20 according to the embodiment of the present invention. As shown in FIG. 3, the entrance device 20 according to the embodiment of the present invention includes a control unit 210, a sensor unit 220, an operation unit 230, a storage unit 240, a communication unit 250, and a presentation unit 260.

制御部210は、玄関機20の動作全体を制御する機能を有する。制御部210は、専用のハードウェアによって構成されてもよいし、玄関機20に内蔵されたCPU(Central Processing Unit)がROM(Read Only Memory)に記憶されたプログラムをRAM(Random Access Memory)に展開して実行することにより実現されてもよい。かかるプログラムが提供され得る他、かかるプログラムを記憶させた記憶媒体も提供され得る。   The control unit 210 has a function of controlling the entire operation of the entrance device 20. The control unit 210 may be constituted by dedicated hardware, or a CPU (Central Processing Unit) built in the entrance device 20 may store a program stored in a ROM (Read Only Memory) in a RAM (Random Access Memory). It may be realized by expanding and executing. In addition to providing such a program, a storage medium storing such a program may also be provided.

センサ部220は、各種センサを含んで構成され、訪問者に関するセンシングデータを検出する。本実施形態においては、センサ部220がマイクロフォンおよびカメラを含む場合を想定する。マイクロフォンは、訪問者が発する音声を検出し、検出した訪問者の音声を制御部210に提供することが可能である。カメラは、訪問者を撮像し、撮像した訪問者の映像を制御部210に提供することが可能である。しかし、センサ部220は、マイクロフォンおよびカメラ以外のセンシングデバイスを含んでもよい。   The sensor unit 220 includes various sensors, and detects sensing data on a visitor. In the present embodiment, it is assumed that the sensor unit 220 includes a microphone and a camera. The microphone can detect a voice emitted by the visitor and provide the detected voice of the visitor to the control unit 210. The camera can image the visitor and provide the captured image of the visitor to the control unit 210. However, the sensor unit 220 may include a sensing device other than the microphone and the camera.

操作部230は、訪問者から入力される操作を受け付ける。また、操作部230は、訪問者から受け付けた操作を制御部210に提供することが可能である。本実施形態においては、操作部230がボタンを含む場合を主に想定するが、操作部230はボタン以外の入力装置を含んでもよい。例えば、操作部230は、スイッチを含んでもよいし、タッチパネルを含んでもよい。   The operation unit 230 receives an operation input from a visitor. Further, the operation unit 230 can provide the control unit 210 with an operation received from a visitor. In the present embodiment, it is mainly assumed that the operation unit 230 includes a button, but the operation unit 230 may include an input device other than the button. For example, the operation unit 230 may include a switch or a touch panel.

記憶部240は、制御部210を動作させるためのプログラムやデータを記憶することができる。また、記憶部240は、制御部210の動作の過程で必要となる各種データを一時的に記憶することもできる。   The storage unit 240 can store programs and data for operating the control unit 210. In addition, the storage unit 240 can also temporarily store various data required during the operation of the control unit 210.

通信部250は、集合住宅サーバ10との間で各種情報を送受信するための通信インタフェースである。例えば、通信部250は、集合住宅サーバ10に情報を送信する送信部として機能し得る。また、通信部250は、集合住宅サーバ10から送信された情報を受信する受信部として機能し得る。   The communication unit 250 is a communication interface for transmitting and receiving various information to and from the collective housing server 10. For example, the communication unit 250 can function as a transmission unit that transmits information to the collective housing server 10. In addition, the communication unit 250 can function as a receiving unit that receives information transmitted from the apartment house server 10.

提示部260は、制御部210による制御に従って訪問者に各種情報を提示する機能を有する。本実施形態では、提示部260は、スピーカを含んでおり、スピーカは、制御部210による制御に従って、訪問者からの呼び出しに対して応答操作を行った人物の音声を出力することが可能である。例えば、居住者、携帯端末80を利用する人物、および、コンタクトセンタのオペレータは、訪問者からの呼び出しに対して応答操作を行い得る。   The presentation unit 260 has a function of presenting various information to a visitor under the control of the control unit 210. In the present embodiment, the presentation unit 260 includes a speaker, and the speaker can output the voice of the person who performed the response operation to the call from the visitor according to the control of the control unit 210. . For example, the resident, the person using the mobile terminal 80, and the operator of the contact center may perform a response operation to a call from the visitor.

以上、本発明の実施形態に係る玄関機20の機能構成例について説明した。   The example of the functional configuration of the entrance device 20 according to the embodiment of the present invention has been described above.

(1−4.住戸端末の機能構成)
続いて、本発明の実施形態に係る住戸端末30の機能構成例について説明する。図4は、本発明の実施形態に係る住戸端末30の機能構成例を示すブロック図である。図4に示したように、本発明の実施形態に係る住戸端末30は、制御部310、センサ部320、操作部330、記憶部340、通信部350および提示部360を備える。
(1-4. Functional configuration of dwelling unit terminal)
Subsequently, a functional configuration example of the dwelling unit terminal 30 according to the embodiment of the present invention will be described. FIG. 4 is a block diagram illustrating a functional configuration example of the dwelling unit terminal 30 according to the embodiment of the present invention. As shown in FIG. 4, the dwelling unit terminal 30 according to the embodiment of the present invention includes a control unit 310, a sensor unit 320, an operation unit 330, a storage unit 340, a communication unit 350, and a presentation unit 360.

制御部310は、住戸端末30の動作全体を制御する機能を有する。制御部310は、専用のハードウェアによって構成されてもよいし、住戸端末30に内蔵されたCPU(Central Processing Unit)がROM(Read Only Memory)に記憶されたプログラムをRAM(Random Access Memory)に展開して実行することにより実現されてもよい。かかるプログラムが提供され得る他、かかるプログラムを記憶させた記憶媒体も提供され得る。   The control unit 310 has a function of controlling the entire operation of the dwelling unit terminal 30. The control unit 310 may be configured by dedicated hardware, or a CPU (Central Processing Unit) built in the dwelling unit terminal 30 stores a program stored in a ROM (Read Only Memory) in a RAM (Random Access Memory). It may be realized by expanding and executing. In addition to providing such a program, a storage medium storing such a program may also be provided.

センサ部320は、各種センサを含んで構成され、居住者に関するセンシングデータを検出する。本実施形態においては、センサ部320がマイクロフォンおよびカメラを含む場合を想定する。マイクロフォンは、居住者が発する音声を検出し、検出した居住者の音声を制御部310に提供することが可能である。カメラは、居住者を撮像し、撮像した居住者の映像を制御部310に提供することが可能である。センサ部320は、マイクロフォンおよびカメラ以外のセンシングデバイスを含んでもよい。なお、カメラは、住戸端末30の外部(例えば、住戸内のいずれかの位置)に設置されていてもよいし、特に設けられていなくてもよい。   The sensor unit 320 is configured to include various sensors, and detects sensing data regarding a resident. In the present embodiment, it is assumed that the sensor unit 320 includes a microphone and a camera. The microphone can detect a sound occupied by the resident and provide the detected occupant's sound to the control unit 310. The camera can image the resident and provide the captured image of the resident to the control unit 310. The sensor unit 320 may include a sensing device other than a microphone and a camera. The camera may be installed outside the dwelling unit terminal 30 (for example, at any position in the dwelling unit), or may not be particularly provided.

操作部330は、居住者から入力される操作を受け付ける。また、操作部330は、居住者から受け付けた操作を制御部310に提供することが可能である。本実施形態においては、操作部330がボタンを含む場合を主に想定するが、操作部330はボタン以外の入力装置を含んでもよい。例えば、操作部330は、スイッチを含んでもよいし、タッチパネルを含んでもよい。   Operation unit 330 accepts an operation input from a resident. The operation unit 330 can provide the operation received from the resident to the control unit 310. In the present embodiment, it is mainly assumed that the operation unit 330 includes a button, but the operation unit 330 may include an input device other than the button. For example, the operation unit 330 may include a switch or a touch panel.

記憶部340は、制御部310を動作させるためのプログラムやデータを記憶することができる。また、記憶部340は、制御部310の動作の過程で必要となる各種データを一時的に記憶することもできる。   The storage unit 340 can store programs and data for operating the control unit 310. Further, the storage unit 340 can also temporarily store various data required in the course of the operation of the control unit 310.

通信部350は、集合住宅サーバ10との間で各種情報を送受信するための通信インタフェースである。例えば、通信部350は、集合住宅サーバ10に情報を送信する送信部として機能し得る。また、通信部350は、集合住宅サーバ10から送信された情報を受信する受信部として機能し得る。   The communication unit 350 is a communication interface for transmitting and receiving various information to and from the collective housing server 10. For example, the communication unit 350 can function as a transmission unit that transmits information to the collective housing server 10. In addition, communication unit 350 can function as a receiving unit that receives information transmitted from apartment house server 10.

提示部360は、制御部310による制御に従って居住者に各種情報を提示する機能を有する。本実施形態では、提示部360は、スピーカを含んでおり、スピーカは、制御部310による制御に従って、訪問者、オペレータおよび携帯端末80を利用する人物の少なくともいずれかの音声を出力することが可能である。また、提示部360は、ディスプレイを含んでおり、ディスプレイは、制御部310による制御に従って、訪問者の映像を表示することが可能である。   The presentation unit 360 has a function of presenting various information to the occupants according to the control of the control unit 310. In the present embodiment, the presentation unit 360 includes a speaker, and the speaker can output voice of at least one of a visitor, an operator, and a person who uses the mobile terminal 80 according to control by the control unit 310. It is. In addition, the presentation unit 360 includes a display, and the display can display an image of the visitor under the control of the control unit 310.

以上、本発明の実施形態に係る住戸端末30の機能構成例について説明した。   The functional configuration example of the dwelling unit terminal 30 according to the embodiment of the present invention has been described above.

(1−5.コンタクトセンタサーバの機能構成)
続いて、本発明の実施形態に係るコンタクトセンタサーバ60の機能構成例について説明する。図5は、本発明の実施形態に係るコンタクトセンタサーバ60の機能構成例を示すブロック図である。図5に示したように、本発明の実施形態に係るコンタクトセンタサーバ60は、制御部610、記憶部620および通信部630を備える。
(1-5. Functional Configuration of Contact Center Server)
Subsequently, an example of a functional configuration of the contact center server 60 according to the embodiment of the present invention will be described. FIG. 5 is a block diagram illustrating a functional configuration example of the contact center server 60 according to the embodiment of the present invention. As shown in FIG. 5, the contact center server 60 according to the embodiment of the present invention includes a control unit 610, a storage unit 620, and a communication unit 630.

制御部610は、コンタクトセンタサーバ60の動作全体を制御する機能を有する。制御部610は、専用のハードウェアによって構成されてもよいし、コンタクトセンタサーバ60に内蔵されたCPU(Central Processing Unit)がROM(Read Only Memory)に記憶されたプログラムをRAM(Random Access Memory)に展開して実行することにより実現されてもよい。かかるプログラムが提供され得る他、かかるプログラムを記憶させた記憶媒体も提供され得る。   The control unit 610 has a function of controlling the entire operation of the contact center server 60. The control unit 610 may be configured by dedicated hardware, or a CPU (Central Processing Unit) built in the contact center server 60 may execute a program stored in a ROM (Read Only Memory) by using a RAM (Random Access Memory). And may be realized by executing the program. In addition to providing such a program, a storage medium storing such a program may also be provided.

記憶部620は、制御部610を動作させるためのプログラムやデータを記憶することができる。また、記憶部620は、制御部610の動作の過程で必要となる各種データを一時的に記憶することもできる。例えば、記憶部620は、居住者に関する情報(例えば、居住者種別など)を居住者情報621として記憶する。居住者種別は、居住者の性別などであってよい。また、記憶部620は、オペレータに関する情報(例えば、オペレータ端末を利用するオペレータの属性など)をオペレータ情報622として記憶する。オペレータの属性は、オペレータの性別などであってよい。その他、記憶部620は、訪問者の映像および音声を映像音声623として記憶する。   The storage unit 620 can store programs and data for operating the control unit 610. Further, the storage unit 620 can also temporarily store various data required during the operation of the control unit 610. For example, the storage unit 620 stores information about the resident (for example, the resident type) as the resident information 621. The resident type may be the gender of the resident. In addition, the storage unit 620 stores information about the operator (for example, the attribute of the operator who uses the operator terminal) as the operator information 622. The attribute of the operator may be the gender of the operator. In addition, the storage unit 620 stores the video and audio of the visitor as the video and audio 623.

通信部630は、ネットワーク50に接続された各種装置との間で各種情報を送受信するための通信インタフェースである。例えば、通信部630は、ネットワークに接続された各種装置に情報を送信する送信部として機能し得る。また、通信部630は、ネットワークに接続された各種装置から送信された情報を受信する受信部として機能し得る。その他、通信部630は、オペレータ端末70と通信を行う機能を有する。   The communication unit 630 is a communication interface for transmitting and receiving various information to and from various devices connected to the network 50. For example, the communication unit 630 can function as a transmission unit that transmits information to various devices connected to a network. In addition, the communication unit 630 can function as a receiving unit that receives information transmitted from various devices connected to the network. In addition, the communication unit 630 has a function of communicating with the operator terminal 70.

以上、本発明の実施形態に係るコンタクトセンタサーバ60の機能構成例について説明した。   The functional configuration example of the contact center server 60 according to the embodiment of the present invention has been described above.

(1−6.オペレータ端末の機能構成)
続いて、本発明の実施形態に係るオペレータ端末70の機能構成例について説明する。図6は、本発明の実施形態に係るオペレータ端末70の機能構成例を示すブロック図である。図6に示したように、本発明の実施形態に係るオペレータ端末70は、制御部710、音声入力部720、操作入力部730、記憶部740、通信部750および提示部760を備える。
(1-6. Functional configuration of operator terminal)
Subsequently, a functional configuration example of the operator terminal 70 according to the embodiment of the present invention will be described. FIG. 6 is a block diagram illustrating a functional configuration example of the operator terminal 70 according to the embodiment of the present invention. As shown in FIG. 6, the operator terminal 70 according to the embodiment of the present invention includes a control unit 710, a voice input unit 720, an operation input unit 730, a storage unit 740, a communication unit 750, and a presentation unit 760.

制御部710は、オペレータ端末70の動作全体を制御する機能を有する。制御部710は、専用のハードウェアによって構成されてもよいし、オペレータ端末70に内蔵されたCPU(Central Processing Unit)がROM(Read Only Memory)に記憶されたプログラムをRAM(Random Access Memory)に展開して実行することにより実現されてもよい。かかるプログラムが提供され得る他、かかるプログラムを記憶させた記憶媒体も提供され得る。   The control unit 710 has a function of controlling the entire operation of the operator terminal 70. The control unit 710 may be configured by dedicated hardware, or a CPU (Central Processing Unit) built in the operator terminal 70 may transfer a program stored in a ROM (Read Only Memory) to a RAM (Random Access Memory). It may be realized by expanding and executing. In addition to providing such a program, a storage medium storing such a program may also be provided.

音声入力部720は、マイクロフォンを含んで構成される。マイクロフォンは、オペレータが発する音声を検出し、検出したオペレータの音声を制御部710に提供することが可能である。   The voice input unit 720 includes a microphone. The microphone can detect the voice uttered by the operator and provide the detected voice of the operator to the control unit 710.

操作入力部730は、オペレータから入力される操作を受け付ける。また、操作入力部730は、オペレータから受け付けた操作を制御部710に提供することが可能である。本実施形態においては、操作入力部730がボタンを含む場合を主に想定するが、操作入力部730はボタン以外の入力装置を含んでもよい。例えば、操作入力部730は、スイッチを含んでもよいし、タッチパネルを含んでもよい。   Operation input unit 730 accepts an operation input from an operator. Further, the operation input unit 730 can provide the control unit 710 with the operation received from the operator. In the present embodiment, it is mainly assumed that the operation input unit 730 includes a button, but the operation input unit 730 may include an input device other than the button. For example, the operation input unit 730 may include a switch or may include a touch panel.

記憶部740は、制御部710を動作させるためのプログラムやデータを記憶することができる。また、記憶部740は、制御部710の動作の過程で必要となる各種データを一時的に記憶することもできる。   The storage unit 740 can store programs and data for operating the control unit 710. Further, the storage unit 740 can also temporarily store various data required during the operation of the control unit 710.

通信部750は、コンタクトセンタサーバ60との間で各種情報を送受信するための通信インタフェースである。例えば、通信部750は、コンタクトセンタサーバ60に情報を送信する送信部として機能し得る。また、通信部750は、コンタクトセンタサーバ60から送信された情報を受信する受信部として機能し得る。   The communication unit 750 is a communication interface for transmitting and receiving various information to and from the contact center server 60. For example, the communication unit 750 can function as a transmission unit that transmits information to the contact center server 60. The communication unit 750 can function as a receiving unit that receives information transmitted from the contact center server 60.

提示部760は、制御部710による制御に従ってオペレータに各種情報を提示する機能を有する。本実施形態では、提示部760は、スピーカを含んでおり、スピーカは、制御部710による制御に従って、訪問者の音声を出力することが可能である。また、提示部760は、ディスプレイを含んでおり、ディスプレイは、制御部710による制御に従って、各種情報を表示することが可能である。例えば、ディスプレイは、訪問者の映像を表示することが可能である。   The presentation unit 760 has a function of presenting various types of information to the operator according to the control of the control unit 710. In the present embodiment, the presentation unit 760 includes a speaker, and the speaker can output the voice of the visitor under the control of the control unit 710. In addition, the presentation unit 760 includes a display, and the display can display various types of information according to control by the control unit 710. For example, the display can display an image of the visitor.

以上、本発明の実施形態に係るオペレータ端末70の機能構成例について説明した。   The functional configuration example of the operator terminal 70 according to the embodiment of the present invention has been described above.

(1−7.携帯端末の機能構成)
続いて、本発明の実施形態に係る携帯端末80の機能構成例について説明する。図7は、本発明の実施形態に係る携帯端末80の機能構成例を示すブロック図である。図7に示したように、本発明の実施形態に係る携帯端末80は、制御部810、音声入力部820、操作入力部830、記憶部840、通信部850および提示部860を備える。
(1-7. Functional Configuration of Mobile Terminal)
Subsequently, an example of a functional configuration of the mobile terminal 80 according to the embodiment of the present invention will be described. FIG. 7 is a block diagram illustrating a functional configuration example of the mobile terminal 80 according to the embodiment of the present invention. As shown in FIG. 7, the mobile terminal 80 according to the embodiment of the present invention includes a control unit 810, a voice input unit 820, an operation input unit 830, a storage unit 840, a communication unit 850, and a presentation unit 860.

制御部810は、携帯端末80の動作全体を制御する機能を有する。制御部810は、専用のハードウェアによって構成されてもよいし、携帯端末80に内蔵されたCPU(Central Processing Unit)がROM(Read Only Memory)に記憶されたプログラムをRAM(Random Access Memory)に展開して実行することにより実現されてもよい。かかるプログラムが提供され得る他、かかるプログラムを記憶させた記憶媒体も提供され得る。   The control unit 810 has a function of controlling the entire operation of the mobile terminal 80. The control unit 810 may be configured by dedicated hardware, or a CPU (Central Processing Unit) built in the portable terminal 80 may store a program stored in a ROM (Read Only Memory) in a RAM (Random Access Memory). It may be realized by expanding and executing. In addition to providing such a program, a storage medium storing such a program may also be provided.

音声入力部820は、マイクロフォンを含んで構成される。マイクロフォンは、居住者と関連する人物が発する音声を検出し、検出した居住者と関連する人物の音声を制御部810に提供することが可能である。   The voice input unit 820 includes a microphone. The microphone can detect a voice uttered by a person associated with the resident, and provide the detected voice of the person associated with the resident to the control unit 810.

操作入力部830は、居住者と関連する人物から入力される操作を受け付ける。また、操作入力部830は、居住者と関連する人物から受け付けた操作を制御部810に提供することが可能である。本実施形態においては、操作入力部830がボタンを含む場合を主に想定するが、操作入力部830はボタン以外の入力装置を含んでもよい。例えば、操作入力部830は、スイッチを含んでもよいし、タッチパネルを含んでもよい。   Operation input unit 830 receives an operation input from a person associated with a resident. Further, the operation input unit 830 can provide the control unit 810 with an operation received from a person associated with the resident. In the present embodiment, it is mainly assumed that the operation input unit 830 includes a button, but the operation input unit 830 may include an input device other than the button. For example, the operation input unit 830 may include a switch, or may include a touch panel.

記憶部840は、制御部810を動作させるためのプログラムやデータを記憶することができる。また、記憶部840は、制御部810の動作の過程で必要となる各種データを一時的に記憶することもできる。   The storage unit 840 can store programs and data for operating the control unit 810. Further, the storage unit 840 can also temporarily store various data required during the operation of the control unit 810.

通信部850は、ネットワーク50に接続された各種装置との間で各種情報を送受信するための通信インタフェースである。例えば、通信部850は、ネットワーク50に接続された各種装置に情報を送信する送信部として機能し得る。また、通信部850は、ネットワーク50に接続された各種装置から送信された情報を受信する受信部として機能し得る。   The communication unit 850 is a communication interface for transmitting and receiving various information to and from various devices connected to the network 50. For example, the communication unit 850 can function as a transmission unit that transmits information to various devices connected to the network 50. In addition, the communication unit 850 can function as a receiving unit that receives information transmitted from various devices connected to the network 50.

提示部860は、制御部810による制御に従って居住者に関連する人物に各種情報を提示する機能を有する。本実施形態では、提示部860は、スピーカを含んでおり、スピーカは、制御部810による制御に従って、居住者に関連する人物の音声を出力することが可能である。また、提示部860は、ディスプレイを含んでおり、ディスプレイは、制御部810による制御に従って、各種情報を表示することが可能である。例えば、ディスプレイは、訪問者の映像を表示することが可能である。   The presentation unit 860 has a function of presenting various types of information to a person related to a resident under the control of the control unit 810. In the present embodiment, the presentation unit 860 includes a speaker, and the speaker can output a voice of a person related to the occupant under the control of the control unit 810. The presentation unit 860 includes a display, and the display can display various types of information according to control by the control unit 810. For example, the display can display an image of the visitor.

以上、本発明の実施形態に係る携帯端末80の機能構成例について説明した。   The functional configuration example of the mobile terminal 80 according to the embodiment of the present invention has been described above.

(1−8.情報処理システムの動作例)
続いて、図8〜図13を参照しながら(適宜図1〜図7も参照しながら)、本発明の実施形態に係る情報処理システム1の動作例について説明する。図8〜図13は、本発明の実施形態に係る情報処理システム1の動作例を示すフローチャートである。なお、図8〜図13は、本発明の実施形態に係る情報処理システム1の動作の一例を示すに過ぎない。したがって、図8〜図13に示した動作例の全部が情報処理システム1によって実行されてもよいし、図8〜図13に示した動作例の一部のみが情報処理システム1によって実行されてもよい。
(1-8. Operation example of information processing system)
Subsequently, an example of the operation of the information processing system 1 according to the embodiment of the present invention will be described with reference to FIGS. 8 to 13 are flowcharts illustrating an operation example of the information processing system 1 according to the embodiment of the present invention. 8 to 13 merely show an example of the operation of the information processing system 1 according to the embodiment of the present invention. Therefore, all of the operation examples illustrated in FIGS. 8 to 13 may be executed by the information processing system 1, or only a part of the operation example illustrated in FIGS. 8 to 13 may be executed by the information processing system 1. Is also good.

まず、集合住宅サーバ10の記憶部120には、事前設定情報121が記憶される。事前設定情報121は、事前に居住者によって設定された情報であり、訪問者種別と集合住宅サーバ10の動作情報とが関連付けられた情報である。例えば、集合住宅サーバ10の動作情報は、玄関の解錠制御、玄関機20と住戸端末30との接続制御、玄関機20と任意のオペレータの端末との接続制御、玄関機20と所定の属性を有するオペレータの端末との接続制御、玄関機20と携帯端末80との接続制御、警備会社への発報などであってよい。   First, the pre-setting information 121 is stored in the storage unit 120 of the collective housing server 10. The advance setting information 121 is information set in advance by the resident, and is information in which the visitor type is associated with the operation information of the collective housing server 10. For example, the operation information of the collective housing server 10 includes unlock control of the entrance, connection control between the entrance machine 20 and the dwelling unit terminal 30, connection control between the entrance machine 20 and a terminal of an arbitrary operator, and a predetermined attribute of the entrance machine 20. , Connection control between the entrance machine 20 and the portable terminal 80, alerting to a security company, and the like.

また、集合住宅サーバ10の記憶部120には、行動履歴情報122が記憶される。行動履歴情報122は、訪問者種別と訪問者の特徴データと居住者による過去の行動情報とが関連付けられた情報である。例えば、居住者による過去の行動情報は、住戸端末30に対して応答操作をしたことを示す情報、住戸端末30に対して玄関の解錠操作をしたことを示す情報、住戸端末30に対して応答操作および解錠操作をしなかったことを示す情報などであってよい。   In addition, the action history information 122 is stored in the storage unit 120 of the collective housing server 10. The action history information 122 is information in which a visitor type, visitor characteristic data, and past action information of a resident are associated with each other. For example, the past behavior information by the resident is information indicating that a response operation has been performed on the dwelling unit terminal 30, information indicating that the door has been unlocked on the dwelling unit terminal 30, The information may be information indicating that the response operation and the unlock operation have not been performed.

訪問者は、集合住宅の玄関に到達すると、玄関機20の操作部230に対して、住戸端末30を指定する操作を入力する。玄関機20の通信部250は、操作部230によって住戸端末30を指定する操作が受け付けられると、指定された住戸端末30に対する呼び出しを発信する(S11)。集合住宅サーバ10の通信部130は、玄関機20の通信部250によって発信された呼び出しを受信する(S12)。   When the visitor reaches the entrance of the apartment house, the visitor inputs an operation for designating the dwelling unit terminal 30 to the operation unit 230 of the entrance machine 20. When the operation unit 230 receives an operation for designating the dwelling unit terminal 30, the communication unit 250 of the entrance device 20 transmits a call to the designated dwelling unit terminal 30 (S11). The communication unit 130 of the collective housing server 10 receives the call transmitted by the communication unit 250 of the entrance device 20 (S12).

集合住宅サーバ10の取得部112は、通信部130によって呼び出しが受信されると、玄関機20のカメラによって撮像された訪問者の映像(撮像画像)を、通信部130を介して取得する。なお、ここでは、訪問者の映像が動画である場合を想定する。しかし、訪問者の映像は、静止画であってもよい。判定部113は、映像を解析して訪問者訪問者種別の判定を行う。具体的に、判定部113は、映像から訪問者の特徴データ(映像認識結果)を抽出し(S13)、訪問者の抽出データ(映像認識結果)に基づいて、訪問者種別を判定する(S14)。   When the call is received by the communication unit 130, the acquisition unit 112 of the collective housing server 10 acquires, via the communication unit 130, a video (captured image) of the visitor captured by the camera of the entrance device 20. Here, it is assumed that the image of the visitor is a moving image. However, the image of the visitor may be a still image. The determination unit 113 analyzes the video and determines the type of the visitor. Specifically, the determination unit 113 extracts the characteristic data of the visitor (video recognition result) from the video (S13), and determines the visitor type based on the extracted data of the visitor (video recognition result) (S14). ).

ここで、訪問者種別は、特に限定されない。例えば、訪問者種別は、訪問者の職種(宅配業者、配達業者、集金業者、セールスマンなど)を含んでもよいし、居住者自身を示す種別を含んでもよいし、集合住宅内の他の住戸の居住者を示す種別を含んでもよいし、居住者の近親者(例えば、居住者の親戚など)を示す種別を含んでもよいし、不審者を示す種別を含んでもよいし、性別を含んでもよいし、年齢層(例えば、30歳代など)を含んでもよい。   Here, the visitor type is not particularly limited. For example, the visitor type may include the occupation type of the visitor (such as a courier company, a delivery company, a collection company, or a salesman), may include a type indicating the resident itself, or may include other dwelling units in the apartment house. May include a type indicating a resident of the resident, may include a type indicating a close relative of the resident (for example, a relative of the resident), may include a type indicating a suspicious person, or may include a gender. Alternatively, it may include an age group (for example, thirties).

なお、ここでは、判定部113が映像を解析して訪問者種別の判定を行う場合を想定する。しかし、判定部113による訪問者種別の判定はどのように行われてもよい。例えば、判定部113は、映像を解析する代わりに、玄関機20のマイクロフォンによって検出された訪問者が発する音声を解析して訪問者種別の判定を行ってもよい。具体的に、判定部113は、音声から訪問者の特徴データ(音声認識結果)を抽出し、訪問者の抽出データ(音声認識結果)に基づいて、訪問者種別を判定してもよい。あるいは、判定部113は、映像と音声の双方を解析して訪問者種別の判定を行ってもよい。以下の説明においても、特徴データは、音声認識結果および映像認識結果の両方を含む場合を主に想定する。しかし、特徴データは、音声認識結果および映像認識結果の少なくともいずれか一方を含んでもよい。   Here, it is assumed that the determination unit 113 analyzes the video and determines the visitor type. However, the determination of the visitor type by the determination unit 113 may be performed in any manner. For example, instead of analyzing the video, the determination unit 113 may analyze the sound emitted by the visitor detected by the microphone of the entrance device 20 to determine the visitor type. Specifically, the determination unit 113 may extract the visitor's characteristic data (speech recognition result) from the voice and determine the visitor type based on the extracted visitor data (speech recognition result). Alternatively, the determination unit 113 may determine the visitor type by analyzing both video and audio. In the following description, it is mainly assumed that the feature data includes both the speech recognition result and the video recognition result. However, the feature data may include at least one of a voice recognition result and a video recognition result.

また、判定部113による訪問者種別の判定は、特徴データと訪問者種別との関連付けに基づいて行われてよい。例えば、かかる特徴データと訪問者種別との関連付けは、あらかじめ固定的に決められていてもよい。あるいは、特徴データと訪問者種別との複数通りの組み合わせを訓練用データとして用意できれば、特徴データと訪問者種別との関連付けは、かかる訓練用データに基づいて機械学習によって構築されるモジュール(AI(Artificial Intelligence)機能)によって実現されてもよい。   The determination of the visitor type by the determination unit 113 may be performed based on the association between the feature data and the visitor type. For example, the association between the feature data and the visitor type may be fixedly determined in advance. Alternatively, if a plurality of combinations of the feature data and the visitor type can be prepared as training data, the association between the feature data and the visitor type can be established by machine learning based on the training data based on the module (AI ( Artificial Intelligence) function).

判定部113は、訪問者種別の他、事前設定情報および行動履歴情報に基づいて、集合住宅サーバ10の動作を決定する(S16)。かかる集合住宅サーバ10の動作の決定の手法としては、様々な決定の手法が想定される。   The determination unit 113 determines the operation of the collective housing server 10 based on the preset information and the action history information in addition to the visitor type (S16). Various methods for determining the operation of the collective housing server 10 are assumed.

例えば、動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」に関連付けられて第1の種別があらかじめ設定されている場合、かつ、訪問者種別が第1の種別である場合が想定される。かかる場合、判定部113は、集合住宅サーバ10の動作として動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」を決定してよい。これによって、居住者が訪問者への応対の不要な手間を低減させ、居住者が訪問者に応対することによって訪問者から何らかの不利益を被るのではないかという不安を抱いてしまう可能性を低減させつつ、居住者にとって重要な訪問者による訪問を把握することが可能となる。   For example, when the first type is set in advance in association with the operation “connection control between the entrance device 20 and the terminal of the operator having the predetermined attribute”, and when the visitor type is the first type Is assumed. In such a case, the determination unit 113 may determine the operation “connection control between the entrance device 20 and an operator terminal having a predetermined attribute” as the operation of the collective housing server 10. This reduces the need for occupants to respond unnecessarily to the visitor and may lead to anxiety that the resident may incur some disadvantage from the visitor by responding to the visitor. It is possible to grasp visits by visitors who are important for residents while reducing the number of visits.

ここで、第1の種別および所定の属性は限定されない。例えば、訪問者が男性である場合には、特に居住者が訪問者に応対することによって訪問者から不利益を被るのではないかという不安をより強く抱いてしまう可能性があり得る。そのため、第1の種別は、性別が男性であるという種別を含み、所定の属性は、性別が男性であるという属性を含んでもよい。これによって、訪問者種別が男性である場合には、居住者の代わりに男性のオペレータが訪問者に応対することになるため、居住者の不安を低減することが可能となる。 Here, the first type and the predetermined attribute are not limited. For example, if the visitor is a male, there is a possibility that the resident may be more anxious that the visitor may be disadvantaged particularly by responding to the visitor. Therefore, the first type may include a type that the gender is male, and the predetermined attribute may include an attribute that the gender is male. Accordingly, when the visitor type is male, a male operator responds to the visitor instead of the resident, so that the resident's anxiety can be reduced.

判定部113は、訪問者種別だけではなく居住者種別の判定を行ってもよい。このとき、判定部113は、訪問者種別が第1の種別である場合、かつ、居住者種別が第2の種別である場合に、集合住宅サーバ10の動作として動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」を決定してもよい。例えば、判定部113は、住戸端末30のカメラによって撮像された画像を解析することによって居住者種別を判定してもよい。   The determination unit 113 may determine not only the visitor type but also the resident type. At this time, when the visitor type is the first type and the resident type is the second type, the determination unit 113 operates as the operation of the collective housing server 10 as “operation of the entrance device 20 and the predetermined Connection control with the terminal of the operator having the attribute "may be determined. For example, the determination unit 113 may determine the resident type by analyzing an image captured by the camera of the dwelling unit terminal 30.

ここで、第2の種別は限定されない。例えば、居住者が女性である場合には、特に居住者が訪問者に応対することによって訪問者から不利益を被るのではないかという不安をより強く抱いてしまう可能性があり得る。そのため、第2の種別は、性別が女性であるという種別を含んでもよい。これによって、訪問者種別が男性である場合、かつ、居住者種別が女性である場合には、居住者の代わりに男性のオペレータが訪問者に応対することになるため、居住者の不安をより強く低減することが可能となる。   Here, the second type is not limited. For example, if the resident is a woman, there is a possibility that the resident may be more worried about whether the resident will be disadvantaged by responding to the visitor. Therefore, the second type may include a type that the gender is female. As a result, when the visitor type is male and the resident type is female, the male operator responds to the visitor instead of the resident, so that the resident's anxiety is further increased. It becomes possible to reduce strongly.

一方、動作「玄関機20と住戸端末30との接続制御」に関連付けられて第1の種別以外があらかじめ設定されている場合、かつ、訪問者種別が第1の種別以外である場合が想定される。かかる場合、判定部113は、集合住宅サーバ10の動作として動作「玄関機20と住戸端末30との接続制御」を決定してよい。これによって、訪問者種別が第1の種別である場合に、居住者自身が訪問者に応対することになるため、訪問者への応対を訪問時に直接自身が行うことが可能となる。   On the other hand, it is assumed that a case other than the first type is preset in association with the operation “connection control between the entrance machine 20 and the dwelling unit terminal 30”, and a case where the visitor type is other than the first type. You. In such a case, the determination unit 113 may determine the operation “connection control between the entrance device 20 and the dwelling unit terminal 30” as the operation of the collective housing server 10. In this way, when the visitor type is the first type, the resident himself / herself responds to the visitor, so that he / she can directly respond to the visitor at the time of the visit.

あるいは、動作「玄関機20と携帯端末80との接続制御」に関連付けられて第3の種別があらかじめ設定されている場合、かつ、訪問者種別が第1の種別である場合も想定される。かかる場合、判定部113は、集合住宅サーバ10の動作として動作「玄関機20と携帯端末80との接続制御」を決定してよい。これによって、訪問者種別が第3の種別である場合に、居住者の代わりに携帯端末80を利用する人物(例えば、子供の保護者)が訪問者に応対することになるため、居住者(例えば、子供)が訪問者から不利益を被る可能性を低減することが可能となる。   Alternatively, a case where the third type is set in advance in association with the operation “connection control between the entrance device 20 and the mobile terminal 80” and a case where the visitor type is the first type is also assumed. In such a case, the determination unit 113 may determine the operation “connection control between the entrance device 20 and the mobile terminal 80” as the operation of the collective housing server 10. Accordingly, when the visitor type is the third type, a person (for example, a guardian of a child) who uses the mobile terminal 80 instead of the resident responds to the visitor, and the resident ( For example, it is possible to reduce the possibility that a child) suffers a disadvantage from a visitor.

あるいは、動作「玄関機20と任意のオペレータの端末との接続制御」に関連付けられて第4の種別があらかじめ設定されている場合、かつ、訪問者種別が第4の種別である場合も想定される。かかる場合、判定部113は、集合住宅サーバ10の動作として動作「玄関機20と任意のオペレータの端末との接続制御」を決定してよい。これによって、訪問者種別が第4の種別である場合に、居住者の代わりに任意のオペレータが訪問者に応対することになるため、居住者の不安を低減することが可能となる。   Alternatively, it is assumed that the fourth type is set in advance in association with the operation “connection control between the entrance device 20 and the terminal of any operator”, and the visitor type is the fourth type. You. In such a case, the determination unit 113 may determine the operation “connection control between the entrance machine 20 and the terminal of any operator” as the operation of the collective housing server 10. Accordingly, when the visitor type is the fourth type, an arbitrary operator responds to the visitor instead of the resident, so that the resident's anxiety can be reduced.

判定部113は、行動履歴情報を参照して、集合住宅サーバ10の動作を決定してもよい。例えば、訪問者種別が第1の種別である場合、かつ、特徴データと一致または類似する過去の訪問者の特徴データが行動履歴情報に登録されていない場合、集合住宅に初めて訪問を行った訪問者が玄関機20で呼び出し操作を行ったと考えられる。そこで、かかる場合には、居住者の不安がより強いと考えられるため、判定部113は、集合住宅サーバ10の動作として動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」を決定すればよい。   The determination unit 113 may determine the operation of the apartment house server 10 with reference to the action history information. For example, when the visitor type is the first type, and when the characteristic data of the past visitor that matches or is similar to the characteristic data is not registered in the action history information, the visit that made the first visit to the apartment house It is considered that the person performed the calling operation at the entrance machine 20. Therefore, in such a case, since it is considered that the resident is more anxious, the determination unit 113 operates as the operation of the collective housing server 10 “controls the connection between the entrance device 20 and the terminal of the operator having the predetermined attribute”. Should be determined.

一方、訪問者種別が第1の種別である場合、かつ、特徴データと一致または類似する過去の訪問者の特徴データが行動履歴情報に登録されている場合、集合住宅に過去に訪問を行ったことがある訪問者が玄関機20で呼び出し操作を行ったと考えられる。そこで、かかる場合には、居住者の不安はさほど強くないと考えられるため、判定部113は、集合住宅サーバ10の動作として動作「玄関機20と住戸端末30との接続制御」を決定すればよい。   On the other hand, when the visitor type is the first type, and when the characteristic data of the past visitor that matches or is similar to the characteristic data is registered in the action history information, the user has visited the apartment house in the past. It is considered that a visitor who performed a call operation at the entrance machine 20. Therefore, in such a case, since it is considered that the resident's anxiety is not so strong, the determination unit 113 may determine the operation “connection control between the entrance machine 20 and the dwelling unit terminal 30” as the operation of the collective housing server 10. Good.

また、訪問者種別が第1の種別ではない場合に、訪問者種別と同一種別に対する居住者による過去の行動情報が行動履歴情報に登録されている場合が想定される。かかる場合には、判定部113は、集合住宅サーバ10の動作として、かかる過去の行動情報に対応する動作を決定すればよい。あるいは、訪問者種別が第1の種別ではない場合に、訪問者の特徴データと一致または類似する特徴データの訪問者に対する過去の行動情報が行動履歴情報に登録されている場合が想定される。かかる場合には、判定部113は、集合住宅サーバ10の動作として、かかる過去の行動情報に対応する動作を決定すればよい。   Further, when the visitor type is not the first type, it is assumed that past behavior information of the resident for the same type as the visitor type is registered in the behavior history information. In such a case, the determination unit 113 may determine the operation corresponding to the past behavior information as the operation of the collective housing server 10. Alternatively, it is assumed that when the visitor type is not the first type, past behavior information for the visitor whose characteristic data matches or is similar to the visitor's characteristic data is registered in the behavior history information. In such a case, the determination unit 113 may determine the operation corresponding to the past behavior information as the operation of the collective housing server 10.

例えば、過去の行動情報「住戸端末30に対して応答操作をしたことを示す情報」には、動作「玄関機20と住戸端末30との接続制御」が対応していてよい。また、過去の行動情報「住戸端末30に対して玄関の解錠操作をしたことを示す情報」には、動作「玄関の解錠制御」が対応していてよい。また、過去の行動情報「住戸端末30に対して応答操作および解錠操作をしなかったことを示す情報」には、動作「玄関機20と任意のオペレータの端末との接続制御」または動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」が対応していてよい。   For example, the past action information "information indicating that a response operation has been performed on the dwelling unit terminal 30" may correspond to the operation "connection control between the entrance device 20 and the dwelling unit terminal 30". Also, the action information “information indicating that the door unlock operation has been performed on the dwelling unit terminal 30” may correspond to the operation “entrance unlock control”. In addition, the past action information “information indicating that no response operation and unlocking operation has been performed on the dwelling unit terminal 30” includes the operation “connection control between the entrance machine 20 and the terminal of any operator” or the operation “ Connection control between the entrance apparatus 20 and an operator terminal having a predetermined attribute "may be supported.

なお、玄関機20と住戸端末30以外の端末への接続制御は、無条件で行われてよい。あるいは、玄関機20と住戸端末30以外の端末への接続制御は、居住者によって住戸端末30を介して転送設定がなされている場合に行われてもよい。すなわち、訪問者種別が第1の種別である場合、かつ、事前に居住者によって転送設定が行われている場合、集合住宅サーバ10の動作として、動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」が決定されてもよい。一方、居住者によって住戸端末30を介して転送設定がなされていない場合には、玄関機20と住戸端末30との接続制御が行われてもよい。   In addition, connection control to terminals other than the entrance machine 20 and the dwelling unit terminal 30 may be performed unconditionally. Alternatively, the connection control to the terminals other than the entrance machine 20 and the dwelling unit terminal 30 may be performed when the transfer setting is performed by the resident via the dwelling unit terminal 30. That is, when the visitor type is the first type and the transfer setting has been made by the resident in advance, the operation of the collective housing server 10 is performed as the operation “the operator having the entrance device 20 and the predetermined attribute. May be determined. " On the other hand, when the transfer setting is not made by the resident via the dwelling unit terminal 30, the connection control between the entrance apparatus 20 and the dwelling unit terminal 30 may be performed.

出力制御部114は、判定部113によって動作「玄関機20と住戸端末30との接続制御」が決定された場合、玄関機20と住戸端末30とが接続されるように制御する。すなわち、出力制御部114は、判定部113によって住戸端末30への呼び出しの転送が決定された場合(S16において「YES」)、通信部130を介して呼び出しを住戸端末30に転送し(S17)、S19に進む。住戸端末30においては、通信部350は、呼び出しを受信する(S18)。一方、出力制御部114は、判定部113によって動作「玄関機20と住戸端末30との接続制御」が決定されなかった場合、S19に進む。   When the operation “connection control between the entrance device 20 and the dwelling unit terminal 30” is determined by the determination unit 113, the output control unit 114 performs control so that the entrance device 20 and the dwelling unit terminal 30 are connected. That is, when the determination unit 113 determines to transfer the call to the dwelling unit terminal 30 (“YES” in S16), the output control unit 114 transfers the call to the dwelling unit terminal 30 via the communication unit 130 (S17). , And S19. In the dwelling unit terminal 30, the communication unit 350 receives the call (S18). On the other hand, when the operation “connection control between the entrance device 20 and the dwelling unit terminal 30” is not determined by the determination unit 113, the output control unit 114 proceeds to S19.

出力制御部114は、判定部113によって動作「玄関機20と携帯端末80との接続制御」が決定された場合、玄関機20と携帯端末80とが接続されるように制御する。すなわち、出力制御部114は、判定部113によって携帯端末80への呼び出しの転送が決定された場合(S19において「YES」)、通信部130を介して呼び出しを携帯端末80に転送し(S20)、S31に進む。携帯端末80においては、通信部850は、呼び出しを受信する(S21)。一方、出力制御部114は、判定部113によって動作「玄関機20と携帯端末80との接続制御」が決定されなかった場合、S31に進む。   When the operation “connection control between the entrance device 20 and the mobile terminal 80” is determined by the determination unit 113, the output control unit 114 controls so that the entrance device 20 and the mobile terminal 80 are connected. That is, when the transfer of the call to the portable terminal 80 is determined by the determination unit 113 (“YES” in S19), the output control unit 114 transfers the call to the portable terminal 80 via the communication unit 130 (S20). , S31. In the mobile terminal 80, the communication unit 850 receives the call (S21). On the other hand, when the operation “connection control between the entrance device 20 and the portable terminal 80” is not determined by the determination unit 113, the output control unit 114 proceeds to S31.

出力制御部114は、判定部113によって動作「玄関機20と任意のオペレータの端末との接続制御」が決定された場合、玄関機20と任意のオペレータの端末とが接続されるように制御する。すなわち、出力制御部114は、判定部113によって任意のオペレータの端末への呼び出しの転送が決定された場合(S31において「YES」)、通信部130を介して呼び出しをコンタクトセンタサーバ60に転送し(S32)、S36に進む。   When the operation “connection control between the entrance device 20 and the terminal of an arbitrary operator” is determined by the determination unit 113, the output control unit 114 controls the entrance device 20 to be connected to the terminal of the arbitrary operator. . That is, when the determination unit 113 determines that the call is to be transferred to the terminal of any operator (“YES” in S31), the output control unit 114 transfers the call to the contact center server 60 via the communication unit 130. (S32), proceed to S36.

コンタクトセンタサーバ60においては、通信部630は、呼び出しを受信し(S33)、制御部610は、オペレータ情報に基づいて任意のオペレータの端末を決定し、通信部630は、任意のオペレータの端末(オペレータ端末70)に呼び出しを転送する(S34)。オペレータ端末70においては、通信部750は、呼び出しを受信する(S35)。一方、出力制御部114は、判定部113によって動作「玄関機20と携帯端末80との接続制御」が決定されなかった場合、S31に進む。   In the contact center server 60, the communication unit 630 receives the call (S33), the control unit 610 determines the terminal of any operator based on the operator information, and the communication unit 630 determines the terminal of any operator ( The call is transferred to the operator terminal 70) (S34). In the operator terminal 70, the communication unit 750 receives the call (S35). On the other hand, when the operation “connection control between the entrance device 20 and the portable terminal 80” is not determined by the determination unit 113, the output control unit 114 proceeds to S31.

出力制御部114は、判定部113によって動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」が決定された場合、玄関機20と所定の属性を有するオペレータの端末とが接続されるように制御する。すなわち、出力制御部114は、判定部113によって所定の属性を有するオペレータの端末への呼び出しの転送が決定された場合(S36において「YES」)、通信部130を介して呼び出しをコンタクトセンタサーバ60に転送し(S37)、S41に進む。   When the operation “connection control between the entrance device 20 and the terminal of the operator having the predetermined attribute” is determined by the determination unit 113, the output control unit 114 connects the entrance device 20 to the terminal of the operator having the predetermined attribute. To be controlled. That is, when the determination unit 113 determines that the transfer of the call to the terminal of the operator having the predetermined attribute is determined (“YES” in S36), the output control unit 114 issues the call via the communication unit 130 to the contact center server 60. (S37), and the process proceeds to S41.

コンタクトセンタサーバ60においては、通信部630は、呼び出しを受信し(S38)、制御部610は、オペレータ情報に基づいて所定の属性を有するオペレータの端末を決定し、通信部630は、所定の属性を有するオペレータの端末(オペレータ端末70)に呼び出しを転送する(S39)。オペレータ端末70においては、通信部750は、呼び出しを受信する(S40)。一方、出力制御部114は、判定部113によって動作「玄関機20と所定の属性を有するオペレータの端末との接続制御」が決定されなかった場合、S41に進む。   In the contact center server 60, the communication unit 630 receives the call (S38), the control unit 610 determines an operator terminal having a predetermined attribute based on the operator information, and the communication unit 630 sets the predetermined attribute. The call is transferred to the operator terminal (operator terminal 70) having (step S39). In the operator terminal 70, the communication unit 750 receives the call (S40). On the other hand, when the operation “connection control between the entrance device 20 and the terminal of the operator having the predetermined attribute” is not determined by the determination unit 113, the output control unit 114 proceeds to S41.

出力制御部114は、訪問者の特徴データおよび訪問者種別を行動履歴情報に登録する(S41)。   The output control unit 114 registers the visitor's characteristic data and visitor type in the action history information (S41).

住戸端末30において、通信部350によって呼び出しが受信されている間に居住者によって拒否操作が操作部330に入力された場合には(S51において「YES」)、通信部350は、呼び出し終了指示を玄関機20に送信し(S52)、S54に進む。一方、住戸端末30において、通信部350によって呼び出しが受信されている間に居住者によって拒否操作が操作部330に入力されない場合には(S51において「NO」)、S54に進む。玄関機20において、通信部250が、呼び出し終了指示を受信すると、制御部210は、呼び出しを終了する(S53)。   In the dwelling unit terminal 30, when the resident inputs a rejection operation to the operation unit 330 while the call is received by the communication unit 350 ("YES" in S51), the communication unit 350 issues a call end instruction. The data is transmitted to the entrance machine 20 (S52), and the process proceeds to S54. On the other hand, in the dwelling unit terminal 30, when the resident does not input the rejection operation to the operation unit 330 while the call is received by the communication unit 350 ("NO" in S51), the process proceeds to S54. In the entrance device 20, when the communication unit 250 receives the call end instruction, the control unit 210 ends the call (S53).

住戸端末30において、通信部350によって呼び出しが受信されている間に居住者によって解錠操作が操作部330に入力された場合には(S54において「YES」)、通信部350は、解錠要求を玄関機20に送信し(S55)、S57に進む。玄関機20において、通信部250が、解錠要求を受信すると、制御部210は、解錠動作を行う(S56)。   In the dwelling unit terminal 30, if the resident inputs an unlocking operation to the operation unit 330 while the call is received by the communication unit 350 ("YES" in S54), the communication unit 350 issues an unlock request. Is transmitted to the entrance device 20 (S55), and the process proceeds to S57. In the entrance device 20, when the communication unit 250 receives the unlock request, the control unit 210 performs an unlock operation (S56).

住戸端末30において、通信部350によって呼び出しが受信されている間に居住者によって応答操作が操作部330に入力された場合には(S57において「YES」)、玄関機20と住戸端末30とが接続され、通信部350は、マイクロフォンによって検出された居住者の音声送信を開始し(S55)、S71に進む。集合住宅サーバ10の通信部130は、居住者の音声を受信すると、居住者の音声を玄関機20に送信する。玄関機20において、通信部250は、居住者の音声受信を開始すると(S59)、スピーカは、居住者の音声の出力を開始する。   In the dwelling unit terminal 30, when a response operation is input to the operation unit 330 by the resident while the call is received by the communication unit 350 ("YES" in S57), the entrance device 20 and the dwelling unit terminal 30 are connected. The connection is established, and the communication unit 350 starts voice transmission of the resident detected by the microphone (S55), and proceeds to S71. When receiving the voice of the resident, the communication unit 130 of the collective housing server 10 transmits the voice of the resident to the entrance device 20. In the entrance device 20, when the communication unit 250 starts receiving the resident's voice (S59), the speaker starts outputting the resident's voice.

玄関機20においては、通信部250によって呼び出しが発信されている間に、訪問者によって終了操作が操作部230に入力された場合には(S61において「YES」)、通信部250は、呼び出しの発信を終了する(S62)。一方、玄関機20においては、通信部250によって呼び出しが発信されている間に、訪問者によって終了操作が操作部230に入力されない場合には(S61において「NO」)、制御部210は、S80に進む。   In the entrance device 20, when the visitor inputs an end operation to the operation unit 230 while the call is transmitted by the communication unit 250 ("YES" in S61), the communication unit 250 transmits the call. The transmission ends (S62). On the other hand, in the entrance device 20, if the visitor does not input an end operation to the operation unit 230 while the call is transmitted by the communication unit 250 ("NO" in S61), the control unit 210 proceeds to S80. Proceed to.

玄関機20と住戸端末30とが接続された後、居住者からの転送操作が住戸端末30の操作部330に入力された場合を想定する。かかる場合には、出力制御部114は、「玄関機20」と「住戸端末30とは異なる端末」とが接続されるように制御してよい。ここでは、「住戸端末30とは異なる端末」がオペレータ端末70である場合を主に想定する。すなわち、住戸端末30から玄関機20に音声が送信されている間に居住者からの転送操作があった場合に、呼び出しがオペレータ端末70に転送される場合を主に想定する。しかし、「住戸端末30とは異なる端末」は、携帯端末80であってもよい。   It is assumed that the transfer operation from the resident is input to the operation unit 330 of the dwelling unit terminal 30 after the entrance device 20 and the dwelling unit terminal 30 are connected. In such a case, the output control unit 114 may control so that the “entrance machine 20” and the “terminal different from the dwelling unit terminal 30” are connected. Here, it is mainly assumed that the “terminal different from the dwelling unit terminal 30” is the operator terminal 70. That is, it is mainly assumed that a call is transferred to the operator terminal 70 when there is a transfer operation from the resident while the sound is transmitted from the dwelling unit terminal 30 to the entrance device 20. However, the “terminal different from the dwelling unit terminal 30” may be the mobile terminal 80.

住戸端末30においては、通信部350は、自端末(住戸端末30)から玄関機20に音声が送信されている間に居住者から転送操作があった場合(S71において「YES」)、集合住宅サーバ10に転送要求を送信する(S72)。集合住宅サーバ10においては、通信部130は、転送要求を受信すると(S73)、コンタクトセンタサーバ60に呼び出しを発信する(S74)。コンタクトセンタサーバ60においては、通信部630は、呼び出しを受信すると(S75)、オペレータ端末70に呼び出しを転送する(S76)。   In the dwelling unit terminal 30, if the resident performs a transfer operation while the voice is transmitted from the terminal (the dwelling unit terminal 30) to the entrance device 20 (“YES” in S 71), the communication unit 350 A transfer request is transmitted to the server 10 (S72). In the collective housing server 10, upon receiving the transfer request (S73), the communication unit 130 sends a call to the contact center server 60 (S74). In the contact center server 60, upon receiving the call (S75), the communication unit 630 transfers the call to the operator terminal 70 (S76).

オペレータ端末70においては、通信部750によって呼び出しが受信される(S77)。そして、通信部750によって呼び出しが受信されている間にオペレータからの応答操作がオペレータ端末70の操作入力部730に入力された場合には(S78において「YES」)、玄関機20とオペレータ端末70とが接続され、通信部750は、マイクロフォンによって検出されたオペレータの音声送信を開始する(S79)。これによって、居住者が訪問者への応対を開始したものの、応対の途中で他の人物に応対を変わりたくなった場合などに(例えば、子供が訪問者に応対し始めたものの、途中で保護者による応対が必要であると判断した場合などに)、当該他の人物に訪問者への応対を変わることができる。   In the operator terminal 70, the call is received by the communication unit 750 (S77). When a response operation from the operator is input to the operation input unit 730 of the operator terminal 70 while the call is received by the communication unit 750 (“YES” in S78), the entrance device 20 and the operator terminal 70 Is connected, and the communication unit 750 starts transmitting the voice of the operator detected by the microphone (S79). This means that if a resident starts to respond to a visitor but wants to change to another person in the middle of the response (for example, if a child starts responding to a visitor, (E.g., when it is determined that a response by a visitor is necessary), the response to the visitor can be changed to the other person.

訪問者の映像音声(および訪問者の音声から認識されたテキストデータ)、および、オペレータの音声(およびオペレータの音声から認識されたテキストデータ)は、コンタクトセンタサーバ60の記憶部620によって逐一記憶されてよい。そうすれば、住戸端末30の操作部330に居住者の再生操作が入力された場合に、制御部310は、コンタクトセンタサーバ60の記憶部620から、訪問者の映像音声(および訪問者の音声から認識されたテキストデータ)、および、オペレータの音声(およびオペレータの音声から認識されたテキストデータ)を取得し、再生することができる。これによって、居住者は、訪問者が重要であったかを後に確認することができる。   The video and audio of the visitor (and the text data recognized from the visitor's voice) and the voice of the operator (and the text data recognized from the voice of the operator) are stored one by one by the storage unit 620 of the contact center server 60. May be. Then, when a resident's reproduction operation is input to operation unit 330 of dwelling unit terminal 30, control unit 310 reads video and audio of the visitor (and audio of the visitor) from storage unit 620 of contact center server 60. And the voice of the operator (and the text data recognized from the voice of the operator) can be obtained and reproduced. This allows the resident to later confirm whether the visitor was important.

集合住宅サーバ10の通信部130は、オペレータの音声を受信すると、オペレータの音声を玄関機20に送信し、玄関機20において、通信部250は、オペレータの音声受信を開始すると(S80)、スピーカは、オペレータの音声の出力を開始する。   When receiving the voice of the operator, the communication unit 130 of the collective housing server 10 transmits the voice of the operator to the entrance device 20. In the entrance device 20, the communication unit 250 starts receiving the voice of the operator (S80). Starts outputting the voice of the operator.

携帯端末80において、通信部850によって呼び出しが受信されている間に携帯端末80を利用する人物からの応答操作が携帯端末80の操作入力部830に入力された場合には(S81において「YES」)、玄関機20と携帯端末80とが接続され、通信部850は、マイクロフォンによって検出された携帯端末80を利用する人物の音声送信を開始する(S82)。集合住宅サーバ10の通信部130は、携帯端末80を利用する人物の音声を受信すると、携帯端末80を利用する人物の音声を玄関機20に送信し、玄関機20において、通信部250は、携帯端末80を利用する人物の音声受信を開始すると(S83)、スピーカは、携帯端末80を利用する人物の音声の出力を開始する。   In the portable terminal 80, when a response operation from a person using the portable terminal 80 is input to the operation input unit 830 of the portable terminal 80 while the call is received by the communication unit 850 ("YES" in S81). ), The entrance device 20 and the mobile terminal 80 are connected, and the communication unit 850 starts voice transmission of the person using the mobile terminal 80 detected by the microphone (S82). When receiving the voice of the person using the mobile terminal 80, the communication unit 130 of the collective housing server 10 transmits the voice of the person using the mobile terminal 80 to the entrance device 20. In the entrance device 20, the communication unit 250 When the voice reception of the person using the mobile terminal 80 starts (S83), the speaker starts outputting the voice of the person using the mobile terminal 80.

訪問者の映像音声(および訪問者の音声から認識されたテキストデータ)、および、オペレータの音声(およびオペレータの音声から認識されたテキストデータ)は、携帯端末80の記憶部840によって逐一記憶されてよい。そうすれば、住戸端末30の操作部330に居住者の再生操作が入力された場合に、制御部310は、携帯端末80の記憶部840から、訪問者の映像音声(および訪問者の音声から認識されたテキストデータ)、および、オペレータの音声(およびオペレータの音声から認識されたテキストデータ)を取得し、再生することができる。これによって、居住者は、訪問者が重要であったかを後に確認することができる。   The video and audio of the visitor (and the text data recognized from the visitor's voice) and the operator's voice (and the text data recognized from the operator's voice) are stored one by one by the storage unit 840 of the mobile terminal 80. Good. Then, when a resident's reproduction operation is input to operation unit 330 of dwelling unit terminal 30, control unit 310 reads the video and audio of the visitor (and the audio of the visitor) from storage unit 840 of portable terminal 80. Recognized text data) and an operator's voice (and text data recognized from the operator's voice) can be acquired and reproduced. This allows the resident to later confirm whether the visitor was important.

なお、ここでは、居住者が訪問者の応対している間に居住者によって明示的な転送操作があった場合に、住戸端末30とは異なる端末に呼び出しが転送される場合を主に想定した。しかし、居住者が訪問者の応対している間に所定の状況(例えば、訪問者が居住者に不利益を与える可能性のある行為など)が検出された場合に、自動的に住戸端末30とは異なる端末に呼び出しが転送されてもよい。そうすれば、居住者が訪問者から不利益を被る可能性が低減される。   Here, it is mainly assumed that a call is transferred to a terminal different from the dwelling unit terminal 30 when an explicit transfer operation is performed by the resident while the resident is responding to the visitor. . However, when a predetermined situation (for example, an action in which the visitor may give a disadvantage to the resident) is detected while the resident is responding to the visitor, the dwelling unit terminal 30 is automatically set. The call may be forwarded to a different terminal. This reduces the likelihood that the resident will suffer from the visitor.

すなわち、出力制御部114は、玄関機20と住戸端末30とが接続された後、玄関機20のマイクロフォンに入力された訪問者の音声を解析し、訪問者の音声から所定のテキストデータ(例えば、訪問者が居住者に不利益を与える可能性のある所定の発話内容など)が認識された場合、「玄関機20」と「住戸端末30とは異なる端末」とが接続されるように制御してもよい。「住戸端末30とは異なる端末」は、上記した通りである。これによって、例えば、最初は不審者であると認識されなかった訪問者に子供が応対し始めてしまった場合でも、発話内容から訪問者が不審者であることが事後に認識された場合に、子供が誤って解錠してしまう可能性を低減することができる。   That is, after the entrance device 20 and the dwelling unit terminal 30 are connected, the output control unit 114 analyzes the voice of the visitor input to the microphone of the entrance device 20, and outputs predetermined text data (for example, When a predetermined utterance content that the visitor may disadvantage the resident is recognized, the control is performed so that the “entrance machine 20” and the “terminal different from the dwelling unit terminal 30” are connected. May be. The “terminal different from the dwelling unit terminal 30” is as described above. Thus, for example, even if a child starts to respond to a visitor who was not initially recognized as a suspicious individual, if the utterance content later indicates that the visitor is a suspicious individual, Can be reduced by mistake.

訪問者に応対しているオペレータの音声は、玄関機20のスピーカによって出力されるため、訪問者には聞こえている。一方、訪問者に応対しているオペレータの音声は、居住者に聞こえなくてもよいが、居住者にも聞こえるようにされているのがよい。すなわち、集合住宅サーバ10において、出力制御部114は、玄関機20とオペレータ端末70とが接続された場合、オペレータ端末70から受信されたオペレータの音声を住戸端末30に送信するのがよい。そうすれば、居住者は、訪問者が重要であるかをリアルタイムに確認することができる。   Since the voice of the operator responding to the visitor is output by the speaker of the entrance device 20, the voice is heard by the visitor. On the other hand, the voice of the operator responding to the visitor does not have to be heard by the resident, but is preferably heard by the resident. That is, in the collective housing server 10, when the entrance device 20 and the operator terminal 70 are connected, the output control unit 114 preferably transmits the voice of the operator received from the operator terminal 70 to the dwelling unit terminal 30. Then, the resident can check in real time whether the visitor is important.

より具体的に、他端末(上記した「住戸端末30とは異なる端末」)において音声送信が開始された場合には、集合住宅サーバ10において、通信部130は、当該他端末から音声受信を開始し、受信した音声の住戸端末30への転送を開始する(S85)。住戸端末30において、通信部350は、通信部130によって転送された音声受信を開始し(S86)、スピーカは、通信部350によって受信された音声出力を開始する(S87)。   More specifically, when voice transmission is started at another terminal (the above-mentioned “terminal different from the dwelling unit terminal 30”), in the apartment house server 10, the communication unit 130 starts voice reception from the other terminal. Then, the transfer of the received voice to the dwelling unit terminal 30 is started (S85). In the dwelling unit terminal 30, the communication unit 350 starts receiving the voice transferred by the communication unit 130 (S86), and the speaker starts outputting the voice received by the communication unit 350 (S87).

玄関機20と「住戸端末30とは異なる端末」とが接続された後、居住者からの応答操作が住戸端末30の操作部330に入力された場合を想定する。かかる場合には、出力制御部114は、玄関機20と住戸端末30とが接続されるように制御してよい。ここでは、「住戸端末30とは異なる端末」がオペレータ端末70である場合を主に想定する。すなわち、オペレータ端末70から玄関機20に音声が送信されている間に居住者からの応答操作があった場合に、玄関機20と住戸端末30とが接続制御される場合を主に想定する。しかし、「住戸端末30とは異なる端末」は、携帯端末80であってもよい。   It is assumed that after the entrance device 20 and the “terminal different from the dwelling unit terminal 30” are connected, a response operation from the resident is input to the operation unit 330 of the dwelling unit terminal 30. In such a case, the output control unit 114 may control the entrance device 20 and the dwelling unit terminal 30 to be connected. Here, it is mainly assumed that the “terminal different from the dwelling unit terminal 30” is the operator terminal 70. That is, it is mainly assumed that the connection between the entrance machine 20 and the dwelling unit terminal 30 is controlled when there is a response operation from the resident while the voice is transmitted from the operator terminal 70 to the entrance machine 20. However, the “terminal different from the dwelling unit terminal 30” may be the mobile terminal 80.

住戸端末30においては、通信部350は、他端末(オペレータ端末70)から玄関機20に音声が送信されている間に居住者から応答操作があった場合(S91において「YES」)、オペレータ端末70に応答要求を送信する(S93)。オペレータ端末70においては、通信部750は、応答要求を受信し(S93)、提示部760は、応答要求の受信を示す表示を行う。応答要求の受信を示す表示は、「居住者によって応答操作が入力されました。速やかに訪問者への応対を居住者に変わってください」などといった表示であってよい。   In the dwelling unit terminal 30, when the resident performs a response operation while the voice is transmitted from the other terminal (the operator terminal 70) to the entrance device 20 (“YES” in S91), the communication unit 350 operates. A response request is transmitted to the server 70 (S93). In the operator terminal 70, the communication unit 750 receives the response request (S93), and the presentation unit 760 performs a display indicating the reception of the response request. The display indicating the reception of the response request may be a display such as “Response operation has been input by the resident. Please change the response to the visitor to the resident promptly”.

オペレータは、応答要求の受信を示す表示を確認し、訪問者への応対を居住者に変わろうと判断した場合、操作入力部730に切り替え操作を入力する。オペレータ端末70の通信部750は、居住者から操作入力部730に切り替え操作が入力された場合(S95において「YES」)、切り替え要求を送信する(S96)。集合住宅サーバ10において、通信部130は、切り替え要求を受信すると(S97)、出力制御部114は、訪問者への応対の切り替えを制御する(S98)。すなわち、玄関機20と住戸端末30とが接続され、出力制御部114は、住戸端末30のマイクロフォンによって検出された居住者の音声が玄関機20に送信されるように制御する。   The operator confirms the display indicating the reception of the response request, and inputs a switching operation to the operation input unit 730 when determining that the response to the visitor is to be changed to the resident. Communication unit 750 of operator terminal 70 transmits a switching request when a switching operation is input from resident to operation input unit 730 (“YES” in S95) (S96). In the apartment house server 10, when the communication unit 130 receives the switching request (S97), the output control unit 114 controls the switching of the response to the visitor (S98). That is, the entrance device 20 and the dwelling unit terminal 30 are connected, and the output control unit 114 controls the resident's voice detected by the microphone of the dwelling unit terminal 30 to be transmitted to the entrance device 20.

住戸端末30においては、通信部350は、マイクロフォンによって検出された居住者の音声送信を開始する(S99)。集合住宅サーバ10の通信部130は、居住者の音声を受信すると、居住者の音声を玄関機20に送信し、玄関機20において、通信部250は、居住者の音声受信を開始すると(S100)、スピーカは、居住者の音声の出力を開始する。   In the dwelling unit terminal 30, the communication unit 350 starts the voice transmission of the resident detected by the microphone (S99). When receiving the resident's voice, the communication unit 130 of the collective housing server 10 transmits the resident's voice to the entrance device 20. In the entrance device 20, the communication unit 250 starts receiving the resident's voice (S100). ), The speaker starts outputting the resident's voice.

なお、住戸端末30から玄関機20への音声送信開始とともに、玄関機20とオペレータ端末70との接続は切断されてもよいし、維持されてもよい。玄関機20とオペレータ端末70との接続は切断された場合、訪問者の映像音声はオペレータ端末70に送信されなくなり、オペレータは、訪問者の映像音声を確認することができなくなる。一方、玄関機20とオペレータ端末70との接続は維持された場合、訪問者の映像音声および居住者の音声がオペレータ端末70に送信されるため、オペレータは、訪問者の映像音声および居住者の音声を確認することができる。   The connection between the entrance device 20 and the operator terminal 70 may be disconnected or maintained at the same time as the start of voice transmission from the dwelling unit terminal 30 to the entrance device 20. When the connection between the entrance device 20 and the operator terminal 70 is disconnected, the video and audio of the visitor are not transmitted to the operator terminal 70, and the operator cannot confirm the video and audio of the visitor. On the other hand, if the connection between the entrance device 20 and the operator terminal 70 is maintained, the video and audio of the visitor and the audio of the resident are transmitted to the operator terminal 70. You can check the audio.

住戸端末30において、通信部350は、訪問者に対する居住者の行動情報を送信する(S101)。集合住宅サーバ10において、通信部130は、居住者の行動情報を受信し(S102)、訪問者の特徴データおよび訪問者種別に行動情報を関連付ける処理を行う(S103)。   In the dwelling unit terminal 30, the communication unit 350 transmits the resident's behavior information to the visitor (S101). In the collective housing server 10, the communication unit 130 receives the resident's behavior information (S102), and performs a process of associating the behavior information with the visitor's characteristic data and visitor type (S103).

以上、本発明の実施形態に係る情報処理システム1の動作例について説明した。   The operation example of the information processing system 1 according to the embodiment of the present invention has been described above.

(2.ハードウェア構成例)
続いて、本発明の実施形態に係る情報処理装置のハードウェア構成について説明する。なお、ここでは、上記した情報処理装置のハードウェア構成について説明するが、玄関機20、住戸端末30、コンタクトセンタサーバ60、オペレータ端末70および携帯端末80のハードウェア構成も、情報処理装置のハードウェア構成と同様に実現され得る。すなわち、本発明の実施形態に係る各種装置のハードウェア構成は、以下に説明するような、情報処理装置900のハードウェア構成によって実現され得る。
(2. Hardware configuration example)
Subsequently, a hardware configuration of the information processing apparatus according to the embodiment of the present invention will be described. Here, the hardware configuration of the above-described information processing apparatus will be described. However, the hardware configurations of the entrance apparatus 20, the dwelling unit terminal 30, the contact center server 60, the operator terminal 70, and the portable terminal 80 are also the same. It can be realized similarly to the hardware configuration. That is, the hardware configuration of the various devices according to the embodiment of the present invention can be realized by the hardware configuration of the information processing device 900 as described below.

図14は、本発明の実施形態に係る情報処理装置900のハードウェア構成を示す図である。情報処理装置900は、CPU(Central Processing Unit)901と、ROM(Read Only Memory)902と、RAM(Random Access Memory)903と、ホストバス904と、ブリッジ905と、外部バス906と、インタフェース907と、入力装置908と、出力装置909と、ストレージ装置910と、通信装置911と、を備える。   FIG. 14 is a diagram illustrating a hardware configuration of the information processing apparatus 900 according to the embodiment of the present invention. The information processing apparatus 900 includes a CPU (Central Processing Unit) 901, a ROM (Read Only Memory) 902, a RAM (Random Access Memory) 903, a host bus 904, a bridge 905, an external bus 906, an interface 907, , An input device 908, an output device 909, a storage device 910, and a communication device 911.

CPU901は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置900内の動作全般を制御する。また、CPU901は、マイクロプロセッサであってもよい。ROM902は、CPU901が使用するプログラムや演算パラメータ等を記憶する。RAM903は、CPU901の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはCPUバス等から構成されるホストバス904により相互に接続されている。   The CPU 901 functions as an arithmetic processing device and a control device, and controls overall operations in the information processing device 900 according to various programs. Further, the CPU 901 may be a microprocessor. The ROM 902 stores programs used by the CPU 901 and operation parameters. The RAM 903 temporarily stores programs used in the execution of the CPU 901, parameters that appropriately change in the execution, and the like. These are mutually connected by a host bus 904 including a CPU bus and the like.

ホストバス904は、ブリッジ905を介して、PCI(Peripheral Component Interconnect/Interface)バス等の外部バス906に接続されている。なお、必ずしもホストバス904、ブリッジ905および外部バス906を分離構成する必要はなく、1つのバスにこれらの機能を実装してもよい。   The host bus 904 is connected via a bridge 905 to an external bus 906 such as a PCI (Peripheral Component Interconnect / Interface) bus. Note that the host bus 904, the bridge 905, and the external bus 906 do not necessarily need to be separately configured, and these functions may be implemented on one bus.

入力装置908は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチおよびレバー等ユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、CPU901に出力する入力制御回路等から構成されている。情報処理装置900を操作するユーザは、この入力装置908を操作することにより、情報処理装置900に対して各種のデータを入力したり処理動作を指示したりすることができる。   An input device 908 includes an input unit such as a mouse, a keyboard, a touch panel, a button, a microphone, a switch and a lever for a user to input information, and an input control circuit that generates an input signal based on an input by the user and outputs the input signal to the CPU 901 And so on. By operating the input device 908, the user who operates the information processing device 900 can input various data to the information processing device 900 or instruct a processing operation.

出力装置909は、例えば、CRT(Cathode Ray Tube)ディスプレイ装置、液晶ディスプレイ(LCD)装置、OLED(Organic Light Emitting Diode)装置、ランプ等の表示装置およびスピーカ等の音声出力装置を含む。   The output device 909 includes, for example, a CRT (Cathode Ray Tube) display device, a liquid crystal display (LCD) device, an OLED (Organic Light Emitting Diode) device, a display device such as a lamp, and an audio output device such as a speaker.

ストレージ装置910は、データ格納用の装置である。ストレージ装置910は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置等を含んでもよい。ストレージ装置910は、例えば、HDD(Hard Disk Drive)で構成される。このストレージ装置910は、ハードディスクを駆動し、CPU901が実行するプログラムや各種データを格納する。   The storage device 910 is a device for storing data. The storage device 910 may include a storage medium, a recording device that records data on the storage medium, a reading device that reads data from the storage medium, a deletion device that deletes data recorded on the storage medium, and the like. The storage device 910 is configured by, for example, a HDD (Hard Disk Drive). The storage device 910 drives a hard disk and stores programs executed by the CPU 901 and various data.

通信装置911は、例えば、ネットワークに接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置911は、無線通信または有線通信のどちらに対応してもよい。   The communication device 911 is, for example, a communication interface including a communication device or the like for connecting to a network. Further, the communication device 911 may support either wireless communication or wired communication.

以上において、本発明の実施形態に係る情報処理装置のハードウェア構成について説明した。   In the above, the hardware configuration of the information processing apparatus according to the embodiment of the present invention has been described.

(3.まとめ)
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
(3. Summary)
As described above, the preferred embodiments of the present invention have been described in detail with reference to the accompanying drawings, but the present invention is not limited to such examples. It is obvious that those skilled in the art to which the present invention pertains can conceive various changes or modifications within the scope of the technical idea described in the claims. It is understood that these also belong to the technical scope of the present invention.

上記では、出力制御部114が、訪問者種別が第1の種別である場合に、玄関機20とコンタクトセンタのオペレータ端末70とが接続されるように制御する場合を主に想定した。しかし、玄関機20とコンタクトセンタのオペレータ端末70とが接続されるように制御される条件は限定されない。例えば、出力制御部114が、無条件に玄関機20と住戸端末30とが接続されるように制御し、所定の時間を経過しても、居住者による応答操作がない場合に、玄関機20とコンタクトセンタのオペレータ端末70とが接続されるように制御してもよい。   In the above description, it is mainly assumed that the output control unit 114 controls the connection between the entrance device 20 and the operator terminal 70 of the contact center when the visitor type is the first type. However, conditions for controlling the entrance machine 20 and the operator terminal 70 of the contact center to be connected are not limited. For example, the output control unit 114 controls the entrance machine 20 and the dwelling unit terminal 30 to be connected unconditionally, and if there is no response operation by the resident even after a predetermined time has elapsed, the entrance machine 20 And the operator terminal 70 of the contact center may be controlled to be connected.

また、上記では、玄関機20とどの端末を接続させるかを訪問者種別ごとに事前に設定する場合を主に想定した。しかし、玄関機20とどの端末を接続させるかを時間帯ごとに事前に設定してもよい。そうすれば、例えば、日中の時間帯に子供の保護者が住戸内に不在であり、子供が住戸内に留守番をするケースが多い場合などには、日中の時間帯における呼び出しを必ず保護者の携帯端末に転送することができる。   In the above description, it is mainly assumed that a terminal to be connected to the entrance device 20 is set in advance for each visitor type. However, the terminal to be connected to the entrance device 20 may be set in advance for each time zone. In this way, for example, if the child's guardian is absent in the dwelling unit during the daytime and the child often answers the house, calling during the daytime is always protected. Can be transferred to the user's mobile terminal.

また、上記では、玄関機20とオペレータ端末70とを接続させる条件として、訪問者種別が第1の種別(例えば、性別が男性)であるという条件が事前に設定される例を説明した。しかし、玄関機20とオペレータ端末70とを接続させる条件は、かかる例に限定されない。例えば、玄関機20とオペレータ端末70とを接続させる条件は、訪問者の職種が特定の職種(例えば、セールスマン)であるという条件であってもよい。あるいは、玄関機20と警備会社の端末とを接続させる条件として、訪問者が不審者であるという条件が設定されてもよい。   In the above description, an example in which the condition that the visitor type is the first type (for example, the gender is male) is set in advance as the condition for connecting the entrance machine 20 and the operator terminal 70 is described. However, the conditions for connecting the entrance machine 20 and the operator terminal 70 are not limited to such an example. For example, the condition for connecting the entrance machine 20 and the operator terminal 70 may be a condition that the occupation of the visitor is a specific occupation (for example, a salesman). Alternatively, a condition that the visitor is a suspicious person may be set as a condition for connecting the entrance machine 20 and the terminal of the security company.

あるいは、玄関機20と住戸端末30とを接続させる条件が事前に設定されてもよい。例えば、玄関機20と住戸端末30とを接続させる条件は、訪問者種別が特定の種別(例えば、近親者、集合住宅内の他の住戸の居住者など)であるという条件であってもよい。このような訪問者であれば、子供が住戸内に留守番している場合であっても住戸内に呼び出しが行われても、子供が訪問者から不利益を被る可能性は低いと考えられるからである。   Alternatively, conditions for connecting the entrance machine 20 and the dwelling unit terminal 30 may be set in advance. For example, the condition for connecting the entrance machine 20 and the dwelling unit terminal 30 may be a condition that the visitor type is a specific type (for example, a close relative, a resident of another dwelling unit in an apartment house, or the like). . With such a visitor, even if the child is in the house and the call is made in the house, it is unlikely that the child will be disadvantaged by the visitor. It is.

1 情報処理システム
10 集合住宅サーバ
110 制御部
120 記憶部
130 通信部
112 取得部
113 判定部
114 出力制御部
121 事前設定情報
122 行動履歴情報
20 玄関機
210 制御部
220 センサ部
230 操作部
240 記憶部
250 通信部
260 提示部
30 住戸端末
310 制御部
320 センサ部
330 操作部
340 記憶部
350 通信部
360 提示部
40 通信装置
50 ネットワーク
60 コンタクトセンタサーバ
610 制御部
620 記憶部
630 通信部
621 居住者情報
622 オペレータ情報
623 映像音声
70 オペレータ端末
710 制御部
720 音声入力部
730 操作入力部
740 記憶部
750 通信部
760 提示部
80 携帯端末
810 制御部
820 音声入力部
830 操作入力部
840 記憶部
850 通信部
860 提示部
90 通信装置
Reference Signs List 1 information processing system 10 collective housing server 110 control unit 120 storage unit 130 communication unit 112 acquisition unit 113 determination unit 114 output control unit 121 preset information 122 action history information 20 entrance machine 210 control unit 220 sensor unit 230 operation unit 240 storage unit 250 communication unit 260 presentation unit 30 dwelling unit terminal 310 control unit 320 sensor unit 330 operation unit 340 storage unit 350 communication unit 360 presentation unit 40 communication device 50 network 60 contact center server 610 control unit 620 storage unit 630 communication unit 621 resident information 622 Operator information 623 Video / audio 70 Operator terminal 710 Control unit 720 Voice input unit 730 Operation input unit 740 Storage unit 750 Communication unit 760 Presentation unit 80 Mobile terminal 810 Control unit 820 Voice input unit 830 Operation input Part 840 storage unit 850 communication unit 860 presenting unit 90 a communication device

Claims (17)

訪問者を撮像した撮像画像を取得する取得部と、
前記撮像画像を解析して訪問者種別の判定を行う判定部と、
前記訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御する出力制御部と、
を備える、情報処理装置。
An acquisition unit that acquires a captured image of a visitor,
A determination unit that analyzes the captured image and determines a visitor type;
When the visitor type is the first type, an output control unit that controls a device used by the visitor to be connected to a terminal of an operator having a predetermined attribute of a contact center,
An information processing device comprising:
前記出力制御部は、前記訪問者種別が前記第1の種別ではない場合に、前記訪問者によって利用される機器と住戸端末とが接続されるように制御する、
請求項1に記載の情報処理装置。
When the visitor type is not the first type, the output control unit controls the device used by the visitor to be connected to the dwelling unit terminal,
The information processing device according to claim 1.
前記出力制御部は、前記訪問者によって利用される機器と前記住戸端末とが接続された後、居住者からの転送操作が前記住戸端末に入力された場合、前記訪問者によって利用される機器と前記住戸端末とは異なる端末とが接続されるように制御する、
請求項2に記載の情報処理装置。
The output control unit, after the device used by the visitor and the dwelling unit terminal is connected, when a transfer operation from the resident is input to the dwelling unit terminal, the device used by the visitor Control so that a terminal different from the dwelling unit terminal is connected,
The information processing device according to claim 2.
前記出力制御部は、前記訪問者によって利用される機器と前記住戸端末とが接続された後、前記訪問者から入力された音声から所定のテキストデータが認識された場合、前記訪問者によって利用される機器と前記住戸端末とは異なる端末とが接続されるように制御する、
請求項2に記載の情報処理装置。
The output control unit is used by the visitor when predetermined text data is recognized from voice input from the visitor after the device used by the visitor and the dwelling unit terminal are connected. To control a device and a terminal different from the dwelling unit terminal to be connected,
The information processing device according to claim 2.
前記第1の種別は、性別が男性であるという種別を含み、
前記所定の属性は、性別が男性であるという属性を含む、
請求項1に記載の情報処理装置。
The first type includes a type whose gender is male,
The predetermined attribute includes an attribute that the gender is male,
The information processing device according to claim 1.
前記出力制御部は、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された場合、前記所定の属性を有するオペレータの端末から受信された音声を前記訪問者によって利用される機器に送信する、
請求項1に記載の情報処理装置。
The output control unit, when the device used by the visitor and the terminal of the operator having the predetermined attribute is connected, the voice received from the terminal of the operator having the predetermined attribute by the visitor Send to the device to be used,
The information processing device according to claim 1.
前記出力制御部は、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された場合、前記所定の属性を有するオペレータの端末から受信された音声を住戸端末に送信する、
請求項6に記載の情報処理装置。
When the device used by the visitor and the terminal of the operator having the predetermined attribute are connected, the output control unit transmits a voice received from the terminal of the operator having the predetermined attribute to the dwelling unit terminal. Do
The information processing device according to claim 6.
前記出力制御部は、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された後、居住者からの応答操作が住戸端末に入力された場合、前記住戸端末から受信された音声を前記訪問者によって利用される機器に送信する、
請求項1に記載の情報処理装置。
The output control unit, after a device used by the visitor and the terminal of the operator having the predetermined attribute is connected, when a response operation from the resident is input to the dwelling unit terminal, from the dwelling unit terminal Transmitting the received audio to a device utilized by the visitor;
The information processing device according to claim 1.
前記第1の種別は、事前に居住者によって設定された情報である、
請求項1に記載の情報処理装置。
The first type is information set in advance by a resident,
The information processing device according to claim 1.
前記出力制御部は、前記訪問者種別が前記第1の種別ではない場合に、前記訪問者種別と同一種別または前記訪問者の特徴データと一致または類似する特徴データに対する過去の行動情報が登録されている場合、前記過去の行動情報に基づいて動作する、
請求項1に記載の情報処理装置。
When the visitor type is not the first type, the output control unit registers past behavior information for the same type as the visitor type or for feature data that matches or is similar to the visitor's feature data. Operating based on the past behavior information,
The information processing device according to claim 1.
前記出力制御部は、前記訪問者種別が前記第1の種別である場合、かつ、前記撮像画像から抽出された特徴データと一致または類似する過去の訪問者の特徴データが登録されていない場合、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続されるように制御する、
請求項1に記載の情報処理装置。
The output control unit, when the visitor type is the first type, and when the characteristic data of the past visitor that matches or is similar to the characteristic data extracted from the captured image is not registered, Controlling the device used by the visitor and the terminal of the operator having the predetermined attribute to be connected,
The information processing device according to claim 1.
前記出力制御部は、前記訪問者種別が前記第1の種別である場合、かつ、事前に居住者によって転送設定が行われている場合、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続されるように制御する、
請求項1に記載の情報処理装置。
The output control unit, when the visitor type is the first type, and when the transfer setting is performed by the resident in advance, the device used by the visitor and the predetermined attribute Control to be connected to the terminal of the operator having
The information processing device according to claim 1.
前記判定部は、居住者種別の判定を行い、
前記出力制御部は、前記訪問者種別が前記第1の種別である場合、かつ、前記居住者種別が第2の種別である場合に、前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続されるように制御する、
請求項1に記載の情報処理装置。
The determination unit determines a resident type,
The output control unit, when the visitor type is the first type, and when the resident type is the second type, the device used by the visitor and the predetermined attribute Control to be connected to the terminal of the operator having
The information processing device according to claim 1.
前記第2の種別は、性別が女性であるという種別を含む、
請求項13に記載の情報処理装置。
The second type includes a type that the gender is female,
An information processing apparatus according to claim 13.
訪問者を撮像した撮像画像を取得することと、
前記撮像画像を解析して訪問者種別の判定を行うことと、
前記訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御することと、
を含む、情報処理方法。
Obtaining a captured image of the visitor;
Analyzing the captured image to determine the visitor type;
When the visitor type is the first type, controlling so that a device used by the visitor is connected to a terminal of an operator having a predetermined attribute of a contact center;
An information processing method, including:
コンピュータを、
訪問者を撮像した撮像画像を取得する取得部と、
前記撮像画像を解析して訪問者種別の判定を行う判定部と、
前記訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御する出力制御部と、
を備える情報処理装置として機能させるためのプログラム。
Computer
An acquisition unit that acquires a captured image of a visitor,
A determination unit that analyzes the captured image and determines a visitor type;
When the visitor type is the first type, an output control unit that controls a device used by the visitor to be connected to a terminal of an operator having a predetermined attribute of a contact center,
A program for functioning as an information processing device including
居住者によって利用される住戸端末であって、
訪問者を撮像した撮像画像の解析に基づいて判定された訪問者種別が第1の種別である場合に、前記訪問者によって利用される機器とコンタクトセンタの所定の属性を有するオペレータの端末とが接続されるように制御され、
前記訪問者種別が前記第1の種別ではない場合に、前記訪問者によって利用される機器と前記住戸端末とが接続されるように制御され、
前記訪問者によって利用される機器と前記所定の属性を有するオペレータの端末とが接続された場合、前記所定の属性を有するオペレータの端末から音声を受信する通信部と、
前記音声を前記居住者に提示する提示部と、
を備える、住戸端末。

A dwelling unit terminal used by a resident,
When the visitor type determined based on the analysis of the captured image of the visitor is the first type, the device used by the visitor and the terminal of the operator having a predetermined attribute of the contact center are not included. Controlled to be connected,
When the visitor type is not the first type, the device used by the visitor is controlled to be connected to the dwelling unit terminal,
When a device used by the visitor and a terminal of the operator having the predetermined attribute are connected, a communication unit that receives a voice from the terminal of the operator having the predetermined attribute,
A presentation unit that presents the voice to the resident;
A dwelling unit terminal comprising:

JP2018158899A 2018-08-28 2018-08-28 Information processing device, information processing method, program and dwelling unit terminal Active JP7176297B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018158899A JP7176297B2 (en) 2018-08-28 2018-08-28 Information processing device, information processing method, program and dwelling unit terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018158899A JP7176297B2 (en) 2018-08-28 2018-08-28 Information processing device, information processing method, program and dwelling unit terminal

Publications (2)

Publication Number Publication Date
JP2020036109A true JP2020036109A (en) 2020-03-05
JP7176297B2 JP7176297B2 (en) 2022-11-22

Family

ID=69668723

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018158899A Active JP7176297B2 (en) 2018-08-28 2018-08-28 Information processing device, information processing method, program and dwelling unit terminal

Country Status (1)

Country Link
JP (1) JP7176297B2 (en)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006155273A (en) * 2004-11-30 2006-06-15 Mitsubishi Electric Corp Suspicious visitor handling system
JP2006157650A (en) * 2004-11-30 2006-06-15 Aiphone Co Ltd Television intercom system
JP2009098971A (en) * 2007-10-17 2009-05-07 Toru Miura Information providing system
JP2010078763A (en) * 2008-09-25 2010-04-08 Brother Ind Ltd Voice processing device, voice processing program, and intercom system
JP2012138873A (en) * 2010-12-28 2012-07-19 Aiphone Co Ltd Intercom device
JP2013131923A (en) * 2011-12-21 2013-07-04 Canon Marketing Japan Inc Intercom system, control method, and program
JP2015100073A (en) * 2013-11-20 2015-05-28 エヌ・ティ・ティ・コミュニケーションズ株式会社 Communication apparatus, terminal, communication system, communication method, and communication program
JP2015201187A (en) * 2014-03-31 2015-11-12 Lykaon株式会社 Crime prevention system
JP2016158170A (en) * 2015-02-25 2016-09-01 パナソニックIpマネジメント株式会社 Data base generation device for intercom, intercom indoor device using the same and intercom system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006155273A (en) * 2004-11-30 2006-06-15 Mitsubishi Electric Corp Suspicious visitor handling system
JP2006157650A (en) * 2004-11-30 2006-06-15 Aiphone Co Ltd Television intercom system
JP2009098971A (en) * 2007-10-17 2009-05-07 Toru Miura Information providing system
JP2010078763A (en) * 2008-09-25 2010-04-08 Brother Ind Ltd Voice processing device, voice processing program, and intercom system
JP2012138873A (en) * 2010-12-28 2012-07-19 Aiphone Co Ltd Intercom device
JP2013131923A (en) * 2011-12-21 2013-07-04 Canon Marketing Japan Inc Intercom system, control method, and program
JP2015100073A (en) * 2013-11-20 2015-05-28 エヌ・ティ・ティ・コミュニケーションズ株式会社 Communication apparatus, terminal, communication system, communication method, and communication program
JP2015201187A (en) * 2014-03-31 2015-11-12 Lykaon株式会社 Crime prevention system
JP2016158170A (en) * 2015-02-25 2016-09-01 パナソニックIpマネジメント株式会社 Data base generation device for intercom, intercom indoor device using the same and intercom system

Also Published As

Publication number Publication date
JP7176297B2 (en) 2022-11-22

Similar Documents

Publication Publication Date Title
US11810567B2 (en) Speech recognition device, speech-recognition-device coordination system, and speech-recognition-device coordination method
US11374895B2 (en) Updating and transmitting action-related data based on user-contributed content to social networking service
US10446007B2 (en) Watching system and management server
JP2019083468A (en) Output control device, intercom slave unit, and intercom system
JP6745419B1 (en) Methods, systems, and media for providing information about detected events
CN106101629A (en) The method and device of output image
KR20160035753A (en) Method and apparatus for automatically creating message
JP2010113682A (en) Visitor information search method, visitor information search device, and intercom system
KR102291482B1 (en) System for caring for an elderly person living alone, and method for operating the same
EP3677392A1 (en) Robot and method of controlling the same
JP7176297B2 (en) Information processing device, information processing method, program and dwelling unit terminal
JP6556391B1 (en) Monitoring system
JP2023180943A (en) Information processing device, information processing method and program
CN105657002B (en) The processing method and processing device of unlocking screen password
JP2016001282A (en) Karaoke system, portable information processing device, and program
Vamsi et al. An IoT based smart home with virtual assistant
CN106210342A (en) Volume control method, volume control device and mobile terminal
KR101984960B1 (en) Service system for performing translation in accommodations
CN112804480A (en) Monitoring and warning system
US20240029738A1 (en) Speech recognition device, speech-recognition-device coordination system, and speech-recognition-device coordination method
WO2021172836A1 (en) Method for controlling external electronic device, and electronic device therefor
KR20240061773A (en) Electronic device and method for controlling the electronic device
JP7070868B2 (en) Notification system
JP7236634B2 (en) INTERCOM SYSTEM, INTERCOM MASTER UNIT, INTERCOM SYSTEM CONTROL METHOD, AND PROGRAM
JP2022015268A (en) Communication terminal device, control device, communication control method, and control program

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20190327

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190328

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210507

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220405

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220601

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221011

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221024

R150 Certificate of patent or registration of utility model

Ref document number: 7176297

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150