JP6719072B2 - 接客装置、接客方法及び接客システム - Google Patents

接客装置、接客方法及び接客システム Download PDF

Info

Publication number
JP6719072B2
JP6719072B2 JP2016157464A JP2016157464A JP6719072B2 JP 6719072 B2 JP6719072 B2 JP 6719072B2 JP 2016157464 A JP2016157464 A JP 2016157464A JP 2016157464 A JP2016157464 A JP 2016157464A JP 6719072 B2 JP6719072 B2 JP 6719072B2
Authority
JP
Japan
Prior art keywords
customer service
information
correspondence
customer
control command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016157464A
Other languages
English (en)
Other versions
JP2018024058A (ja
Inventor
佐草 敦
敦 佐草
直美 富山
直美 富山
裕一 青木
裕一 青木
大森 基司
基司 大森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2016157464A priority Critical patent/JP6719072B2/ja
Priority to CN201710404112.7A priority patent/CN107731224A/zh
Priority to US15/652,280 priority patent/US20180047029A1/en
Publication of JP2018024058A publication Critical patent/JP2018024058A/ja
Application granted granted Critical
Publication of JP6719072B2 publication Critical patent/JP6719072B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/01Customer relationship services
    • G06Q30/015Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
    • G06Q30/016After-sales
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/06Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/063Training
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/06Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/065Adaptation
    • G10L15/07Adaptation to the speaker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/06Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/063Training
    • G10L2015/0635Training updating or merging of old and new templates; Mean values; Weighting
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/227Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of the speaker; Human-factor methodology

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Manipulator (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Electrically Operated Instructional Devices (AREA)

Description

本開示は、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者から引き継いで接客を行う接客装置、該接客装置の接客方法、及び接客システムに関し、例えば、ホテルや店舗等において、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者からロボットに引き継ぐ技術に関するものである。
近年、人工知能の発達により、人間ではなく、ロボットを用いて、小売店、銀行、ホテル、医療施設、介護施設、学校、製造工場、その他の種々の施設において、受付業務、案内業務等の種々の接客業務が行われるようになってきている。
例えば、特許文献1では、ロボットがコミュニケーション行動の動作履歴情報を中央制御装置に送信し、中央制御装置は、ロボットからの動作履歴情報のうち遠隔操作によるものに基づいて、個人用ビヘービア遷移DB(データベース)、年代・性別依存ビヘービア遷移DB及び場所依存ビヘービア遷移DBを構築し、ロボットは、対話相手の名前、年代・性別、又は場所に応じたDBを選択し、選択したDBを参照して、現在のロボットの動作を示すコマンドと、そのロボットの動作に対する対話相手の行動とに一致する動作履歴情報に基づいて、次のコミュニケーション行動を決定することが開示されている。この特許文献1では、ロボットが遠隔操作の動作履歴情報に基づいて自律行動を行うので、オペレータの遠隔操作の回数をできるだけ減らすことができるとされている。
また、特許文献2では、コミュニケーションロボットが周囲や自身の状況を検出する様々なセンサを含み、センサの出力に基づいて、オペレータ呼出条件を満たすか否かを判断し、通常、自律制御によって、人間との間でコミュニケーション行動を行うなどして、受付や道案内などのサービスを提供し、オペレータ呼出条件を満たすと判断したときに、ネットワークを介して、呼出要求をオペレータ端末に送信し、これに応じて、オペレータが、オペレータ端末を操作して、コミュニケーションロボットに制御コマンドを送信し、コミュニケーションロボットが制御コマンドに従うコミュニケーション行動を実行することが開示されている。この特許文献2では、効率良く、適切なサービスを提供することができるとされている。
特開2009−131914号公報 特開2007−190641号公報
しかしながら、上記の従来技術では、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者からコミュニケーションロボット等の接客装置にどのように引き継ぐべきかについては、何ら検討されておらず、接客対応者から接客装置への引継について、更なる改善が必要とされていた。
本開示は、上記の課題を解決するためになされたもので、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者から接客装置へ円滑に引き継ぐことができる接客装置、接客方法及び接客システムを提供することを目的とするものである。
本開示の一態様に係る接客装置は、接客相手に対する接客を行う接客装置であって、前記接客相手に対する対応を前記接客装置に引き継ぐ接客対応者が所持する通信端末から、前記接客対応者から前記接客装置に引き継ぐ対応内容を示す対応内容情報と、前記接客相手に対する対応時に前記接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドを受信する通信部と、前記通信部により前記制御コマンドを受信したとき、前記引継時対応注意情報に示される注意事項に従って対応を決定する対応決定部とを備え、前記対応内容は、前記接客相手と前記接客対応者との対話に基づいて、前記接客対応者によって決定され、前記対応決定部は、前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する
本開示によれば、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者から接客装置へ円滑に引き継ぐことができる。
本開示の一実施の形態に係る接客システムの構成の一例を示すブロック図である。 図1に示すロボットの行動ルール記憶部に記憶される行動ルールの一例を示す図である。 図1に示す接客システムによる接客処理の一例を示すシーケンス図である。 図1に示すタブレットを用いて接客対応者が引継情報を入力するための入力画面の一例を示す図である。 図1に示すタブレットからロボットへ送信される制御コマンドのデータ構造の一例を示す図である。 図1に示すロボットによる接客引継処理の一例を示すフローチャートである。
(本開示の基礎となった知見)
ロボットの人間に対するコミュニケーション力は、日々向上しており、ロボットが人間の代わりを務め、接客相手(人間)に対する接客等のコミュニケーションを行うケースが、今後、増加することが想定される。一方、ロボットは、人間の感情を完全に理解して完全な接客対応を完結するコミュニケーション力を有しておらず、すべての接客をロボットが代行することは困難である。このため、人間(接客対応者)が接客相手に対する最初の接客を行い、接客相手に対して接客対応者が得た知見をロボットが適切に処理できる形態でロボットに伝達することが有益である。
しかしながら、上記の従来技術では、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者からコミュニケーションロボット等の接客装置にどのように引き継ぐべきかについては、何ら検討されておらず、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者から接客装置へ円滑に引き継ぐことが困難であった。
ここで、接客相手に対する対応を接客対応者からロボットに引き継ぐ際、接客対応者が接客相手のニーズや意向を汲んで、接客対応の方針を決定し、この接客対応の方針をロボットに教示することにより、ロボットは、この接客対応の方針に基づいて、接客相手に対する対応を引き継ぐことができる。
上記の知見に基づき、本願発明者らは、人間(接客対応者)が接客相手に対して接客を行い、次の対応を人間(接客対応者)からロボット(接客装置)に如何に引き継ぐべきかについて鋭意検討を行った結果、本開示を完成したものである。
本開示の一態様に係る接客装置は、接客相手に対する接客を行う接客装置であって、前記接客相手に対する対応を前記接客装置に引き継ぐ接客対応者が所持する通信端末から、前記接客対応者から前記接客装置に引き継ぐ対応内容を示す対応内容情報と、前記接客相手に対する対応時に前記接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドを受信する通信部と、前記通信部により前記制御コマンドを受信したとき、前記引継時対応注意情報に示される注意事項に従って前記対応内容情報に示される対応内容を行うように前記接客相手に対する対応を決定する対応決定部とを備える。
このような構成により、接客対応者から接客装置に引き継ぐ対応内容を示す対応内容情報と、接客相手に対する対応時に接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドが受信されたとき、引継時対応注意情報に示される注意事項に従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定しているので、接客対応者が接客相手のニーズや意向を汲んで決定した注意事項を反映した接客相手に対する対応を行うことができ、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者から接客装置へ円滑に引き継ぐことができる。
上記接客装置は、前記引継時対応注意情報と、前記引継時対応注意情報を受信したときに前記接客装置が実行すべき行動ルールを示す行動ルール情報とを対応付けて予め記憶する行動ルール記憶部をさらに備え、前記対応決定部は、前記行動ルール記憶部を参照して、前記制御コマンドに含まれる前記引継時対応注意情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される対応内容を行うように前記接客相手に対する対応を決定するようにしてもよい。
このような構成により、引継時対応注意情報に示される注意事項に対応した具体的な行動ルールに従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定しているので、注意事項を考慮した適切な対応を接客相手に行うことができる。
上記接客装置は、前記接客相手の生体データを取得する生体データ取得部と、前記生体データ取得部により取得された生体データを解析することにより、前記接客相手に対する対応時に前記接客装置が注意すべきと判断した注意事項を示す接客時対応注意情報を作成する作成部とをさらに備え、前記行動ルール記憶部は、さらに、前記接客時対応注意情報と、前記接客時対応注意情報に対して前記接客装置が実行すべき行動ルールを示す行動ルール情報とを対応付けて予め記憶し、前記対応決定部は、前記接客時対応注意情報が前記引継時対応注意情報と異なる場合、前記行動ルール記憶部を参照して、前記接客時対応注意情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される対応内容を行うように前記接客相手に対する対応を決定するようにしてもよい。
このような構成により、接客装置の接客時に取得された生体データから、接客相手に対する対応時に接客装置が注意すべきと判断した対応注意情報を示す接客時対応注意情報を作成しているので、接客相手の現在の状態に適合した注意事項を作成することができる。また、接客時対応注意情報が引継時対応注意情報と異なる場合、接客時対応注意情報に対応付けられている行動ルールに従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定しているので、接客相手の現在の状態に適合した注意事項を考慮した適切な対応を接客相手に行うことができる。
前記制御コマンドは、前記接客相手を識別する識別情報をさらに含み、上記接客装置は、前記接客相手に対する過去の接客履歴を示す履歴情報を前記識別情報に対応付けて記憶する履歴記憶部をさらに備え、前記履歴情報は、前記識別情報に対応付けて記憶されている、前記接客相手に対する過去の対応における前記引継時対応注意情報を含み、前記対応決定部は、前記接客時対応注意情報が前記引継時対応注意情報と異なる場合、前記行動ルール記憶部を参照して、前記制御コマンドに含まれる前記識別情報に対応付けて前記履歴記憶部に記憶されている前記引継時対応注意情報を、前記接客時対応注意情報に更新するようにしてもよい。
このような構成により、履歴記憶部に記憶されている引継時対応注意情報を、接客相手の現在の状態から取得した接客時対応注意情報に更新しているので、接客相手の現在の状態に適合した注意事項に更新することができ、履歴記憶部を参照することにより、常に最新の注意事項を考慮した適切な対応を接客相手に行うことができる。
上記接客装置は、前記制御コマンドに含まれる前記識別情報に対応付けて前記履歴記憶部に記憶されている前記履歴情報を前記制御コマンドに付加する付加部をさらに備え、前記対応決定部は、前記履歴情報を基に、前記引継時対応注意情報及び前記接客時対応注意情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される対応内容を行うように前記接客相手に対する対応を決定するようにしてもよい。
このような構成により、履歴記憶部に記憶されている履歴情報を制御コマンドに付加し、この履歴情報をも考慮して、引継時対応注意情報及び接客時対応注意情報に対応付けられている行動ルールに従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定しているので、過去の履歴に応じて適切な対応を接客相手に行うことができる。
前記制御コマンドは、前記接客相手の属性が所定の重要条件に該当することを示す重要条件情報をさらに含み、前記行動ルール記憶部は、さらに、前記重要条件情報と、前記重要条件情報に対して前記接客装置が実行すべき行動ルールを示す行動ルール情報とを対応付けて予め記憶し、前記対応決定部は、前記通信部により受信された前記制御コマンドが前記重要条件情報を含む場合、前記行動ルール記憶部を参照して、前記重要条件情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される対応内容を行うように前記接客相手に対する対応を決定するようにしてもよい。
このような構成により、接客相手の属性が所定の重要条件に該当する場合、重要条件情報に対応付けられている行動ルールに従って接客相手に対する対応を決定しているので、接客対応者にとって重要な接客相手に対してのみ、特別な対応を行うことができる。
前記対応決定部は、前記制御コマンドに含まれる前記引継時対応注意情報に対応付けられている前記行動ルール情報に従って前記接客対応者の支援が必要であると判断した場合、前記接客対応者の支援が必要であることを示す支援要請情報を生成し、前記通信部は、前記支援要請情報を前記通信端末に送信するようにしてもよい。
このような構成により、制御コマンドに含まれる引継時対応注意情報に対応付けられている行動ルールに従って接客対応者の支援が必要であると判断した場合、接客対応者の支援が必要であることを示す支援要請情報を生成しているので、接客装置が接客相手に対する対応を円滑に行うことができない場合、接客対応者の支援が必要であることを通信端末に提示することができ、接客相手に対する対応を接客装置から接客対応者に緊急に引き継ぐことができる。
前記接客装置は、前記接客相手に対して、音声、映像、及び身体動作の少なくとも一つを用いて接客を行うロボットであってもよい。
このような構成により、ロボットが音声、映像、及び身体動作の少なくとも一つを用いて適切な接客を行うことができる。
また、本開示は、以上のような特徴的な構成を備える接客装置として実現することができるだけでなく、接客装置が備える特徴的な構成に対応する特徴的な処理を実行する接客方法などとして実現することもできる。また、本開示の接客装置の構成要素の一部をロボットが備え、他の構成要素を、ロボットと通信可能に構成された通信端末又はサーバが備え、このようなロボット及び通信端末等を備える接客システムとして構成してもよい。したがって、以下の他の態様でも、上記の接客装置と同様の効果を奏することができる。
本開示の他の態様に係る接客方法は、接客相手に対する接客を行う接客装置の接客方法であって、前記接客相手に対する対応を前記接客装置に引き継ぐ接客対応者が所持する通信端末から、前記接客対応者から前記接客装置に引き継ぐ対応内容を示す対応内容情報と、前記接客相手に対する対応時に前記接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドを受信し、前記制御コマンドを受信したとき、前記引継時対応注意情報に示される注意事項に従って前記対応内容情報に示される対応内容を行うように前記接客相手に対する対応を決定する。
本開示の他の態様に係る接客システムは、接客相手に対する接客を行う接客対応者が所持する通信端末と、前記接客相手に対する対応を前記接客対応者から引き継ぐロボットとを備え、前記通信端末は、前記接客対応者から前記接客装置に引き継ぐ対応内容を示す対応内容情報と、前記接客相手に対する対応時に前記接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドを送信する通信部を備え、前記ロボットは、前記制御コマンドを受信する通信部と、前記通信部により前記制御コマンドを受信したとき、前記引継時対応注意情報に示される注意事項に従って前記対応内容情報に示される対応内容を行うように前記接客相手に対する対応を決定する対応決定部とを備える。
また、上記の接客方法に含まれる特徴的な処理をコンピュータに実行させるコンピュータプログラムとして実現してもよい。そして、このようなコンピュータプログラムを、CD−ROM等のコンピュータ読取可能な非一時的な記録媒体又はインターネット等の通信ネットワークを介して流通させることができるのは、言うまでもない。
なお、以下で説明する実施の形態は、いずれも本開示の一具体例を示すものである。以下の実施の形態で示される数値、形状、構成要素、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。また、全ての実施の形態において、各々の内容を組み合わせることもできる。
(実施の形態)
以下、本開示の実施の形態について、図面を参照しながら説明する。図1は、本開示の一実施の形態に係る接客システムの構成の一例を示すブロック図である。図1に示す接客システムは、タブレット10、ロボット20、及びサーバ30を備える。
タブレット10は、有線又は無線の通信回線(図示省略)を介して、サーバ30に通信可能に接続され、接客相手(人間)に対する接客を行う接客対応者(人間)が所持(携帯又は使用等)する通信端末の一例である。ロボット20は、接客相手に対して、音声、映像、及び身体動作の少なくとも一つを用いて接客を行う人型ロボット(機械)である。サーバ30は、有線又は無線の通信回線(図示省略)を介して、タブレット10及びロボット20に通信可能に接続されている。
タブレット10は、引継情報入力部11、制御コマンド生成部12、通信部13及び支援要請情報提示部14を備える。ロボット20は、通信部21、対応決定部22、行動ルール記憶部23、対応実行部24、生体データ取得部25、及び対応注意情報作成部26を備える。サーバ30は、通信部31、情報管理部32、及び履歴情報記憶部33を備える。
ここで、通信部21は接客装置の通信部の一例に相当し、対応決定部22は対応決定部の一例に相当し、行動ルール記憶部23は行動ルール記憶部の一例に相当し、生体データ取得部25は生体データ取得部の一例に相当し、対応注意情報作成部26は作成部の一例に相当し、履歴情報記憶部33は履歴記憶部の一例に相当し、情報管理部32は付加部の一例に相当し、通信部13は通信端末の通信部の一例に相当する。
タブレット10の引継情報入力部11は、タッチパネル等から構成され、接客対応者が引継情報を入力するために使用される。この引継情報は、接客対応者からロボット20に引き継ぐ対応内容を示す対応内容情報と、接客相手に対する対応時にロボット20が注意すべき注意事項を示す引継時対応注意情報とを含む。また、引継情報は、接客相手の属性が所定の重要条件に該当することを示す重要条件情報(例えば、接客相手が接客対応者にとって重要な顧客として登録されているプレミアム顧客であることを示す情報)と、接客相手を識別する識別情報(例えば、ユーザID)とを含むようにしてもよい。
なお、引継情報入力部11の構成は、上記の例に特に限定されず、キーボード等の入力装置を用いたり、マイク等を用いて接客対応者の音声を音声認識して引継情報を入力したりする等の種々の変更が可能である。
制御コマンド生成部12は、引継情報入力部11から入力された引継情報を基に、ロボット20を制御するための制御コマンドを作成する。この制御コマンドは、接客対応者からロボット20に引き継ぐ対応内容を示す対応内容情報と、接客相手に対する対応時にロボット20が注意すべき注意事項を示す引継時対応注意情報とを含む。また、制御コマンドは、上記の重要条件情報及び識別情報を含むようにしてもよい。
通信部13は、サーバ30とタブレット10との間の通信を行い、タブレット10が生成した種々の情報を通信部31へ送信し、サーバ30が生成した種々の情報(ロボット20が生成した種々の情報も含む)を通信部31から受信する。具体的には、通信部13は、制御コマンド生成部12により生成された制御コマンドをサーバ30に送信する。
サーバ30の通信部31は、タブレット10との通信に加え、サーバ30とロボット20からとの間の通信を行い、サーバ30が生成した種々の情報を通信部21へ送信し、ロボット20が生成した種々の情報を通信部21から受信する。
履歴情報記憶部33は、接客相手に対する過去の接客履歴を示す履歴情報を接客相手のユーザIDに対応付けて記憶している。履歴情報は、接客相手に対するロボット20や接客対応者の過去の対応状況、及び接客対応者からロボット20への引継情報等を含み、引継情報は、接客相手のユーザIDに対応付けて記憶されている、接客相手に対する過去の対応における引継時対応注意情報を含む。
情報管理部32は、タブレット10により過去の接客履歴を示す履歴情報が履歴情報記憶部33に記憶されている接客相手に対する制御コマンドが通信部31を介して入力された場合、履歴情報記憶部33から接客相手の過去の接客履歴を示す履歴情報を読み出し、この履歴情報を制御コマンドに付加する。
具体的には、情報管理部32は、通信部31を介して、タブレット10から送信された制御コマンドを入力され、制御コマンドに含まれるユーザIDの履歴情報が履歴情報記憶部33に記憶されているか否かを確認する。制御コマンドに含まれるユーザIDの履歴情報が履歴情報記憶部33に記憶されている場合、情報管理部32は、制御コマンドに含まれるユーザIDの履歴情報を制御コマンドに付加し、通信部31を介してロボット20へ送信する。一方、制御コマンドに含まれるユーザIDの履歴情報が履歴情報記憶部33に記憶されていない場合、情報管理部32は、通信部31を介して、制御コマンドをそのままロボット20へ送信する。なお、上記の制御コマンドに対する履歴情報の付加等のサーバ30の処理を行わない場合、サーバ30(通信部31)を省略し、タブレット10の通信部13からロボット20の通信部21へ、直接、制御コマンドを送信するようにしてもよい。
ロボット20の通信部21は、ロボット20とサーバ30との間の通信を行い、ロボット20が生成した種々の情報を通信部31へ送信し、サーバ30が生成した種々の情報を通信部31から受信する。
対応決定部22は、通信部21によりタブレット10からの制御コマンドを受信したとき、制御コマンドに含まれる引継時対応注意情報に示される注意事項に従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定する。具体的には、対応決定部22は、行動ルール記憶部23を参照して、制御コマンドに含まれる引継時対応注意情報に対応付けられている行動ルール情報に従って接客相手に対する対応を決定する。
行動ルール記憶部23は、引継時対応注意情報と、当該引継時対応注意情報を受信したときにロボット20が実行すべき行動ルールを示す行動ルール情報とを対応付けて予め記憶している。
図2は、図1に示すロボット20の行動ルール記憶部23に記憶される行動ルールの一例を示す図である。図2に示すように、対応注意情報ごとに識別番号(「No」)が付与され、各番号に、一つの対応注意情報と、当該対応注意情報に対応付けられている行動ルールを示す行動ルール情報とが記憶される。
ここで、対応注意情報は、上記の引継時対応注意情報である場合と、後述する接客時対応注意情報である場合とがあり、予め設定されている複数の対応注意情報の中から、ロボット20が使用する引継時対応注意情報及び接客時対応注意情報として予め記憶されている。なお、対応注意情報ごとに番号(対応注意情報の識別番号)が付与されているので、対応注意情報を直接入力することなく、対応注意情報の番号を入力することにより、接客対応者が引継時対応注意情報を設定してもよい。
図2に示す例では、例えば、「No.1」の対応注意情報は、「属性がプレミアム顧客」であるという情報であり、この対応注意情報に対する行動ルール情報は、「慎重に対応し、何かあれば、すぐに人間に支援要請」を行うことである。この場合、ロボット20は、対応相手がプレミアム顧客であるため、すべての対応において慎重に対応し、対応相手が憤慨する等の問題が発生した場合、接客対応者に支援を要請する支援要請情報をタブレット10に送信することとなる。
次に、「No.2」の対応注意情報は、「慎重に対応せよ」という情報であり、この対応注意情報に対する行動ルール情報は、「慎重に対応し、何かあれば、すぐに人間に支援要請」を行うことである。この場合、接客相手がプレミアム顧客でない場合も、上記と同様に慎重な対応が行われる。
次に、「No.3」の対応注意情報は、接客相手が「尊大な」態度であるという情報であり、この対応注意情報に対する行動ルール情報は、「丁寧な言葉で話しかける」ことである。この場合、ロボット20は、接客相手に対して丁寧な言葉で対話を行う。
次に、「No.4」の対応注意情報は、接客相手が「物静かな」雰囲気を有しているという情報であり、この対応注意情報に対する行動ルール情報は、「基本は、こちらから話しかけない」ことである。この場合、ロボット20は、接客相手から話しかけられた場合に対応を行う。
次に、「No.5」の対応注意情報は、接客相手が「お喋り好き」な性格であるという情報であり、この対応注意情報に対する行動ルール情報は、「他の情報から特にキーポイントがなければ、ニュースや天気の話題から初めて、話しかけ、顧客の好みに応じて話題を探る」ことである。この場合、ロボット20は、過去の履歴情報から接客相手が興味を持ちそうな話題があれば、その話題で話しかけたり、そのような話題がなければ、ニュースや天気の話題から話しかけたりすることにより、積極的に接客相手に話しかける。
次に、「No.6」の対応注意情報は、接客相手が「オシャレ」であるという情報であり、この対応注意情報に対する行動ルール情報は、「着衣などを褒めることから話しかける」ことである。この場合、ロボット20は、接客相手の衣服等を褒めることから会話を初める。
次に、「No.7」の対応注意情報は、接客相手の「歩く速度が速い」という情報であり、この対応注意情報に対する行動ルール情報は、「速く移動する」ことである。この場合、ロボット20は、接客相手の移動にあわせて、速く移動しながら接客を行う。
次に、「No.8」の対応注意情報は、接客相手の「歩く速度が遅い」という情報であり、この対応注意情報に対する行動ルール情報は、「ゆっくりと移動し、顧客との距離を規定内とする」ことである。この場合、ロボット20は、接客相手の移動にあわせて、顧客との距離が常に一定内(例えば、1m以内)になるように、ゆっくりと移動しながら接客を行う。
なお、上記の対応注意情報及び行動ルール情報は、上記の例に特に限定されず、種々の変更が可能であり、接客相手の属性として子供であることが検出され、対応注意情報が子供であるという情報の場合、ロボット20は、子供の身長に合わせて屈んで接客するようにしてもよい。
再び、図1を参照して、対応実行部24は、対応決定部22が決定した対応に基づき、具体的な対応を実行する。例えば、対応実行部24は、マイク、スピーカ等を備え、接客相手の音声を取得し、取得した音声を音声認識して、接客相手からの問合せ内容に対する回答を作成し、作成した回答を音声に変換して発話する。なお、対応実行部24の構成は、上記の例に特に限定されず、例えば、ディスプレイ等を用いて、接客相手からの問合せ内容に対する回答を表示する等の種々の変更が可能である。また、対応実行部24の音声による回答に加えて、ロボット20が回答内容に適した身体動作を行うようにしてもよい。
生体データ取得部25は、接客相手の生体データを取得する。具体的には、生体データ取得部25は、高感度なスペクトラム拡散ミリ波レーダー等を用いて、非接触で人間の脈波を計測するセンサを備え、接客相手の心拍数及び心拍変動を検出する。また、生体データ取得部25は、カメラ、マイク等を備え、生体データとして、接客相手を撮影した映像データを取得する。
なお、生体データ取得部25の構成は、この例に特に限定されず、人間のバイタルデータ等を測定するスマートウォッチを接客相手に装着し、スマートウォッチからバイタルデータ等を取得するようにしてもよい。また、生体データ取得部25が取得する生体データも、上記の脈波や映像に特に限定されず、音声、顔画像、血中酸素濃度、血圧、体温等の他の生体データを用いてもよい。この場合、各生体データを取得できるように、生体データ取得部25は構成される。
対応注意情報作成部26は、生体データ取得部25により取得された生体データを解析することにより、接客相手に対する対応時にロボット20が注意すべきと判断した注意事項を示す接客時対応注意情報を作成して対応決定部22に出力する。
例えば、対応注意情報作成部26は、生体データ取得部25により取得された脈波から、接客相手の感情が「怒り」、「喜び」、「哀しみ」、及び「楽しみ」のいずれであるかを推定し(例えば、特許第5257525号明細書を参照)、「怒り」やすいと判断した場合、「慎重に対応せよ」という接客時対応注意情報を作成する。
また、対応注意情報作成部26は、生体データ取得部25により取得された映像から、接客相手の歩く速度を検出し、歩く速度が速い場合は、「歩く速度が速い」という接客時対応注意情報を作成し、歩く速度が遅い場合は、「歩く速度が遅い」という接客時対応注意情報を作成する。
なお、生体データを用いた接客時対応注意情報の作成方法は、上記の例に特に限定されず、例えば、生体センサ値から生成した接客相手の覚醒度と快度とを用いて接客相手の感情を特定したり(特許第5735592号明細書を参照)、接客相手の表情や声のトーンを分析して感情や思考を推定したりして、接客相手に対して注意すべき接客時対応注意情報を作成する等の種々の変更が可能である。
また、対応注意情報作成部26は、生体データ取得部25により取得された映像から、接客相手が大人であるか又は子供であるかを判定し、判定結果を接客相手の属性として検出し、接客相手の属性も考慮して接客時対応注意情報を作成するようにしてもよい。なお、対応注意情報作成部26が検出する接客相手の属性は、上記の例に特に限定されず、カメラで撮影した映像を基に、接客相手の特徴となる年齢、性別、体格等を、接客相手の属性として検出するようにしてもよい。
対応決定部22は、対応注意情報作成部26により作成された接客時対応注意情報が、タブレット10から送信された制御コマンドに含まれる引継時対応注意情報と異なる場合、行動ルール記憶部23を参照して、接客時対応注意情報に対応付けられている行動ルール情報に従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定する。対応実行部24は、接客時対応注意情報に対応付けられている行動ルール情報に従って決定された具体的な対応を実行する。
このとき、対応決定部22は、対応注意情報作成部26により作成された接客時対応注意情報が、タブレット10から送信された制御コマンドに含まれる引継時対応注意情報と異なる場合、通信部21、31を介して、制御コマンドに含まれるユーザIDに対応付けて履歴情報記憶部33に記憶されている引継時対応注意情報を、接客時対応注意情報に更新するように情報管理部32に指示することにより、過去の引継時対応注意情報を最新の接客時対応注意情報に更新するようにしてもよい。
また、対応決定部22は、制御コマンドに含まれる引継時対応注意情報及び対応注意情報作成部26により作成された接客時対応注意情報に対応付けられている行動ルール情報に従って接客対応者の支援が必要であるか否かを判断し、接客対応者の支援が必要であると判断した場合、接客対応者の支援が必要であることを示す支援要請情報を生成する。
例えば、引継時対応注意情報が「慎重に対応せよ」であり、行動ルール情報が「慎重に対応し、何かあれば、すぐに人間に支援要請」であり、対応注意情報作成部26が接客相手の「怒り」の感情を推定した場合、対応決定部22は、接客対応者の支援が必要であると判断し、支援要請情報を生成する。
このとき、通信部21は、サーバ30の通信部31を介して、対応決定部22により生成された支援要請情報をタブレット10の通信部13に送信する。通信部13は、サーバ30を介してロボット20から送信された、接客対応者の支援が必要であることを示す支援要請情報を受信し、支援要請情報提示部14に出力する。
支援要請情報提示部14は、ディスプレイ等から構成され、通信部13を介して、ロボット20から送信された支援要請情報を取得し、取得した支援要請情報を用いて作成した支援要請画面をディスプレイに表示する。例えば、支援要請画面には、「緊急支援要求」等の文字が大きく表示され、接客対応者は、この表示を見ることにより、緊急に接客をロボット20から引き継ぐ必要があることを理解することができる。
なお、通信端末は、タブレット10に特に限定されず、スマートフォンやノート型又はデスクトップ型コンピュータ等を用いてもよい。また、上記の支援要請情報を用いて支援要請用音声を作成して、音声により接客対応者に支援を要請するようにしてもよい。
また、本接客システムの構成は、上記の例に特に限定されず、種々の変更が可能である。例えば、サーバ30を省略し、ロボット20に、情報管理部32及び履歴情報記憶部33を設け、ロボット20がサーバ30の処理も実行するようにしてもよく、この場合、ロボット20は、接客装置の一例に相当する。
また、ロボット20から対応決定部22、行動ルール記憶部23、及び対応注意情報作成部26を省略し、ロボット20が、通信部21、対応実行部24、及び生体データ取得部25を備え、通信部21が、生体データ取得部25が取得した情報をサーバ30に送信し、また、サーバ30の通信部31が生体データ等を取得し、サーバ30に、さらに、対応決定部22、行動ルール記憶部23、及び対応注意情報作成部26を設け、サーバ30が対応決定部22、行動ルール記憶部23、及び対応注意情報作成部26の処理も実行し、サーバ30の対応決定部22が決定した対応に基づき、ロボット20の対応実行部24が具体的な対応を実行するようにしてもよい。この場合、サーバ30は、接客装置の一例に相当する。
また、サーバ30が接客装置として動作する場合、ロボット20に代えて、通信部21、対応実行部24、及び生体データ取得部25を備えるユーザインターフェース装置(例えば、ディスプレイ、スピーカ、マイク)を用いてもよい。
次に、上記のように構成された接客システムによる接客処理について説明する。図3は、図1に示す接客システムによる接客処理の一例を示すシーケンス図である。なお、以下の説明では、人間のコンシェルジュの対応員(接客対応者)がホテルで顧客(接客相手)に対する接客を行い、その後、対応員からロボット20がコンシェルジュとして接客を引き継ぐ場合を例に説明する。
図3に示すように、まず、対応員は、顧客との対応、例えば、顧客からの質問を受け、質問に対する回答を行う(ステップS11)。
次に、対応員は、顧客との対応及び自身の知識等から、ロボット20に引き継ぐ引継情報を決定し、タブレット10の引継情報入力部11を用いて、顧客のユーザID等と、対応員からロボット20に引き継ぐ対応内容を示す対応内容情報と、顧客に対する対応時にロボット20が注意すべき注意事項を示す引継時対応注意情報とを含む引継情報を入力する(ステップS12)。
図4は、図1に示すタブレット10を用いて対応員が引継情報を入力するための入力画面の一例を示す図である。
図4に示すように、画面の左端に、大分類された対応内容を示す複数のアイコンが表示される。図4の例では、大分類された対応内容として、「荷物運び」、「ご案内」、及び「応対」の3つのアイコンが引継情報入力部11のタッチパネルに表示され、対応員は、ロボット20に引き継ぐ対応内容に該当するアイコンをタップする。
また、画面の中央から右端に、大分類された対応内容に対する詳細内容を示す複数のアイコンが引継情報入力部11のタッチパネルに表示される。例えば、「荷物運び」に対しては、「お客様のお部屋へ持って行く」、「お客様のお部屋へ取りに行く」、及び「お部屋番号」の3つのアイコンが表示され、「お部屋番号」のアイコンの下部に顧客の部屋番号が入力される。
図4の例は、対応員が「荷物運び」及び「お客様のお部屋へ持って行く」のアイコンを選択し、「お部屋番号」のアイコンの下部に顧客の部屋番号である803を入力した例である。この場合、各アイコンの選択状態を示すため、各アイコンの外枠が太線に変更されている。
また、図示していない他の操作画面を用いて、顧客のユーザIDは、「お部屋番号」のアイコンと同様の「ユーザID」アイコンが表示され、対応員は、「ユーザID」アイコンを用いて、ユーザIDを入力する。また、図示していない他の操作画面を用いて、顧客に対する対応時にロボット20が注意すべき注意事項を示す引継時対応注意情報に対しても、「荷物運び」のアイコンと同様の「属性がプレミアム顧客」、「慎重に対応せよ」、「尊大な」等のアイコンが表示され、対応員は、ロボット20が注意すべき注意事項に該当するアイコンを選択する。
上記のようにして、対応員は、引継情報入力部11を用いて、顧客のユーザID等と、対応員からロボット20に引き継ぐ対応内容を示す対応内容情報と、顧客に対する対応時にロボット20が注意すべき注意事項を示す引継時対応注意情報とを含む引継情報を入力することができる。
再び、図3を参照して、次に、タブレット10の制御コマンド生成部12は、引継情報入力部11から入力された引継情報を基に、ロボット20を制御するための制御コマンドを作成し、通信部13は、制御コマンド生成部12により生成された制御コマンドをサーバ30の通信部31に送信する(ステップS13)。
次に、サーバ30の情報管理部32は、通信部21を介して、タブレット10から送信された制御コマンドを入力され、制御コマンドに含まれるユーザIDの履歴情報が履歴情報記憶部33に記憶されているか否かを確認し、制御コマンドに含まれるユーザIDの履歴情報が履歴情報記憶部33に記憶されている場合、制御コマンドに含まれるユーザIDの履歴情報を制御コマンドに付加する(ステップS14)。一方、制御コマンドに含まれるユーザIDの履歴情報が履歴情報記憶部33に記憶されていない場合、情報管理部32は、履歴情報を制御コマンドに付加しない。
次に、通信部31は、履歴情報が付加された制御コマンド又は履歴情報が付加されていない制御コマンドをロボット20の通信部21へ送信する(ステップS15)。
図5は、図1に示すタブレット10からロボット20へ送信される制御コマンドのデータ構造の一例を示す図である。
図5に示すように、制御コマンドは、制御コマンドを識別するためのデータIDと、対応員からロボット20に引き継ぐ対応内容を示す対応内容情報を示す依頼業務内容、ユーザIDである顧客ID、顧客の属性情報を示す属性、顧客に対する対応時にロボット20が注意すべき注意事項を示す引継時対応注意情報を示す対応注意情報1〜対応注意情報3とを含む。
例えば、データIDが「16062401」の場合、依頼業務内容に「お客様の荷物を運んで、部屋へ持って行く」が格納され、顧客IDに「250115」が格納され、属性に「P」(プレミアム顧客)が格納され、対応注意情報1に「慎重に対応せよ」が格納され、対応注意情報2に「尊大な」が格納され、対応注意情報3に「歩く速度が遅い」が格納されている。
この制御コマンドにより、ロボット20は、ユーザID「250115」の顧客に対して、対応注意情報1の「慎重に対応せよ」に対応付けられている「慎重に対応し、何かあれば、すぐに人間に支援要請」という行動ルール、対応注意情報2の「尊大な」に対応付けられている「丁寧な言葉で話しかける」という行動ルール、及び、対応注意情報3の「歩く速度が遅い」に対応付けられている「ゆっくりと移動し、顧客との距離を規定内とする」という行動ルールに従い、「お客様の荷物を運んで、部屋へ持って行く」という対応を実行する。
ここで、データIDが「16062401」の制御コマンドでは、属性の「P」(プレミアム顧客)が設定されている。このため、「属性がプレミアム顧客」の対応注意情報に対応付けられている「慎重に対応し、何かあれば、すぐに人間に支援要請」という行動ルールも適用されるが、図2に示す例では、対応注意情報1の行動ルールと同一であるので、ロボット20が採用する行動ルールは、対応注意情報1〜対応注意情報3の行動ルールとなる。
なお、「属性がプレミアム顧客」の対応注意情報に対応付けられている行動ルールと、「慎重に対応せよ」の対応注意情報に対応付けられている行動ルールとが異なる場合、「属性がプレミアム顧客」の対応注意情報に対応付けられている行動ルールも付加される。
同様に、データIDが「16062402」の場合、依頼業務内容に「別階のレストランへお連れする」が格納され、顧客IDに「初見」(ユーザIDを有していない顧客)が格納され、属性は空欄(プレミアム顧客でない顧客)であり、対応注意情報1に「お喋り好き」が格納され、対応注意情報2に「オシャレ」が格納され、対応注意情報3は空欄である。この場合、ロボット20は、上記と同様に、対応注意情報1及び対応注意情報2に対応付けられた行動ルールに従い、「別階のレストランへお連れする」という対応を実行する。
また、データIDが「16062403」の場合、依頼業務内容に「アクティビティセンタへ案内する」が格納され、顧客IDに「初見」(ユーザIDを有していない顧客)が格納され、属性は空欄(プレミアム顧客でない顧客)であり、対応注意情報1に「物静か」が格納され、対応注意情報2に「歩く速度が速い」が格納され、対応注意情報3は空欄である。この場合、ロボット20は、上記と同様に、対応注意情報1及び対応注意情報2に対応付けられた行動ルールに従い、「アクティビティセンタへ案内する」という対応を実行する。
なお、制御コマンドのデータ構造は、上記の例に特に限定されず、2個又は3個の対応注意情報ではなく、1個又は4個以上の対応注意情報を設定する等の種々の変更が可能である。また、上記の例のように、対応注意情報が複数ある場合、各対応注意情報に対して優先順位を設定し、ロボット20は、優先順位の高い対応注意情報を優先して行動ルールを採用するようにしてもよい。
再び、図3を参照して、次に、ロボット20の通信部21は、制御コマンドを受信し、制御コマンドに従ったロボット20と顧客との対応が行われ(ステップS16)、以下に説明するステップS17〜S24の処理が必要に応じて順次繰り返される。
まず、対応決定部22は、通信部21によりタブレット10からの制御コマンドを受信したとき、制御コマンドに含まれる引継時対応注意情報に対応付けられている行動ルール情報に従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定し、対応実行部24は、対応決定部22が決定した対応に基づき、具体的な対応を実行する(ステップS17)。
次に、生体データ取得部25は、顧客の生体データを取得し(ステップS18)、対応注意情報作成部26は、生体データ取得部25により取得された生体データを解析することにより、顧客に対する対応時にロボット20が注意すべきと判断した注意事項を示す接客時対応注意情報を作成して対応決定部22に出力し、対応決定部22は、対応注意情報作成部26により作成された接客時対応注意情報が、タブレット10から送信された制御コマンドに含まれる引継時対応注意情報と異なるか否かを確認する(ステップS19)。
次に、対応決定部22は、接客時対応注意情報が引継時対応注意情報と異なる場合、行動ルール記憶部23を参照して、接客時対応注意情報に対応付けられている行動ルール情報に従って接客相手に対する対応を決定し、対応実行部24は、接客時対応注意情報に対応付けられている行動ルール情報に従って決定された具体的な対応を実行し、通信部21は、接客時対応注意情報をサーバ30の通信部31に送信する(ステップS20)。
次に、サーバ30の情報管理部32は、履歴情報記憶部33に記憶されている引継時対応注意情報を、通信部31により受信された接客時対応注意情報に更新する(ステップS21)。なお、上記の更新処理は、必要に応じて実行され、この処理を省略してもよい。
次に、対応決定部22は、制御コマンドに含まれる引継時対応注意情報及び対応注意情報作成部26により作成された接客時対応注意情報に対応付けられている行動ルール情報に従って接客対応者の支援が必要である否かを確認する(ステップS22)。
次に、接客対応者の支援が必要である場合、対応決定部22は、接客対応者の支援が必要であることを示す支援要請情報を生成し、通信部21は、支援要請情報をサーバ30の通信部31に送信し、通信部31は、支援要請情報をタブレット10の通信部13に送信する(ステップS23)。
次に、タブレット10の支援要請情報提示部14は、通信部13を介して、ロボット20から送信された支援要請情報を取得し、取得した支援要請情報を用いて作成した支援要請画面をディスプレイに表示し、対応員にロボット20に対する支援が必要であることを提示する(ステップS24)。
次に、上記の接客システムによる接客処理のうちロボット20による接客引継処理についてさらに詳細に説明する。図6は、図1に示すロボット20による接客引継処理の一例を示すフローチャートである。
まず、ロボット20は、待機状態にあり(ステップS31)、例えば、ホテルの受付口で対応員からの引継指示を待っている。
次に、ロボット20の対応決定部22は、通信部21を介して、タブレット10から制御コマンド(又はサーバ30により履歴情報が付加された制御コマンド)を受信したか否かを確認し(ステップS32)、制御コマンドを受信していない場合(ステップS32でNO)、ステップS31の待機処理を継続する。
一方、制御コマンドを受信した場合(ステップS32でYES)、対応決定部22は、制御コマンドに含まれる引継時対応注意情報に示される注意事項に従って対応内容情報に示される対応内容を行うように接客相手に対する対応を決定し、対応実行部24は、対応決定部22が決定した対応に基づく具体的な対応を実行し、例えば、顧客との対話を実施する(ステップS33)。
次に、対応決定部22は、上記の対応の結果、対応員の支援が必要である否かを確認する(ステップS34)。対応員の支援が必要であると判断した場合(ステップS34でYES)、対応決定部22は、対応員の支援が必要であることを示す支援要請情報を生成し、通信部21、31を介して、支援要請情報をタブレット10の通信部13に送信して(ステップS40)、処理を終了し、その後、対応員が支援に来るまで待機する。
一方、対応員の支援が必要でないと判断した場合(ステップS34でNO)、対応決定部22は、顧客との対話が終了したか否かを判断する(ステップS35)。顧客との対話が終了した場合(ステップS35でYES)、対応決定部22は、今回の顧客に対する接客履歴を示す履歴情報を作成し、通信部21を用いて、履歴情報をサーバ30に送信し(ステップS41)、その後、ステップS31の待機処理に戻り、次の対応員からの引継指示を待ち受ける。
一方、顧客との対話が終了していない場合(ステップS35でNO)、生体データ取得部25は、顧客の生体データをセンシングし(ステップS36)、対応注意情報作成部26は、センシング結果に基づいて、最新の対応注意情報として、接客時対応注意情報を作成する(ステップS37)。
次に、対応決定部22は、接客時対応注意情報が引継時対応注意情報と異なるか否かを確認する(ステップS38)。接客時対応注意情報が引継時対応注意情報と異ならない場合(ステップS38でNO)、ステップS33以降の処理を繰り返し、顧客との対話を継続する。なお、上記の接客時対応注意情報が引継時対応注意情報と異なるか否かの判断は、引継時対応注意情報が複数ある場合、接客時対応注意情報がすべての引継時対応注意情報と異なるときに異なると判断し、接客時対応注意情報が複数の引継時対応注意情報のうち一つでも一致するときは異ならないと判断する。
一方、接客時対応注意情報が引継時対応注意情報と異なる場合(ステップS38でYES)、対応決定部22は、現在の対応注意情報を接客時対応注意情報に更新する(ステップS39)。具体的には、対応決定部22は、行動ルール記憶部23を参照して、接客時対応注意情報に対応付けられている行動ルール情報に従って接客相手に対する対応を決定し、通信部21は、接客時対応注意情報をサーバ30の通信部31に送信し、履歴情報記憶部33に記憶されている引継時対応注意情報を接客時対応注意情報に更新する。
その後、ステップS33以降の処理を繰り返し、対応決定部22は、行動ルール記憶部23を参照して、接客時対応注意情報に対応付けられている行動ルール情報に従って顧客に対する対応を決定し、対応実行部24は、接客時対応注意情報に対応付けられている行動ルール情報に従って決定された具体的な対応を実行する。
上記の処理により、本実施の形態では、対応員からロボット20に引き継ぐ対応内容を示す対応内容情報と、顧客に対する対応時にロボット20が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドが受信されたとき、引継時対応注意情報に示される注意事項に従って、対応内容情報に示される対応内容を行うように接客相手に対する対応が決定される。したがって、対応員が顧客のニーズや意向を汲んで決定した注意事項を反映した顧客に対する対応を行うことができるので、対応員が顧客に対して接客を行い、次の対応を対応員からロボット20へ円滑に引き継ぐことができる。
以上、本開示の一態様に係る接客システムについて、上記の実施の形態に基づいて説明したが、本開示は、上記の実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が想到する各種変形を本実施の形態に施したもの、あるいは異なる実施の形態における構成要素を組み合わせて構築される形態も、本開示の範囲内に含まれる。
本開示に係る接客装置、接客方法及び接客システムは、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者から接客装置へ円滑に引き継ぐことができるので、接客対応者が接客相手に対して接客を行い、次の対応を接客対応者から引き継いで接客を行う接客装置、接客方法及び接客システムとして有用である。
10 タブレット
11 引継情報入力部
12 制御コマンド生成部
13 通信部
14 支援要請情報提示部
20 ロボット
21 通信部
22 対応決定部
23 行動ルール記憶部
24 対応実行部
25 生体データ取得部
26 対応注意情報作成部
30 サーバ
31 通信部
32 情報管理部
33 履歴情報記憶部

Claims (13)

  1. 接客相手に対する接客を行う接客装置であって、
    前記接客相手に対する対応を前記接客装置に引き継ぐ接客対応者が所持する通信端末から、前記接客対応者から前記接客装置に引き継ぐ対応内容を示す対応内容情報と、前記接客相手に対する対応時に前記接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドを受信する通信部と、
    前記通信部により前記制御コマンドを受信したとき、前記引継時対応注意情報に示される注意事項に従って対応を決定する対応決定部とを備え
    前記対応内容は、前記接客相手と前記接客対応者との対話に基づいて、前記接客対応者によって決定され、
    前記対応決定部は、前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する、
    接客装置。
  2. 前記接客装置は、前記接客相手に対して接客を行うロボットであり、
    前記ロボットは、前記引継時対応注意情報と、前記ロボットが前記接客相手に対して行う対話内容を示す行動ルール情報とを対応付けて記憶する行動ルール記憶部をさらに備え、
    前記対応決定部は、前記通信部により前記制御コマンドを受信したとき、前記行動ルール記憶部を参照し、前記引継時対応注意情報に対応する前記対話内容を選定し、
    前記ロボットは、前記接客相手に対して前記対話内容に対応する対話を行う、
    請求項1に記載の接客装置。
  3. 前記引継時対応注意情報と、前記引継時対応注意情報を受信したときに前記接客装置が実行すべき行動ルールを示す行動ルール情報とを対応付けて予め記憶する行動ルール記憶部をさらに備え、
    前記対応決定部は、前記行動ルール記憶部を参照して、前記制御コマンドに含まれる前記引継時対応注意情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する、
    請求項1に記載に記載の接客装置。
  4. 前記接客相手の生体データを取得する生体データ取得部と、
    前記生体データ取得部により取得された生体データを解析することにより、前記接客相手に対する対応時に前記接客装置が注意すべきと判断した注意事項を示す接客時対応注意情報を作成する作成部とをさらに備え、
    前記行動ルール記憶部は、さらに、前記接客時対応注意情報と、前記接客時対応注意情報に対して前記接客装置が実行すべき行動ルールを示す行動ルール情報とを対応付けて予め記憶し、
    前記対応決定部は、前記接客時対応注意情報が前記引継時対応注意情報と異なる場合、前記行動ルール記憶部を参照して、前記接客時対応注意情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する、
    請求項2または3に記載の接客装置。
  5. 前記制御コマンドは、前記接客相手を識別する識別情報をさらに含み、
    前記接客相手に対する過去の接客履歴を示す履歴情報を前記識別情報に対応付けて記憶する履歴記憶部をさらに備え、
    前記履歴情報は、前記識別情報に対応付けて記憶されている、前記接客相手に対する過去の対応における前記引継時対応注意情報を含み、
    前記対応決定部は、前記接客時対応注意情報が前記引継時対応注意情報と異なる場合、前記行動ルール記憶部を参照して、前記制御コマンドに含まれる前記識別情報に対応付けて前記履歴記憶部に記憶されている前記引継時対応注意情報を、前記接客時対応注意情報に更新する、
    請求項に記載の接客装置。
  6. 前記制御コマンドに含まれる前記識別情報に対応付けて前記履歴記憶部に記憶されている前記履歴情報を前記制御コマンドに付加する付加部をさらに備え、
    前記対応決定部は、前記履歴情報を基に、前記引継時対応注意情報及び前記接客時対応注意情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する、
    請求項に記載の接客装置。
  7. 前記制御コマンドは、前記接客相手の属性が所定の重要条件に該当することを示す重要条件情報をさらに含み、
    前記行動ルール記憶部は、さらに、前記重要条件情報と、前記重要条件情報に対して前記接客装置が実行すべき行動ルールを示す行動ルール情報とを対応付けて予め記憶し、
    前記対応決定部は、前記通信部により受信された前記制御コマンドが前記重要条件情報を含む場合、前記行動ルール記憶部を参照して、前記重要条件情報に対応付けられている前記行動ルール情報に従って前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する、
    請求項2〜6のいずれかに記載の接客装置。
  8. 前記対応決定部は、前記制御コマンドに含まれる前記引継時対応注意情報に対応付けられている前記行動ルール情報に従って前記接客対応者の支援が必要であると判断した場合、前記接客対応者の支援が必要であることを示す支援要請情報を生成し、
    前記通信部は、前記支援要請情報を前記通信端末に送信する、
    請求項2〜7のいずれかに記載の接客装置。
  9. 前記対応内容情報は、
    第1対応内容情報と、
    前記第1対応内容情報に対する詳細内容を示す第2対応情報とを含む、
    請求項1〜8のいずれかに記載の接客装置。
  10. 前記接客相手を撮影するカメラとをさらに備え、
    前記属性は、前記カメラによって撮影された映像に基づいて検出される、
    請求項7に記載の接客装置。
  11. 前記接客装置は、前記接客相手に対して、映像及び/又は身体動作を用いて接客を行うロボットである、
    請求項1〜10のいずれかに記載の接客装置。
  12. 接客相手に対する接客を行う接客装置の接客方法であって、
    前記接客相手に対する対応を前記接客装置に引き継ぐ接客対応者が所持する通信端末から、前記接客対応者から前記接客装置に引き継ぐ対応内容を示す対応内容情報と、前記接客相手に対する対応時に前記接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドを受信し、
    前記対応内容は、前記接客相手と前記接客対応者との対話に基づいて、前記接客対応者によって決定されたものであり、
    前記制御コマンドを受信したとき、前記引継時対応注意情報に示される注意事項に従って前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する、
    接客方法。
  13. 接客相手に対する接客を行う接客対応者が所持する通信端末と、
    前記接客相手に対する対応を前記接客対応者から引き継ぐロボットとを備え、
    前記通信端末は、
    前記接客対応者から前記接客装置に引き継ぐ対応内容を示す対応内容情報と、前記接客相手に対する対応時に前記接客装置が注意すべき注意事項を示す引継時対応注意情報とを含む制御コマンドを送信する通信部を備え、
    前記ロボットは、
    前記制御コマンドを受信する通信部と、
    前記通信部により前記制御コマンドを受信したとき、前記引継時対応注意情報に示される注意事項に従って対応を決定する対応決定部とを備え
    前記対応内容は、前記接客相手と前記接客対応者との対話に基づいて、前記接客対応者によって決定され、
    前記対応決定部は、前記対応内容情報に示される前記対応内容を行うように前記接客相手に対する対応を決定する、
    接客システム。
JP2016157464A 2016-08-10 2016-08-10 接客装置、接客方法及び接客システム Active JP6719072B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016157464A JP6719072B2 (ja) 2016-08-10 2016-08-10 接客装置、接客方法及び接客システム
CN201710404112.7A CN107731224A (zh) 2016-08-10 2017-06-01 待客装置、待客方法以及待客***
US15/652,280 US20180047029A1 (en) 2016-08-10 2017-07-18 Customer service device, customer service method, and customer service system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016157464A JP6719072B2 (ja) 2016-08-10 2016-08-10 接客装置、接客方法及び接客システム

Publications (2)

Publication Number Publication Date
JP2018024058A JP2018024058A (ja) 2018-02-15
JP6719072B2 true JP6719072B2 (ja) 2020-07-08

Family

ID=61160327

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016157464A Active JP6719072B2 (ja) 2016-08-10 2016-08-10 接客装置、接客方法及び接客システム

Country Status (3)

Country Link
US (1) US20180047029A1 (ja)
JP (1) JP6719072B2 (ja)
CN (1) CN107731224A (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11003894B2 (en) * 2016-06-27 2021-05-11 Sony Corporation Information processing system, storage medium, and information processing method to make a response to a user on a basis of an episode constructed from an interaction with a user
US11132681B2 (en) 2018-07-06 2021-09-28 At&T Intellectual Property I, L.P. Services for entity trust conveyances
US10802872B2 (en) 2018-09-12 2020-10-13 At&T Intellectual Property I, L.P. Task delegation and cooperation for automated assistants
US11481186B2 (en) 2018-10-25 2022-10-25 At&T Intellectual Property I, L.P. Automated assistant context and protocol
CN109361824A (zh) * 2018-10-26 2019-02-19 温州博盈科技有限公司 一种数据化客户服务***
US10909328B2 (en) 2019-01-04 2021-02-02 International Business Machines Corporation Sentiment adapted communication
KR20210072588A (ko) * 2019-12-09 2021-06-17 엘지전자 주식회사 서비스 영역 내 로봇들을 제어하여 서비스를 제공하는 방법, 시스템 및 이를 구현하는 로봇
CN117980943A (zh) * 2021-09-21 2024-05-03 索尼集团公司 信息处理装置、其方法和程序
JP7349038B1 (ja) * 2022-04-08 2023-09-21 株式会社イトーキ 介護ロボット用制御装置及び介護ロボットシステム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020087385A1 (en) * 2000-12-28 2002-07-04 Vincent Perry G. System and method for suggesting interaction strategies to a customer service representative
JP2002230130A (ja) * 2001-01-30 2002-08-16 Casio Comput Co Ltd 飲食店サービスシステム、飲食店サービス方法、及びプログラム
JP2003076757A (ja) * 2001-08-31 2003-03-14 Mitsubishi Electric Information Systems Corp メニューリコメンドシステム、メニューリコメンド方法、メニューリコメンドプログラム及びメニューリコメンドプログラムを記録したコンピュータ読み取り可能な記録媒体
US6959080B2 (en) * 2002-09-27 2005-10-25 Rockwell Electronic Commerce Technologies, Llc Method selecting actions or phases for an agent by analyzing conversation content and emotional inflection
US7933399B2 (en) * 2005-03-22 2011-04-26 At&T Intellectual Property I, L.P. System and method for utilizing virtual agents in an interactive voice response application
JP5033994B2 (ja) * 2006-01-19 2012-09-26 株式会社国際電気通信基礎技術研究所 コミュニケーションロボット
JP5764795B2 (ja) * 2011-01-05 2015-08-19 株式会社国際電気通信基礎技術研究所 移動ロボット、移動ロボット用の学習システムおよび移動ロボットの行動学習方法
JP6022201B2 (ja) * 2012-05-07 2016-11-09 シャープ株式会社 遠隔制御システム、上記遠隔制御システムの設定方法、通信端末装置、およびサーバ装置
JP6147968B2 (ja) * 2012-06-13 2017-06-14 カシオ計算機株式会社 接客管理装置、接客管理システム及びプログラム
JP2014059829A (ja) * 2012-09-19 2014-04-03 Toshiba Corp 駅務機器、乗車券媒体及び接客システム
CN105225173A (zh) * 2015-10-12 2016-01-06 江苏木盟智能科技有限公司 餐饮服务***
CN105303484A (zh) * 2015-11-12 2016-02-03 东北大学 一种机器人餐厅智能点餐送餐***

Also Published As

Publication number Publication date
CN107731224A (zh) 2018-02-23
JP2018024058A (ja) 2018-02-15
US20180047029A1 (en) 2018-02-15

Similar Documents

Publication Publication Date Title
JP6719072B2 (ja) 接客装置、接客方法及び接客システム
CN111788621B (zh) 移情式个人虚拟数字助理
CN110447232B (zh) 用于确定用户情绪的电子设备及其控制方法
KR102374910B1 (ko) 음성 데이터 처리 방법 및 이를 지원하는 전자 장치
CN109074117B (zh) 提供基于情绪的认知助理***、方法及计算器可读取媒体
US9858924B2 (en) Voice processing apparatus and voice processing method
CN108205627A (zh) 交互式助理模块对访问的有条件提供
JP7056055B2 (ja) 情報処理装置、情報処理システム及びプログラム
KR102448382B1 (ko) 텍스트와 연관된 이미지를 제공하는 전자 장치 및 그 동작 방법
WO2016080553A1 (ja) 学習型ロボット、学習型ロボットシステム、及び学習型ロボット用プログラム
KR20160099552A (ko) 서비스 제공 관리 시스템
US20110201899A1 (en) Systems for inducing change in a human physiological characteristic
JP6770981B2 (ja) 心肺蘇生連携方法、コンピュータプログラム製品及びシステム
US20180047030A1 (en) Customer service device, customer service method, and customer service system
US20210272585A1 (en) Server for providing response message on basis of user's voice input and operating method thereof
JP6291303B2 (ja) コミュニケーション支援ロボットシステム
JP2017058406A (ja) コンピュータシステムおよびプログラム
JP6040745B2 (ja) 情報処理装置、情報処理方法、情報処理プログラム及びコンテンツ提供システム
US20210404830A1 (en) Navigation device, vehicle, navigation method, and non-transitory storage medium
KR101842963B1 (ko) 사용자-로봇 상호작용을 위한 시스템 및 정보 처리 방법
Kbar et al. Utilizing sensors networks to develop a smart and context-aware solution for people with disabilities at the workplace (design and implementation)
JP2019185201A (ja) 強化学習システム
JP2016177443A (ja) 情報処理装置及び方法
JP6242359B2 (ja) 情報処理装置及び方法
KR20200115695A (ko) 전자 장치 및 이의 제어 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200212

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200409

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200507

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200527

R151 Written notification of patent or utility model registration

Ref document number: 6719072

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151