CN113037926B - 通信***、信息通信方法和存储介质 - Google Patents

通信***、信息通信方法和存储介质 Download PDF

Info

Publication number
CN113037926B
CN113037926B CN202110187702.5A CN202110187702A CN113037926B CN 113037926 B CN113037926 B CN 113037926B CN 202110187702 A CN202110187702 A CN 202110187702A CN 113037926 B CN113037926 B CN 113037926B
Authority
CN
China
Prior art keywords
information
expression
communication
love
utility
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110187702.5A
Other languages
English (en)
Other versions
CN113037926A (zh
Inventor
井原圭吾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to CN202110187702.5A priority Critical patent/CN113037926B/zh
Publication of CN113037926A publication Critical patent/CN113037926A/zh
Application granted granted Critical
Publication of CN113037926B publication Critical patent/CN113037926B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046—Interoperability with other network applications or services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

公开了通信***、信息通信方法和存储介质。通信***包含：控制单元，其执行用于将文本信息传输到通信目的地和从通信目的地接收文本信息的通信应用程序；和通信单元，其将获取的文本信息传输到通信目的地，其中控制单元响应于来自通信应用程序的请求激活实用程序，以及实用程序获取由传感器检测的传感器数据，从传感器数据中提取特定表达信息，将特定表达信息转换为文本信息，并将文本信息输出到通信应用程序，其中在经由通信单元将指示特定表达信息的文本信息传输到通信目的地后，控制单元执行控制使得当在预定时间段内从通信目的地检测到指示与传输的特定表达信息相同的表达信息的代码的接收时，将指示用户具有相同感觉的表达信息表达给用户。

Description

通信***、信息通信方法和存储介质
本申请为于2018年5月3日提交、申请号为201680064191.5、发明名称为“通信***和存储介质”的中国专利申请的分案申请。所述母案申请的国际申请日为2016年8月5日，国际申请号为PCT/JP2016/073178。
技术领域
本公开涉及通信***和存储介质。
背景技术
近年来，通信技术已经得到发展，并且经由网络频繁交换消息。用户可以通过使用诸如智能电话、移动电话终端或平板终端的信息处理终端来检查从其他终端传输的消息或传输消息。
一般来说，消息是经由虚拟键盘或数字小键盘输入的。虚拟键盘显示在信息处理终端的显示单元上，并且数字小键盘提供在终端上。另外，作为输入消息的技术，例如，提出了以下技术。
下面列出的专利文献1和2公开了用于传输触觉消息的***。根据专利文献1和2，有可能检测用户的手势并将消息传输到目标接收器。
另外，下面列出的专利文献3公开了一种方法，其用于从消息、语音、血压、心跳和面部表情中的句子生成消息编排器的状态信息，将消息编排器的状态信息附加到消息上，传输消息，并且基于编排器的状态信息通过使用输出装置(LCD、子LCD、LED、振动器或扬声器)从接收器侧输出编排器的状态信息。
引文列表
专利文献
专利文献1：JP 2014-170560A
专利文献2：JP 2011-528537T
专利文献3：JP 2008-546360T
发明内容
技术问题
然而，根据上面列出的专利文献的每种技术需要在消息传输侧终端和消息接收侧终端中都安装专用处理程序。因此，这些技术缺乏通用性，并且用户使用起来不方便。
因此，本公开提出了一种通信***和一种存储介质，其能够经由通用通信应用程序传输用户的身体表达信息。
问题的解决方案
根据本公开，提供一种通信***，包括：控制单元，其被配置成执行用于直接或间接地将文本信息传输到通信目的地和从通信目的地接收文本信息的通信应用程序；以及通信单元，其被配置成直接或间接地将经由通信应用程序获取的文本信息传输到通信目的地。控制单元响应于来自通信应用程序的请求而激活实用程序。实用程序获取由传感器检测的传感器数据，从传感器数据中提取特定表达信息，将特定表达信息转换为文本信息，并且将文本信息输出到通信应用程序。
根据本公开，提供一种其中存储有程序的存储介质，程序使计算机用作：控制单元，其被配置成执行用于直接或间接地将文本信息传输到通信目的地和从通信目的地接收文本信息的通信应用程序；以及通信单元，其被配置成直接或间接地将经由通信应用程序获取的文本信息传输到通信目的地。控制单元响应于来自通信应用程序的请求而激活实用程序。实用程序获取由传感器检测的传感器数据，从传感器数据中提取特定表达信息，将特定表达信息转换为文本信息，并且将文本信息输出到通信应用程序。
发明的有益效果
如上所述，根据本公开，有可能经由通用通信应用程序传输用户的身体表达信息。
应注意，上述效果不一定是限制性的。使用或代替上述效果，可以实现本说明书中描述的任何一种效果或可以从本说明书中掌握的其他效果。
附图说明
[图1]图1是图示根据本公开的实施方案的信息处理***的概述的图解。
[图2]图2是图示根据实施方案的信息处理***的***配置的图解。
[图3]图3是图示根据实施方案的表达管理服务器的配置的实例的方框图。
[图4]图4是图示根据实施方案的信息处理设备1的配置的实例的方框图。
[图5]图5是图示根据实施方案的从爱表达信息转换的文本信息的实例的图解。
[图6]图6是图示根据实施方案的通用爱表达信息表的第一实例的图解。
[图7]图7是图示根据实施方案的通用爱表达信息表的第二实例的图解。
[图8]图8是图示根据实施方案的有限爱表达信息表的实例的图解。
[图9]图9是图示根据实施方案的爱表达传输的流程图。
[图10]图10是图示根据实施方案的显示通向爱表达实用程序的引导路径的实例的图解。
[图11]图11是图示根据实施方案的有限爱表达注册处理的流程图。
[图12]图12是图示根据实施方案的有限爱表达消息注册屏幕的实例的图解。
[图13]图13是图示根据实施方案的有限爱表达消息的附加信息的输入屏幕的实例的图解。
[图14]图14是根据实施方案的选择用于共享有限爱表达消息的伴侣的选择屏幕。
[图15]图15是图示根据实施方案的在有限爱表达注册时由共享方执行的处理的流程图。
[图16]图16是图示根据实施方案的包括共享有限爱表达消息的请求的文本信息的实例的图解。
[图17]图17是图示根据实施方案的在包括共享请求的情况下显示通向爱表达实用程序的引导路径的实例的图解。
[图18]图18是图示根据实施方案的在传输爱表达消息之后由传输侧终端执行的处理的流程图。
[图19]图19是图示根据实施方案的爱表达消息的接收侧处理的流程图。
[图20]图20是图示根据实施方案的用于在通信AP上显示包括在爱表达消息中的文本的方法的图解。
[图21]图21是图示根据实施方案的用于调用爱表达消息的方法的图解。
[图22]图22是图示根据实施方案的用于调用爱表达消息的另一方法的图解。
[图23]图23是图示根据实施方案的用于调用爱表达消息的另一方法的图解。
[图24]图24是根据实施方案的指示爱表达消息的实例的自然语言显示实例，以及动画图像实例。
[图25]图25是根据实施方案的指示爱表达消息的实例的自然语言显示实例，以及动画图像实例。
[图26]图26是根据实施方案的指示爱表达消息的实例的自然语言显示实例，以及动画图像实例。
[图27]图27是根据实施方案的指示爱表达消息的实例的自然语言显示实例，以及动画图像实例。
[图28]图28是图示根据实施方案的在显示爱表达消息之后由接收侧终端执行的处理的流程图。
[图29]图29是图示根据实施方案的用于调用指示他们彼此相爱的爱表达消息的方法的图解。
[图30]图30是图示根据实施方案的用于调用指示他们彼此相爱的爱表达消息的另一方法的图解。
[图31]图31是图示根据实施方案的爱表达消息的实时流的传输侧处理的流程图。
[图32]图32是图示根据实施方案的显示通向爱表达实用程序的引导路径的实例的图解。
[图33]图33是图示根据实施方案的爱表达消息的实时流的接收侧处理的流程图。
[图34]图34是图示根据实施方案的用于调用爱表达消息的实时流视频的方法的图解。
具体实施方式
在下文中，将参照附图详细描述本公开的优选实施方案。应注意，在本说明书和附图中，具有大体上相同的功能和结构的结构元件用相同的参考数字表示，并且省略这些结构元件的重复说明。
应注意，描述将按以下顺序进行。
1.根据本公开的实施方案的信息处理***的概述
2.配置
2-1.服务器的配置
2.信息处理设备的配置
3.操作处理
3-1.爱表达传输处理
3-2.爱表达接收处理
3-3.实时流处理
4.结论
<<1.根据本公开的实施方案的信息处理***的概述>>
当使用根据实施方案的信息处理***时，有可能经由通用通信应用程序传输用户的身体表达信息。
换句话说，一般来说，通过输入文本创建消息，并在经由能够交换消息的通用通信工具聊天时传输给伴侣。然而，当用户忙碌时，当用户正在做另一项工作并且不能立即回复时，或者当用户不想使用单词来表达他/她对伴侣的爱时，根据实施方案的信息处理***是有用的。图1是图示根据实施方案的信息处理***的概述的图解。如图1中所示，当用户A通过使用信息处理设备1a和1b以及通用通信工具在用户彼此进行文本聊天时抓住她手中的信息处理设备1a时，提供在信息处理设备1a上的触摸传感器识别出信息处理设备1a被手抓住。另外，例如，来自用户A的这种爱表达被显示在信息处理设备1b上，作为拥抱枕头的女孩的例证。有可能在不使用单词的情况下将用户A的感觉告诉伴侣。另外，在用户A忙碌并且不能输入文本的情况下，例如，有可能通过向信息处理设备1a挥手或对信息处理设备1a飞吻来将消息传输给伴侣。
接着，图2图示根据实施方案的这种信息处理***的***配置。如图2中所示，根据实施方案的信息处理***包括信息处理设备1a和2b，以及表达管理服务器2。他们经由网络3连接。
信息处理设备1a和1b能够经由通用通信应用程序进行文本聊天。应注意，未图示被配置成执行这种通信应用程序的服务器。
表达管理服务器2具有存储根据实施方案的与爱表达有关的各种信息的功能。表达管理服务器2响应于来自信息处理设备1a或1b的请求来传输目标爱表达信息。
<<2.配置>>
<2-1.服务器的配置>
图3是图示根据实施方案的表达管理服务器2的配置的实例的方框图。如图3中所示，表达管理服务器2包括通信单元20、用户管理单元21、爱表达管理单元22、通用爱表达数据库(DB)23和有限爱表达DB 24。
通信单元20以有线/无线方式将数据传输到外部设备和从外部设备接收数据。例如，通信单元20与信息处理设备1连接并传输和接收爱表达数据。
用户管理单元21管理用户信息的注册、删除等。
爱表达管理单元22管理存储在通用爱表达DB 23和有限爱表达DB 24中的爱表达信息的注册、删除等。在该实施方案中，在通用爱表达DB 23中管理任何人都能理解的通用爱表达，并且在有限爱表达DB 24中管理仅可针对特定群体理解的有限爱表达。有限爱表达信息可以在伴侣方注册这些信息之后相互使用。
<2.信息处理设备的配置>
图4是图示根据实施方案的信息处理设备1的配置实例的方框图。如图4中所示，信息处理设备1包括控制单元10、相机11、麦克风12、触摸传感器13、加速度传感器14、触摸屏显示器16、通信单元17和存储单元18。
控制单元10用作根据各种程序控制在信息处理设备1中执行的所有操作的算术处理设备和控制设备。例如，控制单元10由中央处理单元(CPU)和诸如微处理器等的电子电路实施。另外，如图4中所示，根据实施方案的控制单元10可以用作爱表达实用程序100和通信应用程序(AP)执行单元110。
通信AP执行单元110执行通用通信应用程序，例如在触摸屏显示器16上显示文本聊天屏幕，并且经由通信单元17将输入到文本聊天屏幕中的文本消息传输给伴侣。
例如，爱表达实用程序100可以与通信AP合作，并且可以经由通向爱表达实用程序的引导路径(诸如图标)被调用以显示在文本聊天屏幕上。或者，在消息输入屏幕(换句话说，聊天屏幕)由通信AP显示的时刻，爱表达实用程序100可以被调用并激活。如图4中所示，爱表达实用程序100用作传感器数据获取单元101、爱表达提取单元102、爱表达/文本转换单元103、文本输出控制单元104、文本获取单元105、文本/爱表达转换单元106、爱表达输出控制单元107和爱表达存储单元108。
当爱表达实用程序100被调用时，传感器数据获取单元101进入等待来自相机11、麦克风12，或诸如触摸传感器13(触摸屏显示器16和安装在其他地方的触摸传感器)或加速度传感器14的各种传感器的输入的状态。传感器数据获取单元101将由各种传感器检测并输入的传感器数据输出到爱表达提取单元102。
爱表达提取单元102从各种传感器数据中提取爱表达信息。此时，爱表达提取单元102参考存储在爱表达存储单元108中的爱表达信息，从输入的传感器数据中提取爱表达信息。
爱表达/文本转换单元103将由爱表达提取单元102提取的爱表达信息转换为文本信息(爱表达消息)。此时，爱表达/文本转换单元103也参考存储在爱表达存储单元108中的爱表达信息，将提取的爱表达信息转换为文本信息。例如，通过转换文本信息，有可能使用仅处理文本的通用通信工具。这里，图5图示转换的文本信息的实例。如图5中所示，根据实施方案的文本信息(爱表达消息)40包括代码402和自然语言401。代码402可为爱表达实用程序100所理解，并且自然语言401可供人类阅读。在代码402中，“0000e2a1”是代码体。例如，代码体使用例如十六进制的四个字节表示。另外，为了防止这种代码按原样显示在通用通信工具中，可以隐藏“kanjo”之后的括号内注明的预定符号和代码。假定自然语言401按原样显示在通用通信工具中。
文本输出控制单元104将由爱表达/文本转换单元103转换的文本信息(爱表达消息)传递给通信AP执行单元110，并且通信AP执行单元110经由通信单元17将文本信息传输给伴侣。
爱表达存储单元108存储通用爱表达信息表和有限爱表达信息表。通用爱表达信息表是经由通信单元17从表达管理服务器2接收的最新的表。另一方面，通过用户操作注册有限爱表达信息表。有限爱表达信息表是根据需要经由通信单元17从表达管理服务器2接收的表。这里，图6至图8图示爱表达信息表的实例。
图6是图示通用爱表达信息表的第一实例的图解。如图6中所示，包括爱表达代码、传感器检测条件、自然语言、爱表达内容、动画图像、音效和振动。这里，以动画图像为例进行关联。然而，该实施方案不限于此。静止图像可以被关联。另外，音效和振动是在将动画图像呈现给接收侧时要输出的爱表达信息。另外，在爱表达提取单元102基于获取的传感器数据提取爱表达信息时参考传感器检测条件。另外，在将爱表达转换为文本信息(爱表达消息)时，爱表达/文本转换单元103参考代码和自然语言。另外，爱表达表不仅被爱表达实用程序100所使用。爱表达信息可以被其他应用程序访问。在这种情况下，例如，爱表达表可以被通信AP引用，并且有可能执行转换为对应于从伴侣方接收的爱表达消息的原始图像或表情符号。为了使一般通信工具能够理解这种爱表达消息的含义，每个爱表达表都包括“爱表达内容”字段。例如，在一般通信工具参考爱表达表并且对应于代码的爱表达内容指示“再见”的情况下，一般通信工具执行转换为指示人物挥手的原始图像、表情符号等，并且在文本聊天屏幕上显示原始图像、表情符号等。
图7是图示通用爱表达信息表的第二实例的图解。在该实施方案中，在爱表达消息被传输给伴侣并且然后在给定条件下将同一爱表达消息作为来自伴侣的回复传输的情况下，确定他们彼此相爱，并呈现爱表达。其细节将在后面描述。图7是图示指示他们彼此相爱的通用爱表达信息的实例的图解。这里，诸如代码、用于确定他们彼此相爱的条件、动画图像、BGM/音效的信息相关联。例如，第一行是在通过飞吻来表达爱意的情况下指示他们彼此相爱的表达，第二行是在通过双手抓住他们的设备来表达爱意的情况下指示他们彼此相爱的表达，第三行是在记录他们的心跳的情况下指示他们彼此相爱的表达，并且第四行是在他们挥手的情况下指示他们彼此相爱的表达。
图8是图示有限爱表达信息表的实例的图解。如上所述，有限爱表达信息表是存储专门针对特定用户的与爱表达有关的信息的表。其数据格式与通用爱表达表相同。这里，例如，在触摸屏上点击三次意味着指示我想念你的爱表达。例如，这种爱表达与显示看着伴侣的人的动画图像相关联。
以上主要描述了爱表达传输侧所执行的处理。接着，将描述爱表达接收侧所执行的处理。
经由通信单元17，文本获取单元105从来自通信AP的从伴侣方传输的信息获取文本信息(爱表达消息)。如参考图5所述，文本信息(爱表达消息)包括描述爱表达的自然语言。因此，有可能将自然语言按原样传递给通信AP执行单元110并且在聊天屏幕上显示自然语言。另一方面，在接收侧也具有爱表达实用程序100的情况下，爱表达实用程序100通过应用程序间通信等从通信AP被调用，文本信息(爱表达消息)被传递，并且由文本/爱表达转换单元106(稍后描述)对代码进行解码，并且在屏幕上显示爱表达图像。
文本/爱表达转换单元106参考存储在爱表达存储单元108中的爱表达表，将获取的文本信息转换为爱表达。具体来说，文本/爱表达转换单元106对代码进行解码，并且从爱表达存储单元108中提取相应的动画图像。
爱表达输出控制单元107将由文本/爱表达转换单元106转换的爱表达信息输出到通信AP执行单元110。通信AP执行单元110在爱表达输出控制单元107的控制下在聊天屏幕上显示爱表达信息(具体来说，动画图像)。
通信单元17以有线/无线方式将数据传输到外部设备和从外部设备接收数据。
存储单元18被实施为只读存储器(ROM)或随机存取存储器(RAM)。ROM存储在控制单元10执行的处理中使用的程序、操作参数等，并且RAM临时存储任意改变的参数等。
上面已经描述了根据实施方案的信息处理***的各个结构元件的细节。接着，将描述根据实施方案的操作处理。
<<3.操作处理>>
<3-1.爱表达传输处理>
图9是图示根据实施方案的爱表达传输处理的流程图。如图9中所示，信息处理设备1首先激活通信AP(步骤S103)，并且检查是否安装爱表达实用程序(步骤S106)。
接着，在安装爱表达实用程序的情况下(步骤S106中的“是”)，在通信AP的聊天屏幕上显示通向爱表达实用程序的引导路径(步骤S109)。在选择通向爱表达实用程序的引导路径的情况下(步骤S112中的“是”)，信息处理设备1激活爱表达实用程序(步骤115)。这里，图10图示根据实施方案的屏幕显示实例。如图10的左侧所示，通信AP使用文本消息显示聊天屏幕500，并且进一步显示充当通向爱表达实用程序的引导路径的呼叫按钮501。当呼叫按钮501被点击时，如图10的右侧所示，显示爱表达实用程序的显示屏510。在显示屏510中，显示“请输入你的爱表达”，并且也显示用于新注册有限爱表达的按钮511。
另一方面，在没有安装爱表达实用程序的情况下(步骤S106中的“否”)，或者在没有选择通向爱表达实用程序的引导路径的情况下(步骤S112中的“否”)，爱表达传输处理结束。
接着，作为传输爱表达的初始处理，通过以下将描述的步骤S118至S130更新爱表达表。
具体来说，信息处理设备1将用户信息传输到表达管理服务器2并登录到表达管理服务器2(步骤S118)。在存在尚未在服务器中获取的通用爱表达表的情况下(步骤S121中的“是”)，信息处理设备1获取通用爱表达表(步骤S124)。另外，在存在尚未在服务器中获取的有限爱表达表的情况下(步骤S127中的“是”)，信息处理设备1获取有限爱表达表(步骤S130)。各个获取的爱表达表被存储在爱表达存储单元108中。
接着，在选择用于新注册有限爱表达的按钮511的情况下(步骤S133中的“是”)，信息处理设备1执行用于新注册有限爱表达的处理(步骤S150)。稍后将参考图11至图14来描述这种注册处理。
接着，在用户进行诸如抓住或摇动信息处理设备1的身体上的爱表达，并且由各种传感器检测的数据被输入到信息处理设备1的传感器数据获取单元101中的情况下(步骤S136中的“是”)，爱表达提取单元102参考爱表达存储单元108，并且基于传感器数据确定是否存在与通用爱表达/有限爱表达相匹配的爱表达(步骤S139)。爱表达可以被假定为诸如飞吻，抓住信息处理设备1，允许伴侣收听心跳(将信息处理设备1附接到他/她的胸部并且经由麦克风12收集心跳声)，或挥手的动作。在飞吻的情况下，从信息处理设备1的相机11拍摄的视频中检测用户的手的动作，并且如果同时从麦克风12中检测到诸如“mwah”的声音，则确定该动作是飞吻的爱表达。
接着，在存在匹配的爱表达的情况下(步骤S139中的“是”)，爱表达/文本转换单元103将爱表达转换为文本信息(爱表达消息)(步骤S142)。
接着，文本输出控制单元104将转换的文本信息传递给通信AP(步骤S145)，并且通信AP执行单元110将传递的文本信息传输给经由聊天屏幕进行通信的伴侣。
(注册处理)
接着，参考图11至图17，将描述步骤S150中的有限爱表达注册处理。图11是图示根据实施方案的有限爱表达注册处理的流程图。
如图11中所示，信息处理设备1的爱表达实用程序100首先接收响应于用户操作而在有限爱表达消息中使用的传感器的选择(步骤S203)。这里，图12图示有限爱表达消息注册屏幕的实例。在图12的左侧所示的注册屏幕520是在图10中所示的屏幕510中点击新的注册按钮511之后显示的屏幕。在注册屏幕520中，有可能从麦克风、触摸传感器、加速度和相机中选择要使用的传感器。当选择其中至少一个并点击OK按钮521时，显示在图12的右侧所示的屏幕530。在屏幕530中，显示“请输入你的爱表达到这款智能电话中”，并且用户做出用户想要新注册的爱表达。
接着，在用户表达爱意并且所选择的传感器接收输入的情况下(步骤S206中的“是”)，爱表达实用程序100获取有限爱表达消息的附加信息。这里，图13图示有限爱表达消息的附加信息的输入屏幕实例。图13中所示的输入屏幕540至560是当屏幕滚动到底部时按顺序显示的屏幕。经由输入屏幕540，输入爱表达的自然语言，爱表达的内容，以及用户想要注册的动画图像。经由输入屏幕550，输入与动画图像一起输出的音效和振动，以及用于确定他们彼此相爱的条件。经由输入屏幕560，输入指示他们彼此相爱的动画图像和音效。接着，当点击注册按钮561时，爱表达实用程序100获取输入信息作为附加信息。
接着，爱表达实用程序100分配唯一代码作为有限爱表达消息的标识符(步骤S212)。
接着，爱表达实用程序100将创建的有限爱表达消息和代码注册在爱表达存储单元108的有限爱表达表中(步骤S215)。
接着，在选择与之共享创建的有限爱表达消息的伴侣的情况下(步骤S218中的“是”)，爱表达实用程序100将创建的有限爱表达消息的信息传递给通信AP执行单元110(步骤S221)。通信AP执行单元110显示用于选择共享伴侣的选择屏幕(步骤S224)。这里，图14图示用于选择共享有限爱表达消息的伴侣的选择屏幕。如图14的左侧所示，选择屏幕570显示屏幕，其指示新的有限爱表达消息的注册完成，并询问是否向伴侣通知完成。选择屏幕570由爱表达实用程序100显示。当用户选择“是”按钮571时，显示在图14的右侧所示的选择屏幕580。选择屏幕580由通信AP执行单元110显示。在选择屏幕580中，列出特定伴侣用户的名称。用户通过使用新注册的有限爱表达消息来选择用户想要与之通信的伴侣用户，并点击发送按钮581。
接着，在选择屏幕580中选择要与之共享有限爱表达消息的伴侣的情况下(步骤S227中的“是”)，通信AP执行单元110将共享创建的有限爱表达消息的请求传输给所选择的伴侣(步骤S230)。另一方面，在没有选择共享伴侣的情况下(步骤S227中的“否”)，不传输共享请求并且该处理结束。
图15是图示根据实施方案的在有限爱表达注册时由共享方执行的处理的流程图。如图15中所示，共享方的信息处理设备1首先激活通信AP(步骤S230)。
接着，经由通信AP从伴侣用户接收文本信息(步骤S233)。
接着，通信AP执行单元110显示接收的文本信息(步骤S236)。
接着，在安装爱表达实用程序的情况下(步骤S239中的“是”)，共享方的信息处理设备1检查接收的文本信息中是否包括共享有限爱表达消息的请求(步骤S212)。这里，图16图示包括共享有限爱表达消息的请求的文本信息的实例。如图16中所示，文本信息42包括代码(共享请求代码)422和自然语言421。代码422可为爱表达实用程序所理解，并且自然语言421指示他想要共享创建的有限爱表达消息。例如，代码体“e300e2a1”用十六进制的四个字节表示。另外，通过使用一般通信AP，代码将按原样显示。然而，可以隐藏“kanjo_share_requested”之后的括号内注明的预定符号和代码。
接着，在包括共享请求的情况下(步骤S242中的“是”)，在通信AP的聊天屏幕上显示通向爱表达实用程序的引导路径(步骤S245)。这里，图17图示在包括共享请求的情况下，显示通向爱表达实用程序的引导路径的实例。如图17中所示，诸如“Taro传输了要共享的爱表达。你接受了吗？”的消息，以及“是”和“否”按钮显示在聊天屏幕600上。“是”按钮602是通向爱表达实用程序的引导路径的实例。
接着，在选择通向爱表达实用程序的引导路径的情况下(步骤S248中的“是”)，通信AP执行单元110调用爱表达实用程序100，并传递共享请求代码(步骤S251)。
接着，当爱表达实用程序100被激活时(步骤S254)，执行初始处理(步骤S257)。初始处理是获取图9中所示的步骤S118至S130中的爱表达表的处理，并且在初始激活时执行初始处理。
接着，爱表达实用程序100解码从通信AP执行单元110传递的共享请求代码，并且将有限爱表达存储在爱表达存储单元108中。
(传输后的处理)
接着，将参考图18描述在传输爱表达消息之后在传输侧终端中执行的处理。
图18是图示根据实施方案的在传输爱表达消息之后由传输侧终端执行的处理的流程图。如图18中所示，爱表达实用程序100首先将传输的爱表达消息记录在爱表达存储单元108中(步骤S153)。
接着，在传输爱表达消息之后，爱表达实用程序100获取在预定时间段内从伴侣用户接收的爱表达消息的信息(步骤S156)。
接着，爱表达实用程序100确定是否满足用于确定“他们彼此相爱”的条件。在满足条件的情况下(步骤S159中的“是”)，从爱表达存储单元108的爱表达表中获取指示“他们彼此相爱”的相应信息(步骤S162)。
接着，爱表达实用程序100将指示“他们彼此相爱”的信息传递给通信AP执行单元110(步骤S165)。
接着，通信AP执行单元110按原样在聊天屏幕上显示指示“他们彼此相爱”的传递的信息(具体来说，包括在文本信息中的自然语言)，或显示屏幕，该屏幕询问是否在爱表达实用程序上显示指示“他们彼此相爱”的表达(步骤S168)。
接着，在发出对爱表达实用程序执行显示的指令的情况下(步骤S171中的“是”)，爱表达实用程序100显示指示“他们彼此相爱”的信息(具体来说，相应的动画图像)(步骤S174)。
<3-2.爱表达接收处理>
接着，参考图19，将描述由接收到在图9的步骤S148中传输的转换文本信息的伴侣方终端执行的处理。
图19是图示根据实施方案的爱表达消息的接收侧处理的流程图。如图19中所示，信息处理设备1首先激活通信AP(步骤S303)。
接着，从伴侣用户接收文本信息(步骤S306)，并且显示文本(步骤S309)。这里，图20图示文本显示的实例。在图20左侧的聊天屏幕610中，按原样显示从伴侣用户接收的爱表达消息。换句话说，显示包括爱表达代码的所有文本。当爱表达代码被隐藏时显示在图20右侧的聊天屏幕620。可以在通信AP中使用任何显示方法。
接着，信息处理设备1检查是否安装爱表达实用程序(步骤S312)。在安装爱表达实用程序的情况下(步骤S312中的“是”)，信息处理设备1检查文本信息中是否包括爱表达代码(步骤S315)。
接着，在包括爱表达代码的情况下(步骤S315中的“是”)，通信AP执行单元110显示通向爱表达实用程序的引导路径(步骤S318)。
接着，当选择通向爱表达实用程序的引导路径时(步骤S321中的“是”)，通信AP执行单元110调用爱表达实用程序100，并传递爱表达代码(步骤S324)。当通过调用激活爱表达实用程序100时(步骤S327)，首先执行初始处理(步骤S330)。初始处理是获取图9中所示的步骤S118至S130中的爱表达表的处理，并且在初始激活时执行初始处理。
另一方面，在没有选择通向爱表达实用程序的引导路径的情况下(步骤S321中的“否”)，控制单元10在后台激活爱表达实用程序100(步骤S337)，并且以类似的方式执行初始处理(步骤S338)。控制单元10在后台激活爱表达实用程序100，以用于即使在没有选择通向爱表达实用程序的引导路径的情况下，执行稍后将参考图28描述的确定用于确定他们彼此相爱的条件的处理，并且在表达与指示他们彼此相爱的表达匹配的情况下，在通信AP上显示指示“他们彼此相爱”的信息。
接着，爱表达实用程序100的文本/爱表达转换单元106对从通信AP执行单元110传递并由文本获取单元105获取的爱表达代码进行解码，并将其转换为爱表达消息(步骤S333)。
随后，爱表达输出控制单元107执行控制，使得显示转换的爱表达消息(步骤S336)。
这里，参考图21至图23，将描述根据实施方案的用于调用爱表达消息的方法。在图21中所示的实例中，在聊天屏幕360上显示“打开爱表达消息”按钮361，作为通向爱表达实用程序的引导路径。聊天屏幕360由通信AP显示。当点击按钮361时，调用爱表达实用程序100，并且如屏幕640中所示，显示指示相应的爱表达消息的动画图像641。
另一方面，在图22中所示的实例中，通信AP在聊天屏幕630上不显示引导路径。在接收到爱表达消息之后立即自动调用爱表达实用程序100，并且如屏幕660中所示，显示指示相应的爱表达消息的动画图像。
或者，在图23中所示的实例中，显示消息“你有一条爱表达消息。你想打开它吗？”的弹出屏幕671显示在由通信AP显示的聊天屏幕670上，并且显示“是”按钮672作为通向爱表达实用程序的引导路径。当点击按钮672时，调用爱表达实用程序100，并且如屏幕680中所示，显示指示相应的爱表达消息的动画图像681。
(爱表达消息的具体实例)
接着，参考图24至图27，将描述爱表达消息的具体实例。图24至图27是根据实施方案的指示爱表达消息的实例的自然语言显示实例(在通信AP上显示)，以及动画图像实例(在爱表达实用程序上显示)。
图24中所示的实例是当触摸传感器13检测到信息处理设备1被抓住时的爱表达实例。在图24的左侧所示的聊天屏幕700是在通信AP上显示的屏幕，并且显示自然语言“拥抱！”作为指示抓住的爱表达。另一方面，在爱表达实用程序执行显示的情况下，如图24的右侧的屏幕710中所示，显示拥抱枕头的人的动画图像711。另外，此时，从信息处理设备1的扬声器(未图示)输出音效“拥抱”，并且从振动单元(未图示)输出长振动以强调拥抱的爱表达。
图25中所示的实例是当信息处理设备1附接到用户的胸部并且经由麦克风12收集心跳声时的爱表达实例。在图25的左侧所示的聊天屏幕720是在通信AP上显示的屏幕，并且显示自然语言“扑通扑通！”作为指示要被伴侣听取的心跳声的爱表达。另一方面，在爱表达实用程序执行显示的情况下，如图25的右侧的屏幕730中所示，显示心脏在砰砰跳动的人的动画图像731。另外，此时，从信息处理设备1的扬声器(未图示)输出音效“扑通扑通！”，并且从振动单元(未图示)重复输出短振动以强调他的心脏在砰砰跳动的情况。
图26中所示的实例是当加速度传感器14检测到信息处理设备1被用户握住并摇晃时的表达实例。在图26的左侧所示的聊天屏幕740是在通信AP上显示的屏幕，并且显示自然语言“再见！”作为指示挥手的表达。另一方面，在爱表达实用程序执行显示的情况下，如图26的右侧的屏幕750中所示，显示挥动的手的动画图像751。另外，此时，从信息处理设备1的振动单元(未图示)重复输出短振动的次数与用户摇晃信息处理设备1的次数相同以强调挥动他的手的情况。
上面已经描述了通用爱表达消息的具体实例。接着，图27图示有限爱表达消息的实例。图27中所示的实例是当触摸传感器13(触摸屏显示器16)点击三次时的表达实例。在图27的左侧所示的聊天屏幕760是在通信AP上显示的屏幕。三次点击屏幕的有限爱表达被显示为自然语言“我想念你！”，其是参考有限爱表达表进行识别的，并且包括在文本信息中。另一方面，在爱表达实用程序执行显示的情况下，如图27的右侧的屏幕770中所示，看着伴侣的人的动画图像771被显示为专门为伴侣和用户注册的有限爱表达。
(显示后的处理)
接着，将参考图28描述在显示爱表达消息之后在接收侧终端中执行的处理。图28是图示根据实施方案的在显示爱表达消息之后由接收侧终端执行的处理的流程图。
如图28中所示，爱表达实用程序100首先将接收的爱表达消息记录在爱表达存储单元108中(步骤S339)。
接着，爱表达实用程序100从爱表达存储单元108中获取最近传输或接收的爱表达消息(步骤S342)。
接着，爱表达实用程序100确定是否满足用于确定“他们彼此相爱”的条件。在满足条件的情况下(步骤S345中的“是”)，从爱表达存储单元108的爱表达表中获取指示“他们彼此相爱”的相应信息(步骤S348)。
接着，爱表达实用程序100将指示“他们彼此相爱”的信息传递给通信AP执行单元110(步骤S351)。
接着，通信AP执行单元110按原样在聊天屏幕上显示指示“他们彼此相爱”的传递的信息(具体来说，包括在文本信息中的自然语言)，或显示屏幕，该屏幕询问是否经由爱表达实用程序显示指示“他们彼此相爱”的表达(步骤S354)。
接着，在发出对爱表达实用程序执行显示的指令的情况下(步骤S357中的“是”)，爱表达实用程序显示指示“他们彼此相爱”的信息(具体来说，相应的动画图像)(步骤S360)。
(用于调用爱表达消息的方法)
这里，参考图29至图30，将描述用于调用指示他们彼此相爱的爱表达消息的方法。如图29的左侧所示，在由通信AP显示的聊天屏幕800中，确定当一个用户传输爱表达消息801(这里是自然语言)并且另一个用户在预定时间段内传输相同的爱表达消息802时，是否满足他们彼此相爱的条件。在满足他们彼此相爱的条件的情况下，如图29的右侧所示，可以在聊天屏幕810上显示对应于指示他们彼此相爱的爱表达消息的动画图像811。在图29中，已经描述了在通信AP上调用并显示指示他们彼此相爱的爱表达消息的实例。然而，该实施方案不限于此。也可能在爱表达实用程序上执行显示。接着，将参考图30给出以下描述。
如图30的左侧所示，当确定满足他们彼此相爱的条件时，在聊天屏幕820上显示指示“你和你的伴侣彼此相爱！你确认吗？”的按钮821。接着，当点击按钮821时，如图30的中部所示，聊天屏幕830显示指示“你和Hanako彼此相爱！你确认吗？”的消息，并且显示“是”和“否”按钮。“是”按钮832是通向爱表达实用程序的引导路径的实例。
当选择“是”按钮832时，爱表达实用程序100被调用并激活，并且如图3的右侧所示，在爱表达实用程序100的控制下，在显示屏840上显示对应于指示他们彼此相爱的爱表达消息的动画图像841。
(指示他们彼此相爱的爱表达的具体实例)
接着，参考图7，将描述指示他们彼此相爱的爱表达的具体实例。
图7中所示的通用爱表达表是与指示他们彼此相爱的爱表达信息相关的表。在图7中所示的爱表达表的第一行中，示出了在两个用户通过飞吻传输爱表达消息的情况下要显示的动画图像和BGM/音效(诸如浪漫音乐)。例如，确定条件被定义为一个用户通过对相机11或麦克风12飞吻传输爱表达消息，然后伴侣在预定时间段内回复相同的爱表达的条件。
另外，在图7中所示的爱表达表的第二行中，示出了在两个用户通过抓住设备传输爱表达消息的情况下要显示的动画图像和BGM/音效(诸如浪漫音乐)。例如，确定条件被定义为一个用户通过用双手抓住信息处理设备1来传输爱表达消息，然后伴侣在预定时间段内回复相同的爱表达的条件。
另外，在图7中所示的爱表达表的第三行中，示出了在两个用户通过记录他/她的胸部的心跳来传输爱表达消息的情况下要显示的动画图像和BGM/音效(诸如浪漫音乐)。例如，确定条件被定义为一个用户通过将信息处理设备1附接到他/她的胸部并通过麦克风12记录心跳来传输爱表达消息，然后伴侣在预定时间段内回复相同的爱表达的条件。另外，可以更加严格地限制确定条件，使得其心跳的节奏在预定值内的条件被添加作为确定条件。
另外，在图7中所示的爱表达表的第四行中，示出了在两个用户通过挥动他/她的手来传输爱表达消息的情况下要显示的动画图像和BGM/音效(诸如浪漫音乐)。例如，确定条件被定义为一个用户通过握住和摇晃信息处理设备1来传输爱表达消息，加速度传感器14检测该动作，然后伴侣在预定时间段内回复相同的爱表达的条件。另外，可以更加严格地限制确定条件，使得一个用户摇晃设备的次数与另一个用户摇晃设备的次数相同的条件被添加作为确定条件。
另外，在有限爱表达消息的情况下，当满足预定条件时确定“他们彼此相爱”，并且有可能执行显示以通知他们彼此相爱。具体来说，如图8中所示，示出了在两个用户通过三次点击信息处理设备1的触摸屏来传输爱表达消息的情况下要显示的动画图像和BGM/音效(诸如浪漫音乐)。点击信息处理设备1的触摸屏是已注册的有限爱表达。例如，确定条件被定义为一个用户通过进行预定动作来传输爱表达消息，然后伴侣在预定时间段内回复相同的爱表达的条件。
<3-3.实时流处理>
接着，参考图31至图34，将描述实时流处理。在通信AP可以提供实时流传输/接收功能的情况下，爱表达实用程序也可以通过使用这种功能来传输/接收流式爱表达消息。
(3-4-1.传输侧处理)
图31是图示根据实施方案的爱表达消息的实时流的传输侧处理的流程图。如图31中所示，通信AP执行单元110首先确定是否选择通向爱表达的实时流的引导路径(步骤S403)。
接着，在选择通向爱表达的实时流的引导路径的情况下(步骤S403中的“是”)，通信AP执行单元110调用爱表达实用程序100，并激活爱表达实用程序100(步骤S406)。
接着，爱表达实用程序100执行初始处理(步骤S409)。初始处理是获取图9中所示的步骤S118至S130中的爱表达表的处理，并且在初始激活时执行初始处理。这里，图32图示根据实施方案的屏幕显示实例。如图32的左侧所示，通信AP显示包括文本消息的聊天屏幕900，并且进一步显示呼叫按钮901，其充当要由爱表达实用程序执行的实时流的引导路径。当点击呼叫按钮901时，如图32的右侧所示，显示屏910由爱表达实用程序显示。在显示屏910中，显示消息“实时流模式——请操作你的智能电话并输入你的爱表达”。
接着，在用户进行诸如抓住或摇晃信息处理设备1的身体上的爱表达并且由各种传感器检测的数据被输入到传感器数据获取单元101中的情况下(步骤S412中的“是”)，爱表达提取单元102参考爱表达存储单元108，并且基于传感器数据确定是否存在与通用爱表达/有限爱表达匹配的爱表达(步骤S415)。
接着，在存在匹配的爱表达的情况下(步骤S415中的“是”)，爱表达提取单元102从表中获取相应的爱表达(步骤S418)。
接着，爱表达实用程序100基于对应于获取的爱表达消息的动画图像来创建视频流，并将其传递给通信AP执行单元110(步骤S421)。
接着，通信AP执行单元110将传递的视频流传输到经由聊天屏幕进行通信的伴侣(步骤S424)。
接着，信息处理设备1重复在上述步骤S412至S424中的处理(视频流的创建和传输)，直到发出结束流的指令(步骤S427)。
(3-4-2.接收侧处理)
图33是图示根据实施方案的爱表达消息的实时流的接收侧处理的流程图。
如图33中所示，信息处理设备1首先激活通信AP(步骤S503)。
接着，通信AP执行单元110以实时流方式接收用于传输爱表达消息的请求(步骤S506)。
接着，确定是否接收实时流(步骤S509)。在接收实时流的情况下(步骤S509中的“是”)，在聊天屏幕上接收并显示实时流(步骤S512)。这里，参考图34，将描述根据实施方案的用于调用爱表达消息的实时流视频的方法的实例。
根据通信AP的规范，可以使用各种引导路径作为调用实时流视频的方法。例如，如图34的左上侧的聊天屏幕920中所示，有可能显示爱表达消息视频的再现按钮921。或者，如图34的左下侧的聊天屏幕930中所示，有可能显示包括消息“你有爱的消息的实时流。你想打开它吗？”以及“是”和“否”按钮的弹出屏幕931。
在点击聊天屏幕920中的再现按钮921或聊天屏幕930中的“是”按钮932的情况下，如图34的右侧所示，通信AP执行单元110在聊天屏幕940上再现爱表达的实时流图像941。应注意，在作为一般视频流传输实时流的情况下，接收侧不需要安装诸如爱表达实用程序100等的特殊***。
<<4.结论>>
如上所述，当使用根据实施方案的信息处理***时，有可能经由通用通信应用程序传输用户的身体表达信息。
以上已经参照附图描述了本公开的优选实施方案，而本公开不限于上述实例。本领域技术人员可以发现在所附权利要求的范围内的各种变化和修改，并且应当理解，这些变化和修改自然将属于本公开的技术范围。
例如，也可能创建计算机程序，其用于使嵌入在上述信息处理设备1或表达管理服务器2中的硬件(诸如CPU、ROM和RAM)执行信息处理设备1或表达管理服务器2的功能。此外，有可能提供其中存储有计算机程序的计算机可读记录介质。
此外，本说明书中描述的效果仅仅是说明性或示例性的效果，而不是限制性的。即，使用或代替上述效果，根据本公开的技术可以实现本领域技术人员从本说明书的描述中清楚的其他效果。
另外，本技术也可以被配置如下。
(1)
一种通信***，包括：
控制单元，其被配置成执行用于直接或间接地将文本信息传输到通信目的地和从通信目的地接收文本信息的通信应用程序；以及
通信单元，其被配置成直接或间接地将经由所述通信应用程序获取的文本信息传输到通信目的地，其中
所述控制单元响应于来自所述通信应用程序的请求而激活实用程序，以及
所述实用程序获取由传感器检测的传感器数据，从所述传感器数据中提取特定表达信息，将所述特定表达信息转换为文本信息，并且将所述文本信息输出到所述通信应用程序。
(2)
根据(1)所述的通信***，
其中所述控制单元在所述通信应用程序输出消息输入屏幕的时刻激活所述实用程序。
(3)
根据(1)所述的通信***，
其中所述控制单元在选择所述通信应用程序的消息输入屏幕上显示的通向所述实用程序的引导路径的时刻激活所述实用程序。
(4)
根据(1)至(3)中任一项所述的通信***，
其中由所述控制单元执行的所述实用程序根据预先存储的表达表将所述特定表达信息转换为文本信息。
(5)
根据(4)所述的通信***，
其中所述控制单元经由所述通信单元获取存储在外部服务器中的最新表达表。
(6)
根据(4)或(5)所述的通信***，
其中所述表达表包括通用爱表达信息，或适用于特定用户之间的有限爱表达信息。
(7)
根据(1)至(6)中任一项所述的通信***，
其中由所述控制单元执行的所述实用程序将所述特定表达信息转换为文本信息，所述文本信息包括自然语言和所述实用程序可理解的代码。
(8)
根据(1)至(7)中任一项所述的通信***，
其中所述实用程序检测以下信息中的任何一种作为所述特定表达信息：在设备上吹气，用手抓住设备，将设备按压到胸部，以及挥动手。
(9)
根据(1)至(8)中任一项所述的通信***，其中
所述控制单元响应于来自已接收消息的所述通信应用程序的请求而激活实用程序，以及
所述实用程序执行控制，使得从所述接收消息中提取所述实用程序可理解的代码，所述代码被转换为特定表达信息，并且所述特定表达信息被表达给用户。
(10)
根据(1)至(9)中任一项所述的通信***，
其中在经由所述通信单元将指示所述特定表达信息的文本信息直接或间接地传输到通信目的地之后，所述控制单元执行控制，使得当在预定时间段内从所述通信目的地检测到指示与所述传输的特定表达信息相同的表达信息的代码的接收时，将指示用户具有相同感觉的表达信息表达给所述用户。
(11)
一种其中存储有程序的存储介质，所述程序使计算机用作：
控制单元，其被配置成执行用于直接或间接地将文本信息传输到通信目的地和从通信目的地接收文本信息的通信应用程序；以及
通信单元，其被配置成直接或间接地将经由所述通信应用程序获取的文本信息传输到通信目的地，其中
所述控制单元响应于来自所述通信应用程序的请求而激活实用程序，以及
所述实用程序获取由传感器检测的传感器数据，从所述传感器数据中提取特定表达信息，将所述特定表达信息转换为文本信息，并且将所述文本信息输出到所述通信应用程序。
参考符号列表
1 信息处理设备
2 表达管理服务器
3 网络
10 控制单元
11 相机
12 麦克风
13 触摸传感器
14 加速度传感器
16 触摸屏显示器
17 通信单元
18 存储单元
20 通信单元
21 用户管理单元
22 爱表达管理单元
23通用爱表达DB
24 有限爱表达DB
100 爱表达实用程序
101 传感器数据获取单元
102 爱表达提取单元
103 文本转换单元
104 文本输出控制单元
105 文本获取单元
106 爱表达转换单元
107 爱表达输出控制单元
108 爱表达存储单元
110 通信AP执行单元。

Claims (19)

1.一种通信***，包含：
控制单元，其被配置成执行用于直接或间接地将文本信息传输到通信目的地和从通信目的地接收文本信息的通信应用程序；以及
通信单元，其被配置成直接或间接地将经由所述通信应用程序获取的文本信息传输到通信目的地，其中
所述控制单元响应于来自所述通信应用程序的请求而激活实用程序，以及
所述实用程序获取由传感器检测的传感器数据，从所述传感器数据中提取特定表达信息，将所述特定表达信息转换为文本信息，并且将所述文本信息输出到所述通信应用程序，
其中所述实用程序检测以下信息中的任何一种作为所述特定表达信息：在设备上吹气，用手抓住设备，将设备按压到胸部，挥动手以及三次点击屏幕，
其中在经由所述通信单元将指示所述特定表达信息的文本信息直接或间接地传输到通信目的地之后，所述控制单元执行控制，使得当在预定时间段内从所述通信目的地接收到表达信息的文本信息时，确定所接收到的文本信息与所传输的文本信息是否相同，在所接收到的文本信息与所传输的文本信息相同的情况下，确定满足用户彼此相爱的条件，并且将指示用户彼此相爱的表达信息表达给所述用户。
2.根据权利要求1所述的通信***，
其中所述控制单元在所述通信应用程序显示消息输入屏幕的时刻激活所述实用程序。
3.根据权利要求1所述的通信***，
其中所述控制单元在选择所述通信应用程序的消息输入屏幕上显示的通向所述实用程序的引导路径的时刻激活所述实用程序。
4.根据权利要求1所述的通信***，
其中由所述控制单元执行的所述实用程序根据预先存储的表达表将所述特定表达信息转换为文本信息。
5.根据权利要求4所述的通信***，
其中所述控制单元经由所述通信单元从外部服务器获取最新表达表。
6.根据权利要求4所述的通信***，
其中所述表达表包括包含通用爱表达信息的通用爱表达表，或包含适用于特定用户之间的有限爱表达信息的有限爱表达表。
7.根据权利要求6所述的通信***，
其中在所述实用程序响应于来自所述通信应用程序的请求而注册所述有限爱表达表时，所述实用程序分配唯一代码作为要创建的有限爱表达信息的标识符，并且将创建的有限爱表达信息和所述代码注册在所述有限爱表达表中。
8.根据权利要求1所述的通信***，
其中所述文本信息包括自然语言和所述实用程序可理解的代码。
9.根据权利要求1所述的通信***，其中
所述控制单元响应于来自已接收消息的所述通信应用程序的请求而激活实用程序，以及
所述实用程序执行控制，使得从所述接收消息中提取所述实用程序可理解的代码，所述代码被解码为特定表达信息，并且所述特定表达信息被表达给用户。
10.一种信息通信方法，包含：
经由通信应用程序直接或间接地将文本信息传输到通信目的地和从通信目的地接收文本信息；以及
直接或间接地将经由所述通信应用程序获取的文本信息传输到通信目的地，其中
响应于来自所述通信应用程序的请求而激活实用程序，以及
所述实用程序获取由传感器检测的传感器数据，从所述传感器数据中提取特定表达信息，将所述特定表达信息转换为文本信息，并且将所述文本信息输出到所述通信应用程序，
其中所述实用程序检测以下信息中的任何一种作为所述特定表达信息：在设备上吹气，用手抓住设备，将设备按压到胸部，挥动手以及三次点击屏幕，
其中在将指示所述特定表达信息的文本信息直接或间接地传输到通信目的地之后，执行控制，使得当在预定时间段内从所述通信目的地接收到表达信息的文本信息时，确定所接收到的文本信息与所传输的文本信息是否相同，在所接收到的文本信息与所传输的文本信息相同的情况下，确定满足用户彼此相爱的条件，并且将指示用户彼此相爱的表达信息表达给所述用户。
11.根据权利要求10所述的信息通信方法，
其中在所述通信应用程序显示消息输入屏幕的时刻激活所述实用程序。
12.根据权利要求10所述的信息通信方法，
其中在选择所述通信应用程序的消息输入屏幕上显示的通向所述实用程序的引导路径的时刻激活所述实用程序。
13.根据权利要求10所述的信息通信方法，
其中所述实用程序根据预先存储的表达表将所述特定表达信息转换为文本信息。
14.根据权利要求13所述的信息通信方法，
其中从外部服务器获取最新表达表。
15.根据权利要求13所述的信息通信方法，
其中所述表达表包括包含通用爱表达信息的通用爱表达表，或包含适用于特定用户之间的有限爱表达信息的有限爱表达表。
16.根据权利要求15所述的信息通信方法，
其中在所述实用程序响应于来自所述通信应用程序的请求而注册所述有限爱表达表时，所述实用程序分配唯一代码作为要创建的有限爱表达信息的标识符，并且将创建的有限爱表达信息和所述代码注册在所述有限爱表达表中。
17.根据权利要求10所述的信息通信方法，
其中所述文本信息包括自然语言和所述实用程序可理解的代码。
18.根据权利要求10所述的信息通信方法，其中
响应于来自已接收消息的所述通信应用程序的请求而激活实用程序，以及
所述实用程序执行控制，使得从所述接收消息中提取所述实用程序可理解的代码，所述代码被解码为特定表达信息，并且所述特定表达信息被表达给用户。
19.一种存储介质，其中存储有程序，所述程序使计算机用作：
控制单元，其被配置成执行用于直接或间接地将文本信息传输到通信目的地和从通信目的地接收文本信息的通信应用程序；以及
通信单元，其被配置成直接或间接地将经由所述通信应用程序获取的文本信息传输到通信目的地，其中，
所述控制单元响应于来自所述通信应用程序的请求而激活实用程序，以及
所述实用程序获取由传感器检测的传感器数据，从所述传感器数据中提取特定表达信息，将所述特定表达信息转换为文本信息，并且将所述文本信息输出到所述通信应用程序，
其中所述实用程序检测以下信息中的任何一种作为所述特定表达信息：在设备上吹气，用手抓住设备，将设备按压到胸部，挥动手以及三次点击屏幕，
其中在经由所述通信单元将指示所述特定表达信息的文本信息直接或间接地传输到通信目的地之后，所述控制单元执行控制，使得当在预定时间段内从所述通信目的地接收到表达信息的文本信息时，确定所接收到的文本信息与所传输的文本信息是否相同，在所接收到的文本信息与所传输的文本信息相同的情况下，确定满足用户彼此相爱的条件，并且将指示用户彼此相爱的表达信息表达给所述用户。
CN202110187702.5A 2015-11-13 2016-08-05 通信***、信息通信方法和存储介质 Active CN113037926B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110187702.5A CN113037926B (zh) 2015-11-13 2016-08-05 通信***、信息通信方法和存储介质

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2015222866 2015-11-13
JP2015-222866 2015-11-13
CN202110187702.5A CN113037926B (zh) 2015-11-13 2016-08-05 通信***、信息通信方法和存储介质
PCT/JP2016/073178 WO2017081895A1 (ja) 2015-11-13 2016-08-05 通信システム、および記憶媒体
CN201680064191.5A CN108353096B (zh) 2015-11-13 2016-08-05 通信***和存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201680064191.5A Division CN108353096B (zh) 2015-11-13 2016-08-05 通信***和存储介质

Publications (2)

Publication Number Publication Date
CN113037926A CN113037926A (zh) 2021-06-25
CN113037926B true CN113037926B (zh) 2023-08-22

Family

ID=58695006

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202110187702.5A Active CN113037926B (zh) 2015-11-13 2016-08-05 通信***、信息通信方法和存储介质
CN201680064191.5A Active CN108353096B (zh) 2015-11-13 2016-08-05 通信***和存储介质

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201680064191.5A Active CN108353096B (zh) 2015-11-13 2016-08-05 通信***和存储介质

Country Status (3)

Country Link
US (1) US10587542B2 (zh)
CN (2) CN113037926B (zh)
WO (1) WO2017081895A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10607386B2 (en) * 2016-06-12 2020-03-31 Apple Inc. Customized avatars and associated framework
US11616745B2 (en) * 2017-01-09 2023-03-28 Snap Inc. Contextual generation and selection of customized media content
JP7005112B2 (ja) * 2018-03-05 2022-01-21 矢崎総業株式会社 表示システム、及び、車載システム
CN113709020B (zh) * 2020-05-20 2024-02-06 腾讯科技（深圳）有限公司 消息发送方法、消息接收方法、装置、设备及介质
CN112804336B (zh) * 2020-10-29 2022-11-01 浙江工商大学 故障检测方法、装置、***、计算机可读存储介质
US11825004B1 (en) 2023-01-04 2023-11-21 Mattel, Inc. Communication device for children

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007156776A (ja) * 2005-12-05 2007-06-21 Brother Ind Ltd 文章作成装置、文章作成補助装置、文章作成プログラム、及び、文章作成補助プログラム
CN101272554A (zh) * 2006-12-21 2008-09-24 三星电子株式会社 用于移动电话机的触觉生成方法和***
CN101303622A (zh) * 2000-06-30 2008-11-12 伊梅森公司 包含触觉反馈功能的聊天界面
CN101820399A (zh) * 2010-01-22 2010-09-01 曾超宁 形象表达情感信息的触觉通讯玩偶

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1326445B1 (en) 2001-12-20 2008-01-23 Matsushita Electric Industrial Co., Ltd. Virtual television phone apparatus
JP2003248841A (ja) 2001-12-20 2003-09-05 Matsushita Electric Ind Co Ltd バーチャルテレビ通話装置
KR100600537B1 (ko) * 2003-12-29 2006-07-13 전자부품연구원 타게팅 컨텐츠 및 광고 서비스 방법 및 그 시스템
US20060279476A1 (en) 2005-06-10 2006-12-14 Gemini Mobile Technologies, Inc. Systems and methods for conveying message composer's state information
JP2007280074A (ja) * 2006-04-07 2007-10-25 Hitachi Ltd 携帯端末および制御方法
US7991401B2 (en) * 2006-08-08 2011-08-02 Samsung Electronics Co., Ltd. Apparatus, a method, and a system for animating a virtual scene
US8965762B2 (en) * 2007-02-16 2015-02-24 Industrial Technology Research Institute Bimodal emotion recognition method and system utilizing a support vector machine
JP2009157082A (ja) * 2007-12-26 2009-07-16 Xing Inc 情報機器、情報機器の制御方法、コンピュータプログラム、及び通信システム
CN102017587A (zh) * 2008-05-09 2011-04-13 皇家飞利浦电子股份有限公司 生成要发送的消息
KR101871646B1 (ko) 2008-07-15 2018-06-26 임머숀 코퍼레이션 물리 기반 촉각 메시징을 위한 시스템 및 방법
US8004391B2 (en) 2008-11-19 2011-08-23 Immersion Corporation Method and apparatus for generating mood-based haptic feedback
US9762719B2 (en) * 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
JP2015167266A (ja) 2012-05-31 2015-09-24 日本電気株式会社 通信端末、管理サーバ、通信システム、通信方法、およびプログラム
JP6088356B2 (ja) * 2013-05-21 2017-03-01 京セラ株式会社 携帯端末、表示制御プログラムおよび表示制御方法
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9898086B2 (en) 2013-09-06 2018-02-20 Immersion Corporation Systems and methods for visual processing of spectrograms to generate haptic effects
US20180077095A1 (en) * 2015-09-14 2018-03-15 X Development Llc Augmentation of Communications with Emotional Data
GB2544257A (en) * 2015-09-19 2017-05-17 Philip Pisani Justin Greeting gesture device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101303622A (zh) * 2000-06-30 2008-11-12 伊梅森公司 包含触觉反馈功能的聊天界面
JP2007156776A (ja) * 2005-12-05 2007-06-21 Brother Ind Ltd 文章作成装置、文章作成補助装置、文章作成プログラム、及び、文章作成補助プログラム
CN101272554A (zh) * 2006-12-21 2008-09-24 三星电子株式会社 用于移动电话机的触觉生成方法和***
CN101820399A (zh) * 2010-01-22 2010-09-01 曾超宁 形象表达情感信息的触觉通讯玩偶

Also Published As

Publication number Publication date
WO2017081895A1 (ja) 2017-05-18
CN108353096B (zh) 2021-03-12
US10587542B2 (en) 2020-03-10
CN113037926A (zh) 2021-06-25
US20180309703A1 (en) 2018-10-25
CN108353096A (zh) 2018-07-31

Similar Documents

Publication Publication Date Title
CN113037926B (zh) 通信***、信息通信方法和存储介质
CN105264495B (zh) 一种包括贫瘠的设备的方法、***及介质
CN107102904B (zh) 基于混合应用程序的交互方法及装置
CN106959852B (zh) 应用图标的角标显示方法、装置和终端
CN108027725B (zh) 指导终端设备操作的方法、装置和设备
JP2019510247A5 (ja) パケット化されたデータのマルチモーダル送信のシステムおよび方法
JP5986065B2 (ja) 端末装置および録音プログラム
CN105630846B (zh) 头像更新方法及装置
CN103973542B (zh) 一种语音信息处理方法及装置
CN107948278B (zh) 一种信息传输方法、终端设备及***
KR101376292B1 (ko) 통화 중 감정 분석 서비스 제공 방법 및 장치
CN106330672B (zh) 一种即时通信方法及***
CN108429668B (zh) 一种消息处理方法、装置、终端及***
JP2017207809A (ja) 音声記録装置、情報通信システム、音声記録制御方法、およびプログラム
CN105100435A (zh) 移动通讯应用方法和装置
CN104301202A (zh) 一种即时通讯的振动信息表达方法和***
KR20120065090A (ko) 이동통신 단말 기반의 심리치료 장치
JP5909126B2 (ja) 監視システム、及び監視方法
WO2014006709A1 (ja) メッセージングシステムおよびメッセージ送信方法
JP2018195068A (ja) 振動パターン情報伝送システム
JP6115304B2 (ja) 通信端末装置、安否情報送信方法、及び安否情報送信プログラム
KR20170027154A (ko) 휴대 단말기의 사용자 생성 진동 패턴 또는 수기 입력을 이용한 데이터 송수신 방법
TW201807653A (zh) 互動式自動排程系統及其電腦程式產品
JP6636313B2 (ja) 管理サーバ、コミュニケーションシステム、制御方法、通話制御情報提供方法及びコンピュータプログラム
JP6340178B2 (ja) コンテンツ提供システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant