CN115033142B - 应用交互方法及电子设备 - Google Patents

应用交互方法及电子设备 Download PDF

Info

Publication number
CN115033142B
CN115033142B CN202111340669.1A CN202111340669A CN115033142B CN 115033142 B CN115033142 B CN 115033142B CN 202111340669 A CN202111340669 A CN 202111340669A CN 115033142 B CN115033142 B CN 115033142B
Authority
CN
China
Prior art keywords
application
interface
target text
displaying
text
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111340669.1A
Other languages
English (en)
Other versions
CN115033142A (zh
Inventor
王晨博
卫渊
周元甲
刘秋冶
伍国林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202111340669.1A priority Critical patent/CN115033142B/zh
Publication of CN115033142A publication Critical patent/CN115033142A/zh
Application granted granted Critical
Publication of CN115033142B publication Critical patent/CN115033142B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例提供了一种应用交互方法及电子设备。该应用交互方法包括:显示第一应用的界面,接收对第一应用的界面上第一目标文本的选中操作。然后,响应于拖动第一目标文本至第一区域,在第二区域显示第二应用的图标和第三应用的图标,其中,第二区域位于电子设备的屏幕边缘部分。接着,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用的界面的区域显示第二应用的界面。这样,用户通过拖动文本到第一应用界面即文本来源应用界面上的第二应用图标,可以方便地启动第二应用即去向应用并显示去向应用界面,简化了操作,提升了用户使用体验。

Description

应用交互方法及电子设备
技术领域
本申请实施例涉及终端电子设备领域,尤其涉及一种应用交互方法及电子设备。
背景技术
当前,手机、平板等智能终端类电子设备中通常安装有大量应用。用户在使用这类电子设备时,经常需要从一个应用中复制文本、粘贴到另一个应用中。此时,用户在复制完文本后,退出复制文本的应用界面,从主界面中找到需要粘贴复制文本的应用,然后打开需要粘贴复制文本的应用界面,找到粘贴位置,最后进行粘贴。可见,该应用交互过程相当繁琐。特别是在复制粘贴多次的情况下,用户需要在不同应用之间频繁地进行切换操作,操作繁琐,耗费时间较多,导致用户体验较差。
发明内容
为了解决上述技术问题,本申请提供一种应用交互方法及电子设备,用户通过对文本来源应用界面上的应用图标的操作,方便地启动去向应用并显示去向应用界面,简化了操作,提升了用户使用体验。
第一方面,本申请提供一种应用交互方法,该应用交互方法包括:显示第一应用的界面,接收对第一应用的界面上第一目标文本的选中操作。响应于拖动第一目标文本至第一区域,在第二区域显示第二应用的图标和第三应用的图标,其中,第二区域位于电子设备的屏幕边缘部分。接着,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用的界面的区域显示第二应用的界面。这样,用户通过拖动文本到第一应用界面即文本来源应用界面上的第二应用图标,可以方便地启动第二应用即去向应用并显示去向应用界面,简化了操作,提升了用户使用体验。
根据第一方面,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用界面的区域显示第二应用的界面之后,还可以包括:当检测到第二应用的界面上包括与第一目标文本匹配的第一文本输入框,在第一文本输入框内的区域叠加显示第一目标文本。然后,响应于将第一目标文本拖动到所述第一区域外,停止在第一文本输入框内的区域叠加显示第一目标文本。接下来,响应于拖动第一目标文本至第一区域,在第二区域显示第二应用的图标和第三应用的图标。接着,响应于将第一目标文本拖动到第三应用的图标上,启动第三应用,在显示第二应用的界面的区域显示第三应用的界面。这样,用户通过将文本从来源应用界面上的一个应用图标,拖动到来源应用界面上的另一个应用图标,可以方便地切换去向应用,简化了操作,提升了用户使用体验。
根据第一方面,应用交互方法还包括:响应于拖动第一目标文本至第一区域,复制第一目标文本。然后,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用界面的区域显示第二应用的界面之后,当检测到第二应用的界面上包括与第一目标文本匹配的第一文本输入框,在第一文本输入框内的区域叠加显示第一目标文本。接下来,响应于松手操作,将第一目标文本粘贴到第一文本输入框中,并在第一文本输入框内显示第一目标文本。这样,用户通过拖动文本后的松手操作,能够自动地将文本粘贴到相应的位置,简化了操作,提升了用户使用体验。
其中,这里的匹配是指,第一目标文本的内容符合第一文本输入框对输入内容的要求。比如,名为“详细地址”的文本输入框对输入内容的要求是:输入内容为一个地址信息。如果某个文本的内容为地址,那么名为“详细地址”的文本输入框就是与该文本匹配的文本输入框。
根据第一方面,应用交互方法还可以包括:响应于拖动第一目标文本至第一区域,复制第一目标文本。响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用界面的区域显示第二应用的界面之后,还包括:第二应用的界面上包括第二文本输入框和第三文本输入框,响应于拖动第一目标文本至第二文本输入框后松手的操作,将第一目标文本粘贴到第二文本输入框中,并在第二文本输入框内显示第一目标文本。这样,当去向应用界面上有多个文本输入框时,可以根据文本被拖动到的位置选择粘贴文本的文本输入框,简化了操作,提升了用户使用体验。
根据第一方面,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用界面的区域显示第二应用的界面之后,还包括:停止显示第二应用的图标和第三应用的图标。然后,第二应用的界面上包括第一对象的会话区域和第二对象的会话区域,响应于拖动第一目标文本至第一对象的会话区域,在显示第二应用的界面的区域显示与第一对象的会话界面,与第一对象的会话界面属于第二应用。接着,与第一对象的会话界面包括与第一目标文本匹配的第四文本输入框,将第一目标文本粘贴到第四文本输入框中,并在第四文本输入框内显示第一目标文本。然后,响应于接收到发送指令,将第四文本输入框中的内容发送给第一对象。这样,通过在去向应用界面中继续拖动文本,可以方便地启动去向应用的当前界面的下一级界面的显示,简化了操作,提升了用户使用体验。
根据第一方面,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用界面的区域显示第二应用的界面之后,还包括:停止显示第二应用的图标和第三应用的图标。第二应用的界面上包括第一对象的会话区域和第二对象的会话区域,响应于拖动第一目标文本至第一对象的会话区域,在显示第二应用的界面的区域显示与第一对象的会话界面,与第一对象的会话界面属于所述第二应用。与第一对象的会话界面包括与第一目标文本匹配的第四文本输入框,将第一目标文本粘贴到第四文本输入框中,并在第四文本输入框内显示第一目标文本。接收到对第四文本输入框中的文本的编辑指令,根据编辑指令对第四文本输入框中的文本进行编辑。编辑完成后,响应于接收到发送指令,将第四文本输入框中的内容发送给第一对象。这样,通过在去向应用界面中对粘贴到文本输入框中文本进行编辑,可以根据用户需要方便地修改文本,满足了用户在特定场景下的需求,提升了用户使用体验。
根据第一方面,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用界面的区域显示第二应用的界面之后,还包括:停止显示第二应用的图标和第三应用的图标;第二应用的界面上包括第一对象的会话区域和第二对象的会话区域,响应于拖动第一目标文本至第一对象的会话区域,将第一目标文本发送给第一对象,并在显示第二应用的界面的区域显示发送后与第一对象的会话界面。这样,通过拖动文本到目标对象的会话区域,可以自动向目标对象发送文本,简化了操作,提升了用户使用体验。
根据第一方面,响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用的界面的区域显示第二应用的界面之后,还包括:停止显示第二应用的图标和第三应用的图标。
根据第一方面,应用交互方法还可以包括:显示第四应用的界面。接收对第四应用的界面上第二目标文本的选中操作,响应于拖动第二目标文本至第一区域,在第二区域显示第五应用的图标和第六应用的图标。然后,响应于将第二目标文本拖动到第五应用的图标上,启动第五应用,在第四应用的界面上叠加显示悬浮窗,在悬浮窗中显示第五应用的界面。这样,利用悬浮窗,在电子设备屏幕上能够同时显示文本的来源应用界面和去向应用界面,方便进行多次复制粘贴,简化了操作,提升了用户使用体验。
根据第一方面,应用交互方法还可以包括:显示第四应用的界面,接收对第四应用的界面上第二目标文本的选中操作,响应于拖动第二目标文本至第一区域,在第二区域显示第五应用的图标和第六应用的图标。然后,响应于将第二目标文本拖动到第五应用的图标上,启动第五应用,在显示第四界面的区域显示第一分屏和第二分屏,在第一分屏中显示第四应用的界面,在第二分屏中显示第五应用的界面。这样,利用分屏,在电子设备屏幕上能够同时显示文本的来源应用界面和去向应用界面,方便进行多次复制粘贴,简化了操作,提升了用户使用体验。
根据第一方面,第一分屏位于电子设备屏幕的上半部分,第二分屏位于电子设备屏幕的下半部分。
根据第一方面,第一分屏位于电子设备屏幕的左半部分,第二分屏位于电子设备屏幕的右半部分。
根据第一方面,应用交互方法还可以包括:接收对第五应用的界面上第三目标文本的选中操作,响应于拖动第三目标文本至第一区域,在第二区域显示第七应用的图标和第八应用的图标。接着,响应于将第三目标文本拖动到第七应用的图标上,启动第七应用,在第一分屏显示第七应用的界面。这样,保持文本来源应用界面所在的分屏不变,使去向应用界面显示在另一分屏,在电子设备屏幕上能够同时显示文本的来源应用界面和去向应用界面,方便进行多次复制粘贴,简化了操作,提升了用户使用体验。
根据第一方面,第二应用和所述第三应用是根据第一目标文本预测得到的。
根据第一方面,第一区域为屏幕侧边区域。例如,在一个示例中,第一区域可以是屏幕的右侧边区域。在另一个示例中,第一区域可以是屏幕的左侧边区域。
在一个示例中,第一区域与第二区域不重合。
第二方面,本申请提供一种应用交互方法,应用于电子设备,该方法包括:接收对第一应用的界面上第一目标文本的选中操作,根据第一目标文本,预测第二应用和第三应用,响应于拖动第一目标文本至第一区域,在第二区域显示第二应用的图标和第三应用的图标,第二区域位于电子设备的屏幕边缘部分;响应于将第一目标文本拖动到第二应用的图标上,启动第二应用,在显示第一应用的界面的区域显示第二应用的界面。这样,用户通过拖动文本到第一应用界面即文本来源应用界面上的第二应用图标,可以方便地启动第二应用即去向应用并显示去向应用界面,简化了操作,提升了用户使用体验。
根据第二方面,应用交互方法还可以包括:响应于拖动第一目标文本至第一区域,复制第一目标文本。当检测到第二应用的界面上包括与第一目标文本匹配的第一文本输入框,在第一文本输入框内的区域叠加显示第一目标文本。然后,响应于松手操作,将第一目标文本粘贴到第一文本输入框中,并在第一文本输入框内显示第一目标文本。这样,能够方便快捷地完成粘贴,提升用户使用体验。
根据第二方面,应用交互方法还可以包括:接收对第四应用的界面上第二目标文本的选中操作,根据第二目标文本,预测第五应用和第六应用。然后,响应于拖动第二目标文本至第一区域,在第二区域显示第五应用的图标和第六应用的图标。接着,响应于将第二目标文本拖动到第五应用的图标上,启动第五应用,在第四应用的界面上叠加显示悬浮窗,在悬浮窗中显示第五应用的界面。这样,利用悬浮窗,在电子设备屏幕上能够同时显示文本的来源应用界面和去向应用界面,方便进行多次复制粘贴,简化了操作,提升了用户使用体验。
根据第二方面,应用交互方法还可以包括:接收对第四应用的界面上第二目标文本的选中操作,根据第二目标文本,预测第五应用和第六应用。然后,响应于拖动第二目标文本至第一区域,在第二区域显示第五应用的图标和第六应用的图标。接着,响应于将第二目标文本拖动到第五应用的图标上,启动第五应用,在显示第四界面的区域显示第一分屏和第二分屏,在第一分屏中显示第四应用的界面,在第二分屏中显示第五应用的界面。这样,利用分屏,在电子设备屏幕上能够同时显示文本的来源应用界面和去向应用界面,方便进行多次复制粘贴,简化了操作,提升了用户使用体验。
根据第二方面,应用交互方法还可以包括:接收对第五应用的界面上第三目标文本的选中操作,根据第三目标文本,预测第七应用和第八应用。接着,响应于拖动第三目标文本至第一区域,在第二区域显示第七应用的图标和第八应用的图标。然后,响应于将第三目标文本拖动到第七应用的图标上,启动第七应用,在第一分屏显示第七应用的界面。这样,保持文本来源应用界面所在的分屏不变,使去向应用界面显示在另一分屏,在电子设备屏幕上能够同时显示文本的来源应用界面和去向应用界面,方便进行多次复制粘贴,简化了操作,提升了用户使用体验。
根据第二方面,在显示第四界面的区域显示第一分屏和第二分屏,包括:当电子设备为单屏设备,在电子设备屏幕的上半部分显示第一分屏,在电子设备屏幕的下半部分显示第二分屏。这样,根据设备的类型,采用适当的分屏方式,能够提升用户使用体验。
根据第二方面,在显示第四界面的区域显示第一分屏和第二分屏,包括:当电子设备为折叠屏设备,在电子设备屏幕的左半部分显示第一分屏,在电子设备屏幕的右半部分显示第二分屏。这样,根据设备的类型,采用适当的分屏方式,能够提升用户使用体验。
第三方面,本申请提供一种电子设备,该电子设备包括:存储器和处理器,存储器与处理器耦合。存储器存储有程序指令,当程序指令由处理器执行时,使得电子设备执行第一方面中任意一项应用交互方法。
第四方面,本申请提供一种计算机可读存储介质,包括计算机程序,当计算机程序在电子设备上运行时,使得电子设备执行第一方面中任意一项应用交互方法。
第五方面,本申请提供一种芯片,该芯片包括一个或多个接口电路和一个或多个处理器。其中,接口电路用于从电子设备的存储器接收信号,并向处理器发送信号,信号包括存储器中存储的计算机指令。当处理器执行计算机指令时,使得电子设备执行第一方面中任意一项应用交互方法。
附图说明
图1为示例性示出的电子设备100的结构示意图;
图2为示例性示出的本申请实施例的电子设备100的软件结构框图;
图3为示例性示出的本申请实施例的应用交互过程中的各操作的时序示意图;
图4为示例性示出的显示图片的OCR识别结果之前的过程的界面示意图;
图5为示例性示出的在图片a的OCR识别结果中选中并拖动目标文本的过程示意图;
图6为示例性示出的启动显示推荐应用列表的过程示意图;
图7A1为示例性示出的拖动目标文字后不松手的情况下直接全屏显示目标应用界面的一种过程示意图;
图7A2为示例性示出的拖动目标文字后不松手的情况下直接全屏显示目标应用界面的另一种过程示意图;
图7A3为示例性示出的拖动目标文字后不松手的情况下直接全屏显示目标应用界面的又一种过程示意图;
图7B为示例性示出的拖动目标文字后松手的情况下直接全屏显示目标应用界面的一种过程示意图;
图8为示例性示出的应用交互方法中用户与电子设备之间的交互示意图;
图9A为示例性示出的拖动目标文本后不松手的情况下切换推荐应用的过程示意图;
图9B为示例性示出的拖动目标文字后松手的情况下切换推荐应用的过程示意图;
图10A1为示例性示出的拖动目标文字后不松手的情况下进入微信应用后的一种操作过程示意图;
图10A2为示例性示出的拖动目标文字后不松手的情况下进入微信应用后的另一种操作过程示意图;
图10B1为示例性示出的拖动目标文字后松手的情况下进入微信应用后的一种操作过程示意图;
图10B2为示例性示出的拖动目标文字后松手的情况下进入微信应用后的另一种操作过程示意图;
图11A为示例性示出的拖动目标文本后不松手的情况下在悬浮窗显示地图应用界面的一种过程示意图;
图11B为示例性示出的拖动目标文本后松手的情况下在悬浮窗显示地图应用界面的一种过程示意图;
图12A为示例性示出的拖动目标文本后不松手的情况下在分屏中显示地图应用界面的一种过程示意图;
图12B为示例性示出的拖动目标文本后松手的情况下在分屏中显示地图应用界面的一种过程示意图;
图13A为示例性示出的拖动目标文本后不松手的情况下在分屏中显示京东应用界面的一种过程示意图;
图13B为示例性示出的拖动目标文本后松手的情况下在分屏中显示京东应用界面的一种过程示意图;
图14A为示例性示出的拖动目标文本后不松手的情况下在折叠屏电子设备或宽屏电子设备中切换去向应用的过程示意图;
图14B为示例性示出的拖动目标文本后松手的情况下在折叠屏电子设备或宽屏电子设备中切换去向应用的过程示意图;
图15为示例性示出的在基于一个去向应用中的目标文本显示另一个去向应用的过程示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
本申请实施例的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述对象的特定顺序。例如,第一目标对象和第二目标对象等是用于区别不同的目标对象,而不是用于描述目标对象的特定顺序。
在本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本申请实施例的描述中,除非另有说明,“多个”的含义是指两个或两个以上。例如,多个处理单元是指两个或两个以上的处理单元;多个***是指两个或两个以上的***。
本申请实施例中的应用交互方法,可以应用于将同一电子设备的一个应用中的文本复制粘贴到另一个应用中的场景。
在一个示例中,该场景例如可以是:将浏览器、备忘录、邮件、微信等应用中的文本复制粘贴到与文本的来源应用不同的其他应用中。本示例中,应用中的文本能够被直接选择。
举例来说,用户在浏览器界面中看到一个重要知识点,想将该知识点记录到备忘录中。此时,可以应用本申请实施例中的应用交互方法,将浏览器界面中的该知识点粘贴到备忘录中。再比如,在微信聊天界面中有一个电话号码,用户想将该电话号码添加到通讯录中。此时,可以应用本申请实施例中的应用交互方法,将微信聊天界面中的电话号码粘贴到通讯录中。
在另一个示例中,该场景例如可以是:将图片的光学字符识别(OpticalCharacter Recognition,OCR)识别结果中的文本复制粘贴到某一应用中。其中,图片可以来源于图库、实时截屏、浏览器、微信、QQ等等应用。本申请实施例对图片的来源不做限制。本示例中,应用中的文本来源于图片的OCR识别结果,图片中的文本不能被直接选择。
举例来说,一个快递的照片中有地址信息,用户想要将该地址信息添加到某一购物应用的收货地址中。此时,可以应用本申请实施例中的应用交互方法,将照片中的地址信息粘贴到购物应用的收货地址中。
需要说明的是,以上示例仅为对本申请实施例应用场景的示意性说明。本申请实施例对于文本的来源应用(即包含该文本的应用)和去向应用(即需要粘贴该文本的应用)不做限制。
本文中,应用程序可以简称为应用。
本申请实施例中的应用交互方法可以应用于电子设备。该电子设备例如可以是手机、平板等。下面以电子设备100为例,对应用本申请实施例中的应用交互方法的电子设备的硬件结构和软件结构进行说明。
图1为示例性示出的电子设备100的结构示意图。应该理解的是,图1所示电子设备100仅是电子设备的一个范例,并且电子设备100可以具有比图中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图1中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
请参见图1,电子设备100可以包括:处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
电子设备100的软件***可以采用分层架构、事件驱动架构、微核架构、微服务架构,或云架构。本申请实施例以分层架构的安卓(Android)***为例,示例性说明电子设备100的软件结构。
图2为示例性示出的本申请实施例的电子设备100的软件结构框图。
电子设备100的分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android***分为四层,从上至下分别为应用程序层、应用程序框架层、安卓运行时(Android runtime)和***库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序层的应用程序包可以包括传感器、相机、图库、OCR引擎、应用推荐、应用交互模块、三方应用、截屏等应用程序。
其中,OCR引擎用于对图片进行OCR识别,得到图片的OCR识别结果,OCR识别结果中包括可选择、可复制的来自于图片的文本信息。其中的图片可以是截屏应用所得到的截屏图片,也可以是相机应用拍照所得的照片,还可以是图库中存储的图片,等等,本申请实施例对图片来源不做限制。
应用推荐用于根据文本内容,预测与文本内容相关的应用,并将预测的应用推荐给用户。应用交互模块用于执行本申请实施例的应用交互方法。本申请实施例的应用交互方法的详细内容请参见后文的描述。三方应用用于提供图片或者提供可选择、可复制的的文本信息。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括视图***、资源管理器、窗口管理器、活动管理器等。
其中,视图***包括可视控件,例如显示文本的控件,显示图片的控件等。视图***可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文本的视图以及显示图片的视图。
资源管理器为应用程序提供各种资源,比如本地化文本串,图标、图片、布局文件、视频文件等等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小、判断是否有状态栏、锁定屏幕、截取屏幕等。
活动管理器用于管理各个应用程序的生命周期以及导航回退功能,负责Android的主线程创建,各个应用程序的生命周期的维护。
Android runtime包括核心库和虚拟机。Android runtime负责安卓***的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓(Android)的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
***库可以包括多个功能模块,例如表面管理器(surface manager)等。
表面管理器用于对显示子***进行管理,并且为多个应用程序提供了2D和3D图层的融合。
内核层是硬件和软件之间的层。内核层可以包含显示驱动、传感器驱动等模块。
可以理解的是,图2示出的软件结构中的层以及各层中包含的部件,并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的层,以及每个层中可以包括更多或更少的部件,本申请不做限定。
为描述方便,本文后续将电子设备简称为电子设备。应当理解,本文中所提及的电子设备均可具有与前述实施例中的电子设备100相同的硬件结构(例如图1所示的硬件结构)以相同的软件结构(例如图2所示的软件结构)。
下面以将图片的OCR识别结果中的文本复制粘贴到某一应用中的场景为例,对本申请实施例的应用交互方法进行说明。下面的实施例中,假设用户想要将图片中的文本信息粘贴到地图应用中的一个文本输入框中。
图3为示例性示出的本申请实施例的应用交互过程中的各操作的时序示意图。图8为示例性示出的应用交互方法中用户与电子设备之间的交互示意图。下面结合图3和图8,对本申请实施例的应用交互方法的过程进行详细说明。
请参见图3,本申请实施例的应用交互方法的过程包括“打开图片,OCR识别结果显示按钮未显示”的阶段。在该阶段,电子设备执行“在电子设备屏幕上显示图片a”以及“检测图片a中是否存在文本,如果存在文本,获取图片a的OCR识别结果”的处理。
请参见图8,在“打开图片,OCR识别结果显示按钮未显示”的阶段,本申请实施例的应用交互方法的过程可以包括如下步骤:
步骤S1,用户点击图片a。
步骤S2,电子设备响应于点击图片a,在电子设备屏幕上显示图片a。
步骤S3,电子设备检测图片a中是否存在文本,如果存在文本,获取图片a的OCR识别结果。
用户可以在多种情况下执行点击图片的操作,从而在电子设备屏幕上显示图片。这里的电子设备例如可以是手机、平板等。本文中以电子设备为手机为例进行说明。应当理解的是,本文中以手机为例所进行的说明同样适用于其他非手机的电子设备,例如平板等。
例如,图4为示例性示出的显示图片的OCR识别结果之前的过程的界面示意图。请参见图4,在一个示例性的实现方式中,用户可以点击手机的主界面中的“图库”图标(请参见图4的(a)图),点击“图库”图标后,进入到“图库”应用的内部界面,此时的界面显示如图4的(b)图所示。请参见图4的(b)图,“图库”中包括图片a、图片1、图片2、图片3、图片n等图片。用户可以继续在图4的(b)图所示界面上进行点击图片的操作,例如,假设用户点击了图片a。
此时,手机响应于点击图片a,在手机屏幕上显示图片a,如图4的(c)图所示。图4中的(a)图~(c)图以从图库进入到图片显示界面为例进行了说明,需要说明的是,本申请实施例并不限制进入到图片显示界面的方式。例如,在本申请其他实施例中,还可以通过截屏后点击截屏图片的方式进入到图片显示界面,或者还可以通过在浏览网页过程中点击网页中的图片的方式进入到图片显示界面,等等,此处不再一一列举。
请继续参见图4,在显示图片a后,本申请实施例的应用交互方法进一步检测图片a中是否存在文本。如果图片a中存在文本,获取图片a的OCR识别结果。如果图片a中不存在文本,本申请实施例的应用交互方法将结束本次的应用交互过程。至此,完成了图3所示“打开图片,OCR识别结果显示按钮未显示”阶段的过程。
本申请实施例中,电子设备可以通过多种方式来检测图片a中是否存在文本,以及在图片a中存在文本的情况下获取图片a的OCR识别结果。
在一个示例性的实现过程中,如果图片a的存储数据中包括图片a的OCR识别结果,电子设备可以根据图片a的存储数据确定图片a中是否存在文本。并且,在图片a中存在文本的情况下,电子设备可以直接从图片a的存储数据中读取图片a的OCR识别结果。
在另一个示例性的实现过程中,如果图片a的存储数据中不包括图片a的OCR识别结果,电子设备可以将图片a发送给图2所示应用程序层的OCR引擎,OCR引擎对图片a进行实时的OCR识别,并输出图片a的OCR识别结果。然后,电子设备从OCR引擎的输出数据中获取到图片a的OCR识别结果。
其中,OCR引擎用于对图片进行OCR识别,输出图片的OCR识别结果。
请继续参见图3,在获取到图片a的OCR识别结果后,本申请实施例的应用交互方法进入“显示OCR识别结果显示按钮但该按钮未开启”的阶段。在该阶段,电子设备执行“在图片a的界面上弹出OCR识别结果显示按钮”的处理。
请继续参见图8,在“显示OCR识别结果显示按钮但该按钮未开启”的阶段,本申请实施例的应用交互方法的过程可以包括如下步骤:
步骤S4,如果获取到图片a的OCR识别结果,电子设备在电子设备屏幕上弹出OCR识别结果显示按钮。
这里,弹出的OCR识别结果显示按钮处于未开启状态。此时的电子设备界面请参见图4的(d)图。在用户未点击图4的(d)图中OCR识别结果显示按钮的情况下,图片a中的文本是不可选择。
这时,用户可以点击OCR识别结果显示按钮,以便后续能够执行从OCR识别结果中选择文本以及打开地图应用的操作。
如果电子设备在弹出OCR识别结果显示按钮后的一段预设时长内没有检测到点击OCR识别结果显示按钮的操作,可以确认用户没有从OCR识别结果中选择文本并粘贴到其他应用的需求。此时,电子设备可以在电子设备屏幕上主动停止显示OCR识别结果显示按钮,即OCR识别结果显示按钮从图片a的界面上消失。
在一个示例性的实现过程中,如果用户没有从OCR识别结果中选择文本并将选择的文本粘贴到其他应用的需求,用户也可以点击OCR识别结果显示按钮外的任意一处。此时,电子设备检测到用户对OCR识别结果显示按钮外的任意一处的点击操作,可以在电子设备屏幕上停止显示OCR识别结果显示按钮。这种方式中,电子设备基于用户操作被动停止显示OCR识别结果显示按钮。
当然,在另一个示例性的实现过程中,如果用户没有从OCR识别结果中选择文本并将选择的文本粘贴到目标应用的需求,电子设备还可以将OCR识别结果显示按钮一直保持在未开启状态。
步骤S5,用户点击OCR识别结果显示按钮。
电子设备检测到用户对OCR识别结果显示按钮的点击操作,可以确认用户有从OCR识别结果中选择文本并将选择的文本粘贴到去向应用的需求,从而进入到后续显示图片a的OCR识别结果的流程。
请继续参见图3,在用户点击OCR识别结果显示按钮后,本申请实施例的应用交互方法进入“显示OCR识别结果显示按钮且该按钮已开启”的阶段。在该阶段,电子设备响应于对OCR识别结果显示按钮的点击操作,在电子设备屏幕上显示图片a的OCR识别结果;电子设备响应于在图片a的OCR识别结果上选中目标文本且拖动目标文本到屏幕侧边的操作,在电子设备屏幕的侧边显示推荐应用列表;电子设备响应于对推荐应用列表中地图应用的选中操作,自动启动地图应用,将地图应用的界面显示在电子设备屏幕上。
请继续参见图8,在“显示OCR识别结果显示按钮且该按钮已开启”的阶段,本申请实施例的应用交互方法的过程可以包括如下步骤:
步骤S6,电子设备响应于对OCR识别结果显示按钮的点击操作,在电子设备屏幕上显示图片a的OCR识别结果。
用户点击OCR识别结果显示按钮后的界面请参见图4的(e)图。此时,OCR识别结果中的文本处于可选择的状态。
需要说明的是,为了与图片a上不可选择的文本相对比,在图4的(e)图中,对OCR识别结果中的文本添加了边框。但是,本申请对于OCR识别结果的显示方式不做限制。例如,在一个示例中,对于OCR识别结果中的文本可以不添加边框,也不添加其他内容。在另一个示例中,可以为OCR识别结果中的文本设置与背景不同的底色。在又一个示例中,电子设备可以对OCR识别结果中的文本进行高亮显示,并且还可以对文本中属于预设内容类型的文本进行着重显示。
举例来说,预设内容类型例如可以包括姓名、地址、电话号码等。对于属于预设内容类型的文本,电子设备可以以预设的着重显示方式进行显示。例如,电子设备可以在属于预设内容类型的文本添加下划线,或者对属于预设内容类型的文本进行高亮显示、或者为属于预设内容类型的文本设置与OCR识别结果中的其他文本设置不同的底色,等等,本申请对OCR识别结果中属于预设内容类型的文本的着重显示方式不作限制。
步骤S7,用户在OCR识别结果中选中目标文本并将目标文本拖动到电子设备的屏幕侧边。
示例性的,用户可以通过在目标文本上滑动的方式选中要复制的目标文本。
其中,屏幕侧边可以是屏幕的左侧,也可以是屏幕的右侧。本申请实施例的后续以拖动目标文本到屏幕的右侧为例进行说明。
本申请实施例中,屏幕侧边是预设的拖动目的地区域。本申请对于拖动目的地区域不作限制,只要预先设置好即可。在本申请其他实施例中,也可以设置拖动目的地区域为其他区域,例如屏幕的下方区域等。只要用户将目标文本拖动到预设的拖动目的地区域,就可以触发后续的显示推荐应用列表。
步骤S8,电子设备响应于选中目标文本并将目标文本拖动到屏幕侧边的操作,复制目标文本。
图5为示例性示出的在图片a的OCR识别结果中选中并拖动目标文本的过程示意图。请参见图5的(a)图,用户通过在“北京市海淀区××路××大厦”上滑动的方式选中目标文本“北京市海淀区××路××大厦”,并且,电子设备响应于用户在OCR识别结果中的“北京市海淀区××路××大厦”上滑动的操作,在电子设备屏幕上弹出文本操作菜单。该文本操作菜单中可以包括全选、剪切、复制、粘贴、翻译等操作选项。接着,在图5的(b)图中,用户无需点击文本操作菜单中的任何操作选项,而是直接拖动目标文本“北京市海淀区××路××大厦”到屏幕右侧,如图5的(c)图所示,其中,拖动的路径和方向请分别参见图5的(b)图中的虚线和箭头。电子设备响应于选中目标文本“北京市海淀区××路××大厦”、并将目标文本“北京市海淀区××路××大厦”拖动到屏幕右侧,复制目标文本“北京市海淀区××路××大厦”。此时,剪切板中就有了目标文本“北京市海淀区××路××大厦”。当用户执行拖动操作,电子设备停止在屏幕上显示文本操作菜单。
需要说明的是,在本申请实施例的应用交互过程中,用户不需要点击文本操作菜单中的任何操作选项。对于用户来说,如果用户的意图不是从一个应用中选择文本粘贴到另一个应用中,而是其他的意图,比如用户想知道所选文本的外文翻译等,此时,用户可以点击文本操作菜单中的相关操作选项。
步骤S9,电子设备根据目标文本内容确定推荐应用列表,并在屏幕侧边显示该推荐应用列表。
本申请实施例的应用交互方法中,启动显示推荐应用列表的过程如图6所示。图6为示例性示出的启动显示推荐应用列表的过程示意图。请参见图6,图6的(a)图与前述图5的(c)图相同,此处不再赘述。在图6的(b)图中,电子设备检测到目标文本“北京市海淀区××路××大厦”已被拖动到屏幕侧边,将目标文本“北京市海淀区××路××大厦”发送给应用推荐app(如图2所示),应用推荐app根据目标文本内容确定至少两个推荐的应用,并将推荐的应用通知给应用交互模块。应用交互模块接收到推荐的应用后,可以以推荐应用列表的方式显示推荐的应用。
本申请实施例中,应用推荐app根据目标文本内容确定推荐应用的方式可以是:计算目标文本内容与已有的各个应用的关联程度,将关联程度最大的至少两个应用作为推荐应用,添加到推荐应用列表中。例如,本申请实施例中的目标文本“北京市海淀区××路××大厦”表示一个地址,与地址关联程度较大的有地图类应用、购物类应用、社交类应用等。据此,可以确定图6的(b)图和(c)图中的地图应用为地图类应用,京东应用为购物类应用,微信应用为社交类应用。
需要理解的是,以上的根据目标文本内容确定推荐应用列表的方式仅为示意性举例,本申请实施例对于根据目标文本内容确定推荐应用列表的具体方式不做限定。
需要说明的是,本申请实施例中,目标文本是否已位于屏幕侧边是以拖动目标文本的手指的触摸位置为准的。如果拖动目标文本的手指的触摸位置位于屏幕侧边,就确定目标文本已经位于屏幕侧边。
需要说明的是,本申请实施例中,以推荐应用列表的方式显示推荐的应用仅为显示推荐应用的一个示意性举例,并不对本申请的推荐应用显示方式进行限定。在本申请其他实施例中,可以以其他方式显示推荐应用。例如,可以将每个推荐应用的图标分别独立地显示在电子设备屏幕上。
在一个示例中,在电子设备上已经显示推荐应用列表后,用户可以继续保持不松手的状态,以进行后续如图7A1、图7A2、图7A3中的操作。
在另一个示例中,在电子设备上已经显示推荐应用列表后,用户可以松手,此时,电子设备可以停止显示被拖动到屏幕侧边的目标文字“北京市海淀区××路××大厦”,而显示悬浮球,如图6的(c)图所示。其中,悬浮球中可以包括目标文字的关键信息,例如,目标文字“北京市海淀区××路××大厦”对应的悬浮球中可以显示“××路”。在这种情况下,用户松手后,可以按照图7B所示执行后续操作。
在又一个示例中,在电子设备上已经显示推荐应用列表后,用户可以松手,此时,电子设备可以停止显示被拖动到屏幕侧边的目标文字“北京市海淀区××路××大厦”,并且不显示悬浮球。在这种情况下,用户松手后,可以按照图7B所示执行后续操作。
在再一个示例中,在电子设备上已经显示推荐应用列表后,用户可以松手,此时,电子设备可以以悬停方式显示被拖动到屏幕侧边的目标文字“北京市海淀区××路××大厦”,即目标文字“北京市海淀区××路××大厦”悬停显示在电子设备屏幕上,而用户无需用手按住目标文字。在这种情况下,用户松手后,也可以按照图7B所示执行后续操作。
本申请实施例中,推荐应用列表可以显示在屏幕的侧边。例如,推荐应用列表可以与拖动目的地区域处于屏幕的同一侧。本申请实施例中以推荐应用列表显示在屏幕右侧为例进行说明。
本申请实施例中,推荐应用列表对应的控件位于屏幕的最上层,这样,可以避免推荐应用列表被电子设备屏幕上的其他界面覆盖,影响后续从推荐应用列表中选择应用的操作。
推荐应用列表中可以包括根据目标文本内容确定的至少两个应用的应用图标。当推荐应用列表中的应用较多时,可以显示预设数量个(例如3个)个应用图标,并显示添加按钮,如图6的(b)图和(c)图所示。图6的(b)图和(c)图中,推荐应用列表中显示了三个应用,即地图应用、京东应用和微信应用的应用图标,以及显示了添加按钮。
当想要在推荐应用列表中显示地图应用、京东应用和微信应用以外的其他应用(例如联系人应用)的应用图标时,在图6的(b)图中,用户可以将目标文本“北京市海淀区××路××大厦”拖动到添加按钮的位置,此时,推荐应用列表从上到下可以依次显示京东应用、微信应用和联系人应用的应用图标,地图应用的应用图标被关联到添加按钮。
相应地,当想要在推荐应用列表中显示地图应用、京东应用和微信应用以外的其他应用(例如联系人应用)的应用图标时,在图6的(c)图中,用户可以点击添加按钮,此时,推荐应用列表从上到下可以依次显示京东应用、微信应用和联系人应用的应用图标,地图应用的应用图标被关联到添加按钮。
如果推荐应用列表中已经显示了推荐应用列表所包含的所有应用的应用图标,在推荐应用列表的显示内容中可以不包括添加按钮。
步骤S10,用户拖动目标文本到推荐应用列表的地图应用图标上停留,或者将目标文本悬停在屏幕侧边然后点击地图应用图标。
步骤S12,电子设备响应于拖动目标文本到推荐应用列表的地图应用图标上停留,或者响应于将目标文本悬停在屏幕侧边然后点击地图应用图标,自动启动地图应用,并在电子设备屏幕上显示地图应用的界面。
图7A1为示例性示出的拖动目标文本后不松手的情况下直接全屏显示目标应用界面的一种过程示意图。其中,拖动目标文本后不松手的情况请参见图6的(b)图所示的情形。请参见图7A1,在图7A1的(a)图中,用户将目标文本“北京市海淀区××路××大厦”拖动到地图应用图标上停留。
在图7A1的(b)图中,电子设备响应于拖动目标文本到推荐应用列表的地图应用图标上停留,开启地图应用,并在电子设备屏幕上显示地图应用的界面。此处,电子设备将地图应用的界面以全屏显示的方式显示在屏幕上,并且,目标文本“北京市海淀区××路××大厦”仍然显示在电子设备屏幕上。图7A1的(b)图中,当用户拖动目标文本到推荐应用列表的地图应用图标上,可以在需要粘贴目标文本的目标位置(此处为文本输入框)显示目标文本已粘贴到该目标位置的效果。
在图7A1的(b)图的情形下,如果用户松手,电子设备将停止显示目标文本“北京市海淀区××路××大厦”和推荐应用列表,并且,电子设备可以将目标文本“北京市海淀区××路××大厦”自动添加到地图应用界面上的指定文本输入框中,此时电子设备的界面如图7A1的(c)图所示。
图7A2为示例性示出的拖动目标文本后不松手的情况下直接全屏显示目标应用界面的另一种过程示意图。图7A2的(a)图与前述图7A1的(a)图相同,相关过程请参见前述说明,此处不再赘述。在图7A2的(b)图中,在用户已经将目标文本拖动到推荐应用列表的地图应用图标上的情况下,用户保持不松手的状态,继续沿着图7A2的(b)图中的带箭头的虚线所示路径和方向拖动目标文本。电子设备响应于继续拖动目标文本到文本输入框的操作,停止在屏幕上显示推荐应用列表。当用户将目标文本拖动到箭头所指向的文本输入框,用户松手,电子设备将目标文本“北京市海淀区××路××大厦”添加到地图应用界面上箭头所指向的文本输入框中,此时电子设备的界面如图7A2的(c)图所示。
图7A3为示例性示出的拖动目标文本后不松手的情况下直接全屏显示目标应用界面的又一种过程示意图。图7A3的(a)图与前述图7A1的(a)图相同,相关过程请参见前述说明,此处不再赘述。图7A3的(b)图中,电子设备响应于拖动目标文本到推荐应用列表的地图应用图标上停留,开启地图应用,并在电子设备屏幕上以全屏显示的方式显示地图应用的界面。
在图7A3的(c)图中,用户在电子设备屏幕上已显示地图应用界面的情况下松手。电子设备检测到该松手操作后,将目标文本悬停在屏幕上,并且停止在屏幕上显示推荐应用列表。
在图7A3的(d)图中,用户沿着图中带箭头虚线所示路径和方向拖动目标文本,直至拖动到文本输入框。电子设备检测到拖动目标文本以及将目标文本拖动到文本输入框后松手的操作,将目标文本“北京市海淀区××路××大厦”添加到地图应用界面上箭头所指向的文本输入框中,此时电子设备的界面如图7A3的(e)图所示。
图7B为示例性示出的拖动目标文本后松手的情况下直接全屏显示目标应用界面的一种过程示意图。其中,拖动目标文本后松手的情况请参见图6的(c)图所示的情形。请参见图7B,在图7B的(a)图中,目标文本“北京市海淀区××路××大厦”对应的悬浮球悬停在电子设备屏幕右侧,此时用户点击推荐应用列表中的地图应用图标。
在图7B的(b)图中,电子设备响应于将目标文本对应的悬浮球悬停在屏幕侧边然后点击地图应用图标,开启地图应用,在电子设备屏幕上显示地图应用的界面,并停止在屏幕上显示目标文本,然后用户松手。
在图7B的(c)图中,用户松手后,点击地图应用界面上的文本输入框。电子设备响应于点击地图应用界面上的文本输入框,在屏幕上弹出包含粘贴操作选项的列表,并停止显示推荐应用列表。
在图7B的(d)图中,用户点击包含粘贴操作选项的列表中的粘贴操作选项。在图7B的(e)图中,电子设备响应于点击粘贴操作选项,将目标文本“北京市海淀区××路××大厦”添加到地图应用界面上的文本输入框中。
在电子设备上已经显示推荐应用列表后,用户松手,电子设备停止显示被拖动到屏幕侧边的目标文字、并且不显示悬浮球的情况下,可以按照图7B的(b)图~(e)图所示执行后续操作。
同样,在电子设备上已经显示推荐应用列表后,用户松手,电子设备以悬停方式显示目标文字的情况下,也可以按照图7B的(b)图~(e)图所示执行后续操作。
在一个示例性的实现过程中,在电子设备上已经显示推荐应用列表后用户松手的情况下,应用交互过程可以包括图7B的(a)图、(b)图和(e)图。即显示地图应用的界面后(如7B的(b)图所示),如果用户松手,经过一段预设时长,电子设备将目标文本添加到地图应用界面上的文本输入框中,并停止显示推荐应用列表,不需要用户执行图7B的(c)图所示的点击文本输入框的操作以及图7B的(d)图所示的点击粘贴操作选项的操作。
根据以上列举的应用交互的示例性过程可知,本申请实施例能够基于在来源应用中选中目标文本随后拖动目标文本的操作,触发在来源应用界面上显示多个与目标文本相关联的推荐应用图标,并根据用户对推荐应用图标的选择(通过拖动目标文字到推荐应用图标或点击推荐应用图标),智能、自动地开启目标文本的去向应用,简化了用户操作,提升了用户的使用体验。
在实际应用中,存在用户在推荐应用列表中选择了一个应用后想切换到推荐应用列表中另一个应用的场景。本申请实施例针对该场景提供了应用交互的方式。
图9A为示例性示出的拖动目标文本后不松手的情况下切换推荐应用的过程示意图。请参见图9A,对于图6的(b)图所示的拖动目标文本后不松手的情况,当已在电子设备屏幕上显示推荐应用列表中的地图应用的界面、推荐应用列表仍然显示、且用户按住目标文本未松手(请参见图9A的(a)图),用户可以继续拖动目标文本到推荐应用列表以外的区域,此时,电子设备停止显示推荐应用列表(请参见图9A的(b)图)。
接着,用户可以继续拖动目标文本到屏幕右侧,保持不松手状态,响应于拖动目标文本到屏幕右侧,电子设备在屏幕上显示推荐应用列表(请参见图9A的(c)图)。然后,用户再拖动目标文本到推荐应用列表中另一个应用,例如微信应用上停留(请参见图9A的(c)图)。电子设备响应于拖动目标文本到推荐应用列表中的微信应用图标上停留,开启微信应用,并在电子设备屏幕上显示微信应用的界面(请参见图9A的(d)图)。
接下来,用户可以继续在微信应用的界面上拖动目标文本到某个联系人,例如9A的(e)图中的联系人甲,此后,电子设备响应于在微信应用的界面上拖动目标文本到联系人甲,按照图10A1所示执行进入微信应用后的操作,或者按照图10A2所示执行进入微信应用后的操作。
图9B为示例性示出的拖动目标文本后松手的情况下切换推荐应用的过程示意图。请参见图9B,对于图6的(c)图所示的拖动目标文本后松手的情况,当已在电子设备屏幕上显示推荐应用列表中的地图应用的界面、推荐应用列表仍然显示(请参见图9B的(a)图),用户可以继续点击推荐应用列表中另一个应用图标,例如微信应用图标(请参见图9B的(a)图)。电子设备响应于点击推荐应用列表中微信应用图标的操作,开启微信应用,并在电子设备屏幕上显示微信应用的界面(请参见图9B的(b)图)。电子设备响应于显示微信应用的界面的时长达到一定时长,停止显示推荐应用列表,请参见图9B的(c)图。
然后,用户可以继续在图9B的(c)图所示的微信应用的界面上点击某个联系人,例如联系人甲,此后,电子设备响应于点击联系人甲,执行图10B1所示的进入微信应用后的操作,或者执行图10B2所示的进入微信应用后的操作。
在另一个示例中,用户也可以在图9B的(b)图所示界面上点击联系人甲,即在推荐应用列表还在显示时点击联系人甲,此时,电子设备响应于点击联系人甲,停止显示推荐应用列表,并按照图10B1所示执行进入微信应用后的操作,或者按照图10B2所示执行进入微信应用后的操作。
在电子设备屏幕上已显示去向应用界面的情况下,如果去向应用的当前界面不存在目标文本的粘贴位置,本申请实施例可以继续开启并显示去向应用当前界面的下一级界面或多级界面。
图10A1为示例性示出的拖动目标文本后不松手的情况下进入微信应用后的一种操作过程示意图。请参见图10A1,对于图6的(b)图所示的拖动目标文本后不松手的情况,当已在电子设备屏幕上显示推荐应用列表中的微信应用的界面(请参见图10A1的(a)图),用户可以继续拖动目标文本到微信应用的界面上的一个可点击位置,当该可点击位置被点击时可以触发显示微信应用当前界面的下一级界面,例如该可点击位置可以是联系人甲,如图10A1的(a)图所示。
接着,电子设备响应于点击联系人甲,显示微信应用当前界面的下一级界面,即与联系人甲的聊天界面,如图10A1的(b)图所示。该聊天界面中包括向联系人甲发送消息的文本输入框。
在图10A1的(b)图中,用户继续拖动目标文本到文本输入框,电子设备响应于拖动目标文本到文本输入框,将目标文本“北京市海淀区××路××大厦”粘贴到该文本输入框中,粘贴后,微信应用会在界面上显示“发送”按钮。如图10A1的(c)图所示。如果用户想对发送的内容进行调整,用户可以在点击“发送”按钮前对文本输入框中的内容(即目标文本)进行编辑。
接下来,用户可以点击“发送”按钮,电子设备响应于点击“发送”按钮,将该文本输入框中的内容发送给联系人甲,并显示发送后的界面,如图10A1的(d)图所示。
在一个示例中,图10A1的(b)图和(c)图中所示的将目标文本粘贴到文本输入框中的过程,可以替换为类似图7A1的(b)图和(c)图的过程,或者替换为类似图7A3的(c)图~(e)图的过程,此处不再赘述。
图10A2为示例性示出的拖动目标文本后不松手的情况下进入微信应用后的另一种操作过程示意图。该示例中,图10A2的(a)图与图10A1的(a)图相同,针对图10A2的(a)图的说明请参见前述对图10A1的(a)图的说明,此处不再赘述。与图10A1所示示例不同的是,图10A2所示示例中,当用户点击联系人甲,电子设备自动将目标文本发送给联系人甲,并显示发送目标文本给联系人甲的界面,如图10A2的(b)图所示。
与图10A1对比可见,图10A2所示示例中省略了图10A1的(b)图和(c)图所示的操作步骤,将人工发送目标文本给联系人甲的流程变为电子设备自动发送目标文本给联系人甲的流程,减少了人工操作,提高了自动化、智能化程度,提升了用户的使用体验。
图10B1为示例性示出的拖动目标文本后松手的情况下进入微信应用后的一种操作过程示意图。请参见图10B1,对于图6的(c)图所示的拖动目标文本后松手的情况,当已在电子设备屏幕上显示推荐应用列表中的微信应用的界面(请参见图10B1的(a)图),用户可以点击微信应用的界面上的联系人甲。电子设备响应于点击联系人甲,显示与联系人甲的聊天界面,如图10B1的(b)图所示。
图10B1的(b)图的聊天界面中包括向联系人甲发送消息的文本输入框,电子设备将目标文本“北京市海淀区××路××大厦”自动粘贴到该文本输入框中,粘贴后,微信应用会在界面上显示“发送”按钮。如果用户想对发送的内容进行调整。用户可以在点击“发送”按钮前对文本输入框中的内容(即目标文本)进行编辑。
然后,用户可以点击图10B1的(b)图所示界面中的“发送”按钮,电子设备响应于点击“发送”按钮,将该文本输入框中的内容发送给联系人甲,并显示发送后的界面,如图10B1的(c)图所示。
图10B2为示例性示出的拖动目标文本后松手的情况下进入微信应用后的另一种操作过程示意图。请参见图10B2,对于图6的(c)所示的拖动目标文本后松手的情况,当用户点击联系人甲,电子设备响应于点击联系人甲,将目标文本发送给联系人甲,并显示发送后的界面,如图10B2的(b)图所示。与图10B1对比可见,图10B2所示示例中省略了图10B1的(b)图所示的操作步骤,将人工发送目标文本给联系人甲的流程变换为自动发送目标文本给联系人甲的流程,进一步减少了人工操作,提高了自动化、智能化程度,提升了用户的使用体验。
前述实施例描述了以直接全屏显示去向应用界面的方式进行应用交互的过程。这种方式能够快速切换到去向应用界面,提升用户使用体验。
然而,在一些应用场景中,用户不希望原界面(例如原界面可以是显示图片a的OCR识别结果的界面)被完全遮挡,例如用户希望能够快速切换回原界面的场景。为了满足该场景中的用户需求,本申请实施例提供了另一种去向应用界面的显示方式。
图11A为示例性示出的拖动目标文本后不松手的情况下在悬浮窗显示地图应用界面的一种过程示意图。图11A所示示例中开启地图应用并显示地图应用界面的过程与图7A2所示示例中的过程相同,此处不再赘述。图11A所示示例与图7A2所示示例的区别在于,图11A所示示例中在悬浮窗显示地图应用界面,而图7A2所示示例中直接全屏显示地图应用界面。
需要说明的是,在悬浮窗显示地图应用界面的情况下,开启地图应用并显示地图应用界面的过程也可以与图7A1所示示例中的过程相同,或者与图7A3所示示例中的过程相同,区别仅在于地图应用界面的显示方式不同,此处不再赘述。
图11B为示例性示出的拖动目标文本后松手的情况下在悬浮窗显示地图应用界面的一种过程示意图。图11B所示示例中开启地图应用并显示地图应用界面的过程可以与图7B所示示例中的过程相同,或者与7B所示示例中的(a)图→(b)图→(e)图所指示的过程(即显示地图应用界面后,电子设备将目标文本添加到地图应用界面上的文本输入框中)相同,此处不再赘述。图11B所示示例与图7B所示示例的区别在于,图11B所示示例中在悬浮窗显示地图应用界面,而图7B所示示例中直接全屏显示地图应用界面。
本申请实施例通过在悬浮窗显示去向应用,使得用户能够方便地看到目标文本的来源界面,满足用户需求,提升用户使用体验。
图12A为示例性示出的拖动目标文本后不松手的情况下在分屏中显示地图应用界面的一种过程示意图。图12A所示示例中开启地图应用并显示地图应用界面的过程与图7A2所示示例中的过程相同,此处不再赘述。图12A所示示例与图7A2所示示例的区别在于,图12A所示示例中在分屏中显示地图应用界面,并且分屏方式为上下分屏,而图7A2所示示例中直接全屏显示地图应用界面。
需要说明的是,在分屏中显示地图应用界面的情况下,开启地图应用并显示地图应用界面的过程也可以与图7A1所示示例中的过程相同,或者与图7A3所示示例中的过程相同,区别仅在于地图应用界面的显示方式不同,此处不再赘述。
图12B为示例性示出的拖动目标文本后松手的情况下在分屏中显示地图应用界面的一种过程示意图。图12B所示示例中开启地图应用并显示地图应用界面的过程可以与图7B所示示例中的过程相同,或者与7B所示示例中的(a)图→(b)图→(e)图所指示的过程(即切换到地图应用界面后,电子设备将目标文本添加到地图应用界面上的文本输入框中)相同,此处不再赘述。图12B所示示例与图7B所示示例的区别在于,图12B所示示例中在分屏中显示地图应用界面,并且分屏方式为上下分屏,而图7B所示示例中直接全屏显示地图应用界面。
本申请实施例通过在分屏中显示去向应用,使得用户无需进行界面切换就能看到目标文本的来源界面,满足用户需求,提升用户使用体验。并且,通过在分屏中显示去向应用,用户可以同时看到来源界面内容和去向应用界面内容,方便用户从来源界面多次复制内容到去向应用界面进行粘贴,避免了频繁切换界面的麻烦,为用户节省了时间。
需要说明的是,前述以电子设备为单屏电子设备(例如单屏手机、平板等)为例进行的说明,对于折叠屏电子设备(例如折叠屏手机)全屏、折叠屏电子设备折叠后的单屏的情况同样适用。
对于屏幕宽度较小的电子设备,可以采用图12A和图12B所示的上下分屏方式显示去向应用界面。对于宽屏幕的电子设备,例如平板、折叠屏展开成全屏状态的折叠屏手机等,本申请实施例提供了左右分屏显示的方式。
图13A为示例性示出的拖动目标文本后不松手的情况下在分屏中显示京东应用界面的一种过程示意图。图13A所示示例中开启京东应用并显示京东应用界面的过程与图7A1所示示例中的过程相同,此处不再赘述。图13A所示示例与图7A1所示示例的区别在于,图13A所示示例中在分屏中显示去向应用界面,并且分屏方式为左右分屏,而图7A1所示示例中直接全屏显示去向应用界面。
需要说明的是,在分屏中显示去向应用界面的情况下,开启去向应用并显示去向应用界面的过程也可以与图7A2所示示例中的过程相同,或者与图7A3所示示例中的过程相同,区别仅在于去向应用界面的显示方式不同,此处不再赘述。
图13B为示例性示出的拖动目标文本后松手的情况下在分屏中显示京东应用界面的一种过程示意图。图13B所示示例中开启京东应用并显示京东应用界面的过程可以与图7B所示示例中的过程相同,或者与7B所示示例中的(a)图→(b)图→(e)图所指示的过程(即显示京东应用界面后,电子设备将目标文本自动添加到京东应用界面上的文本输入框中)相同,此处不再赘述。图13B所示示例与图7B所示示例的区别在于,图12B所示示例中在分屏中显示去向应用界面,并且分屏方式为左右分屏,而图7B所示示例中直接全屏显示去向应用界面。
需要说明的是,电子设备中可以同时设置前述的直接全屏显示、在悬浮窗显示和在分屏中显示等显示去向应用界面的方式,并为每种显示方式设置启动开关。这样,用户可以根据个人的使用***板),电子设备可以确定采用左右分屏;当电子设备类型为折叠屏电子设备,电子设备可以进一步根据屏幕是否为折叠状态确定采用何种分屏,即如果屏幕为折叠状态,采用上下分屏,如果屏幕为非折叠状态,采用左右分屏。
图14A为示例性示出的拖动目标文本后不松手的情况下在折叠屏电子设备或宽屏电子设备中切换去向应用的过程示意图。图14A展示了拖动目标文本后不松手的情况下去向应用从京东应用切换到微信应用的过程。图14A所示示例中的过程与图9A所示示例中的过程原理相同,此处不再赘述。需要说明的是,在图14A的(b)图之后、(c)图之前省略了用户拖动目标文本到推荐应用列表之外的区域,电子设备响应于拖动目标文本到推荐应用列表之外的区域停止显示推荐应用列表的过程。
图14B为示例性示出的拖动目标文本后松手的情况下在折叠屏电子设备或宽屏电子设备中切换去向应用的过程示意图。图14B展示了拖动目标文本后松手的情况下去向应用从京东应用切换到微信应用的过程。图14B所示示例中的过程与图9B所示示例中的过程原理相同,此处不再赘述。
图15为示例性示出的在基于一个去向应用中的目标文本显示另一个去向应用的过程示意图。请参见图15的(a)图,在该图中,电子设备已经基于在屏幕左侧的图片a界面中选择拖动的目标文本“北京市海淀区××路××大厦”,在屏幕右侧显示了微信应用界面。此时,用户在屏幕右侧的微信应用界面中点击图片b,电子设备响应于在屏幕右侧的微信应用界面中点击图片b,在屏幕右侧显示图片b,如图15的(b)图所示。
接着,电子设备通过与获取前述的图片a的OCR识别结果的相同原理,获取将图片b的OCR识别结果。获取到图片b的OCR识别结果后,电子设备在图片b的界面上显示OCR识别结果显示按钮,如图15的(c)图所示。
然后,当用户点击图片b的界面上的OCR识别结果显示按钮,电子设备响应于点击图片b的界面上的OCR识别结果显示按钮,在屏幕右侧显示图片b的OCR识别结果。之后,按照与前述的图7B相同的过程原理,用户通过图片b触发的相应推荐应用列表选中联系人应用作为新目标文本“177****1991”的去向应用,如图15的(d)图所示。
接下来,电子设备响应于用户在图片b触发的相应推荐应用列表选中联系人应用作为去向应用,在屏幕左侧显示联系人应用界面。然后,电子设备响应于用户在联系人应用界面上点击“手机”对应的文本输入框,在联系人应用界面弹出包括粘贴操作选项的文本操作菜单,并停止在屏幕右侧显示推荐应用列表和目标文本对应的悬浮球,如图15的(e)图所示。
最后,电子设备响应于对联系人应用界面弹出的文本操作菜单中粘贴操作选项的点击,将新目标文本“177****1991”添加到“手机”对应的文本输入框,如图15的(f)图所示。
本申请实施例还提供了一种电子设备,该电子设备包括:
存储器和处理器,存储器与处理器耦合;
存储器存储有程序指令,当程序指令由处理器执行时,使得电子设备执行前述的任意一种应用交互方法。
本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质包括计算机程序,当计算机程序在电子设备上运行时,使得电子设备执行前述的任意一种应用交互方法。
本申请实施例还提供了一种芯片,该芯片包括一个或多个接口电路和一个或多个处理器;接口电路用于从电子设备的存储器接收信号,并向处理器发送信号,信号包括存储器中存储的计算机指令;当处理器执行计算机指令时,使得电子设备执行前述的任意一种应用交互方法。
其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
本申请各个实施例的任意内容,以及同一实施例的任意内容,均可以自由组合。对上述内容的任意组合均在本申请的范围之内。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个电子设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (23)

1.一种应用交互方法,应用于电子设备,其特征在于,所述方法包括:
显示第一应用的界面;
接收对所述第一应用的界面上第一目标文本的选中操作;
响应于拖动所述第一目标文本至第一区域,在第二区域显示第二应用的图标和第三应用的图标,所述第二区域位于所述电子设备的屏幕边缘部分;
响应于将所述第一目标文本拖动到所述第二应用的图标上,启动所述第二应用,在显示所述第一应用的界面的区域显示所述第二应用的界面;
还包括:
响应于拖动所述第一目标文本至第一区域,复制所述第一目标文本;
响应于将所述第一目标文本拖动到所述第二应用的图标上,启动第二应用,在显示所述第一应用界面的区域显示所述第二应用的界面之后,还包括:
当检测到所述第二应用的界面上包括与所述第一目标文本匹配的第一文本输入框,在所述第一文本输入框内的区域叠加显示所述第一目标文本;
响应于在所述第一区域进行松手操作,将所述第一目标文本粘贴到所述第一文本输入框中,并在所述第一文本输入框内显示所述第一目标文本,所述第一目标文本的内容是符合所述第一文本输入框对输入内容的要求的文本;或者,响应于在所述第一区域外进行松手操作,不在所述第一文本输入框内显示所述第一目标文本。
2.根据权利要求1所述的方法,其特征在于,响应于将所述第一目标文本拖动到所述第二应用的图标上,启动第二应用,在显示所述第一应用界面的区域显示所述第二应用的界面之后,还包括:
当检测到所述第二应用的界面上包括与所述第一目标文本匹配的第一文本输入框,在所述第一文本输入框内的区域叠加显示所述第一目标文本;
响应于将所述第一目标文本拖动到所述第一区域外,停止在所述第一文本输入框内的区域叠加显示所述第一目标文本;
响应于拖动所述第一目标文本至所述第一区域,在所述第二区域显示所述第二应用的图标和所述第三应用的图标;
响应于将所述第一目标文本拖动到所述第三应用的图标上,启动所述第三应用,在显示所述第二应用的界面的区域显示所述第三应用的界面。
3.根据权利要求1所述的方法,其特征在于,还包括:
响应于拖动所述第一目标文本至第一区域,复制所述第一目标文本;
响应于将所述第一目标文本拖动到所述第二应用的图标上,启动第二应用,在显示所述第一应用界面的区域显示所述第二应用的界面之后,还包括:
所述第二应用的界面上包括第二文本输入框和第三文本输入框,响应于拖动所述第一目标文本至所述第二文本输入框后松手的操作,将所述第一目标文本粘贴到所述第二文本输入框中,并在所述第二文本输入框内显示所述第一目标文本。
4.根据权利要求1所述的方法,其特征在于,响应于将所述第一目标文本拖动到所述第二应用的图标上,启动第二应用,在显示所述第一应用界面的区域显示所述第二应用的界面之后,还包括:
停止显示所述第二应用的图标和所述第三应用的图标;
所述第二应用的界面上包括第一对象的会话区域和第二对象的会话区域,响应于拖动所述第一目标文本至所述第一对象的会话区域,在显示所述第二应用的界面的区域显示与所述第一对象的会话界面,与所述第一对象的会话界面属于所述第二应用;
与所述第一对象的会话界面包括与所述第一目标文本匹配的第四文本输入框,将所述第一目标文本粘贴到所述第四文本输入框中,并在所述第四文本输入框内显示所述第一目标文本;
响应于接收到发送指令,将所述第四文本输入框中的内容发送给所述第一对象。
5.根据权利要求1所述的方法,其特征在于,响应于将所述第一目标文本拖动到所述第二应用的图标上,启动第二应用,在显示所述第一应用界面的区域显示所述第二应用的界面之后,还包括:
停止显示所述第二应用的图标和所述第三应用的图标;
所述第二应用的界面上包括第一对象的会话区域和第二对象的会话区域,响应于拖动所述第一目标文本至所述第一对象的会话区域,在显示所述第二应用的界面的区域显示与所述第一对象的会话界面,与所述第一对象的会话界面属于所述第二应用;
与所述第一对象的会话界面包括与所述第一目标文本匹配的第四文本输入框,将所述第一目标文本粘贴到所述第四文本输入框中,并在所述第四文本输入框内显示所述第一目标文本;
接收到对所述第四文本输入框中的文本的编辑指令,根据所述编辑指令对所述第四文本输入框中的文本进行编辑;
编辑完成后,响应于接收到发送指令,将所述第四文本输入框中的内容发送给所述第一对象。
6.根据权利要求1所述的方法,其特征在于,响应于将所述第一目标文本拖动到所述第二应用的图标上,启动第二应用,在显示所述第一应用界面的区域显示所述第二应用的界面之后,还包括:
停止显示所述第二应用的图标和所述第三应用的图标;
所述第二应用的界面上包括第一对象的会话区域和第二对象的会话区域,响应于拖动所述第一目标文本至所述第一对象的会话区域,将所述第一目标文本发送给所述第一对象,并在显示所述第二应用的界面的区域显示发送后与所述第一对象的会话界面。
7.根据权利要求1所述的方法,其特征在于,响应于将所述第一目标文本拖动到所述第二应用的图标上,启动所述第二应用,在显示所述第一应用的界面的区域显示所述第二应用的界面之后,还包括:
停止显示所述第二应用的图标和所述第三应用的图标。
8.根据权利要求1所述的方法,其特征在于,还包括:
显示第四应用的界面;
接收对所述第四应用的界面上第二目标文本的选中操作;
响应于拖动所述第二目标文本至所述第一区域,在所述第二区域显示第五应用的图标和第六应用的图标;
响应于将所述第二目标文本拖动到所述第五应用的图标上,启动所述第五应用,在所述第四应用的界面上叠加显示悬浮窗,在所述悬浮窗中显示所述第五应用的界面。
9.根据权利要求1所述的方法,其特征在于,还包括:
显示第四应用的界面;
接收对所述第四应用的界面上第二目标文本的选中操作;
响应于拖动所述第二目标文本至所述第一区域,在所述第二区域显示第五应用的图标和第六应用的图标;
响应于将所述第二目标文本拖动到所述第五应用的图标上,启动所述第五应用,在显示所述第四应用的界面的区域显示第一分屏和第二分屏,在所述第一分屏中显示所述第四应用的界面,在所述第二分屏中显示所述第五应用的界面。
10.根据权利要求9所述的方法,其特征在于,所述第一分屏位于所述电子设备屏幕的上半部分,所述第二分屏位于所述电子设备屏幕的下半部分。
11.根据权利要求9所述的方法,其特征在于,所述第一分屏位于所述电子设备屏幕的左半部分,所述第二分屏位于所述电子设备屏幕的右半部分。
12.根据权利要求9所述的方法,其特征在于,还包括:
接收对所述第五应用的界面上第三目标文本的选中操作;
响应于拖动所述第三目标文本至所述第一区域,在所述第二区域显示第七应用的图标和第八应用的图标;
响应于将所述第三目标文本拖动到所述第七应用的图标上,启动所述第七应用,在所述第一分屏显示所述第七应用的界面。
13.根据权利要求1所述的方法,其特征在于,所述第二应用和所述第三应用是根据所述第一目标文本预测得到的。
14.根据权利要求1所述的方法,其特征在于,所述第一区域为屏幕侧边区域。
15.一种应用交互方法,应用于电子设备,其特征在于,所述方法包括:
接收对第一应用的界面上第一目标文本的选中操作;
根据所述第一目标文本,预测第二应用和第三应用;
响应于拖动所述第一目标文本至第一区域,在第二区域显示所述第二应用的图标和所述第三应用的图标,所述第二区域位于所述电子设备的屏幕边缘部分;
响应于将所述第一目标文本拖动到所述第二应用的图标上,启动所述第二应用,在显示所述第一应用的界面的区域显示所述第二应用的界面;
还包括:
响应于拖动所述第一目标文本至第一区域,复制所述第一目标文本;
当检测到所述第二应用的界面上包括与所述第一目标文本匹配的第一文本输入框,在所述第一文本输入框内的区域叠加显示所述第一目标文本;
响应于在所述第一区域进行松手操作,将所述第一目标文本粘贴到所述第一文本输入框中,并在所述第一文本输入框内显示所述第一目标文本,所述第一目标文本的内容是符合所述第一文本输入框对输入内容的要求的文本;或者,响应于在所述第一区域外进行松手操作,不在所述第一文本输入框内显示所述第一目标文本。
16.根据权利要求15所述的方法,其特征在于,还包括:
接收对第四应用的界面上第二目标文本的选中操作;
根据所述第二目标文本,预测第五应用和第六应用;
响应于拖动所述第二目标文本至所述第一区域,在所述第二区域显示第五应用的图标和第六应用的图标;
响应于将所述第二目标文本拖动到所述第五应用的图标上,启动所述第五应用,在所述第四应用的界面上叠加显示悬浮窗,在所述悬浮窗中显示所述第五应用的界面。
17.根据权利要求15所述的方法,其特征在于,还包括:
接收对第四应用的界面上第二目标文本的选中操作;
根据所述第二目标文本,预测第五应用和第六应用;
响应于拖动所述第二目标文本至所述第一区域,在所述第二区域显示第五应用的图标和第六应用的图标;
响应于将所述第二目标文本拖动到所述第五应用的图标上,启动所述第五应用,在显示所述第四应用的界面的区域显示第一分屏和第二分屏,在所述第一分屏中显示所述第四应用的界面,在所述第二分屏中显示所述第五应用的界面。
18.根据权利要求17所述的方法,其特征在于,还包括:
接收对所述第五应用的界面上第三目标文本的选中操作;
根据所述第三目标文本,预测第七应用和第八应用;
响应于拖动所述第三目标文本至所述第一区域,在所述第二区域显示第七应用的图标和第八应用的图标;
响应于将所述第三目标文本拖动到所述第七应用的图标上,启动所述第七应用,在所述第一分屏显示所述第七应用的界面。
19.根据权利要求17所述的方法,其特征在于,在显示所述第四应用的界面的区域显示第一分屏和第二分屏,包括:
当所述电子设备为单屏设备,在所述电子设备屏幕的上半部分显示所述第一分屏,在所述电子设备屏幕的下半部分显示所述第二分屏。
20.根据权利要求17所述的方法,其特征在于,在显示所述第四应用的界面的区域显示第一分屏和第二分屏,包括:
当所述电子设备为折叠屏设备,在所述电子设备屏幕的左半部分显示所述第一分屏,在所述电子设备屏幕的右半部分显示所述第二分屏。
21.一种电子设备,其特征在于,包括:
存储器和处理器,所述存储器与所述处理器耦合;
所述存储器存储有程序指令,当所述程序指令由所述处理器执行时,使得所述电子设备执行权利要求1-20中任意一项所述的应用交互方法。
22.一种计算机可读存储介质,其特征在于,包括计算机程序,当所述计算机程序在电子设备上运行时,使得所述电子设备执行如权利要求1-20中任意一项所述的应用交互方法。
23.一种芯片,其特征在于,包括一个或多个接口电路和一个或多个处理器;所述接口电路用于从电子设备的存储器接收信号,并向所述处理器发送所述信号,所述信号包括存储器中存储的计算机指令;当所述处理器执行所述计算机指令时,使得所述电子设备执行权利要求1-20中任意一项所述的应用交互方法。
CN202111340669.1A 2021-11-12 2021-11-12 应用交互方法及电子设备 Active CN115033142B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111340669.1A CN115033142B (zh) 2021-11-12 2021-11-12 应用交互方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111340669.1A CN115033142B (zh) 2021-11-12 2021-11-12 应用交互方法及电子设备

Publications (2)

Publication Number Publication Date
CN115033142A CN115033142A (zh) 2022-09-09
CN115033142B true CN115033142B (zh) 2023-09-12

Family

ID=83117948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111340669.1A Active CN115033142B (zh) 2021-11-12 2021-11-12 应用交互方法及电子设备

Country Status (1)

Country Link
CN (1) CN115033142B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118227016A (zh) * 2022-12-20 2024-06-21 Oppo广东移动通信有限公司 图像的文本分享方法、装置、设备及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050153A (zh) * 2013-03-11 2014-09-17 三星电子株式会社 数据复制和粘贴的方法和装置
CN106575195A (zh) * 2014-10-24 2017-04-19 谷歌公司 移动设备上的改进的拖放操作
CN109960446A (zh) * 2017-12-25 2019-07-02 华为终端有限公司 一种控制被选中对象在应用界面中显示的方法及终端设备
CN111124709A (zh) * 2019-12-13 2020-05-08 维沃移动通信有限公司 一种文本处理方法及电子设备
CN112882623A (zh) * 2021-02-09 2021-06-01 维沃移动通信有限公司 文本处理方法、装置、电子设备及存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6986105B2 (en) * 2003-01-30 2006-01-10 Vista Print Limited Methods employing multiple clipboards for storing and pasting textbook components
US8370762B2 (en) * 2009-04-10 2013-02-05 Cellco Partnership Mobile functional icon use in operational area in touch panel devices

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050153A (zh) * 2013-03-11 2014-09-17 三星电子株式会社 数据复制和粘贴的方法和装置
CN106575195A (zh) * 2014-10-24 2017-04-19 谷歌公司 移动设备上的改进的拖放操作
CN109960446A (zh) * 2017-12-25 2019-07-02 华为终端有限公司 一种控制被选中对象在应用界面中显示的方法及终端设备
CN111124709A (zh) * 2019-12-13 2020-05-08 维沃移动通信有限公司 一种文本处理方法及电子设备
CN112882623A (zh) * 2021-02-09 2021-06-01 维沃移动通信有限公司 文本处理方法、装置、电子设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
交互界面功能性扩展设计研究:以智能手机为例;崔天剑董甜甜;《南京艺术学院学报(美术与设计)》;第206-210页 *

Also Published As

Publication number Publication date
CN115033142A (zh) 2022-09-09

Similar Documents

Publication Publication Date Title
US20220377128A1 (en) File transfer display control method and apparatus, and corresponding terminal
US20220342850A1 (en) Data transmission method and related device
WO2021063074A1 (zh) 一种分屏显示方法与电子设备
US20240053879A1 (en) Object Drag Method and Device
CN111666055B (zh) 数据的传输方法及装置
CN110519461B (zh) 文件发送方法、装置、计算机设备以及存储介质
WO2019128923A1 (zh) 一种控制被选中对象在应用界面中显示的方法及终端设备
CN113407086B (zh) 对象拖拽方法、设备和存储介质
CN112269508B (zh) 显示方法、装置和电子设备
CN111597000A (zh) 一种小窗口管理方法及终端
CN112948844B (zh) 控制方法、装置及电子设备
EP4404037A1 (en) Content sharing method and apparatus, and electronic device
CN112306325A (zh) 交互控制方法和装置
CN113467660A (zh) 信息分享方法和电子设备
WO2020259669A1 (zh) 一种视图显示方法和电子设备
CN115033142B (zh) 应用交互方法及电子设备
WO2022135476A1 (zh) 截图方法、装置及电子设备
CN115756269A (zh) 翻译方法及电子设备
CN112399010B (zh) 页面显示方法、装置和电子设备
WO2023221946A1 (zh) 一种信息的中转方法及电子设备
WO2023241563A1 (zh) 数据处理方法和电子设备
CN115033153B (zh) 应用程序推荐方法及电子设备
CN111796733B (zh) 图像显示方法、图像显示装置和电子设备
CN116126197B (zh) 应用程序推荐方法
US20240248582A1 (en) Content Sharing Method and Apparatus, and Electronic Device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant