CN113383312A - 在数据可视化用户界面中分析自然语言表达 - Google Patents
在数据可视化用户界面中分析自然语言表达 Download PDFInfo
- Publication number
- CN113383312A CN113383312A CN201980073415.2A CN201980073415A CN113383312A CN 113383312 A CN113383312 A CN 113383312A CN 201980073415 A CN201980073415 A CN 201980073415A CN 113383312 A CN113383312 A CN 113383312A
- Authority
- CN
- China
- Prior art keywords
- phrase
- input
- data
- natural language
- term
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2428—Query predicate definition using graphical user interfaces, including menus and forms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/243—Natural language query formulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- User Interface Of Digital Computer (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种方法在与显示器耦合的计算设备处执行。该方法包括在显示器上显示图形用户界面,并分析从用户接收的自然语言输入,以标识自然语言输入的对应于包括第一术语的第一短语的一部分。该方法还包括从用户接收修改第一短语中的第一术语的第二输入。响应于接收到第二输入,计算设备基于第二输入更新第二短语。响应于基于第二输入更新第二短语,计算设备在图形用户界面上显示包括修改的第一短语和更新的第二短语的更新的自然语言表达,并显示表示更新的自然语言表达的更新的数据可视化。
Description
技术领域
所公开的实施方式总体上涉及数据可视化,并且更具体地涉及使用户能够使用自然语言表达与数据可视化进行交互的***、方法和用户界面。
背景
数据可视化应用使用户能够直观地理解数据集,其包括分布、趋势、离群值以及其它对制定业务决策重要的因素。有些数据集非常大或复杂,并且包括许多数据字段。各种工具可以用于帮助用户为各种数据集生成数据可视化,但通常需要用户学习复杂的用户界面。
概述
使用自然语言表达来生成数据可视化为用户提供了对数据可视化特征(包括更新字段和改变如何过滤数据)的更大可访问性。自然语言界面使用户能够在很少或没有培训的情况下开发有价值的数据可视化。
因此,本公开提供了使用自然语言输入来操纵和生成数据的图形视图的更有效的方法和界面。这样的方法和界面减轻了用户的认知负担,并产生了更有效的人机界面。对于电池供电的设备,这样的方法和界面节省了电力,并增加了电池充电之间的时间。这样的方法和界面可以补充或替换用于可视化数据的常规方法。根据本说明书中的描述和附图,其它实施方式和优点对于本领域技术人员而言可能是明显的。
一些实施方式提供自动更新用于生成数据可视化的自然语言表达内的相关短语。例如,当用户改变自然语言表达中的一个短语时,自然语言表达的另一个短语也可能需要被更新以避免产生错误。在一些实施方式中,更新自然语言表达的短语导致改变表示由自然语言表达标识的数据的数据可视化。
根据一些实施方式,一种方法在与显示器耦合的计算设备上执行。例如,计算设备可以是智能电话、平板电脑、笔记本电脑或台式电脑。该方法包括在显示器上显示图形用户界面。该方法包括分析从用户接收的自然语言输入,以标识对应于包括第一术语的第一短语的自然语言输入的一部分。该方法还标识对应于第二短语的第二部分。该方法还包括从用户接收修改第一短语中的第一术语的第二输入。响应于接收到第二输入,计算设备基于第二输入更新第二短语。响应于基于第二输入更新第二短语,计算设备在图形用户界面上显示包括修改的第一短语和更新的第二短语的更新的自然语言表达,并显示表示更新的自然语言表达的更新的数据可视化。
在一些实施方式中,在图形用户界面中的用户界面控件中接收自然语言输入。
在一些情况下,自然语言输入包括两个或更多个不同的短语。
在一些情况下,修改第一短语中的第一术语的第二输入包括替换第一短语中的第一术语的第二术语。
在一些情况下,修改第一短语中的第一术语的第二输入移除第一短语中的第一术语。
在一些情况下,该方法还包括在接收第二输入之前,根据第一短语和第二短语显示不同于更新的数据可视化的初始数据可视化。
在一些实施方式中,该方法还在数据库中执行查找,以确定第二短语依赖于第一短语的第一术语。根据第二短语依赖于第一短语的第一术语的确定来执行更新第二短语。
在一些情况下,第二短语是第一短语的子部分,并且基于第二输入更新第二短语来更新第一短语的子部分。
在一些情况下,第一短语和第二短语是不同的短语。
在一些情况下,基于第二术语更新第二短语从第二短语中移除第三术语,并将第二术语添加到第二短语中以替换第三术语。
在一些情况下,基于第二术语更新第二短语会移除第二短语。
根据一些实施方式,一种方法在具有显示器的计算机上执行。例如,计算机可以是智能手机、平板电脑、笔记本电脑或台式电脑。该方法包括在显示器上显示图形用户界面。该方法包括从用户接收指定过滤条件(包括第一数据字段、关系和比较值)的自然语言输入。
该方法还包括接收输入以从第一数据字段切换到第二数据字段。该方法包括,响应于用户输入,根据第二数据字段的数据类型自动选择第二比较值,并在图形用户界面中显示对应于更新的过滤器(filter)的更新的数据可视化。
在一些情况下,第一数据字段的域包括第一比较值。
在一些情况下,第一数据字段的数据类型不同于第二数据字段的数据类型。
在一些实施方式中,该方法还包括,在接收用户更新之前,根据过滤条件,在图形用户界面上显示不同于更新的数据可视化的初始数据可视化。
在一些实施方式中,该方法还包括标识第二比较值的默认值。
在一些实施方式中,计算设备包括一个或更多个处理器、存储器、显示器以及存储在存储器中的一个或更多个程序。程序被配置为由一个或更多个处理器执行。一个或更多个程序包括用于执行本文描述的任何方法的指令。
在一些实施方式中,非暂时性计算机可读存储介质存储经配置以由具有一个或更多个处理器、存储器和显示器的计算设备执行的一个或更多个程序。一个或更多个程序包括用于执行本文描述的任何方法的指令。
因此,公开了使用户能够使用自然语言命令容易地构建和更新数据可视化的方法、***和图形用户界面。
附图简述
为了更好地理解所公开的***、方法和图形用户界面以及提供自然语言界面的附加的***、方法和图形用户界面,应结合以下附图参考以下实施方式的描述,在附图中,相同的附图参考数字在整个附图中指代相应的部分。
图1是根据一些实施方式的图形用户界面。
图2是根据一些实施方式的计算设备的框图。
图3A-3F提供了根据一些实施方式的用于更新自然语言输入的图形用户界面的一系列屏幕截图。
图4A-4E提供了根据一些实现方式的用于基于自然语言输入的改变更新数据可视化的图形用户界面的一系列屏幕截图。
图5A-5D示出了根据一些实施方式的更新自然语言输入中指定的过滤器。
图6A和图6B提供了根据一些实施方式的用于显示更新的数据可视化的过程的流程图。
图7提供了根据一些实施方式的用于更新数据过滤器的过程的流程图。
图8A-8J示出了根据一些实施方式的在自然语言界面中使用的窗口小部件(widget)。
现在将参考实施方式,其示例在附图中图示。在下面的描述中,阐述了许多具体细节以便提供对本发明的透彻理解。然而,对于本领域的普通技术人员来说将明显的是,本发明可在不需要这些具体细节的情况下实践。
实施方式的描述
本说明书中描述的一些方法和设备通过自动更新用于生成数据可视化的自然语言输入来改进数据可视化方法。这样的方法和设备通过提供对数据可视化的更快且更容易的访问来减轻用户的负担,而不需要手动更新自然语言输入中的每个相关短语。当用户修改自然语言输入的一部分而不更新该输入的相关部分时,它可能会触发错误条件而不是更新的数据可视化。在一些实施方式中,当用户修改自然语言输入的一部分时,自然语言输入的另一部分(例如过滤器)也需要被更新。这要求用户理解自然语言输入的不同部分的依赖性(dependency)。本文描述的方法和设备自动更新自然语言表达,使得当用户改变输入的一部分时,输入的相关部分被自动检测和更新。
图1示出了用于交互式数据分析的图形用户界面100。用户界面100显示模式信息区域110,其也被称为数据窗格。模式信息区域110提供可被选择并用于构建数据可视化的数据字段。在一些实施方式中,模式的数据字段在模式信息区域110中被分成一组维度(例如,分类数据)和一组度量(例如,数字量)。用户界面100显示用户界面控件120。在一些实施方式中,用户界面控件120接收和/或显示来自用户的自然语言输入128(例如,表达)。在一些实施方式中,图形用户界面100包括数据可视化区域112,以用于显示基于用户界面控件120中的输入128生成的数据可视化。
在一些实施方式中,可以通过使用视图类型选择器122来改变数据可视化的类型。例如,图1中选择的数据可视化的视图类型是“条形图”。数据可视化的另外的视图类型是可用的,例如“地图”、“折线图”、“饼图”、“散点图”、“文本表”和“树形图”。在一些实施方式中,数据可视化是根据基于输入的默认视图类型生成的。在一些实施方式中,默认视图类型是基于如根据用户选择的数据字段的数据类型和/或用户选择的数据字段的数据值确定的排名靠前的可视化类型来选择的,如第8,099,674号美国专利和第9,424,318号美国专利中所述,这两个专利中的每个专利以其整体通过引用并入。例如,当输入被修改时,显示不同类型的数据可视化(例如,如参考图3E和图3F所解释的,其中数据可视化类型从“条形图”变为“文本表”)。在一些实施方式中,用户指定数据可视化类型作为用户界面控件120中的自然语言输入的一部分。例如,用户可以输入(例如,在控件120中键入)指定“以条形图”的附加短语。例如,计算设备可以解析用户输入“以条形图”,并将视图类型选择器更新为“条形图”选项。
在一些实施方式中,响应于从视图类型选择器122选择的数据可视化的类型,计算设备在自然语言控件120中显示包括数据可视化类型的短语。例如,计算设备响应于用户在视图类型选择器122中对“条形图”的选择,将“以条形图”附加到自然语言表达。
在一些实施方式中,只有对当前表达有意义的视图类型才作为选项提供给用户。例如,假设用户输入(例如,键入到自然语言控件120)“以地图”,但是自然语言表达128不包括与地图数据可视化不一致的短语,则计算设备在解析用户的自然语言输入之后,将视图类型选择器122设置为默认数据可视化类型,并且不在视图类型选择器122的下拉菜单中包括“地图”视图类型选项。例如,视图类型选择器122的下拉菜单仅包括基于自然语言输入128有意义的可视化类型。
在一些实施方式中,数据字段可以在数据库本身中被指定为维度或度量(例如,如果数据源是多维数据源(cube data source))。在其它实施方式中,数据可视化应用222自动为每个数据字段分配默认角色,该默认角色是基于数据字段的数据类型的度量或维度。例如,数字字段在默认情况下用作度量,而非数字字段(例如,文本字段和日期字段)在默认情况下用作维度。用户可以在适当的时候覆盖分配的默认角色。例如,数字“ID”字段最初可以被分类为度量,但用户可以将“ID”字段重新分类为维度。
维度是将数据组织成类别(还称为“桶”)的数据字段。例如,如果数据源包括与“美国”相关联的数据,并且数据源包括对应于“州”的数据字段,则“州”被用作维度。每个维度在数据可视化中创建不同的分区(division),例如条形图中的单独的条(例如,针对每个州的单独的条)。这些分区通常用维度标头(header)来标记,其中每个对应的维度值有一个标头(例如,每个条可以用对应州的名称来标记)。
度量是用于度量某事务(如销售额、利润或订单数量)的数据字段,并且通常是连续的。例如,鉴于维度“州”具有离散可能值的固定集合,而“销售额”数据字段可以具有大范围内的任何值。大量记录可包括与低价商品相关的各种小销售额,而许多其它记录可包括高价商品的更大销售额。根据所选择的维度(例如,销售额可以按州来合计),每个度量通常在详细程度(分组)上被合计为单个值(例如,在默认情况下度量被汇总)。
如图1所示,自然语言输入控件120用于输入和显示自然语言表达128。自然语言处理器228已经将表达128解析成三个不同的短语130-1、130-2和130-3。在一些情况下,一个或更多个短语由子短语组成。
图2是示出根据一些实施方式的可以显示图形用户界面100的计算设备200的框图。计算设备200的各种示例包括台式电脑、膝上型电脑、平板电脑以及具有显示器和能够运行数据可视化应用222的处理器的其它计算设备。计算设备200通常包括用于执行存储在存储器214中的模块、程序和/或指令并且从而执行处理操作的一个或更多个处理单元/核(CPU)202;一个或更多个网络或其它通信接口204;存储器214;以及用于将这些部件互连的一个或更多个通信总线212。通信总线212可以包括互连并控制***部件之间的通信的电路***。
计算设备200包括用户界面206,该用户界面206包括显示设备208和一个或更多个输入设备或机构210。在一些实施方式中,输入设备/机构包括键盘。在一些实施方式中,输入设备/机构包括“软”键盘,该“软”键盘根据需要在显示设备208上显示,从而使用户能够“按下出现在显示器208上的键”。在一些实施方式中,显示器208和输入设备/机构210包括触摸屏显示器(还称为触敏显示器)。
在一些实施方式中,存储器214包括高速随机存取存储器(诸如DRAM、SRAM、DDRRAM或其它随机存取固态存储器设备)。在一些实施方式中,存储器214包括非易失性存储器,诸如一个或更多个磁盘存储设备、光盘存储设备、闪存设备或其他非易失性固态存储设备。在一些实施方式中,存储器214包括远离CPU 202定位的一个或更多个储存设备。存储器214或可替代地在存储器214内的非易失性存储器设备包括非暂时性计算机可读储存介质。在一些实施方式中,存储器214或存储器214的计算机可读储存介质储存以下程序、模块和数据结构或其子集:
·操作***216,该操作***216包括用于处理各种基本***服务和用于执行硬件相关任务的过程;
·通信模块218,该通信模块218用于经由一个或更多个通信网络接口204(有线的或无线的)和一个或更多个通信网络(诸如互联网、其它广域网、局域网、城域网等)将计算设备200连接到其它计算机和设备;
·网络浏览器220(或能够显示网页的其它应用),其使得用户能够通过网络与远程计算机或设备进行通信;
·数据可视化应用222。在一些实施方式中,数据可视化应用222还包括:
ο供用户构建视觉图形的图形用户界面100。在一些实施方式中,图形用户界面包括用于通过自然语言控件120接收用户输入的用户输入模块224。例如,用户(例如经由控件120)输入自然语言表达128,其标识一个或更多个数据源240(其可以存储在计算设备200上或远程存储)和/或来自数据源的数据字段。所选择的字段用于定义视觉图形。数据可视化应用222然后在用户界面100中显示生成的视觉图形。在一些实施方式中,数据可视化应用222作为独立应用(例如,桌面应用)执行。在一些实施方式中,数据可视化应用222在网络浏览器220或使用网络服务器提供的网页的另一个应用内执行;
ο数据可视化生成模块226,其接受用户输入(例如,自然语言输入),并生成相应的视觉图形(还称为“数据可视化”或“数据可视化(data viz)”);
ο自然语言处理器228,其接收并解析用户提供的自然语言输入。自然语言处理器228还可以包括依赖性确定模块230,其在数据库240中查找依赖性,以确定特定术语和/或短语如何相关(例如,依赖)。在一些实施方式中,自然语言处理器228包括过滤器生成模块232,其确定一个或更多个过滤器是否与已经被用户修改的字段相关。过滤器生成模块232基于字段的改变生成一个或更多个过滤器;
ο窗口小部件生成模块234,其生成包括用户可选择选项的窗口小部件。例如,响应于对排序字段(例如,被标识为排序字段的自然语言术语)的用户选择(例如,悬停),生成“排序”窗口小部件。排序窗口小部件包括用户可选择选项(例如“升序”、“降序”和/或“字母顺序”),使得用户可以从窗口小部件中容易选择如何对所选择字段进行排序。
·由数据可视化应用222使用的零个或更多个数据库或数据源240(例如,第一数据源240-1和第二数据源240-2)。在一些实施方式中,数据源存储为电子表格文件、CSV文件、XML文件、平面文件或JSON文件或者存储在关系数据库中。
以上所标识的可执行模块、应用或过程集中的每一个可以存储在存储器设备中的一个或更多个存储器设备中,并且对应于用于执行上述功能的指令集。以上所标识的模块或程序(即,指令集)不需要被实现为单独的软件程序、过程或模块,并且因此这些模块的各种子集可以组合或以其它方式重新布置在各种实施方式中。在一些实施方式中,存储器214可以存储以上所标识的模块和数据结构的子集。此外,存储器214可以存储上面未描述的附加模块或数据结构。
尽管图2示出了计算设备200,但是图2更多地旨在作为可能存在的各种特征的功能描述,而不是作为本文所述的实施方式的结构示意图。在实践中,如本领域的普通技术人员所认识到的,单独示出的项目可以组合并且一些项目可以被分开。
图3A-3F提供了图形用户界面100的一系列屏幕截图。用户可以与自然语言控件120交互以更新表达128。图3A中的自然语言表达128包括三个不同的短语130-1、130-2和130-3。每个短语都是单独标识的(例如,在单独的文本框内),包括:“记录数量总和”130-1、“按区域”130-2(例如,其中“按”表示按功能分组)和“以字母顺序对区域排序”130-3。典型地,每个短语130包括标识来自数据源240的数据字段的一个或更多个术语。术语可以是维度或度量。自然语言输入可以包括一个以上的术语。如图3A所示,表示自然语言输入的初始数据可视化显示在图形用户界面中。例如,图3A示出了条形图,该条形图表示以字母顺序排序的按区域记录数量。“区域”列标头140指示条形图的每一行对应于一个区域,并且排序指示符142指示这些行当前以字母顺序排序(如由第三短语130-3所指定的)。
在一些情况下,用户选择(例如,经由鼠标点击、悬停或其它输入)自然语言表达中的第一术语。例如,图3B示出了用户悬停在第三短语“以字母顺序对区域进行排序”130-3中的术语“区域”144上。在一些实施方式中,响应于用户选择,该术语在自然语言输入内被视觉区分。例如,响应于用户悬停在该术语上,所选择的术语“区域”144被加下划线。在一些实施方式中,响应于用户选择,(例如使用窗口小部件生成模块234)生成窗口小部件,如图3C所示。例如,窗口小部件150利用用户可选择选项(例如,包括替代术语)提示用户替换所选择的术语144。图3C中的用户从窗口小部件中选择“国家”选项152。响应于用户的选择,在第三短语“以字母顺序对[术语]进行排序”130-3中,第一术语“区域”144被所选择的术语“国家”146替换。
在一些情况下,第二短语(或第二短语内的术语)依赖于编辑的短语(或编辑的短语内的编辑的术语)。例如,第二短语“按区域”130-2依赖于第三短语“以字母顺序对区域进行排序”130-3,因为排序字段必须与分组字段兼容。在一些实施方式中,通过在存储数据和关于数据如何相关的信息的数据库中执行查找来确定术语和/或短语的依赖性。在一些情况下,包括重叠术语的短语是依赖短语。例如,在两个短语都使用术语“区域”的情况下,计算设备可以确定这些短语是依赖短语。这里,当用户在第三短语130-3中用“国家”替换术语“区域”时,如果第二短语“按区域”130-2没有被更新,则计算设备将引发(raise)错误。当请求的数据未按国家分组时,***无法按国家进行排序。代替引发错误,计算设备自动确定第二短语“按区域”130-2也必须被更新,以防止基于用户输入返回错误。这改善了用户体验,因为用户不需手动更新第二短语以防止错误。
根据第二短语依赖于第三短语的确定,用户在第三短语中用术语“国家”146替换术语“区域”144的输入也使得计算设备更新第二短语130-2,利用“国家”148替换“区域”。计算设备在没有用户输入的情况下自动更新第二短语(例如,在修改第一术语之后,用户没有手动将“按区域”改变为“按国家”)。注意,列标头和排序指示符154在图3C中还没有被更新,因为改变还没有被提交。所得到的更新的自然语言表达在图3D中示出。此外,图3D示出了表示更新的自然语言表达的更新的数据可视化,现在以字母顺序按国家对条形图中的条进行排序,如更新的列标头和排序指示符156所示。
图3E和图3F示出了用户输入修改短语中的术语的另一示例,这导致设备更新另一个短语(例如,其依赖于第一短语)。例如,图3E中的用户输入示出了用户悬停在第二短语“按国家”130-2上。在一些实施方式中,通过用户输入选择“x”选项158(例如,在图3E中所示,在用户输入指示悬停在“x”选项158上的情况下),自然语言表达中的短语是可移除的(例如,可以被删除)。例如,“x”选项158是响应于用户输入(例如,悬停)在包括该短语的文本框上而动态生成的。在该示例中,计算设备确定第二短语“按国家”130-2和第三短语“以字母顺序对国家进行排序”130-3相互依赖。图3E示出了表示按国家分组并以字母顺序排序的大量记录的条形图的初始数据可视化。
用户输入通过从自然语言表达128中移除第二短语来修改第二短语130-2。响应于移除第二短语“按国家”130-2,计算设备通过移除第三短语来更新第三短语“以字母顺序对国家进行排序”130-3。所得到的更新的自然语言表达在图3F中示出。如图所示,第二短语“按国家”130-2被移除,并且第三短语“以字母顺序对国家进行排序”130-3被计算设备自动移除而无需用户输入。例如,用户只针对第二短语选择了“x”选项158,并且确定第三短语依赖于第二短语的计算设备自动移除第三短语而不是引发错误。因此,用户不需要为了修复表达而手动移除第三短语。图3F还示出了对应于表示短语130-1“记录数量总和”的文本表的更新的数据可视化。因为没有指定分组的数据字段,所以所有数据行都被分组在一起,以创建单个总计。
如以上示例所示,计算设备确定用户如何修改第一短语,并基于该修改更新一个或更多个依赖短语。在一些实施方式中,计算设备基于对第一短语的修改来更新第二短语的术语。在一些实施方式中,计算设备基于对第一短语的修改来移除第二短语。
图4A-4E提供了图形用户界面100的一系列屏幕截图,其基于对自然语言输入的改变来更新数据可视化的视图类型。在一些实施方式中,计算设备基于自然语言输入自动生成(例如,使用数据可视化生成模块226)数据可视化的类型。在一些实施方式中,对自然语言输入(例如,经由自然语言控件120)的(例如,从用户输入接收的)修改导致计算设备改变呈现给用户的数据可视化的类型。例如,在图4A中,自然语言输入包括三个不同的短语:“平均人口”130-4、“按国家”130-5和“按平均人口以降序对国家进行排序”130-6。数据可视化的视图类型是条形图。如列标头160所示,条形图具有针对每个国家的条,并且排序指示符162示出了数据以降序进行排序。图4B示出了用户输入(例如,悬停)在第三短语130-6“按平均人口以降序对国家进行排序”上。响应于用户悬停在短语130-6上,计算设备动态地生成“x”选项164,用户可以选择该选项来移除短语130-6。响应于用户移除自然语言输入中的第三短语(例如,通过选择“x”选项164),计算设备确定在没有包括“排序”的短语的情况下,数据可视化的默认类型应该是地图。这是有效的,因为自然语言输入只包括两个短语“平均人口”130-4和“按国家”130-5。这在图4C中示出。在一些实施方式中,用户可以从数据可视化的默认类型改变数据可视化。例如,数据可视化的默认类型“地图”在下拉菜单控件168中示出。数据可视化的替代类型经由下拉菜单控件168呈现给用户,使得用户可以修改图形用户界面中示出的数据可视化的类型。
图4D示出了更新数据可视化的另一个示例。在图4D中,用户(例如通过键入)将附加短语130-7输入到自然语言输入中(例如,经由自然语言输入控件120)。响应于接收到用户输入,图4E示出了计算设备将数据可视化从图4D中的地图视图改变为图4E中的条形图视图。图4E中的条形图表示更新的自然语言表达,其示出了以字母顺序按国家排序的按国家平均人口。列标头和排序指示符170示出了条形图的每一行对应于一个国家,并且这些行以字母顺序排序(例如,如附加短语130-7所指定的)。
图5A-5D示出了根据一些实施方式的更新自然语言表达500中的过滤器。图5A示出了具有三个短语502-1、502-2和502-3的自然语言输入500,每个短语对应于一个数据字段。过滤器短语(例如第三短语502-3)将数据字段与特定值或另一个数据字段(例如,[数据字段][关系][比较值])进行比较。最常见的关系是=、≠、>、≥、<和≤。在一些情况下,自然语言输入500的短语502遵循(例如,存储在计算设备的数据库中的)自然语言模板。基于自然语言模板和自然语言处理,计算设备基于用户输入确定如何更新(例如,或自动完成)短语。例如,当短语的第一术语是类别时,模板标识分类过滤器适合于更新短语。作为另一个示例,当短语的第一术语是数字数据字段时,模板标识定量过滤器适合于更新(例如,完成)短语。
在一些实施方式中,用户界面控件120内的用户输入(例如,悬停)选择术语“国家”514。响应于用户悬停在术语(例如,数据字段)“国家”514上,计算设备自动地(例如,在没有用户输入的情况下)将部分输入与模板短语相关联,并且针对该短语的第二模板字段设置默认值(例如,“阿根廷”516)。特别地,计算设备确定用户已经选择了维度(数据字段“国家”514),这需要用于比较的分类值。默认比较值是国家数据字段514的数据值。以此方式,数据字段“国家”514的选择使得计算设备用“阿根廷”516完成短语模板。这些动作发生在图5A的屏幕截图之前。如图5A所示,地图的数据可视化显示在图形用户界面中(地图部分隐藏在下拉菜单窗口小部件518后面),这反映了将国家514过滤为“阿根廷”516。
在图5A中,用户已经采取另一个动作(例如,点击国家术语514)以打开数据字段选择窗口小部件518。如图5A所示,当前选择了国家字段选项520。基于用于国家514的过滤器,“阿根廷”516的比较值有意义。然而,一旦用户选择图5B中的人口选项522,将人口与字符串“阿根廷”进行比较就不再有意义了。
在图5B中,窗口小部件518内的用户输入(例如,悬停)选择术语“人口”522。计算设备确定所选择的术语是定量的。响应于用户输入,计算设备自动更新短语502-3的比较运算符536(例如,更新为“至少”或“≥”)和比较值538。在该示例中,计算设备用10,000的比较值来完成该短语。对于定量数据字段(例如人口534),还必须选择聚合类型(例如,总和(SUM)、计数(COUNT)或平均(AVERAGE))。在本示例中,聚合类型默认为平均524,其在第三短语502-3中显示为聚合类型532。在一些实施方式中,聚合类型默认为已经在其它短语中指定的类型(例如,第一短语502-1中的“平均人口”)。此外,基于更新的短语,在图形用户界面上显示对应于条形图的更新的数据可视化。
图5C示出了包括第三短语“国家包含‘南’”550-3的自然语言输入,其具有第一数据字段“国家”552。比较运算符554是“包含”,并且比较值是“南”556。在这种情况下,第三短语550-3指定了过滤器,该过滤器将数据限制为其国家名称包括文本字符串“南”556的那些国家。如数据可视化所示,地图显示的是“南非”560。在图5C中,用户已经采取动作来打开过滤器窗口小部件518,并且选择了国家选项562。
图5D示出了用户输入从“国家”选项562切换到“大洲”选项564。计算设备确定“国家”和“大洲”都存储分类数据。因此,计算设备保留对于分类过滤器的比较运算符554和比较值556。分类过滤器仍然是基于所选择的新数据字段“大洲”572的适当的过滤器(例如,它不会引发错误)。
图6A和图6B示出了根据自然语言表达显示数据可视化的方法600。方法600还被称为过程。在一些实施方式中,该方法在与显示器耦合的计算设备(602)处执行并由该计算设备执行,该计算设备具有一个或更多个处理器以及存储被配置为由该一个或更多个处理器执行的一个或更多个程序的存储器。如由计算设备执行的方法600可选地由存储在非暂时性计算机可读储存介质中的指令来管理。指令由计算设备的一个或更多个处理器执行。图6A和图6B中所示的每个操作可以对应于存储在计算机存储器或非暂时性计算机可读储存介质(例如,计算设备200的存储器214)中的指令。计算机可读储存介质可以包括磁盘储存设备或光盘储存设备、诸如闪存的固态储存设备或其它一个或更多个非易失性存储器设备。存储在计算机可读储存介质上的指令可以包括以下项中的一项或更多项:源代码、汇编语言代码、目标代码或由一个或更多个处理器解释的其它指令格式。方法600中的一些操作可以被组合和/或一些操作的顺序可以被改变。
在一些实施方式中,计算设备在显示器上显示(603)图形用户界面。例如,计算设备显示图1所示的图形用户界面100。
计算设备分析(604)从用户接收的自然语言输入,以标识自然语言输入的对应于包括第一术语的第一短语的一部分。在一些实施方式中,在图形用户界面100中的用户界面控件120中接收(606)自然语言输入。在一些实施方式中,自然语言输入的至少一部分由用户键入。在一些实施方式中,用户从计算设备提供的多个选项中选择自然语言输入的至少一部分。在一些实施方式中,仅从用户接收自然语言输入的一部分,并且自然语言输入由计算设备自动完成(例如,计算设备预测和/或建议如何完成自然语言输入)。例如,用户可以输入(例如,键入)“记录数量总和”、“按区域”和“排序”,并且计算设备将基于用户输入用默认短语(例如,“以字母顺序排序的区域”)完成自然语言输入。在一些实施方式中,自然语言输入包括(608)两个或更多个不同的短语。例如,图1所示的自然语言输入(例如,表达)包括三个不同的短语:“记录数量总和”、“按区域”和“以字母顺序对区域进行排序”。在一些实施方式中,图形用户界面100通过在单独的用户界面元素(例如,文本框)中显示每个短语来区分两个或更多个不同的短语。
在一些实施方式中,在接收第二输入之前,计算设备根据自然语言输入显示(610)与更新的数据可视化不同的初始数据可视化。例如,图3A中所示的数据可视化(例如,条形图)在图形用户界面中示出。根据自然语言输入显示数据可视化(例如,条形图示出了以字母顺序排序的按区域的记录数量)。
计算设备从用户接收(611)修改第一短语中的第一术语的第二输入。响应于接收第二输入,计算设备基于第二输入更新(614)(自然语言输入中的)第二短语。在一些实施方式中,第二短语被自动更新而无需用户输入。在一些实施方式中,在更新第二短语之前,计算设备指示(例如,在图形用户界面上)第二输入将如何更新第二短语。例如,计算设备向用户显示移除第一短语(例如,“按国家”)将导致计算设备也移除(例如,自动地)第二短语(例如,“以字母顺序对国家进行排序”)。该指示向用户示出了不同的短语如何相互依赖(例如,影响)。
在一些实施方式中,第二输入包括(612)替换第一术语的第二术语。在一些实施方式中,基于第二术语更新第二短语从第二短语移除(622)第三术语,并将第二术语添加到第二短语以替换第三术语。例如,计算设备更新第二短语的至少一部分,以匹配对第一短语的改变。例如,图3B-3D示出了图形用户界面的一系列屏幕截图,其中第一短语(例如,“以字母顺序对区域进行排序”)中的第一术语(例如,“区域”)通过用第二术语(例如,“国家”)替换该第一术语来修改。例如,在图3C中,用户提供第二输入(例如,从下拉菜单中呈现的术语集中选择“国家”)。所选择的第二术语(例如,国家)修改(例如,替换)自然语言输入中的第一术语(例如,区域)。响应于来自用户选择第二术语(例如,“国家”)来替换第一短语(例如,“以字母顺序对区域进行排序”)中的第一术语(例如,“区域”)的第二输入,计算设备通过从第二短语(“按区域”)中移除第三术语(例如,“区域”)并将第二术语(“国家”)添加到第二短语来替换第三术语(例如,用“按国家”来替换“按区域”)来更新第二短语(例如,“按区域”)。图3D示出了所得到的自然语言输入,其中响应于第二输入将第一短语修改为“以字母顺序对国家进行排序”,第二短语“按地区”已更新为“按国家”。
在一些实施方式中,第二输入移除(613)第一短语中的第一术语。在一些实施方式中,基于第二术语更新第二短语移除(624)第二短语。例如,图3E和图3F示出了图形用户界面的一系列屏幕截图,其中移除了第一短语中的第一术语(例如,短语“按国家”中的术语“国家”)(例如,如用户输入所指示的,在短语文本框内选择短语旁边的“x”来移除短语)。在一些实施方式中,通过第二输入移除所有第一短语(例如,包括第一术语)。在一些实施方式中,响应于移除第一短语(例如,“按国家”),计算设备更新第二短语。例如,计算设备移除第二短语(例如,“以字母顺序对国家进行排序”),因为第一短语“按国家”已经被第二输入移除。
在一些实施方式中,计算设备在数据库中执行(616)查找,以确定第二短语依赖于第一短语的第一术语。根据第二短语依赖于第一短语的第一术语的确定来执行更新第二短语。在一些实施方式中,如果修改第一短语而不修改第二短语将引发错误条件,则第二短语依赖于第一短语的第一术语。例如,计算设备更新第二短语,使得更新的自然语言输入可以生成数据可视化。
响应于基于第二输入更新第二短语(626),计算设备在图形用户界面上显示(628)包括修改的第一短语和更新的第二短语的更新的自然语言表达,并显示(630)表示更新的自然语言表达的更新的数据可视化。例如,图3A示出了表示自然语言输入的初始数据可视化(其显示了按区域的记录数量),而图3D示出了表示更新的自然语言输入的更新的数据可视化(其显示了按国家的记录数量)。作为另一个示例,图3E示出了在第二输入之前作为条形图的初始数据可视化,而图3F示出了在响应于第二输入已经更新第二短语之后的更新的数据可视化(例如,显示“40,660”的文本表)。
在一些实施方式中,第二短语包括(618)第一短语的子部分,并且基于第二输入更新第二短语包括更新第一短语的子部分。例如,第一短语包括第一术语并且包括第二短语。因此,响应于第二输入,计算设备更新同一短语(例如,第一短语)内的另一个术语。
在一些实施方式中,第一短语和第二短语是(620)不同的短语。例如,上面参考图3A-3F描述的示例说明了第一短语不同于第二短语的情况(例如,第二短语不是第一短语的子部分)。
图7示出了根据一些实施方式的更新自然语言表达中的过滤条件的方法700。方法700还被称为过程。在一些实施方式中,该方法在与显示器耦合的计算设备(702)处执行并由该计算设备执行。计算设备具有(702)一个或更多个处理器和存储器。存储器存储被配置为由该一个或更多个处理器执行的一个或更多个程序。如由计算设备执行的方法700可选地由存储在非暂时性计算机可读储存介质中的指令来管理。指令由计算设备的一个或更多个处理器执行。图7所示的每个操作可以对应于存储在计算机存储器或非暂时性计算机可读储存介质(例如,计算设备200的存储器214)中的指令。计算机可读储存介质可以包括磁盘储存设备或光盘储存设备、诸如闪存的固态储存设备或其它一个或更多个非易失性存储器设备。存储在计算机可读储存介质上的指令可以包括以下项中的一项或更多项:源代码、汇编语言代码、目标代码或由一个或更多个处理器解释的其它指令格式。方法700中的一些操作可以被组合和/或一些操作的顺序可以被改变。
在一些实施方式中,计算设备在显示器上显示(704)图形用户界面。例如,计算设备显示图1所示的图形用户界面100。
计算设备从用户接收(706)指定过滤器(包括第一数据字段、关系和第一比较值)的自然语言输入。在一些实施方式中,在图形用户界面100中的用户界面控件120中接收自然语言输入。在一些实施方式中,自然语言输入的至少一部分由用户键入。在一些实施方式中,用户从计算设备提供的多个选项中选择自然语言输入的至少一部分。在一些实施方式中,仅从用户接收自然语言输入的一部分,并且自然语言输入由计算设备自动完成(例如,计算设备预测和/或建议如何完成自然语言输入)。例如,用户可以输入第一数据字段,并且计算设备基于第一字段自动生成(例如,填充)比较值。例如,图5A所示的自然语言输入包括第三短语502-3“以国家中的阿根廷”。第一数据字段对应于“国家”,并且比较值为“阿根廷”。如参考图5A所解释的,在一些实施方式中,自然语言输入匹配自然语言模板(例如,以标识正在使用的过滤器的类型)。
在该示例中,第一数据字段的域包括(708)比较值。例如,第一数据字段“国家”的域由包括“阿根廷”的国家名称组成。
在一些实施方式中,在接收对过滤器规范的更新之前,计算设备显示(710)与应用指定过滤器的更新的数据可视化不同的初始数据可视化。例如,图5A示出了地图数据可视化(例如,部分隐藏在窗口小部件后面)。
计算设备接收(711)利用第二数据字段替换过滤器中的第一数据字段的用户输入。在一些情况下,第二数据字段具有(712)与第一数据字段不同的数据类型。例如,如图5B所示,用户利用“人口”534替换第一数据字段“国家”514。在该示例中,第一数据字段“国家”具有分类数据类型(例如,它是维度),但是数据字段“人口”具有定量数据类型(例如,它是度量)。因此,从第一数据字段切换到第二数据字段需要将数据类型从分类数据改变为定量数据。应当理解,用户输入也可以从定量数据切换到分类数据。在一些情况下,用户输入没有改变过滤器使用的数据的数据类型。例如,图5C和图5D说明了用户从数据字段“国家”切换到数据字段“大洲”,两者都具有分类数据。在一些情况下,根据切换不改变数据类型的确定,比较值不被更新(例如,在图5C和图5D中,比较值556保持为“南”)。在一些情况下,当对数据字段的切换不改变数据类型时,比较值被更新为被包括在第二数据字段的域中的术语。例如,如果数据字段从“国家”切换到“大洲”,并且初始比较值是“阿根廷”(例如,不被包括在“大洲”的域中的值),则更新的比较值被改变为“南美洲”。
响应于接收到对第一字段的更新,计算设备自动用第二比较值替换(714)第一比较值。例如,响应于用户输入在图5A和图5B中从第一数据字段“国家”切换到第二数据字段“人口”,计算设备自动将关系从“在……中”更新为“至少”536,并将“阿根廷”改变为10,000。因此,计算设备更新关系和比较值以匹配第二数据字段。例如,在改变第一字段之后,用户不手动更新对应于过滤器的第二字段。这提供了一种生成数据可视化的直观方法,其不需要用户理解分类过滤器和定量过滤器之间的差异。相反,计算设备基于用户对数据字段的选择来确定应该应用哪个过滤器(例如,定量的还是定性的)。因此,如果用户将数据字段切换为不同的数据类型,则计算设备自动更新相应的比较值以防止引发错误。在一些情况下,第一数据字段具有(716)定量数据类型,并且第二数据字段具有(716)分类数据类型。在一些情况下,第一数据字段具有(718)分类数据类型,并且第二数据字段具有(718)定量数据类型。例如,图5B示出了用户从具有分类数据类型(例如,“国家”)的第一数据字段切换到具有定量数据类型(例如,“人口”)的第二数据字段。
在一些情况下,从第一数据字段切换到第二数据字段还需要改变(720)过滤器使用的关系。例如,“包含”对于分类数据字段是有意义的关系,但对于定量数据字段不是有意义的关系。
在一些实施方式中,计算设备标识对于比较值的默认值。例如,计算设备基于这个数字将与平均人口进行比较的事实选择10,000作为默认值。在一些实施方式中,计算设备基于存储在数据库和/或数据源中的信息选择默认值(例如,使用对于数据字段的数据值的采样)。在一些实施方式中,用户更新默认值。在一些实施方式中,在计算设备提供默认值之后,用户手动修改自然语言表达中的值(例如,改变过滤器)。
计算设备显示(722)对应于更新的过滤器的更新的数据可视化。例如,图5B示出了根据数据字段“人口”和比较值10,000来过滤数据的条形图数据可视化(例如,部分隐藏在窗口小部件后面)。如图5A和图5B所示,图5A的初始数据可视化不同于图5B的更新的数据可视化。
图8A-8J示出了根据一些实施方式的在自然语言界面中使用的窗口小部件。例如,窗口小部件生成模块234动态地生成要在图形用户界面100中向用户显示的窗口小部件。窗口小部件部分地基于从用户接收的自然语言输入来生成。计算设备基于自然语言输入的选择部分来标识适当的窗口小部件类型。因此,计算设备将自然语言输入的一部分映射到分析概念,以产生对应于分析概念的窗口小部件。通过基于自然语言输入动态地生成窗口小部件,为用户提供了改变数据可视化的选项,这些选项对于给定输入是有意义的。
例如,图8A示出了在控件120中接收自然语言输入,该自然语言输入记载了“按销售额以降序排列的分段”。计算设备分析(例如解析)自然语言输入,并标识“降序”800对应于对数据进行排序的分析概念(例如,“分段”)。因此,计算设备生成向用户提供多个排序选项(包括“降序”选项802、“升序”选项804和“字母顺序”选项806)的窗口小部件。在这个示例中,选择了降序选项802。因此,如自然语言输入所示,将按销售额以降序对分段进行排序。
图8B示出了生成窗口小部件的另一个示例。计算设备接收自然语言短语“前20个分段”。计算设备确定“前20个”808对应于限制的分析概念。因此,计算设备生成允许用户输入限制的窗口小部件,在上限810和下限812之间进行选择。因为选择了上限810,所以用户可以在数量文本框813中输入多少个上限值。这里,自然语言短语指定了前20个的限制。该窗口小部件为用户选择和设置限制以及修改自然语言短语提供了一种用户友好的方式。
图8C示出了字段列表窗口小部件的示例。例如,自然语言输入仅包括字段“销售额”814。在一些实施方式中,字段列表窗口小部件包括可滚动窗口小部件,该窗口小部件在区域816中列出依赖于内容的所有相关字段。该窗口小部件包括搜索框818和数据类型下拉菜单820,搜索框818允许用户过滤列表中的字段,数据类型下拉菜单820根据数据类型过滤显示的字段。在一些实施方式中,窗口小部件包括允许用户选择聚合类型的聚合下拉菜单822。例如,定量聚合可以指定总和、平均值、中位数、计数、不重复计数、最小值、最大值或无(无聚合)。日期聚合可以指定年、季度、季度名称、月、月名称、日、月中的一日、周、周数、工作日、小时、一日中的一小时、分钟、一小时中的一分钟、秒、一分钟中的一秒、确切日期等。例如,图8D示出了“订单日期”字段824可以通过“周数”来过滤。数据类型下拉菜单826限制了区域828和搜索栏中显示的字段。
图8E-8G是日期过滤器窗口小部件的示例。在一些实施方式中,窗口小部件在顶部包括三个选项卡:具体值、相对日期和绝对日期。图8E–8G中显示的窗口小部件是窗口小部件的根据选择的选项卡而出现的不同界面。每个选项卡包括用于指定与日期过滤的特定类型相关的参数的下拉菜单。
图8H示出了定量过滤器的示例。例如,字段“至少$100”被计算设备解析为对应于定量过滤器。在一些实施方式中,窗口小部件包括三个选项:“介于”852、“至少”854和“最多”856。该窗口小部件还包括用户界面元素,例如滑块860(例如,显示字段的最小值和/或最大值)和可编辑文本输入框858。
图8I和图8J是非日期分类过滤器的示例(例如,基于对应于分类过滤器的自然语言输入862)。在一些实施方式中,窗口小部件在顶部具有一个或更多个选项卡(例如,特定值864和通配符870)。该窗口小部件允许用户容易地选择特定值列表865中显示的数据值中的“全部”866或“无”868。在一些实施方式中,根据分类字段是日期的确定,该窗口小部件还包括切换到绝对日期过滤器或相对日期过滤器的选项。
本发明在本文的描述中使用的术语仅出于描述特定的实施方式的目的,而无意于限制本发明。除非上下文另有清楚的说明,否则如在本发明的描述和所附权利要求中所用的单数形式“一(a)”、“一(an)”和“该(the)”意在同样包括复数形式。还将理解的是,如本文所用的术语“和/或”是指并且包括相关联列出的项中的一项或更多项的任何和所有可能的组合。应当进一步理解,当术语“包括(comprises)”和/或“包括(comprising)”在本说明书中使用时,指定所陈述的特征、步骤、操作、元件和/或组件的存在,但不排除存在或添加一个或更多个其它特征、步骤、操作、元件、组件和/或它们的组。
为了说明的目的,前面的描述已经参照具体实施方式进行了描述。然而,以上的说明性讨论不旨在为详尽的或将本发明限制为所公开的精确形式。鉴于以上教导,许多修改和变型是可能的。选择和描述实施方式以便最好地解释本发明的原理及其实际应用,从而使得本领域的其他技术人员能够最好地利用本发明和具有适合于预期的特定用途的各种修改的各种实施方式。
Claims (40)
1.一种方法,包括:
在与显示器耦合的计算设备处,所述计算设备具有一个或更多个处理器和存储被配置为由所述一个或更多个处理器执行的一个或更多个程序的存储器:
在所述显示器上显示图形用户界面;
分析从用户接收的自然语言输入,所述自然语言输入标识所述自然语言输入的对应于包括第一术语的第一短语的一部分,并且标识所述自然语言输入的对应于第二短语的第二部分;
从用户接收修改所述第一短语中的所述第一术语的第二输入;
响应于接收所述第二输入,基于所述第二输入更新所述第二短语;和
响应于基于所述第二输入更新所述第二短语:
在所述图形用户界面上显示包括修改的第一短语和更新的第二短语的更新的自然语言表达;和
显示表示所述更新的自然语言表达的更新的数据可视化。
2.根据权利要求1所述的方法,其中,所述自然语言输入在所述图形用户界面中的用户界面控件中被接收。
3.根据权利要求1所述的方法,其中,所述自然语言输入包括两个或更多个不同的短语。
4.根据权利要求1所述的方法,其中,修改所述第一短语中的所述第一术语的所述第二输入包括替换所述第一短语中的所述第一术语的第二术语。
5.根据权利要求1所述的方法,其中,修改所述第一短语中的所述第一术语的所述第二输入包括移除所述第一短语中的所述第一术语。
6.根据权利要求1所述的方法,还包括:
在接收所述第二输入之前,根据所述第一短语和所述第二短语显示与所述更新的数据可视化不同的初始数据可视化。
7.根据权利要求1所述的方法,还包括在数据库中执行查找以确定所述第二短语依赖于所述第一短语的所述第一术语,其中,根据所述第二短语依赖于所述第一短语的所述第一术语的确定来执行更新所述第二短语。
8.根据权利要求1所述的方法,其中,所述第二短语包括所述第一短语的子部分,并且基于所述第二输入更新所述第二短语包括更新所述第一短语的所述子部分。
9.根据权利要求1所述的方法,其中,所述第一短语和所述第二短语是不同的短语。
10.根据权利要求1所述的方法,其中,基于所述第二术语更新所述第二短语包括从所述第二短语中移除第三术语并将所述第二术语添加到所述第二短语以替换所述第三术语。
11.根据权利要求1所述的方法,其中,基于所述第二术语更新所述第二短语包括移除所述第二短语。
12.一种与显示器耦合的计算设备,包括:
一个或更多个处理器;
存储器,所述存储器存储被配置为由所述一个或更多个处理器执行的一个或更多个程序,所述一个或更多个程序包括用于执行以下操作的指令:
在所述显示器上显示图形用户界面;
分析从用户接收的自然语言输入,所述自然语言输入标识所述自然语言输入的对应于包括第一术语的第一短语的一部分,并且标识所述自然语言输入的对应于第二短语的第二部分;
从用户接收修改所述第一短语中的所述第一术语的第二输入;
响应于接收所述第二输入,基于所述第二输入更新所述第二短语;和
响应于基于所述第二输入更新所述第二短语:
在所述图形用户界面上显示包括修改的第一短语和更新的第二短语的更新的自然语言表达;和
显示表示所述更新的自然语言表达的更新的数据可视化。
13.根据权利要求12所述的计算设备,其中,所述自然语言输入包括两个或更多个不同的短语。
14.根据权利要求12所述的计算设备,其中,修改所述第一短语中的所述第一术语的所述第二输入包括替换所述第一短语中的所述第一术语的第二术语。
15.根据权利要求12所述的计算设备,其中,修改所述第一短语中的所述第一术语的所述第二输入包括移除所述第一短语中的所述第一术语。
16.根据权利要求12所述的计算设备,还包括用于执行以下操作的指令:
在接收所述第二输入之前,根据所述第一短语和第二短语显示与所述更新的数据可视化不同的初始数据可视化。
17.根据权利要求12所述的计算设备,其中,所述第二短语包括所述第一短语的子部分,并且基于所述第二输入更新所述第二短语包括更新所述第一短语的所述子部分。
18.根据权利要求12所述的计算设备,其中,基于所述第二术语更新所述第二短语包括从所述第二短语中移除第三术语并将所述第二术语添加到所述第二短语以替换所述第三术语。
19.根据权利要求12所述的计算设备,其中,基于所述第二术语更新所述第二短语包括移除所述第二短语。
20.一种非暂时性计算机可读储存介质,其存储被配置为由一个或更多个处理器执行的一个或更多个程序,所述一个或更多个程序包括用于执行以下操作的指令:
在所述显示器上显示图形用户界面;
分析从用户接收的自然语言输入,所述自然语言输入标识所述自然语言输入的对应于包括第一术语的第一短语的一部分,并且标识所述自然语言输入的对应于第二短语的第二部分;
从用户接收修改所述第一短语中的所述第一术语的第二输入;
响应于接收所述第二输入,基于所述第二输入更新所述第二短语;和
响应于基于所述第二输入更新所述第二短语:
在所述图形用户界面上显示包括修改的第一短语和更新的第二短语的更新的自然语言表达;和
显示表示所述更新的自然语言表达的更新的数据可视化。
21.一种方法,包括:
在与显示器耦合的计算设备处,所述计算设备具有一个或更多个处理器和存储被配置为由所述一个或更多个处理器执行的一个或更多个程序的存储器:
在所述显示器上显示图形用户界面;
从用户接收指定过滤器的自然语言输入,所述过滤器包括第一数据字段、关系和第一比较值;
从用户接收利用第二数据字段替换所述过滤器中的所述第一数据字段的用户输入;
响应于接收所述用户输入,利用对应于所述第二数据字段的数据类型的第二比较值自动替换所述第一比较值;和
根据所更新的过滤器,在所述图形用户界面上显示更新的数据可视化。
22.根据权利要求21所述的方法,还包括响应于接收所述用户输入,基于所述第二数据字段的数据类型更新所述关系。
23.根据权利要求21所述的方法,其中,所述第一数据字段的域包括所述第一比较值。
24.根据权利要求21所述的方法,其中,所述第二数据字段的数据类型不同于所述第一数据字段的数据类型。
25.根据权利要求24所述的方法,其中,所述第一数据字段具有定量数据类型,并且所述第二数据字段具有分类数据类型。
26.根据权利要求24所述的方法,其中,所述第一数据字段具有分类数据类型,并且所述第二数据字段具有定量数据类型。
27.根据权利要求24所述的方法,其中,所述第一数据字段具有度量数据类型,并且所述第二数据字段具有维度数据类型。
28.根据权利要求24所述的方法,其中,所述第一数据字段具有维度数据类型,并且所述第二数据字段具有度量数据类型。
29.根据权利要求21所述的方法,还包括,在接收对过滤器规范的更新之前,在所述图形用户界面上显示与应用所指定的过滤器的所述更新的数据可视化不同的初始数据可视化。
30.根据权利要求21所述的方法,还包括根据对于所述第二数据字段的数据值的域来标识对于所述第二比较值的默认值。
31.一种与显示器耦合的计算设备,包括:
一个或更多个处理器;
存储器,所述存储器存储被配置为由所述一个或更多个处理器执行的一个或更多个程序,所述一个或更多个程序包括用于执行以下操作的指令:
在所述显示器上显示图形用户界面;
从用户接收指定过滤器的自然语言输入,所述过滤器包括第一数据字段、关系和第一比较值;
从用户接收利用第二数据字段替换所述过滤器中的所述第一数据字段的用户输入;
响应于接收所述用户输入,利用对应于所述第二数据字段的数据类型的第二比较值自动替换所述第一比较值;和
根据所更新的过滤器,在所述图形用户界面上显示更新的数据可视化。
32.根据权利要求31所述的计算设备,还包括响应于接收所述用户输入,基于所述第二数据字段的数据类型更新所述关系。
33.根据权利要求31所述的计算设备,其中,所述第一数据字段的域包括所述第一比较值。
34.根据权利要求31所述的计算设备,其中,所述第二数据字段的数据类型不同于所述第一数据字段的数据类型。
35.根据权利要求34所述的计算设备,其中,所述第一数据字段具有定量数据类型,并且所述第二数据字段具有分类数据类型。
36.根据权利要求34所述的计算设备,其中,所述第一数据字段具有分类数据类型,并且所述第二数据字段具有定量数据类型。
37.根据权利要求31所述的计算设备,还包括,在接收对过滤器规范的更新之前,在所述图形用户界面上显示与应用所指定的过滤器的所述更新的数据可视化不同的初始数据可视化。
38.根据权利要求31所述的计算设备,还包括根据对于所述第二数据字段的数据值的域来标识对于所述第二比较值的默认值。
39.一种非暂时性计算机可读储存介质,其存储被配置为由一个或更多个处理器执行的一个或更多个程序,所述一个或更多个程序包括用于执行以下操作的指令:
在所述显示器上显示图形用户界面;
从用户接收指定过滤器的自然语言输入,所述过滤器包括第一数据字段、关系和第一比较值;
从用户接收利用第二数据字段替换所述过滤器中的所述第一数据字段的用户输入;
响应于接收所述用户输入,利用对应于所述第二数据字段的数据类型的第二比较值自动替换所述第一比较值;和
根据所更新的过滤器,在所述图形用户界面上显示更新的数据可视化。
40.根据权利要求39所述的计算机可读储存介质,其中,所述第一数据字段的域包括所述第一比较值。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/134,907 | 2018-09-18 | ||
US16/134,907 US10902045B2 (en) | 2018-09-18 | 2018-09-18 | Natural language interface for building data visualizations, including cascading edits to filter expressions |
US16/134,892 | 2018-09-18 | ||
US16/134,892 US11048871B2 (en) | 2018-09-18 | 2018-09-18 | Analyzing natural language expressions in a data visualization user interface |
PCT/US2019/047892 WO2020060720A1 (en) | 2018-09-18 | 2019-08-23 | Analyzing natural language expressions in a data visualization user interface |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113383312A true CN113383312A (zh) | 2021-09-10 |
Family
ID=67902596
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980073415.2A Pending CN113383312A (zh) | 2018-09-18 | 2019-08-23 | 在数据可视化用户界面中分析自然语言表达 |
Country Status (7)
Country | Link |
---|---|
EP (1) | EP3853714B1 (zh) |
JP (1) | JP7202452B2 (zh) |
CN (1) | CN113383312A (zh) |
AU (1) | AU2019344461B2 (zh) |
BR (1) | BR112021005061A2 (zh) |
CA (1) | CA3111511C (zh) |
WO (1) | WO2020060720A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11055489B2 (en) * | 2018-10-08 | 2021-07-06 | Tableau Software, Inc. | Determining levels of detail for data visualizations using natural language constructs |
CN114443692B (zh) * | 2022-02-15 | 2023-08-04 | 支付宝(杭州)信息技术有限公司 | 数据查询方法及装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040114258A1 (en) * | 2002-12-17 | 2004-06-17 | Harris Richard Alexander | Device and method for combining dynamic mathematical expressions and other multimedia objects within a document |
US8458164B2 (en) * | 2003-07-15 | 2013-06-04 | International Business Machines Corporation | Query model tool and method for visually grouping and ungrouping predicates |
US8099674B2 (en) | 2005-09-09 | 2012-01-17 | Tableau Software Llc | Computer systems and methods for automatically viewing multidimensional databases |
JP2009086837A (ja) | 2007-09-28 | 2009-04-23 | Shimadzu Corp | パラメータ設定システム及びパラメータ設定プログラム |
JP5697256B2 (ja) | 2011-11-24 | 2015-04-08 | 楽天株式会社 | 検索装置、検索方法、検索プログラム及び記録媒体 |
US10956433B2 (en) * | 2013-07-15 | 2021-03-23 | Microsoft Technology Licensing, Llc | Performing an operation relative to tabular data based upon voice input |
US20150026153A1 (en) * | 2013-07-17 | 2015-01-22 | Thoughtspot, Inc. | Search engine for information retrieval system |
US9424318B2 (en) | 2014-04-01 | 2016-08-23 | Tableau Software, Inc. | Systems and methods for ranking data visualizations |
US10042921B2 (en) * | 2015-09-18 | 2018-08-07 | International Business Machines Corporation | Robust and readily domain-adaptable natural language interface to databases |
US10671653B2 (en) | 2016-02-18 | 2020-06-02 | Adobe Inc. | Analyzing search queries to provide potential search query modifications via interactive user-interfaces |
US10817527B1 (en) * | 2016-04-12 | 2020-10-27 | Tableau Software, Inc. | Systems and methods of using natural language processing for visual analysis of a data set |
-
2019
- 2019-08-23 AU AU2019344461A patent/AU2019344461B2/en active Active
- 2019-08-23 JP JP2021513434A patent/JP7202452B2/ja active Active
- 2019-08-23 EP EP19765848.7A patent/EP3853714B1/en active Active
- 2019-08-23 WO PCT/US2019/047892 patent/WO2020060720A1/en unknown
- 2019-08-23 CA CA3111511A patent/CA3111511C/en active Active
- 2019-08-23 CN CN201980073415.2A patent/CN113383312A/zh active Pending
- 2019-08-23 BR BR112021005061-2A patent/BR112021005061A2/pt unknown
Also Published As
Publication number | Publication date |
---|---|
EP3853714A1 (en) | 2021-07-28 |
AU2019344461A1 (en) | 2021-03-25 |
CA3111511A1 (en) | 2020-03-26 |
BR112021005061A2 (pt) | 2021-06-08 |
AU2019344461B2 (en) | 2022-07-07 |
JP7202452B2 (ja) | 2023-01-11 |
JP2022500751A (ja) | 2022-01-04 |
CA3111511C (en) | 2023-04-11 |
WO2020060720A1 (en) | 2020-03-26 |
EP3853714B1 (en) | 2023-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11048871B2 (en) | Analyzing natural language expressions in a data visualization user interface | |
US10902045B2 (en) | Natural language interface for building data visualizations, including cascading edits to filter expressions | |
US7788257B2 (en) | Easy-to-use data report specification | |
US12032804B1 (en) | Using refinement widgets for data fields referenced by natural language expressions in a data visualization user interface | |
US20160232457A1 (en) | User Interface for Unified Data Science Platform Including Management of Models, Experiments, Data Sets, Projects, Actions and Features | |
CN113490934A (zh) | 数据可视化的基于语言的操纵 | |
US7705847B2 (en) | Graph selection method | |
US11429253B2 (en) | Integrated drill down within a natural language interface for visual analysis | |
AU2021281120B2 (en) | Domain-specific language interpreter and interactive visual interface for rapid screening | |
US20100235771A1 (en) | System And Method For Drag-And-Drop Graph Building With Live Feedback | |
CN110489441B (zh) | 一种基于大数据的即席查询方法及设备 | |
AU2019344461B2 (en) | Analyzing natural language expressions in a data visualization user interface | |
US8924420B2 (en) | Creating logic using pre-built controls | |
WO2021240370A1 (en) | Domain-specific language interpreter and interactive visual interface for rapid screening | |
US12019998B1 (en) | Phrase recommendations for data visualizations | |
US11809698B1 (en) | Phrase builder for data analytic natural language interface | |
US11698903B2 (en) | Visually defining multi-row table calculations in a data preparation application | |
WO2023114908A1 (en) | Systems and methods for generation and display of query visualizations | |
JP2023079138A (ja) | 情報処理システム、情報処理方法及び情報処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |