CN107357765B - Word文档碎片化方法及装置 - Google Patents

Word文档碎片化方法及装置 Download PDF

Info

Publication number
CN107357765B
CN107357765B CN201710577105.7A CN201710577105A CN107357765B CN 107357765 B CN107357765 B CN 107357765B CN 201710577105 A CN201710577105 A CN 201710577105A CN 107357765 B CN107357765 B CN 107357765B
Authority
CN
China
Prior art keywords
paragraph
title
word document
properties
document
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710577105.7A
Other languages
English (en)
Other versions
CN107357765A (zh
Inventor
房平会
李德彦
徐龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dingfu Intelligent Technology Co., Ltd
Original Assignee
China Science And Technology (beijing) Co Ltd
Beijing Shenzhou Taiyue Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Science And Technology (beijing) Co Ltd, Beijing Shenzhou Taiyue Software Co Ltd filed Critical China Science And Technology (beijing) Co Ltd
Priority to CN201710577105.7A priority Critical patent/CN107357765B/zh
Publication of CN107357765A publication Critical patent/CN107357765A/zh
Application granted granted Critical
Publication of CN107357765B publication Critical patent/CN107357765B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/258Heading extraction; Automatic titling; Numbering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/31Indexing; Data structures therefor; Storage structures
    • G06F16/316Indexing structures
    • G06F16/322Trees
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供一种Word文档碎片化方法及装置,为了解决现有技术在Word文档中检索目标内容时,检索效率低的问题,首先,获取Word文档的所有段落;然后,根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;接下来,使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;最后,根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树,实现了Word文档的碎片化,从而,用户能直接从碎片化Word文档中检索到包含目标内容的文档段落或从Word文档的标题树中检索目标内容,提高用户检索Word文档标题时的检索效率。

Description

Word文档碎片化方法及装置
技术领域
本发明涉及文字信息处理领域,尤其涉及一种Word文档碎片化方法及装置
背景技术
Word文档是Microsoft Word软件中专用的文档格式,由于Microsoft Word软件在当前已有的文字处理软件中占据绝对的主导地位,因此,Word文档事实上已经成为了国际通用的文档格式标准,因此,在现有技术中,人们在工作、学习中所处理的文档大部分都是Word文档。
通常来说,Word文档的内容是一篇文章、一篇报告、一篇论文等,这些Word文档包括标题和正文。在一篇文档中,标题通常是对一段正文内容的概括,反映了一段正文的主题,正文是对其主题内容的具体描述,反映了主题对应的具体内容;在一篇文档中,标题通常有多个,并根据文档正文内容的结构体系被划分成多个层级,体现了文档的内容结构,对文档正文内容的理解和文档内容的检索起到非常重要的作用;因此,现有技术中,用户根据要查找的目标内容,使用主题关键字或内容关键字,在整篇Word文档中检索与要查找的主题对应的文档标题或正文内容,就能够检索到与关键字对应的目标内容。但是,由于Word文档的内容不同,Word文档的篇幅通常长短不一,当Word文档的篇幅较长时,检索整篇Word文档的工作量非常巨大,耗费时间长,检索效率低。
因此,如何降低检索Word文档的工作量,提高用户从Word文档中检索目标内容的效率,成为本领域技术人员亟待解决的技术问题。
发明内容
本发明提供了一种Word文档碎片化方法及装置,以解决现有技术中存在的问题。
第一方面,本发明实施例提供了一种Word文档碎片化方法,所述方法包括:获取Word文档的所有段落;根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;所述识别模型根据人工标注过标题段/正文段的段落属性生成;根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树。
第二方面,本发明实施例提供了一种Word文档碎片化装置,所述装置包括:获取模块,用于获取Word文档的所有段落;第一生成模块,用于根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;第二生成模块,用于使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;所述识别模型根据人工标注过标题段/正文段的段落属性生成;第三生成模块,用于根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树。
本发明实施例提供的技术方案,为了解决现有技术在Word文档中检索目标内容的工作量大,检索效率低的问题,首先,获取Word文档的所有段落;然后,根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;接下来,使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;最后,根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树,实现了Word文档的碎片化;从而用户能直接从碎片化Word文档中检索到包含目标内容的文档段落或从Word文档的标题树中检索目标知识内容,便于知识库的存储及检索,大大提高了对word文档资源的知识加工,提高用户检索Word文档标题时的检索效率。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种Word文档碎片化方法的流程图;
图2为本发明实施例提供的一种Word文档碎片化方法步骤S110的流程图;
图3为本发明实施例提供的一种Word文档碎片化方法步骤S140的流程图;
图4为本发明实施例提供的一种Word文档碎片化方法步骤S142的流程图;
图5为本发明实施例生成的一种Word文档标题树的示意图;
图6为本发明实施例提供的一种Word文档碎片化方法步骤S010的流程图
图7为本发明实施例提供的一种Word文档碎片化装置的框图;
图8为本发明实施例提供的一种Word文档碎片化装置第三生成模块240的框图;
图9为本发明实施例提供的一种Word文档碎片化装置第二确定子模块242的框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
本领域名词解释
SVM模型
SVM是英文Support Vector Machine的缩写,中文名称为:支持向量网络,支持向量网络是机器学***面或超平面集合,其可以用于分类、回归或其他任务。SVM模型在用于分类、回归或其他任务之前,需要进行训练,例如:给定一组训练实例,每个训练实例被标记为属于两个类别中的一个或另一个,SVM模型使用训练算法创建一个将新的实例分配给两个类别之一的模型,使其成为非概率二元线性分类器。SVM模型是将实例表示为空间中的点,这样映射就使得单独类别的实例被尽可能宽的明显的间隔分开。然后,将新的实例映射到同一空间,并基于它们落在间隔的哪一侧来预测所属类别。
需要补充说明的是,由于SVM(Support Vector Machine),并没有统一的中文释义,本领域技术人员也公知以上英文词汇所表达的意义,因此,为了避免不统一的翻译结果造成本领域技术人员的误解,本发明实施例中对以上英文词汇不做翻译。
实施例一
本发明实施例提供了一种Word文档碎片化方法。图1为本发明实施例提供的一种Word文档碎片化方法的流程图,如图1所示,所述方法可以包括以下步骤:
步骤S110,获取Word文档的所有段落。
本领域人员公知,Word文档的内容由多个段落组成,每个段落在结尾处换行,并在下一行开始新的段落,并且,在Word文档中,标题独占一段。本实施例中,获取Word文档的所有段落,在用户检索时,以段落为被检索单位进行检索,有助于提高检索效率,同时,以段落作为操作单元,有助于从段落中获取标题。
图2为本发明实施例提供的一种Word文档碎片化方法步骤S110的流程图,如图2所示,在一种实施例中,步骤S110包括:
步骤S111,获取Word文档。
本实施例中,Word文档的获取方式可以来自于用户的上传,也可以直接从本地现有的Word文档库中获取,还可以是从互联网资源中有目标地抓取特定主题的Word文档,在本步骤的具体实施中,Word文档的获取方式包括但不限于上述已示出的方式,对于Word文档的获取方式,本实施例中不做具体限定。
步骤S112,对Word文档进行格式转换,生成XWPFDocument文档。
本实施例中,使用Apache POI源码程序库中的XWPFDocument类对Word文档进行格式转换,生成XWPFDocument文档。
本实施例中的XWPFDocument是Apache POI开源程序库中的一个程序类,ApachePOI是Apache软件基金会的开放源码程序库,Apache POI提供API(应用程序接口)给Java程序对Microsoft Office格式文档读写和解析的功能。Apache POI能够从Word文档中获取到段落的POI属性,段落的POI属性,是指Apache POI源码程序库在对Word文档进行解析时,能从Word文档中识别出的文档段落属性的组合,例如,POI属性中包含Word文档的以下段落属性:fontAlignment(字体对齐)、borderBetween(字符间距)、firstLineIndent(段首缩进)、、indentationFirstLine(首行缩进)、style(字体样式)、bookmarkStartList(书签开始列表)等,在Word文档中,各级标题和正文的POI属性均不相同。
XWPFDocument是Apache POI开源程序库中的一个程序类,Apache POI在读写和解析Microsoft Office格式文档时,可以使用XWPFDocument程序类将Word文档转换成XWPFDocument文档,Apache POI能够从XWPFDocument文档中获取Word文档的段落属性,然后再对XWPFDocument文档进行读写和解析,在XWPFDocument文档中,Word文档的段落称为XWPFParagraph。
需要补充说明的是,由于Apache POI和XWPFDocument等英文词汇,并没有统一的中文释义,本领域技术人员也公知以上英文词汇所表达的意义,因此,为了避免不统一的翻译结果造成本领域技术人员的误解,本发明实施例中对以上英文词汇不做翻译。
步骤S113,从所述XWPFDocument文档中获取Word文档的所有所述段落。
由于,在XWPFDocument文档中,文档的段落以XWPFParagraph格式呈现,因此,本步骤中,通过获取XWPFParagraph段落信息,就可以获取Word文档的段落,在获取了Word文档的段落以后,Word文档不再已整篇形式存在,而是被分化成了以段落为单元存在多个文档片段。
步骤S120,根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合。
在Word文档中,每个级别的标题都具有不同的段落属性,而正文具有相同的段落属性,因此,在一篇Word文档中,如果标题级别的数量N,那么,这篇文档共有N+1个不同的段落属性。
需要说明的是,本发明实施例中使用Apache POI获取文档的段落属性,即Word文档的POI属性,一篇标题级别数量为N的Word文档,共有N+1个不同的POI属性。在本发明实施例中,除特殊说明以外,Word文档的段落属性均为POI属性。
本实施例中,根据段落在Word文档中的先后顺序,使用Apache POI开源程序库提供的API,依次分析Word文档的每个段落,获取段落的段落属性,并根据获取的段落属性的先后顺序,提取所有在Word文档中首次出现的段落属性,如果获取到的某个段落的段落属性不是首次出现,则这个段落属性不会被提取。当Apache POI完成对Word文档所有段落的分析之后,本步骤能提取到Word文档所有不同的段落属性,并对提取到的所有段落属性,生成Word文档的段落属性集合。
示例地,本实施例在步骤S110中获取的Word文档的段落如下:
段落1
段落2
段落3
段落4
段落5
段落6
段落7
段落8
段落9
对以上段落执行步骤S120的过程为:
首先获取“段落1”的段落属性,本示例中称段落属性1,由于段落属性1首次出现,因此提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1
然后,获取“段落2”的段落属性,本示例中称段落属性2,由于段落属性2首次出现,因此提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2
然后,获取“段落3”的段落属性,本示例中称段落属性3,由于段落属性3首次出现,因此提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2,段落属性3
然后,获取“段落4”的段落属性,本示例中“段落4”的段落属性与“段落2”的段落属性相同,均为段落属性2,因此不提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2,段落属性3
然后,获取“段落5”的段落属性,本示例中称段落属性4,由于段落属性4首次出现,因此提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2,段落属性3,段落属性4
然后,获取“段落6”的段落属性,本示例中称段落属性5,由于段落属性5首次出现,因此提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2,段落属性3,段落属性4,段落属性5
然后,获取“段落7”的段落属性,本示例中“段落7”的段落属性与“段落3”的段落属性相同,均为段落属性3,因此不提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2,段落属性3,段落属性4,段落属性5
然后,获取“段落8”的段落属性,本示例中“段落8”的段落属性与“段落6”的段落属性相同,均为段落属性5,因此不提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2,段落属性3,段落属性4,段落属性5
最后,获取“段落9”的段落属性,本示例中“段落9”的段落属性与“段落3”的段落属性相同,均为段落属性3,因此不提取该段落属性,此时,步骤S120已提取的段落属性有:
段落属性1,段落属性2,段落属性3,段落属性4,段落属性5
从上述示例可以看出,针对示例的Word文档的段落,步骤S120共获取5个段落属性,因此步骤S120生成的段落属性集合为:
{段落属性1,段落属性2,段落属性3,段落属性4,段落属性5}
步骤S130,使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;所述识别模型根据人工标注过标题段/正文段的段落属性生成。
本实施例中使用的段落属性识别模型是一个能够通过段落属性,识别段落是标题还是正文的SVM模型,根据人工标注过标题段/正文段的段落属性生成。在步骤S130中,首先,将段落属性集合中的所有段落属性输入进段落属性识别模型,段落属性识别模型能够识别出每个被输入的段落属性是标题段落属性还是正文段落属性;然后,根据识别结果,对段落属性集合中的所有段落属性进行分类,一类是标题段落属性,另一类是正文段落属性;最后,根据段落属性分类的结果,提取所有的标题段落属性,生成标题段落属性集合。与步骤S120生成的段落属性集合中的段落属性排列顺序相同,本步骤生成的标题段落属性集合中,标题段落属性按照其在Word文档中首次出现的顺序排列。
示例地,将步骤S120的示例中生成的段落属性集合输入进段落属性识别模型中,段落属性识别模型得到以下识别结果:
标题段落属性:段落属性1,段落属性2,段落属性4,段落属性5
正文段落属性:段落属性3
因此,步骤S130中,提取标题段落属性,生成的标题段落属性集合为:
{段落属性1,段落属性2,段落属性4,段落属性5}
步骤S140,根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树。
生成标题树,即生成word文档对应的知识条目,达到了提取word文档中主要知识条目的目的,便于存储于知识库及后续的检索,实现了Word文档知识的碎片化处理。
图3为本发明实施例提供的一种Word文档碎片化方法步骤S140的流程图,如图3所示,在一种实施例中,步骤S140包括:
步骤S141,根据所述标题段落属性在Word文档中首次出现的顺序,确定所述标题段落属性集合中,每个所述标题段落属性对应的标题级别。
本领域人员公知,在Word文档中,标题在Word文档中首次出现的顺序,是从级别高的标题向级别低的标题逐级出现,本实例中,将级别最高的标题称为一级标题,级别第二高的标题称为二级标题,以此类推。
示例地,由于,在标题段落属性集合中,标题段落属性按照其在Word文档中首次出现的顺序排列,因此,在步骤S141中,确定步骤S130的示例中生成的标题段落属性集合中,每个poi标题属性对应的标题级别的结果为:
标题段落属性 标题级别
段落属性1 一级标题
段落属性2 二级标题
段落属性4 三级标题
段落属性5 四级标题
步骤S142,根据所述标题段落属性集合和所述标题段落属性对应的标题级别,获取Word文档的所有标题,并确定每个标题的标题级别。
图4为本发明实施例提供的一种Word文档碎片化方法步骤S142的流程图,如图4所示,在一种实施例中,步骤S142包括以下步骤:
步骤S1421,判断Word文档每个所述段落的段落属性是否为所述标题段落属性集合中的所述标题段落属性。
本步骤中,使用Apache POI开源程序库提供的API,重新依次分析Word文档的每个段落获取段落属性,并逐一判断每个段落的段落属性是否是段落属性集合中的标题段落属性。
步骤S1422,如果是,则确定所述段落为标题。
根据步骤S1421的判断结果,确定段落是否为标题,如果是,则当前被判断的段落为标题,如果不是,则当前被判断的段落为正文。
步骤S1423,根据所述标题段落属性对应的标题级别,确定每个标题的标题级别。
示例地,对步骤S120提供的示例Word文档,执行步骤S1423的结果为:
段落 段落属性 是否为标题段落属性 标题级别
段落1 段落属性1 一级标题
段落2 段落属性2 二级标题
段落3 段落属性3 正文
段落4 段落属性2 二级标题
段落5 段落属性4 三级标题
段落6 段落属性5 四级标题
段落7 段落属性3 正文
段落8 段落属性5 四级标题
段落9 段落属性3 正文
步骤S143,根据Word文档的所有标题和每个标题的标题级别,生成Word文档标题树。
本实施例中的Word文档标题树,能够展现Word文档中所有标题的从属关系,包括:并列关系和父子关系;同时,由于标题通常是位于正文段落之前,作为正文段落的概括,因此,Word文档标题树能够体现出Word文档的知识结构。在步骤S143中,根据Word文档的所有标题和每个标题标题级别,按照下述规则,生成Word文档标题树:
1、相同级别的标题为并列关系,按照在文档中的位置先后排列;
2、出现在当前标题之前,与当前标题位置最接近的上一级标题,是当前标题的父级标题。
示例地,步骤S143根据步骤S142的示例中确定的每个标题的标题级别,对步骤S120示例的Word文档生成的Word文档标题树的示意图如图5所示。其中,标题树中具体包含了每个标题的文字内容,以便用户进行检索。
需要说明的是,本实施例中,通过获取Word文档的所有段落,将Word文档的内容细分成多个段落的形式,以段落为单位处理Word文档;通过建立Word文档的标题树,清晰地展现了Word文档的内容结构,便于用户根据检索的关键词,直接从标题树中得到目标内容;并且,由于Word文档中的正文段落内容的主题通常与临近的上一个标题的内容相对应,通过在Word文档标题树中检索标题,就能够迅速找到与该标题的主题对应的正文段落,或者,通过在Word文档中检索关键词,也能够迅速找到包含该关键词的正文段落;本申请实施例提供的技术方案,将Word文档的内容细分成多个段落的形式,以段落为单位处理Word文档,实现了将Word文档的碎片化,能够提高用户从Word文档中检索目标内容的效率。
在一种实施例中,步骤S110之前,还包括:
步骤S010,建立段落属性识别模型。
图6为本发明实施例提供的一种Word文档碎片化方法步骤S010的流程图,如图6所示,在一种实施例中,步骤S010包括以下步骤:
步骤S011,获取样例文档,所述样例文档为大量文档内容已知的Word文档。
本步骤中获取的样例文档,由于文档内容已知,因此,文档中每个段落是标题还是正文也已知,这些样例文档可以作为SVM模型训练的训练实例,通过使用SVM模型对这些样例文档进行训练,可以获得段落属性识别模型。
步骤S012,获取所述样例文档中所有所述段落的样例段落属性。
本实施例中,样例文档所有段落的样例段落属性可以通过Apache POI分析样例文档获得。
示例地,本步骤从样例文档的段落中获得了以下样例段落属性:
步骤S013,根据所述样例文档的文档内容,对所述样例文档中,所有所述段落的样例段落属性添加标签,建立初级模型;所述标签包括标题标签和正文标签,所述初级模型包含所述样例文档的所有段落,以及与每个段落对应的所述标签。
由于,样例文档的段落内容已知,本步骤可根据每个段落的具体内容对段落的样例段落属性添加标题标签或正文标签,以建立初级模型。
示例地,对步骤S012中获取的样例段落属性添加标签后建立的初级模型的结构示意为:
样例段落属性 标签
样例段落属性1 标题
样例段落属性2 正文
样例段落属性3 标题
样例段落属性4 标题
样例段落属性5 正文
样例段落属性6 标题
样例段落属性7 正文
样例段落属性8 标题
…… ……
从上述初级模型的结构示意中可以看出,初级模型包含样例文档的所有段落,以及与每个段落对应的标签。
步骤S014,将所述初级模型根据SVM模型规则,生成所述识别模型,所述识别模型为SVM模型。
本实施例中,使用SVM模型建立段落属性识别模型,将添加有标签的样例段落属性输入进SVM模型中,SVM模型利用SVM算法对样例段落属性进行训练,最终建立起基于SVM模型的段落属性识别模型。
本发明实施例提供的技术方案,为了解决现有技术在Word文档中检索目标内容的工作量大,检索效率低的问题,首先,获取Word文档的所有段落;然后,根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;接下来,使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;最后,根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树,实现了Word文档的碎片化;从而,用户能直接从碎片化Word文档中检索到包含目标内容的文档段落或从Word文档的标题树中检索目标内容,提高用户检索Word文档标题时的检索效率。
实施例二
本发明实施例提供了一种Word文档碎片化装置。图7为本发明实施例提供的一种Word文档碎片化装置的框图,如图7所示,所述装置包括:
获取模块210,用于获取Word文档的所有段落;
第一生成模块220,用于根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;
第二生成模块230,用于使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;所述识别模型根据人工标注过标题段/正文段的段落属性生成;
第三生成模块240,用于根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树;
进一步地,本实施例中,所述装置还包括:
建模模块250,用于建立段落属性识别模型。
图8为本发明实施例提供的一种Word文档碎片化装置第三生成模块240的框图,如图8所示,在一种实施例中,第三生成模块240包括:
第一确定子模块241,用于根据所述标题段落属性在Word文档中首次出现的顺序,确定所述标题段落属性集合中,每个所述标题段落属性对应的标题级别;
第二确定子模块242,用于根据所述标题段落属性集合和所述标题段落属性对应的标题级别,获取Word文档的所有标题,并确定每个标题的标题级别;
第一生成子模块243,根据Word文档的所有标题和每个标题的标题级别,生成Word文档标题树。
图9为本发明实施例提供的一种Word文档碎片化装置第二确定子模块242的框图,如图9所示,在一种实施例中,第二确定子模块242包括:
判断子单元2421,用于判断Word文档每个所述段落的段落属性是否为所述标题段落属性集合中的所述标题段落属性;
第一确定子单元2422,用于在所述判断子模块判断结果为是时,确定所述段落为标题;
第二确定子单元2423,根据所述标题段落属性对应的标题级别,确定每个标题的标题级别。
本发明实施例提供的技术方案,为了解决现有技术在Word文档中检索目标内容的工作量大,检索效率低的问题,首先,获取Word文档的所有段落;然后,根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;接下来,使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;最后,根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树,实现了Word文档的碎片化;从而,用户能直接从碎片化Word文档中检索到包含目标内容的文档段落或从Word文档的标题树中检索目标内容,提高用户检索Word文档标题时的检索效率。
本发明可用于众多通用或专用的计算***环境或配置中,例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器***、基于微处理器的***、置顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何***或设备的分布式计算环境等等。
本发明可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本发明,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本发明旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (8)

1.一种Word文档碎片化方法,其特征在于,所述方法包括:
获取Word文档的所有段落;
根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;
使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;所述识别模型根据人工标注过标题段/正文段的段落属性生成;所述识别模型由大量文档内容已知的Word样例文档训练得到;
根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树;
其中,所述根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树,包括:
根据所述标题段落属性在Word文档中首次出现的顺序,确定所述标题段落属性集合中,每个所述标题段落属性对应的标题级别;
根据所述标题段落属性集合和所述标题段落属性对应的标题级别,获取Word文档的所有标题,并确定每个标题的标题级别;
根据Word文档的所有标题和每个标题的标题级别,生成Word文档标题树。
2.根据权利要求1所述的方法,其特征在于,所述获取Word文档的所有段落的步骤,包括:
获取Word文档;
对Word文档进行格式转换,生成XWPFDocument文档;
从所述XWPFDocument文档中获取Word文档的所有所述段落。
3.根据权利要求1所述的方法,其特征在于,所述根据所述标题段落属性集合和所述标题段落属性对应的标题级别,获取Word文档的所有标题,并确定每个标题的标题级别的步骤,包括;
判断Word文档每个所述段落的段落属性是否为所述标题段落属性集合中的所述标题段落属性;
如果是,则确定所述段落为标题;
根据所述标题段落属性对应的标题级别,确定每个标题的标题级别。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述获取Word文档的所有段落的步骤之前,还包括:
建立段落属性识别模型;
所述建立段落属性识别模型的步骤,包括:
获取样例文档,所述样例文档为大量文档内容已知的Word文档;
获取所述样例文档中所有所述段落的样例段落属性;
根据所述样例文档的文档内容,对所述样例文档中,所有所述段落的样例段落属性添加标签,建立初级模型;所述标签包括标题标签和正文标签,所述初级模型包含所述样例文档的所有段落,以及与每个段落对应的所述标签;
将所述初级模型根据SVM模型规则,生成所述识别模型,所述识别模型为SVM模型。
5.一种Word文档碎片化装置,其特征在于,所述装置包括:
获取模块,用于获取Word文档的所有段落;
第一生成模块,用于根据所述段落在Word文档中的先后顺序,依次获取所述段落的段落属性,并提取所有在Word文档中首次出现的段落属性,生成Word文档的段落属性集合;
第二生成模块,用于使用段落属性识别模型,从所述段落属性集合中提取所有的标题段落属性,生成标题段落属性集合;所述识别模型根据人工标注过标题段/正文段的段落属性生成;所述识别模型由大量文档内容已知的Word样例文档训练得到;
第三生成模块,用于根据标题段落属性集合,识别Word文档的所有标题,并生成Word文档标题树;
其中,所述第三生成模块,包括:
第一确定子模块,用于根据所述标题段落属性在Word文档中首次出现的顺序,确定所述标题段落属性集合中,每个所述标题段落属性对应的标题级别;
第二确定子模块,用于根据所述标题段落属性集合和所述标题段落属性对应的标题级别,获取Word文档的所有标题,并确定每个标题的标题级别;
第一生成子模块,根据Word文档的所有标题和每个标题的标题级别,生成Word文档标题树。
6.根据权利要求5所述的装置,其特征在于,所述获取模块具体用于:获取Word文档;对Word文档进行格式转换,生成XWPFDocument文档;从所述XWPFDocument文档中获取Word文档的所有所述段落。
7.根据权利要求5所述的装置,其特征在于,所述第二确定子模块包括:
判断子单元,用于判断Word文档每个所述段落的段落属性是否为所述标题段落属性集合中的所述标题段落属性;
第一确定子单元,用于在所述判断子模块判断结果为是时,确定所述段落为标题;
第二确定子单元,根据所述标题段落属性对应的标题级别,确定每个标题的标题级别。
8.根据权利要求5-7中任一项所述的装置,其特征在于,所述装置还包括:
建模模块,用于建立段落属性识别模型;
所述建模模块,具体用于:获取样例文档,所述样例文档为大量文档内容已知的Word文档;获取所述样例文档中所有所述段落的样例段落属性;根据所述样例文档的文档内容,对所述样例文档中,所有所述段落的样例段落属性添加标签,建立初级模型;所述标签包括标题标签和正文标签,所述初级模型包含所述样例文档的所有段落,以及与每个段落对应的所述标签;将所述初级模型根据SVM模型规则,生成所述识别模型,所述识别模型为SVM模型。
CN201710577105.7A 2017-07-14 2017-07-14 Word文档碎片化方法及装置 Active CN107357765B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710577105.7A CN107357765B (zh) 2017-07-14 2017-07-14 Word文档碎片化方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710577105.7A CN107357765B (zh) 2017-07-14 2017-07-14 Word文档碎片化方法及装置

Publications (2)

Publication Number Publication Date
CN107357765A CN107357765A (zh) 2017-11-17
CN107357765B true CN107357765B (zh) 2018-11-09

Family

ID=60292692

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710577105.7A Active CN107357765B (zh) 2017-07-14 2017-07-14 Word文档碎片化方法及装置

Country Status (1)

Country Link
CN (1) CN107357765B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109829148A (zh) * 2017-11-23 2019-05-31 北大方正集团有限公司 排版方法及装置
CN108287927B (zh) * 2018-03-05 2019-10-22 北京百度网讯科技有限公司 用于获取信息的方法及装置
CN108846031B (zh) * 2018-05-28 2022-05-13 同方知网数字出版技术股份有限公司 一种面向电力行业的项目相似性对比方法
CN109885818B (zh) * 2019-01-31 2020-11-27 中国地质大学(武汉) 一种PowerPoint演示文稿向Beamer演示文稿转换方法及***
CN110704573B (zh) * 2019-09-04 2023-12-22 平安科技(深圳)有限公司 目录存储方法、装置、计算机设备及存储介质
CN117763206B (zh) * 2024-02-20 2024-06-11 暗物智能科技(广州)有限公司 知识树的生成方法、装置、电子设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1697393A (zh) * 2004-05-12 2005-11-16 华为技术有限公司 一种自动生成网络优化报告的方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101055577A (zh) * 2006-04-12 2007-10-17 龙搜(北京)科技有限公司 可扩展标记语言集中器

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1697393A (zh) * 2004-05-12 2005-11-16 华为技术有限公司 一种自动生成网络优化报告的方法

Also Published As

Publication number Publication date
CN107357765A (zh) 2017-11-17

Similar Documents

Publication Publication Date Title
CN107357765B (zh) Word文档碎片化方法及装置
AU2019263758B2 (en) Systems and methods for generating a contextually and conversationally correct response to a query
CN107291723B (zh) 网页文本分类的方法和装置,网页文本识别的方法和装置
CN108628828B (zh) 一种基于自注意力的观点及其持有者的联合抽取方法
CN111680490B (zh) 一种跨模态的文档处理方法、装置及电子设备
CN109145260B (zh) 一种文本信息自动提取方法
CN109635108B (zh) 一种基于人机交互的远程监督实体关系抽取方法
CN107330011A (zh) 多策略融合的命名实体的识别方法及装置
WO2021218028A1 (zh) 基于人工智能的面试内容精炼方法、装置、设备及介质
JP2005526317A (ja) ドキュメントコーパスからコンセプト階層構造を自動に捜索する方法及びシステム
CN112256939B (zh) 一种针对化工领域的文本实体关系抽取方法
Banerjee et al. Bengali question classification: Towards developing qa system
CN112395421B (zh) 课程标签的生成方法、装置、计算机设备及介质
CN110910175B (zh) 一种旅游门票产品画像生成方法
KR20220134695A (ko) 인공지능 학습 모델을 이용한 저자 식별 시스템 및 그 방법
CN105786898B (zh) 一种领域本体的构建方法和装置
CN110659352A (zh) 试题考点识别方法及其***
CN115859980A (zh) 一种半监督式命名实体识别方法、***及电子设备
Owen et al. Towards a scientific workflow featuring Natural Language Processing for the digitisation of natural history collections.
CN113553853B (zh) 命名实体识别方法、装置、计算机设备及存储介质
JP4703487B2 (ja) 画像分類方法及び装置及びプログラム
CN117574858A (zh) 一种基于大语言模型的类案检索报告自动生成方法
CN102207947B (zh) 一种直接引语素材库的生成方法
CN114842982B (zh) 一种面向医疗信息***的知识表达方法、装置及***
CN113868389B (zh) 基于自然语言文本的数据查询方法、装置及计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190910

Address after: Room 630, 6th floor, Block A, Wanliu Xingui Building, 28 Wanquanzhuang Road, Haidian District, Beijing

Patentee after: China Science and Technology (Beijing) Co., Ltd.

Address before: 100089 Beijing city Haidian District wanquanzhuang Road No. 28 Wanliu new building block A Room 601

Co-patentee before: China Science and Technology (Beijing) Co., Ltd.

Patentee before: Beijing Shenzhou Taiyue Software Co., Ltd.

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 230000 zone B, 19th floor, building A1, 3333 Xiyou Road, hi tech Zone, Hefei City, Anhui Province

Patentee after: Dingfu Intelligent Technology Co., Ltd

Address before: Room 630, 6th floor, Block A, Wanliu Xingui Building, 28 Wanquanzhuang Road, Haidian District, Beijing

Patentee before: DINFO (BEIJING) SCIENCE DEVELOPMENT Co.,Ltd.