CN105139309A - 一种企业软件著作权公告信息抓取与管理的方法 - Google Patents
一种企业软件著作权公告信息抓取与管理的方法 Download PDFInfo
- Publication number
- CN105139309A CN105139309A CN201510539910.1A CN201510539910A CN105139309A CN 105139309 A CN105139309 A CN 105139309A CN 201510539910 A CN201510539910 A CN 201510539910A CN 105139309 A CN105139309 A CN 105139309A
- Authority
- CN
- China
- Prior art keywords
- information
- information code
- enterprise
- data
- software copyright
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种基于软件著作权的公众公开的登记或变更公告数据的页面级别的通过getHTTPPage方法的抓取,再结合标记分析方法获得第一信息码、第二信息码和第三信息码,再通过上述信息码之间的对比,在相应程序下生成第四信息码,然后依对应的方法写入第一知识产权信息库和第二知识产权信息库,以备不同的场合使用的一种企业知识产权信息抓取与管理的方法。
Description
技术领域
本发明主要涉及一种企业软件著作权信息抓取与管理方法,尤其是通过软件著作权公布网站的页面信息抓取、分析、整理和建档的方法。
背景技术
目前,软件著作权的信息获取大多基于通过相关部门所公开的数据接口来实现软件著作权信息的同步,或者通过复杂的运算与抓取而获得信息量较少的信息。此方法对于经常性的、大数据的企业软件著作权的信息获取显得难以胜任,并且应用成本高,风险大,不利于中小中介服务机构推广应用。
软件著作权的信息,尤其是建立企业研发信用体系,更显得非常重要,同时也是中介服务机构提高自身服务质量的有力支持。
发明内容
为了解决上述问题,本发明提出了一种基于专利、商标和软件著作权三种常用的软件著作权的公众公开的登记或变更公告数据的页面级别的通过getHTTPPage方法的抓取技术,再结合标记分析方法获得第一信息码、第二信息码和第三信息码,再通过上述信息码之间的对比,在相应程序下生成第四信息码,然后依对应的方法写入第一软件著作权信息库和第二软件著作权信息库,以备不同的场合使用的一种企业软件著作权公告信息抓取与管理的方法。
一种企业一种企业软件著作权公告信息抓取与管理的方法,其主要包含以下步骤:
步骤S102,在企业信息库中读出企业名称的待查数据;
步骤S103,将步骤S102所读出的企业名称通过函数转为下列所列的编码方式为GB2312,输出为第一变量;
步骤S104,以上述第一变量作为对应的URL的对应参数值生成第一URL;
步骤S105,通过getHTTPPage方式访问步骤S104生成的第一URL,获得第一URL对应的页面的HTML格式的数据源码供步骤S106进行标记截取;
步骤S106,通过S105获得的HTML格式的数据源码,通过以“<title>”标记开始和“</title>”标记结束生成第一信息码;通过开始标记为“登记日期”,结束标记为“>2”截取生成第二信息码;通过开始标记为“中国”,结束标记为“<tdclass=”获取第三信息码;
当第一信息码的值为空时,返回S102步骤,同时检查网络是否正常;当第二信息码为空时,跳过步骤S107和步骤S108,并设置第四信息码的值为“0”;当第二信息码不为空时,执行步骤S107;
步骤S107,生成第四信息码:当第二信息码不为空,并且第三信息码为空时,第四信息码通过开始标记为“[总数”,结束标记为“]”获取生成,第二信息码不为空并且第三信息码不为空时,第四信息码的值为“1”;
步骤S108,当第二信息码不为空时,将第一信息码、第二信息码和第四信息码的信息,以及相应的辅助数据对应存贮在拥有软件著作权的企业信息库中;
将所有数据执行步骤S109存入软件著作权的企业信息总表,同时返回步骤S101将已经成功检索的记录的进行已执行的标记后,返回步骤S102循环执行,直至所有符合条件的企业数据检索完成为止。
执行步骤S102前执行步骤S101进行企业信息查询中,进行企业类型、企业名称、企业成立时间、企业注册资金和企业注册地址的一种条件或者多个条件组合检索筛选出所需要检索的数据。
步骤S109通过将数据存贮在步骤S101所述的企业信息表对应的字段中,同时将相应的执行标记字段的值标记为已执行,然后步骤S102循环执行,直至所有符合条件的企业数据检索完成为止。
步骤S108所述的辅助数据包括通过步骤S102所读出的企业名称传递而获得企业名称,通过步骤S106和步骤S107追加获取当前的***时间。
在执行步骤S102前,通过设置一定数量的采样数据进行采样,采样数据包括企业拥有三种软件著作权类别的一种、两种、三种及上述组合的一定量的企业,以及没有任何软件著作权的一定量的企业,采样走完整个流程,查看相关采集是否正常,此步骤确定网络是否正常,官方公布数据格式是否发生变化和确定所设置的数据编码方式是否正确。
步骤S106所述,当第二信息码不为空时,通过设置第四信息码的值为“1”而不采集生成第三信息码。
步骤S103所述的编码方式,当官方机构公布的数据对应的编码发生变更时,本方法将根据实际所发生的变化变更编码方式。
步骤S104所述的URL中,当官方机构公布时采用的URL进行加密发布时,本方法将根据实际情况进行数据加密编码。
附图说明
图1一种企业软件著作权公告信息抓取与管理的方法流程图。
具体实施方式
一种企业软件著作权公告信息抓取与管理的方法,其主要包含以下步骤:
步骤S101,进行企业信息查询中,进行企业类型等条件检索筛选出所需要检索的数据。
步骤S102,在企业信息库中读出企业名称的待查数据,设变量为“aa”。
步骤S103,根据三种类别将步骤S102所读出的企业名称通过函数转为下列所列的对应数据编码,设变量为“bb”:软件著作权公告信息对应编码方式为GB2312。
其中读取URL的页面需要在文件头加入以下代码段:
<head>
<metahttp-equiv="Content-Type"content="text/html;charset=gb2312">
</head>
步骤S104,以上述“bb”变量作为对应的URL的对应参数值生成第一URL,使用ASP开发语言表达如下:“bb”变量假设为cname,假设软件著作权公告信息发布网站为www.abcda.com:
http://www.adcda.com/cpcc/RRegisterAction.do?method=list&no=fck&sql_name=&sql_regnum=&sql_author=<%=cname%>&curPage=1&count=10&sortOrder=&sortLabel=。
步骤S105,通过getHTTPPage方式访问步骤S104生成的第一URL,获得第一URL对应的页面的HTML格式的数据源码供步骤S106进行标记截取。
步骤S106,通过S105获得的HTML格式的数据源码,通过以“<title>”标记开始和“</title>”标记结束生成第一信息码;通过如下标记生成第二信息码:开始标记为“登记日期”,结束标记为“>2”;通过如下标记获取第三信息码:开始标记为“中国”,结束标记为“<tdclass=”。
当第一信息码的值为空时,返回S102步骤,同时检查网络是否正常;当第二信息码为空时,跳过步骤S107和步骤S108,并设置第四信息码的值为“0”;当第二信息码不为空时,执行步骤S107。
步骤S107,生成第四信息码:当第二信息码不为空,并且第三信息码为空时,第四信息码通过开始标记为“[总数”,结束标记为“]”获取生成,第二信息码不为空并且第三信息码不为空时,第四信息码的值为“1”;第二信息码不为空时,第四信息码通过第二信息码去杂质后剩下数字。
步骤S108,当第二信息码不为空时,将第一信息码、第二信息码和第四信息码的信息,以及相应的辅助数据对应存贮在拥有软件著作权的企业信息库中,辅助数据包括通过步骤S102所读出的企业名称传递而获得企业名称,通过步骤S106和步骤S107追加获取当前的***时间。
将所有数据执行步骤S109存入软件著作权的企业信息总表,同时返回步骤S101将已经成功检索的记录的进行已执行的标记然后,返回步骤S102循环执行,直至所有符合条件的企业数据检索完成为止。
在执行步骤S102前,通过设置一定数量的采样数据进行采样,采样数据包括企业拥有三种软件著作权类别的一种、两种、三种及上述组合的一定量的企业,以及没有任何软件著作权的一定量的企业,采样走完整个流程,查看相关采集是否正常,此步骤确定网络是否正常,官方公布数据格式是否发生变化和确定所设置的数据编码方式是否正确。
上述实施方式仅仅为本发明的其中实施方式之一。
Claims (8)
1.一种企业一种企业软件著作权公告信息抓取与管理的方法,其特征包括,其主要包含以下步骤:
步骤S102,在企业信息库中读出企业名称的待查数据;
步骤S103,将步骤S102所读出的企业名称通过函数转为下列所列的编码方式为GB2312,输出为第一变量;
步骤S104,以上述第一变量作为对应的URL的对应参数值生成第一URL;
步骤S105,通过getHTTPPage方式访问步骤S104生成的第一URL,获得第一URL对应的页面的HTML格式的数据源码供步骤S106进行标记截取;
步骤S106,通过S105获得的HTML格式的数据源码,通过以“<title>”标记开始和“</title>”标记结束生成第一信息码;通过开始标记为“登记日期”,结束标记为“>2”截取生成第二信息码;通过开始标记为“中国”,结束标记为“<tdclass=”获取第三信息码;
当第一信息码的值为空时,返回S102步骤,同时检查网络是否正常;当第二信息码为空时,跳过步骤S107和步骤S108,并设置第四信息码的值为“0”;当第二信息码不为空时,执行步骤S107;
步骤S107,生成第四信息码:当第二信息码不为空,并且第三信息码为空时,第四信息码通过开始标记为“[总数”,结束标记为“]”获取生成,第二信息码不为空并且第三信息码不为空时,第四信息码的值为“1”;
步骤S108,当第二信息码不为空时,将第一信息码、第二信息码和第四信息码的信息,以及相应的辅助数据对应存贮在拥有软件著作权的企业信息库中;
将所有数据执行步骤S109存入软件著作权的企业信息总表,同时返回步骤S101将已经成功检索的记录的进行已执行的标记后,返回步骤S102循环执行,直至所有符合条件的企业数据检索完成为止。
2.根据权利要求1所述的一种企业软件著作权公告信息抓取与管理的方法,其特征包括,执行步骤S102前执行步骤S101进行企业信息查询中,进行企业类型、企业名称、企业成立时间、企业注册资金和企业注册地址的一种条件或者多个条件组合检索筛选出所需要检索的数据。
3.根据权利要求1和权利要求2所述的一种企业软件著作权公告信息抓取与管理的方法,其特征包括,所述的步骤S109通过将数据存贮在步骤S101所述的企业信息表对应的字段中,同时将相应的执行标记字段的值标记为已执行,然后步骤S102循环执行,直至所有符合条件的企业数据检索完成为止。
4.根据权利要求1所述的一种企业软件著作权公告信息抓取与管理的方法,其特征包括,步骤S108所述的辅助数据包括通过步骤S102所读出的企业名称传递而获得企业名称,通过步骤S106和步骤S107追加获取当前的***时间。
5.根据权利要求1所述的一种企业软件著作权公告信息抓取与管理的方法,其特征包括,在执行步骤S102前,通过设置一定数量的采样数据进行采样,采样数据包括企业拥有三种知识产权类别的一种、两种、三种及上述组合的一定量的企业,以及没有任何知识产权的一定量的企业,采样走完整个流程,查看相关采集是否正常,此步骤确定网络是否正常,官方公布数据格式是否发生变化和确定所设置的数据编码方式是否正确。
6.根据权利要求1所述的一种企业软件著作权公告信息抓取与管理的方法,其特征包括,所述的S106所述,当第二信息码不为空时,通过设置第四信息码的值为“1”而不采集生成第三信息码。
7.根据权利要求1所述的一种企业软件著作权公告信息抓取与管理的方法,其特征包括,步骤S103所述的编码方式,当官方机构公布的数据对应的编码发生变更时,本方法将根据实际所发生的变化变更编码方式。
8.根据权利要求1所述的一种企业软件著作权公告信息抓取与管理的方法,其特征包括,步骤S104所述的URL中,当官方机构公布时采用的URL进行加密发布时,本方法将根据实际情况进行数据加密编码。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510539910.1A CN105139309A (zh) | 2015-08-31 | 2015-08-31 | 一种企业软件著作权公告信息抓取与管理的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510539910.1A CN105139309A (zh) | 2015-08-31 | 2015-08-31 | 一种企业软件著作权公告信息抓取与管理的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105139309A true CN105139309A (zh) | 2015-12-09 |
Family
ID=54724644
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510539910.1A Pending CN105139309A (zh) | 2015-08-31 | 2015-08-31 | 一种企业软件著作权公告信息抓取与管理的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105139309A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108563740A (zh) * | 2018-04-12 | 2018-09-21 | 苏州市铜钱草科技有限公司 | 一种企业软件著作权公告信息抓取方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102779169A (zh) * | 2012-06-27 | 2012-11-14 | 江苏新瑞峰信息科技有限公司 | 一种基于html标签的网页正文提取方法及装置 |
CN104376406A (zh) * | 2014-11-05 | 2015-02-25 | 上海计算机软件技术开发中心 | 一种基于大数据的企业创新资源管理与分析***和方法 |
CN104866517A (zh) * | 2014-12-30 | 2015-08-26 | 智慧城市信息技术有限公司 | 一种抓取网页内容的方法及装置 |
-
2015
- 2015-08-31 CN CN201510539910.1A patent/CN105139309A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102779169A (zh) * | 2012-06-27 | 2012-11-14 | 江苏新瑞峰信息科技有限公司 | 一种基于html标签的网页正文提取方法及装置 |
CN104376406A (zh) * | 2014-11-05 | 2015-02-25 | 上海计算机软件技术开发中心 | 一种基于大数据的企业创新资源管理与分析***和方法 |
CN104866517A (zh) * | 2014-12-30 | 2015-08-26 | 智慧城市信息技术有限公司 | 一种抓取网页内容的方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108563740A (zh) * | 2018-04-12 | 2018-09-21 | 苏州市铜钱草科技有限公司 | 一种企业软件著作权公告信息抓取方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102789470B (zh) | 加载网页中的图片的方法和装置 | |
CN103095823A (zh) | 一种物联网***中对象的描述方法及对象信息交互*** | |
CN104185845A (zh) | 用于提供网页的二进制表示的***和方法 | |
CN107220274B (zh) | 一种可视化数据接口集市实现方法 | |
CN103077185A (zh) | 一种基于对象的自定义扩展信息的方法 | |
US9069681B1 (en) | Real-time log joining on a continuous stream of events that are approximately ordered | |
CN103593344A (zh) | 一种信息采集方法和装置 | |
CN105426492A (zh) | 一种知识产权信息抓取与管理的方法 | |
CN104021216B (zh) | 消息代理服务器及信息发布订阅方法和*** | |
CN107193549A (zh) | 基于元数据的网页快速开发方法 | |
CN103885765A (zh) | 一种xbrl元素的编码方法 | |
CN103064839A (zh) | 一种Pdf全文在线检索方法 | |
CN105139309A (zh) | 一种企业软件著作权公告信息抓取与管理的方法 | |
CN105160471A (zh) | 一种实现区域企业专利信息摸底与管理的方法 | |
CN100437740C (zh) | 站点点击与网页上链接的关联 | |
CN105160472A (zh) | 一种企业软件著作权公告信息抓取与管理*** | |
JP2007041983A (ja) | 申請書作成プログラムおよび申請書作成装置 | |
CN105488617A (zh) | 一种实现基于知识产权评价的众筹方法 | |
CN105426503A (zh) | 一种商标预警的方法 | |
CN104978379A (zh) | 一种应用程序资料站的搭建方法及装置 | |
CN105117848A (zh) | 一种企业知识产权信息抓取与管理*** | |
CN101145936A (zh) | 一种在Web页面中添加标签的方法及其*** | |
CN105278965A (zh) | 一种专利信息管理的方法 | |
CN105138651A (zh) | 一种企业商标公告信息抓取与管理的方法 | |
CN105205588A (zh) | 一种企业专利公告信息抓取与管理的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20151209 |
|
WD01 | Invention patent application deemed withdrawn after publication |