CN109614379A - 日志输出方法、装置、计算机存储介质和计算机设备 - Google Patents
日志输出方法、装置、计算机存储介质和计算机设备 Download PDFInfo
- Publication number
- CN109614379A CN109614379A CN201811231450.6A CN201811231450A CN109614379A CN 109614379 A CN109614379 A CN 109614379A CN 201811231450 A CN201811231450 A CN 201811231450A CN 109614379 A CN109614379 A CN 109614379A
- Authority
- CN
- China
- Prior art keywords
- log
- information
- output
- type
- manner
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000012545 processing Methods 0.000 claims abstract description 35
- 230000004044 response Effects 0.000 claims abstract description 11
- 238000012216 screening Methods 0.000 claims description 35
- 238000004590 computer program Methods 0.000 claims description 3
- 238000000151 deposition Methods 0.000 claims description 2
- 230000035945 sensitivity Effects 0.000 claims description 2
- 230000014509 gene expression Effects 0.000 description 17
- 230000006870 function Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 238000012913 prioritisation Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/602—Providing cryptographic facilities or services
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供了一种日志输出方法、装置、计算机存储介质和计算机设备;该方法包括:接收日志输出指令,响应于所述日志输出指令生成待处理日志信息,以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;以异步线程的方式输出所述日志信息。通过本发明技术方案,能够实现有效屏蔽日志中的敏感信息,并且保持日志输出的效率。
Description
技术领域
本发明涉及日志输出领域,具体而言,本发明涉及一种日志输出方法、装置、计算机存储介质和计算机设备。
背景技术
随着网络技术的广泛应用,对个人隐私和网络安全的重视程度越来越高。在很多日志开源项目中,如log4j,common-log等,都具有日志输出功能,但是在业务开发中,尤其是在金融领域中的项目,输出的日志记录了大量用户的敏感信息,如手机号码,身份证号码,银行***码,用户密码等个人隐私信息,存在很大的数据泄密隐患。
目前存在能够对日志中的敏感信息进行屏蔽的技术,然而由于当短时间内需要生成较多数量的日志时,该类对日志中的敏感信息进行屏蔽的技术通常会影响到日志的生成效率。
因此需要一种既能够屏蔽日志中的敏感信息,又能够保持日志生成效率的方法。
发明内容
本发明针对现有技术的缺点,提供了一种日志输出方法、装置、计算机存储介质和计算机设备,能够实现有效屏蔽日志中的敏感信息,并且保持日志输出的效率。
本发明实施例根据第一方面提供了一种日志输出方法,包括:
接收日志输出指令;
响应于所述日志输出指令生成待处理日志信息;
以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;
以异步线程的方式输出所述日志信息。
进一步地,所述日志输出指令中包括业务类型标识;
响应于所述日志输出指令生成待处理日志信息,包括:
确定与所述业务类型标识对应的日志输出格式;
根据所述日志输出格式生成待处理日志信息。
进一步地,所述日志输出指令中包括预设保密级别信息;
所述以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息,之前包括:
根据所述预设保密级别信息确定对应的敏感信息屏蔽类型;
根据所述敏感信息屏蔽类型和日志输出格式,确定对应的预设屏蔽规则。
进一步地,所述根据所述预设保密级别信息确定对应的敏感信息屏蔽类型,包括:
若所述预设保密级别信息为第一保密级别,确定对应的敏感信息屏蔽类型为第一类型,第一类型屏蔽手机号码、证件号码、银行***码以及用户密码;
若所述预设保密级别信息为第二保密级别,确定对应的敏感信息屏蔽类型为第二类型,第二类型屏蔽证件号码、银行***码以及用户密码;
若所述预设保密级别信息为第三保密级别,确定对应的敏感信息屏蔽类型为第三类型,第三类型屏蔽用户密码。
进一步地,所述以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息,包括:
以异步线程的方式将所述预设屏蔽规则与所述待处理日志信息进行匹配以确定敏感信息;
按照与所述预设屏蔽规则对应的处理方式对所述敏感信息进行屏蔽处理,生成日志信息;
将所述日志信息保存到日志缓存中。
进一步地,所述以异步线程的方式输出所述日志信息,包括:
以异步线程的方式获取所述日志缓存中的日志信息;
根据所述敏感信息屏蔽类型和日志输出格式确定日志输出形式;
根据所述日志输出形式输出所述日志信息。
进一步地,所述以异步线程的方式获取日志缓存中的日志信息,包括:
监控当前计算机资源利用率;
若当前计算机资源利用率大于第一预设阈值,以异步线程的方式获取日志缓存中所述业务类型标识中核心业务对应的日志信息;
若当前计算机资源利用率小于等于第一预设阈值,以异步线程的方式获取日志缓存中所述业务类型标识中全部业务对应的日志信息。
本发明实施例根据第二方面提供了一种日志输出装置,包括:
日志信息生成模块,用于接收日志输出指令,响应于所述日志输出指令生成待处理日志信息;
屏蔽处理模块,用于以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;
日志输出模块,用于以异步线程的方式输出所述日志信息。
本发明实施例根据第三方面提供了一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现上述的日志输出方法。
本发明实施例根据第四方面提供了一种计算机设备,所述计算机设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现上述的日志输出方法。
在本发明实施例中通过接收日志输出指令,在接收到所述日志输出指令后生成待处理日志信息,之后以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;以异步线程的方式输出所述日志信息,能够实现有效屏蔽日志中的敏感信息,并且保持日志输出的效率。具体地,本发明实施例将屏蔽日志信息中敏感信息的任务以及输出日志信息的任务放入到异步线程中进行处理,从而不影响日志生成业务主流程,不影响***性能。
本发明附加的方面和优点将在下面的描述中部分给出,这些将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明一个实施例的日志输出方法流程示意图;
图2为本发明一个实施例的日志输出装置的结构示意图;
图3为本发明一种实施例的计算机设备的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
以下结合附图对本发明的具体实施方式进行详细介绍。
如图1所示,本发明实施例提供了一种日志输出方法,应用于日志输出***。该方法包括以下步骤:
S110:接收日志输出指令,响应于所述日志输出指令生成待处理日志信息。
在一种优选实施方式中,所述日志输出指令中包括业务类型标识。日志输出***会根据所述业务类型标识生成对应的日志信息,能够实现控制日志信息的输出类型,满足不同应用场景的实际要求。
下面以log4j作为例子进行说明,其中log4j是一个关于日志打印的开源项目。
假设log4j使用四个级别,业务类型标识分别是ERROR、WARN、INFO、DEBUG,其中ERROR表明有严重错误,主要是程序的错误;WARN为一般警告,比如session丢失;INFO为一般要显示的信息,比如登录登出;DEBUG为程序的调试信息。如果日志输出指令中包括的业务类型标识是ERROR、WARN,则log4j只生成ERROR以及WARN类型的日志信息。
步骤S110中,所述响应于所述日志输出指令生成待处理日志信息,包括以下步骤:
S111:确定与所述业务类型标识对应的日志输出格式;
在一种实施方式中,本发明实施例在log4j中引入预先定义的jar包和配置文件,其中,jar包依赖于log4j包,jar包中包括预先定义好的API方法,而配置文件能够配置用于屏蔽敏感信息的屏蔽规则。通过使用引入的jar包文件,使用jar包中的API方法,及指定名字的配置文件及配置文件里的配置项,能够实现对日志信息进行敏感信息屏蔽。
log4j原本也有自己的日志输出格式,然而log4j的日志输出格式是基于对日志输出的格式作出规范输出,而不是基于屏蔽敏感信息的规范要求。在本发明实施例中通过配置文件对原先log4j的日志输出规范进行修改,修改原先log4j的日志输出格式有利于配置屏蔽规则,能够更方便地匹配出日志信息中的敏感信息。
比如,要从日志信息中屏蔽用户密码这类敏感信息,假如预设的屏蔽规则是正则表达式,那么可以预先规定在输出日志信息时,日志信息中用户密码的格式要满足以下格式:password:iuyi234weYIU6sd8或者password=iuyi234weYIU6sd8。那么正则表达式可以这么写就可以:^password(:|=)*$。
优选地,可以将不同子公司、不同部门的日志信息的日志输出格式进行统一,能够提高屏蔽规则的可移植性,即为A子公司的日志配置的屏蔽规则能够用来屏蔽B子公司的日志中敏感信息。
S112:根据所述日志输出格式生成待处理日志信息。
S120:以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;
在一种优选实施方式中,所述日志输出指令中包括预设保密级别信息。
考虑到实际应用中,日志信息的使用场景可能有多种,不同使用场景对于敏感信息的屏蔽程度有不同要求,即保密级别有所不同,比如在对日志输出***进行调试时,对输出的日志信息中敏感信息的屏蔽程度较低,而当日志信息需要对外提供时,则需要对输出的日志信息中敏感信息进行屏蔽以免造成敏感信息的泄露。
此外对日志信息进行屏蔽本身需要占用一定的计算机资源,如果能够区分日志信息的使用场景,不同使用场景对应于不同的保密级别,根据保密级别针对性地对日志信息敏感信息都进行屏蔽,这会使得屏蔽日志信息中敏感信息时占用的计算机资源更少。因此通过区分日志信息的使用场景,合理地调用计算机资源能够提高日志输出效率。
S120:所述以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息,之前还包括以下步骤:
S210:根据所述预设保密级别信息确定对应的敏感信息屏蔽类型;
预先配置好各个保密级别对应的敏感信息屏蔽类型,日志输出***在接收到预设保密级别信息后就能确定对应的敏感信息屏蔽类型。
S220:根据所述敏感信息屏蔽类型和日志输出格式,确定对应的预设屏蔽规则。
其中,所述敏感信息屏蔽类型用于确定日志信息中需要屏蔽什么内容,而所述日志输出格式决定如何屏蔽,比如,不同日志输出格式,可采用不同屏蔽方式进行屏蔽,如将敏感信息全部或部分替换成xxx标识,或###标识,或黑影标识。
更具体地,步骤S210:所述根据所述预设保密级别信息确定对应的敏感信息屏蔽类型,包括:
S211:若所述预设保密级别信息为第一保密级别,确定对应的敏感信息屏蔽类型为第一类型,第一类型屏蔽手机号码、证件号码、银行***码以及用户密码;
S212:若所述预设保密级别信息为第二保密级别,确定对应的敏感信息屏蔽类型为第二类型,第二类型屏蔽证件号码、银行***码以及用户密码;
S213:若所述预设保密级别信息为第三保密级别,确定对应的敏感信息屏蔽类型为第三类型,第三类型屏蔽用户密码。
具体地,步骤S120:所述以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息,包括以下步骤:
S121:以异步线程的方式将所述预设屏蔽规则与所述待处理日志信息进行匹配以确定敏感信息;
S122:按照与所述预设屏蔽规则对应的处理方式对所述敏感信息进行屏蔽处理,生成日志信息;
S123:将所述日志信息保存到日志缓存中。
具体地,在一种实施方式中,预设屏蔽规则是预先配置的正则表达式,正则表达式规定了能够从日志信息中匹配出的敏感信息类型,以及相应的对匹配出的敏感信息的处理方式。利用正则表达式能够匹配出日志信息中包含的多种敏感信息,如用户的手机号码、身份证号码、银行***码、用户密码等敏感信息,而匹配出敏感信息后,对于敏感信息的处理方式可根据敏感信息的类型进行针对性的配置。
例如,对于手机号码这类敏感信息,可选择将手机号码的所有内容进行屏蔽;而只屏蔽部分内容就能使人难以获得原先的全部内容,所以也可选择只将手机号码的部分内容进行屏蔽,如屏蔽手机号码的4-7位,可使用*号、#号等符号替换原手机号码的数字来实现对手机号码的屏蔽。
以下是两个正则表达式示例:
1.log.filter.list_0=(\\D|^)1(3|4|5|6|7|8|9)\\d{9}(\\D|$):4-7:****;
1号正则表达式能够从日志信息中匹配出手机号码。具体地,将以非数字开头或者以1开始的第二位数字是3到9中任意一个数字及后9位是数字,并以非数字结尾或者直接结尾了的数字串认为是手机号码;在匹配到手机号码后,截取手机号码中的第4位到第7位上的数字,用*号替换原来的数字。比如,匹配到手机号码13312345678,处理后的手机号码是133****5678。
2.log.filter.list_1=((^|\\D)[1-9]\\d{5}(18|19|([23]\\d))\\d{2}((0[1-9])|(10|11|12))(([0-2][1-9])|10|20|30|31)\\d{3}[0-9Xx](\\D|$))|((^|\\D)[1-9]\\d{5}\\d{2}((0[1-9])|(10|11|12))(([0-2][1-9])|10|20|30|31)\\d{2}($|\\D)):2-15:***************。
2号正则表达式能够从日志信息中识别出身份证号码,在匹配到身份证号码后,将身份证号码的第2位到第15位数字用*号代替。
当需要屏蔽日志信息中多种类型的敏感信息时,可以配置一个包含多个正则表达式的列表,通过这个正则表达式列表能够从日志信息中匹配出多种敏感信息,并对各个类型的敏感信息做出相应的处理。
如果配置了多个正则表达式,在匹配时,将列表中的正则表达式按排列顺序逐个与日志信息进行匹配,当有正则表达式从日志信息中匹配到敏感信息时,按照当前匹配时使用的正则表达式中的处理方式对匹配到的敏感信息进行处理,然后再将处理过后的日志信息与列表的下一个正则表达式进行匹配,直到列表中最后一个正则表达式与日志信息完成匹配,才将最终的日志信息输出到日志缓存中。
优选地,为了降低屏蔽日志信息中敏感信息时的资源消耗,提高响应速度,创建线程池。具体可以使用java concurrent包里的ExecutorService创建线程池,把日志信息与正则表达式进行敏感信息匹配与将处理后的日志内容输出到日志缓存中,包装成一个线程任务放入到线程池中执行,将输出日志缓存中的日志包装秤另一线程任务放到线程池中执行,屏蔽日志信息中敏感信息的任务与输出日志信息的任务异步进行,从而不阻塞生成日志信息业务线程,既能实现对日志信息中的敏感信息进行屏蔽,又不影响日志输出***性能。更具体地,可从配置文件中配置开启异步线程输出日志的线程数,初始化线程数及最大线程处理数。
S130:以异步线程的方式输出所述日志信息。
具体地,步骤S130:所述以异步线程的方式输出所述日志信息,包括:
S131:以异步线程的方式获取所述日志缓存中的日志信息;
S132:根据所述敏感信息屏蔽类型和日志输出格式确定日志输出形式;
具体地,敏感信息屏蔽类型不同实质上是保密级别不同,通过不同的日志输出形式能够体现出日志的不同保密级别。比如,一文档字体的显示颜色来区别不同的保密级别,当所述敏感信息屏蔽类型为第一等级时,显示文档字体为红色;当所述敏感信息屏蔽类型为第二等级时,显示文档字体为黄色等。
S133:根据所述日志输出形式输出所述日志信息。
考虑到实际应用中存在计算机资源被过多占用而影响到日志输出***性能的情况,如需要输出的日志信息数量很多等。为了当上述情况发生时,能够保证日志信息的正常输出,本发明技术方案还包括优化方案。
在一种优选实施方式中,步骤S131:所述以异步线程的方式获取日志缓存中的日志信息,包括:
S1311:监控当前计算机资源利用率;
S1312:若当前计算机资源利用率大于第一预设阈值,以异步线程的方式获取日志缓存中所述业务类型标识中核心业务对应的日志信息;
S1313:若当前计算机资源利用率小于等于第一预设阈值,以异步线程的方式获取日志缓存中所述业务类型标识中全部业务对应的日志信息。
其中,所述计算机资源利用率包括计算机CPU、内存等计算机硬件的利用率。所述预设阈值可由管理人员预先配置,如90%。如果当前计算机资源利用率大于第一预设阈值90%,为了保证日志信息的正常输出,则只获取日志缓存中的核心业务对应的日志信息,如日志缓存中有ERROR和WARN、INFO以及DEBUG的日志信息,则只获取ERROR和WARN的日志信息;反之,当前计算机资源利用率小于等于第一预设阈值90%,则在日志缓存中获取全部业务对应的日志信息。
具体地,所述以异步线程的方式获取日志缓存中所述业务类型标识中核心业务对应的日志信息之后,根据所述日志输出形式输出所述日志信息之前,还包括:
S134:根据核心业务相对全部业务的格式内容差异,调整所述所述日志输出形式。
为了更好地理解本发明技术方案,本发明还提供了一种日志输出装置,如图2所示,包括以下模块:
日志信息生成模块110,用于接收日志输出指令,响应于所述日志输出指令生成待处理日志信息。
具体地,所述日志输出指令中包括业务类型标识。
所述日志信息生成模块110,包括以下子模块:
输出格式确定子模块111,用于确定与所述业务类型标识对应的日志输出格式;
待处理输出子模块日志112,用于根据所述日志输出格式生成待处理日志信息。
屏蔽处理模块120,用于以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;
具体地,所述日志输出指令中包括预设保密级别信息;
本发明实施例中的日志输出装置还包括以下模块:
屏蔽类型确定模块210,用于根据所述预设保密级别信息确定对应的敏感信息屏蔽类型;
屏蔽规则确定模块220,用于根据所述敏感信息屏蔽类型和日志输出格式,确定对应的预设屏蔽规则。
更具体地,屏蔽类型确定模块210,包括:
第一屏蔽类型确定子模块211,用于当所述预设保密级别信息为第一保密级别时,确定对应的敏感信息屏蔽类型为第一类型,第一类型屏蔽手机号码、证件号码、银行***码以及用户密码;
第二屏蔽类型确定子模块212,用于当所述预设保密级别信息为第二保密级别,确定对应的敏感信息屏蔽类型为第二类型,第二类型屏蔽证件号码、银行***码以及用户密码;
第三屏蔽类型确定子模块213,用于当所述预设保密级别信息为第三保密级别,确定对应的敏感信息屏蔽类型为第三类型,第三类型屏蔽用户密码。
具体地,屏蔽处理模块120,包括以下子模块:
敏感信息确定子模块121,用于以异步线程的方式将所述预设屏蔽规则与所述待处理日志信息进行匹配以确定敏感信息;
日志信息生成子模块122,用于按照与所述预设屏蔽规则对应的处理方式对所述敏感信息进行屏蔽处理,生成日志信息;
日志信息保存子模块123,用于将所述日志信息保存到日志缓存中。
日志输出模块130,用于以异步线程的方式输出所述日志信息。
具体地,日志输出模块130,包括:
日志信息获取子模块131,用于以异步线程的方式获取所述日志缓存中的日志信息;
输出形式确定子模块132,用于根据所述敏感信息屏蔽类型和日志输出格式确定日志输出形式;
日志信息子模块133,用于根据所述日志输出形式输出所述日志信息。
在一种优选实施方式中,日志信息获取子模块131,包括:
监控单元1311,用于监控当前计算机资源利用率;
第一获取单元1312,用于在当前计算机资源利用率大于第一预设阈值时,以异步线程的方式获取日志缓存中所述业务类型标识中核心业务对应的日志信息;
第二获取单元1313,用于在当前计算机资源利用率小于等于第一预设阈值时,以异步线程的方式获取日志缓存中所述业务类型标识中全部业务对应的日志信息。
具体地,所述日志输出模块130,还包括:
输出形式调整子模块134,用于根据核心业务相对全部业务的格式内容差异,调整所述所述日志输出形式。
需要说明的是,本发明实施例提供的日志输出装置能够实现上述日志输出方法实施例所实现的功能,功能的具体实现参照上述日志输出方法中的描述,在此不再赘述。
本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述日志输出方法。其中,所述存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、CD-ROM、和磁光盘)、ROM(Read-Only Memory,只读存储器)、RAM(Random AcceSS Memory,随即存储器)、EPROM(EraSable Programmable Read-OnlyMemory,可擦写可编程只读存储器)、EEPROM(Electrically EraSable ProgrammableRead-Only Memory,电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是,存储介质包括由设备(例如,计算机)以能够读的形式存储或传输信息的任何介质。可以是只读存储器,磁盘或光盘等。
本发明实施例还提供一种计算机设备,所述计算机设备包括:
一个或多个处理器510;
存储装置520,用于存储一个或多个程序500,
当所述一个或多个程序500被所述一个或多个处理器510执行,使得所述一个或多个处理器510实现上述日志输出方法。
如图3所示为本发明计算机设备的结构示意图,包括处理器510、存储装置520、输入单元530以及显示单元540等器件。本领域技术人员可以理解,图3示出的结构器件并不构成对所有计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件。存储装置520可用于存储应用程序500以及各功能模块,处理器510运行存储在存储装置520的应用程序500,从而执行设备的各种功能应用以及数据处理。存储装置520可以是内存储器或外存储器,或者包括内存储器和外存储器两者。内存储器可以包括只读存储器、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦写可编程ROM(EEPROM)、快闪存储器、或者随机存储器。外存储器可以包括硬盘、软盘、ZIP盘、U盘、磁带等。本发明所公开的存储装置包括但不限于这些类型的存储装置。本发明所公开的存储装置520只作为例子而非作为限定。
输入单元530用于接收信号的输入,以及接收用户输入的选择语音文件等相关请求。输入单元530可包括触控面板以及其它输入设备。触控面板可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作),并根据预先设定的程序驱动相应的连接装置;其它输入设备可以包括但不限于物理键盘、功能键(比如播放控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。显示单元540可用于显示用户输入的信息或提供给用户的信息以及计算机设备的各种菜单。显示单元540可采用液晶显示器、有机发光二极管等形式。处理器510是计算机设备的控制中心,利用各种接口和线路连接整个电脑的各个部分,通过运行或执行存储在存储装置520内的软件程序和/或模块,以及调用存储在存储装置内的数据,执行各种功能和处理数据。
在一实施方式中,计算机设备包括一个或多个处理器510,以及一个或多个存储装置520,一个或多个应用程序500,其中所述一个或多个应用程序500被存储在存储装置520中并被配置为由所述一个或多个处理器510执行,所述一个或多个应用程序500配置用于执行以上实施例所述的日志输出方法。
应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
应该理解的是,在本发明各实施例中的各功能单元可集成在一个处理模块中,也可以各个单元单独物理存在,也可以两个或两个以上单元集成于一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种日志输出方法,其特征在于,包括:
接收日志输出指令,响应于所述日志输出指令生成待处理日志信息;
以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;
以异步线程的方式输出所述日志信息。
2.如权利要求1所述的日志输出方法,其特征在于,所述日志输出指令中包括业务类型标识;
响应于所述日志输出指令生成待处理日志信息,包括:
确定与所述业务类型标识对应的日志输出格式;
根据所述日志输出格式生成待处理日志信息。
3.如权利要求2所述的日志输出方法,其特征在于,所述日志输出指令中包括预设保密级别信息;
所述以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息,之前包括:
根据所述预设保密级别信息确定对应的敏感信息屏蔽类型;
根据所述敏感信息屏蔽类型和日志输出格式,确定对应的预设屏蔽规则。
4.如权利要求3所述的日志输出方法,其特征在于,所述根据所述预设保密级别信息确定对应的敏感信息屏蔽类型,包括:
若所述预设保密级别信息为第一保密级别,确定对应的敏感信息屏蔽类型为第一类型,第一类型屏蔽手机号码、证件号码、银行***码以及用户密码;
若所述预设保密级别信息为第二保密级别,确定对应的敏感信息屏蔽类型为第二类型,第二类型屏蔽证件号码、银行***码以及用户密码;
若所述预设保密级别信息为第三保密级别,确定对应的敏感信息屏蔽类型为第三类型,第三类型屏蔽用户密码。
5.如权利要求2所述的日志输出方法,其特征在于,所述以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息,包括:
以异步线程的方式将所述预设屏蔽规则与所述待处理日志信息进行匹配以确定敏感信息;
按照与所述预设屏蔽规则对应的处理方式对所述敏感信息进行屏蔽处理,生成日志信息;
将所述日志信息保存到日志缓存中。
6.如权利要求5所述的日志输出方法,其特征在于,所述以异步线程的方式输出所述日志信息,包括:
以异步线程的方式获取所述日志缓存中的日志信息;
根据所述敏感信息屏蔽类型和日志输出格式确定日志输出形式;
根据所述日志输出形式输出所述日志信息。
7.如权利要求6所述的日志输出方法,其特征在于,所述以异步线程的方式获取日志缓存中的日志信息,包括:
监控当前计算机资源利用率;
若当前计算机资源利用率大于第一预设阈值,以异步线程的方式获取日志缓存中所述业务类型标识中核心业务对应的日志信息;
若当前计算机资源利用率小于等于第一预设阈值,以异步线程的方式获取日志缓存中所述业务类型标识中全部业务对应的日志信息。
8.一种日志输出装置,其特征在于,包括:
日志信息生成模块,用于接收日志输出指令,响应于所述日志输出指令生成待处理日志信息;
屏蔽处理模块,用于以异步线程的方式根据预设屏蔽规则对所述待处理日志信息进行屏蔽处理,生成日志信息;
日志输出模块,用于以异步线程的方式输出所述日志信息。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7任一项所述的日志输出方法。
10.一种计算机设备,其特征在于,所述计算机设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7任一项所述的日志输出方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811231450.6A CN109614379A (zh) | 2018-10-22 | 2018-10-22 | 日志输出方法、装置、计算机存储介质和计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811231450.6A CN109614379A (zh) | 2018-10-22 | 2018-10-22 | 日志输出方法、装置、计算机存储介质和计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109614379A true CN109614379A (zh) | 2019-04-12 |
Family
ID=66002949
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811231450.6A Pending CN109614379A (zh) | 2018-10-22 | 2018-10-22 | 日志输出方法、装置、计算机存储介质和计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109614379A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110175465A (zh) * | 2019-04-15 | 2019-08-27 | 深圳壹账通智能科技有限公司 | 日志脱敏方法、装置、计算机设备和计算机可读存储介质 |
CN110392100A (zh) * | 2019-07-12 | 2019-10-29 | 辽宁途隆科技有限公司 | 高并发事件的处理方法及装置、存储介质、计算机设备 |
CN110780857A (zh) * | 2019-10-23 | 2020-02-11 | 杭州涂鸦信息技术有限公司 | 一种统一日志组件 |
CN113434473A (zh) * | 2021-06-28 | 2021-09-24 | 上海浦东发展银行股份有限公司 | 一种分布式日志的处理方法、装置、介质及电子设备 |
CN113590182A (zh) * | 2021-08-11 | 2021-11-02 | 广州九尾信息科技有限公司 | 一种基于Git的版本风险管理把控方法、***及存储介质 |
CN113904865A (zh) * | 2021-10-28 | 2022-01-07 | 中国平安财产保险股份有限公司 | 一种基于非对称算法的日志传输方法及装置 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0290111A2 (en) * | 1981-05-22 | 1988-11-09 | Data General Corporation | Digital data processing system |
US5889957A (en) * | 1995-06-07 | 1999-03-30 | Tandem Computers Incorporated | Method and apparatus for context sensitive pathsend |
CN101087210A (zh) * | 2007-05-22 | 2007-12-12 | 网御神州科技(北京)有限公司 | 高性能的Syslog日志处理和存储方法 |
CN106033461A (zh) * | 2015-03-19 | 2016-10-19 | 阿里巴巴集团控股有限公司 | 敏感信息的查询方法和装置 |
CN106295390A (zh) * | 2015-06-08 | 2017-01-04 | 阿里巴巴集团控股有限公司 | 一种信息处理的方法及装置 |
CN106657408A (zh) * | 2017-02-24 | 2017-05-10 | 深圳市中博睿存信息技术有限公司 | 一种跨平台日志收集处理框架 |
CN106649071A (zh) * | 2016-12-30 | 2017-05-10 | 广州华多网络科技有限公司 | 进程内部日志上报的方法和装置 |
CN106815126A (zh) * | 2015-11-30 | 2017-06-09 | 南京壹进制信息技术股份有限公司 | 一种通用文件***日志记录方法及装置 |
CN107145799A (zh) * | 2017-05-04 | 2017-09-08 | 山东浪潮云服务信息科技有限公司 | 一种数据脱敏方法及装置 |
US20170308712A1 (en) * | 2016-04-22 | 2017-10-26 | International Business Machines Corporation | Automatic Audit Logging of Events in Software Applications Performing Regulatory Workloads |
CN107506660A (zh) * | 2017-08-09 | 2017-12-22 | 浪潮金融信息技术有限公司 | 一种应用于金融自助设备的日志敏感信息处理方法及*** |
CN107688586A (zh) * | 2016-12-28 | 2018-02-13 | 平安科技(深圳)有限公司 | 客户数据屏蔽处理方法和装置 |
CN107729172A (zh) * | 2017-10-31 | 2018-02-23 | 北京酷我科技有限公司 | 一种生成分级调试日志的方法 |
CN107871086A (zh) * | 2017-10-13 | 2018-04-03 | 平安科技(深圳)有限公司 | 敏感信息屏蔽方法、应用服务器及计算机可读存储介质 |
CN107895122A (zh) * | 2017-11-08 | 2018-04-10 | 山东大学 | 一种专用敏感信息主动防御方法、装置及*** |
-
2018
- 2018-10-22 CN CN201811231450.6A patent/CN109614379A/zh active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0290111A2 (en) * | 1981-05-22 | 1988-11-09 | Data General Corporation | Digital data processing system |
US5889957A (en) * | 1995-06-07 | 1999-03-30 | Tandem Computers Incorporated | Method and apparatus for context sensitive pathsend |
CN101087210A (zh) * | 2007-05-22 | 2007-12-12 | 网御神州科技(北京)有限公司 | 高性能的Syslog日志处理和存储方法 |
CN106033461A (zh) * | 2015-03-19 | 2016-10-19 | 阿里巴巴集团控股有限公司 | 敏感信息的查询方法和装置 |
CN106295390A (zh) * | 2015-06-08 | 2017-01-04 | 阿里巴巴集团控股有限公司 | 一种信息处理的方法及装置 |
CN106815126A (zh) * | 2015-11-30 | 2017-06-09 | 南京壹进制信息技术股份有限公司 | 一种通用文件***日志记录方法及装置 |
US20170308712A1 (en) * | 2016-04-22 | 2017-10-26 | International Business Machines Corporation | Automatic Audit Logging of Events in Software Applications Performing Regulatory Workloads |
CN107688586A (zh) * | 2016-12-28 | 2018-02-13 | 平安科技(深圳)有限公司 | 客户数据屏蔽处理方法和装置 |
CN106649071A (zh) * | 2016-12-30 | 2017-05-10 | 广州华多网络科技有限公司 | 进程内部日志上报的方法和装置 |
CN106657408A (zh) * | 2017-02-24 | 2017-05-10 | 深圳市中博睿存信息技术有限公司 | 一种跨平台日志收集处理框架 |
CN107145799A (zh) * | 2017-05-04 | 2017-09-08 | 山东浪潮云服务信息科技有限公司 | 一种数据脱敏方法及装置 |
CN107506660A (zh) * | 2017-08-09 | 2017-12-22 | 浪潮金融信息技术有限公司 | 一种应用于金融自助设备的日志敏感信息处理方法及*** |
CN107871086A (zh) * | 2017-10-13 | 2018-04-03 | 平安科技(深圳)有限公司 | 敏感信息屏蔽方法、应用服务器及计算机可读存储介质 |
CN107729172A (zh) * | 2017-10-31 | 2018-02-23 | 北京酷我科技有限公司 | 一种生成分级调试日志的方法 |
CN107895122A (zh) * | 2017-11-08 | 2018-04-10 | 山东大学 | 一种专用敏感信息主动防御方法、装置及*** |
Non-Patent Citations (1)
Title |
---|
杨红玉等: "重大心脏疾病专病数据库脱敏***的设计", 《中国数字医学》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110175465A (zh) * | 2019-04-15 | 2019-08-27 | 深圳壹账通智能科技有限公司 | 日志脱敏方法、装置、计算机设备和计算机可读存储介质 |
CN110392100A (zh) * | 2019-07-12 | 2019-10-29 | 辽宁途隆科技有限公司 | 高并发事件的处理方法及装置、存储介质、计算机设备 |
CN110392100B (zh) * | 2019-07-12 | 2022-03-11 | 辽宁途隆科技有限公司 | 高并发事件的处理方法及装置、存储介质、计算机设备 |
CN110780857A (zh) * | 2019-10-23 | 2020-02-11 | 杭州涂鸦信息技术有限公司 | 一种统一日志组件 |
CN110780857B (zh) * | 2019-10-23 | 2024-01-30 | 杭州涂鸦信息技术有限公司 | 一种统一日志组件 |
CN113434473A (zh) * | 2021-06-28 | 2021-09-24 | 上海浦东发展银行股份有限公司 | 一种分布式日志的处理方法、装置、介质及电子设备 |
CN113590182A (zh) * | 2021-08-11 | 2021-11-02 | 广州九尾信息科技有限公司 | 一种基于Git的版本风险管理把控方法、***及存储介质 |
CN113904865A (zh) * | 2021-10-28 | 2022-01-07 | 中国平安财产保险股份有限公司 | 一种基于非对称算法的日志传输方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109614379A (zh) | 日志输出方法、装置、计算机存储介质和计算机设备 | |
US20210133324A1 (en) | Policy-based detection of anomalous control and data flow paths in an application program | |
US11947933B2 (en) | Contextual assistance and interactive documentation | |
CN1849585B (zh) | 使用多个虚拟机监控器处理特许事件的方法、***和产品 | |
Yu et al. | Deescvhunter: A deep learning-based framework for smart contract vulnerability detection | |
CN102279737A (zh) | 用于分析过程设计的***和方法 | |
US20170063606A1 (en) | Event Notifications for Applications | |
TW200541260A (en) | System security approach methods using state tables, related computer-readable medium, and related systems | |
US11704185B2 (en) | Machine learning-based techniques for providing focus to problematic compute resources represented via a dependency graph | |
US20230199025A1 (en) | Account classification using a trained model and sign-in data | |
CN106649634A (zh) | 一种解析json数据的方法及装置 | |
Chang et al. | An android behavior-based malware detection method using machine learning | |
CN117321584A (zh) | 高数据i/o比模块的处理管理 | |
CN113221182A (zh) | 银行日志脱敏方法及装置 | |
CN111881453A (zh) | 一种容器逃逸检测方法、装置以及电子设备 | |
Gong et al. | Overlay-based android malware detection at market scales: systematically adapting to the new technological landscape | |
CN106548049A (zh) | 一种代码处理方法和装置 | |
Le et al. | {AutoFR}: Automated Filter Rule Generation for Adblocking | |
US20230217273A1 (en) | Fault triage and management with restricted third-party access to a tenant network | |
US8751871B2 (en) | Method for modifying a user interface | |
US20230376610A1 (en) | Non-Intrusive Method of Detecting Security Flaws of a Computer Program | |
CN110442819A (zh) | 数据处理方法、装置、存储介质及终端 | |
CN109977633A (zh) | 一种程序保护方法及相关装置 | |
Liao et al. | Resource-based event reconstruction of digital crime scenes | |
CN110389835A (zh) | 一种游戏性能监控方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190412 |
|
RJ01 | Rejection of invention patent application after publication |