CN112164426A - 基于TextCNN的药物小分子靶点活性预测方法和装置 - Google Patents

基于TextCNN的药物小分子靶点活性预测方法和装置 Download PDF

Info

Publication number
CN112164426A
CN112164426A CN202010998886.9A CN202010998886A CN112164426A CN 112164426 A CN112164426 A CN 112164426A CN 202010998886 A CN202010998886 A CN 202010998886A CN 112164426 A CN112164426 A CN 112164426A
Authority
CN
China
Prior art keywords
drug
textcnn
layer
model
training
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010998886.9A
Other languages
English (en)
Inventor
宋怡然
马元巍
李泽朋
顾徐波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changzhou Weiyizhi Technology Co Ltd
Original Assignee
Changzhou Weiyizhi Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changzhou Weiyizhi Technology Co Ltd filed Critical Changzhou Weiyizhi Technology Co Ltd
Priority to CN202010998886.9A priority Critical patent/CN112164426A/zh
Publication of CN112164426A publication Critical patent/CN112164426A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16CCOMPUTATIONAL CHEMISTRY; CHEMOINFORMATICS; COMPUTATIONAL MATERIALS SCIENCE
    • G16C20/00Chemoinformatics, i.e. ICT specially adapted for the handling of physicochemical or structural data of chemical particles, elements, compounds or mixtures
    • G16C20/30Prediction of properties of chemical compounds, compositions or mixtures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16BBIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
    • G16B15/00ICT specially adapted for analysing two-dimensional or three-dimensional molecular structures, e.g. structural or functional relations or structure alignment
    • G16B15/30Drug targeting using structural data; Docking or binding prediction
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16BBIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
    • G16B40/00ICT specially adapted for biostatistics; ICT specially adapted for bioinformatics-related machine learning or data mining, e.g. knowledge discovery or pattern finding
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16CCOMPUTATIONAL CHEMISTRY; CHEMOINFORMATICS; COMPUTATIONAL MATERIALS SCIENCE
    • G16C20/00Chemoinformatics, i.e. ICT specially adapted for the handling of physicochemical or structural data of chemical particles, elements, compounds or mixtures
    • G16C20/70Machine learning, data mining or chemometrics

Landscapes

  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Biophysics (AREA)
  • Chemical & Material Sciences (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • General Physics & Mathematics (AREA)
  • Biotechnology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Biomedical Technology (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Molecular Biology (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Biology (AREA)
  • Databases & Information Systems (AREA)
  • Public Health (AREA)
  • Epidemiology (AREA)
  • Bioethics (AREA)
  • Medicinal Chemistry (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Measuring Or Testing Involving Enzymes Or Micro-Organisms (AREA)

Abstract

本发明提供一种基于TextCNN的药物小分子靶点活性预测方法和装置,方法包括:对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集;在训练阶段,导入训练集中的药物文本数据,在嵌入层对药物文本数据集中的已编码的自然语言进行向量化;在卷积层对嵌入层进行卷积操作,以提取特征;在最大池化层对卷积层提取的特征进行最大池化;在全连接层对最大池化层后得到的特征向量进行全连接操作,得到分类结果;在测试阶段,采用测试集中药物文本数据进行测试,根据测试结果调整TextCNN模型,得到最终的TextCNN模型;根据最终的TextCNN模型对药物小分子靶点活性预测,极大提高了药物研发的效率。

Description

基于TextCNN的药物小分子靶点活性预测方法和装置
技术领域
本发明涉及分子靶点技术领域,具体涉及一种基于TextCNN的药物小分子靶点活性预测方法、一种基于TextCNN的药物小分子靶点活性预测装置、一种计算机设备和一种非临时性计算机可读存储介质。
背景技术
新药研发周期十分漫长,包括靶点选择与验证、从苗头化合物(Hit)的发现到先导化合物(Lead)最后到候选药物(Candidate)的发现与优化,层层筛选,成本高昂。我们希望通过计算机进行虚拟筛选,基于现有药物相关的生物化学数据库,充分挖掘药物分子背后的规律,加速发现药物研发的速度,如对新靶点蛋白苗头化合物的发现和评估。
传统的药物特征预测的方法通过使用分子描述符(包括1D/2D/3D/高维描述符,比如分子量等物理化学性质)作为输入特征,进行定量构效关系或构效关系(QSAR/QSPR)建模,目前已经开发了超过5000个分子描述符。然而,这种大量使用分子描述符的建模方法的算法模型预测表现非常取决于是否能选择有效的分子描述符特征。在进行特征工程方面费时费力的同时,算法模型的泛化和通用能力也极大取决于所训练的模型质量。并且,存在以下问题:(1)在数据集数量较少的情况下,训练容易出现过拟合现象,模型的泛化能力不强,特征表示的好与坏决定了机器学***衡问题。
发明内容
本发明为解决上述技术问题,提供了一种基于TextCNN的药物小分子靶点活性预测方法,能够提高药物靶点预测虚拟筛选的准确率,有效进行药物分子筛选和特征预测,模型本身的泛化与通用能力较强,具有极大的实用价值。
本发明采用的技术方案如下:
一种基于TextCNN的药物小分子靶点活性预测方法,包括以下步骤:对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集;在训练阶段,导入训练集中的药物文本数据,在所述TextCNN模型的嵌入层对药物文本数据集中的已编码的自然语言进行向量化;在所述TextCNN模型的卷积层对所述嵌入层进行卷积操作,以提取特征;在所述TextCNN模型的最大池化层对所述卷积层提取的特征进行最大池化;在所述TextCNN模型的全连接层对所述最大池化层后得到的特征向量进行全连接操作,得到分类结果;在测试阶段,采用所述测试集中药物文本数据进行测试,根据测试结果调整所述TextCNN模型得到最终的TextCNN模型;根据所述最终的TextCNN模型对所述药物小分子靶点活性预测。
根据本发明的一个实施例,对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集,包括:获取药物小分子数据中所有药物小分子的smiles字符串;采用独热编码One-hot的形式对药物小分子的smiles字符串进行编码,并将编码后的药物文本数据集分为训练集和测试集。
根据本发明的一个实施例,上述的基于TextCNN的药物小分子靶点活性预测方法,还包括:采用smote方法对所述训练集中的少数类样本进行过采样,得到处理后的训练集;根据所述处理后的训练集对所述TextCNN模型进行训练。
根据本发明的一个实施例,在所述TextCNN模型的嵌入层对药物文本数据集中的已编码的自然语言进行向量化,包括:将所述smiles字符串编码成密集向量,便于训练的嵌入层。
根据本发明的一个实施例,在所述TextCNN模型的卷积层对所述嵌入层进行卷积操作,以提取特征,包括:所述smiles字符串经过嵌入层处理后,得到一个二维矩阵;使用多个卷积核对嵌入层中的二维矩阵进行卷积操作,得到多个一维向量。
根据本发明的一个实施例,在所述TextCNN模型的最大池化层对所述卷积层提取的特征进行最大池化,包括:对所示卷积操作后得到的所述多个一维向量取最大值,并拼接一起,作为所述最大池化层的输出值,以对所述卷积层得到的特征进行提取和降维。
根据本发明的一个实施例,在所述测试阶段,设置迭代次数,使用Adam优化器优化网格参数;在所述训练阶段,通过五折交叉验证的方法进行训练,以减小模型过拟合。
对应上述的方法,本发明还提出了一种基于TextCNN的药物小分子靶点活性预测装置,包括:预处理模块,用于对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集;模型训练模块,用于在训练阶段,导入训练集中的药物文本数据,在嵌入层对药物文本数据集中的已编码的自然语言进行向量化,在卷积层对所述嵌入层进行卷积操作,以提取特征,在最大池化层对所述卷积层提取的特征进行最大池化,在全连接层对所述最大池化层后得到的特征向量进行全连接操作,得到分类结果;模型测试模块,用于采用测试集中药物文本数据进行测试,根据测试结果调整TextCNN模型,得到最终的TextCNN模型;预测模块,用于根据所述最终的TextCNN模型对所述药物小分子靶点活性预测。
对应上述方法,本发明还提出了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现上述的基于TextCNN的药物小分子靶点活性预测方法。
对应上述方法,本发明还提出了一种非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述的基于TextCNN的药物小分子靶点活性预测方法。
本发明的有益效果:
本发明通过one-hot独热编码的方法来处理分子的特征,无需计算额外的分子结构或者物理化学特征和进行特征工程的前提下,极大地缩短了特征提取时间和模型训练成本,并且创新使用了文本分类的TextCNN方法,有利于提高药物靶点预测虚拟筛选的准确率,有效进行药物分子筛选和特征预测,模型本身的泛化与通用能力较强,具有极大的实用价值。
附图说明
图1为本发明实施例的基于TextCNN的药物小分子靶点活性预测方法的流程图;
图2为本发明一个实施例的预测结果示意图;
图3为本发明一个实施例的基于TextCNN的药物小分子靶点活性预测装置的方框示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明实施例的基于TextCNN的药物小分子靶点活性预测方法的流程图。
如图1所示,本发明实施例的基于TextCNN的药物小分子靶点活性预测方法可包括以下步骤:
S1,对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集。
根据本发明的一个实施例,对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集,包括:获取药物小分子数据中所有药物小分子的smiles字符串;采用独热编码One-hot的形式对药物小分子的smiles字符串进行编码,并将编码后的药物文本数据集分为训练集和测试集。
具体而言,获得当前数据集所有药物小分子Smiles字符串的字符,统计字符串长度最大值和字符的类别个数,并采用独热编码One-hot的形式对药物分子smiles结构式进行编码,并且统计字符的位置构建药物分子最终的向量。
进一步地,根据本发明的一个实施例,上述的基于TextCNN的药物小分子靶点活性预测方法,还包括:采用smote方法对训练集中的少数类样本进行过采样,得到处理后的训练集;根据处理后的训练集对TextCNN模型进行训练。
具体而言,在数据集数量较少的情况下,训练容易出现过拟合现象,因此,通过采用smote方法对训练集中的少数样本进行过采样,得到处理后的训练集。具体地,对于训练集,当属于少数类样本时,对于少数类中每一个样本x,以欧氏距离为标准计算它到少数类样本集中所有样本的距离,得到其k近邻;根据样本不平衡比例设置一个采样比例以确定采样倍率N,对于每一个少数类样本x,从其k近邻中随机选择若干个样本,组成集合X;对于每一个随机近邻样本分别与样本x按照构建新的样本x’;将每个新生成的数据以欧式距离为标准计算它到所有样本的距离,得到其k邻近,若其k邻近的多数类不是生成该数据的少数类,则删除该数据;将训练集X中每条样本进行归一化处理;对训练集中单个样本末尾进行补0操作,填充样本特征序列,由此得到处理后的训练集。其中,当不是少数类样本时,直接将训练集X中每条样本进行归一化处理;对训练集中单个样本末尾进行补0操作,填充样本特征序列,得到处理后的训练集。
S2,在训练阶段,导入训练集中的药物文本数据,在TextCNN模型的嵌入层对药物文本数据集中的已编码的自然语言进行向量化。
根据本发明的一个实施例,在TextCNN模型的嵌入层对药物文本数据集中的已编码的自然语言进行向量化,包括:将smiles字符串编码成密集向量,便于训练的嵌入层。
具体而言,将输入的自然语言即simles字符串编码成密集向量。通过对比使用预训练好的词向量,和直接在训练TextCNN的过程中训练出的一套词向量,前者与后者相比表现更优。如果使用预训练好的词向量,又分为通过使用static方法和no-static方法进行训练,前者是指在训练TextCNN过程中不再调节词向量的参数,后者在训练过程中调节词向量的参数,所以,后者的结果比前者要好。更为一般的做法是:不要在每一个批次都调节嵌入层,而是每个100个批次调节一次,这样不仅可以减少训练的时间,还可以微调词向量。
S3,在TextCNN模型的卷积层对嵌入层进行卷积操作,以提取特征。
根据本发明的一个实施例,在TextCNN模型的卷积层对嵌入层进行卷积操作,以提取特征,包括:smiles字符串经过嵌入层处理后,得到一个二维矩阵;使用多个卷积核对嵌入层中的二维矩阵进行卷积操作,得到多个一维向量。
具体而言,输入的语句或者文本,通过嵌入层后,会转变成一个二维矩阵,假设文本的长度为|T|,词向量的大小为|d|,则该二维矩阵的大小为|T|*|d|,接下的卷积工作就是对这一个|T|*|d|的二维矩阵进行的。卷积核的大小一般设定为n*|d|,其中,n是卷积核的长度,|d|是卷积核的宽度,这个宽度和词向量的维度是相同的,也就是卷积只是沿着文本序列进行的,n可以有多种选择,比如2、3、4、5等。对于一个|T|*|d|的文本,如果选择卷积核的大小为n*|d|,则卷积后得到的结果是|T-n+1|*1的一个向量。在TextCNN模型中,需要同时使用多个不同类型的卷积核,同时每种大小的卷积核又可以有多个。我们的模型经过kernel_sizes=(2,3,4)的一维卷积层,每个kernel_size有两个输出channel。
S4,在TextCNN模型的最大池化层对卷积层提取的特征进行最大池化。
根据本发明的一个实施例,在TextCNN模型的最大池化层对卷积层提取的特征进行最大池化,包括:对所示卷积操作后得到的多个一维向量取最大值,并拼接一起,作为最大池化层的输出值,以对卷积层得到的特征进行提取和降维。
具体而言,对卷积后得到的若干个一维向量取最大值,然后拼接在一块,作为本层的输出值。如果卷积核的大小为2,3,4,5,每种大小的卷积核都有128个,那么经过卷积层后会得到4*128个一维的向量再经过最大池化之后,会得到4*128个值,拼接在一块,得到最终的结构—512*1的向量。最大池化层的意义在于对卷积层提取的特征,提取激活程度最大的特征。
S5,在TextCNN模型的全连接层对最大池化层后得到的特征向量进行全连接操作,得到分类结果。
S6,在测试阶段,采用测试集中药物文本数据进行测试,根据测试结果调整TextCNN模型,得到最终的TextCNN模型。需要说明的是,根据调整后的模型表现和学习曲线,确定训练的次数,防止模型出现过拟合。假设设定的训练次数为10次,当模型表现和学习曲线满足要求时,为了防止模型出现过拟合,可提前停止训练。
具体而言,根据测试结果,可使用反向传播来调整权重和偏置,以此来调整TextCNN模型:采用测试集对模型进行测试,测试结果与实际结果存在一个误差,用如下的代价函数来衡量这个误差:
Figure BDA0002693525270000081
其中,w为权重,b为偏置,n为输入数据的个数,a表示输入为x时的实际输出,a为w和b的函数,y为预计输出,是关于x的函数,||||表示向量的模;要使误差变小,就是最小化代价函数,也就是使代价函数的变化量为负,即说明输出的预测值在接近实际值,直到无限接近;代价函数的变化量为权重对代价函数求偏导乘以权重的变化量再加上偏置对代价函数求偏导乘以偏置的变化量,设定权重和偏置的变化量为一个负数乘以其对代价函数的偏导,也就说明其二阶导数为负,即一阶导数在不断减小,即原函数在不断减小,从而达到实际输出接近预计输出的目的;这个负数的绝对值定义为学习率η,每训练设定次数,采用测试集对当前训练的模型进行测试,根据测试结果与实际结果,对代价函数求偏导,并调整权重和偏置为:
Figure BDA0002693525270000082
Figure BDA0002693525270000083
进而调整TextCNN模型。
在本发明的一些实施例中,模型的评价指标包括准确率、精确率、召回率、ROC曲线下的面积、混淆矩阵中的一个或多个。也就是说,根据这些评价指标确定模型调整的次数。
其中,准确率Accuracy是指预测正确的结果占总样本的百分比,本发明实施例所评估的是历史预测数据库中的真实预测数据,也即本发明实施例模型评估中涉及的样本是指历史真实预测数据的集合。准确率Accuracy的公式如下:
Accuracy=(TP+TN)/(TP+TN+FP+FN)
其中,TP(True Positive,真正例)是指被模型预测为正的正样本,FP(FalsePositive,假正例)是指被模型预测为正的负样本,FN(False Negative,假负例)是指被模型预测为负的正样本,TN(True Negative,真负例)是指被模型预测为负的负样本。
精准率Precision又叫查准率,它是针对预测结果而言的,是指在所有被预测为正的样本中实际为正的样本的概率,意思就是在预测为正样本的结果中,有多少把握可以预测正确。精准率Precision的公式如下:
Precision=TP/(TP+FP)
召回率Recall又叫查全率,它是针对原样本而言的,是指在实际为正的样本中被预测为正样本的概率。召回率Recall的公式如下:
Recall=TP/(TP+FN)
ROC(Receiver Operating Characteristic)曲线,又称接受者操作特征曲线。ROC曲线中的主要两个指标是真正率TPR和假正率FPR,其中横坐标为假正率FPR,纵坐标为真正率TPR。
真正率TPR(True Positive Rate),又称灵敏度,公式如下:
TPR=TP/(TP+FN)
假正率FPR(False Positive Rat),又称特异度,公式如下:
FPR=FP/(TN+FP)
ROC曲线具有当正负样本的分布变化的时候,ROC曲线能够保持不变的良好特性,能够很好地消除样本类别不平衡对指标结果产生的影响。
ROC曲线下的面积AUC(Area Under Curve),是处于ROC曲线下方的那部分面积的大小。ROC曲线下方面积越大表明模型性能越好,AUC就是由此产生的评价指标。通常,AUC的值介于0.5到1.0之间,较大的AUC代表了较好的预测表现。如果模型是完美的,那么它的AUC=1,证明所有正例排在了负例的前面,如果模型是个简单的二类随机猜测模型,那么它的AUC=0.5,如果一个模型好于另一个,则它的曲线下方面积相对较大,对应的AUC值也会较大。
混淆矩阵(Confusion Matrix)又被称为错误矩阵,通过它可以直观地观察到算法的效果。它的每一列是样本的预测分类,每一行是样本的真实分类(反过来也可以),它反映了分类结果的混淆程度。
本发明实施例可以以上述任一评价指标来评估历史真实预测表现的优劣,也可以以多个评价指标来评估历史真实预测表现的优劣。
在本发明的优选实施例中,以ROC曲线下的面积AUC来评估历史真实预测表现的优劣,若预测模型对应的AUC最大,则该预测模型的真实预测效果最好。
当以多个评价指标来评估历史真实预测表现的优劣时,每个评价指标可具有相应的权重,以多个评价指标所得结果的加权平均值作为各种预测方式的历史真实预测表现的评估依据,若预测模型对应的加权平均值最大,则该预测模型的真实预测效果最好。优选地,ROC曲线下的面积AUC的权重最高。
S7,根据最终的TextCNN模型对药物小分子靶点活性预测。
根据本发明的一个实施例,在测试阶段,设置迭代次数,使用Adam优化器优化网格参数;在训练阶段,通过五折交叉验证的方法进行训练,以减小模型过拟合。
也就是说,在建立模型之后,通过参数调节优化算法表现,通过全空间搜索的方法优化几个重要参数:学习率,激活函数,维度等,获得更好的模型预测能力和表现。模型中引入了Dropout以及正则化(五折交叉验证)来减小模型过拟合,选用Adam优化器的学习率成指数下降,在一定程度上避免了由于学习率引起的,随着迭代次数增大Loss没有减小的情况,防止模型欠拟合,图2为采用本发明的预测结果示意图。
综上所述,本发明将人工智能深度学习算法与药物研发有效结合,实现了能够通过药物小分子的结构分子式特征有效预测药物分子的性质,如靶点结合性质、活性、毒性等,从而为解决药物虚拟筛选时构建算法耗时耗力和通用性不强的问题提供理论基础与技术支撑,进一步为药物研发提供更多有效的性质预测方案。
对应上述实施例的基于TextCNN的药物小分子靶点活性预测方法,本发明还提出一种基于TextCNN的药物小分子靶点活性预测装置。
图3为本发明一个实施例的基于TextCNN的药物小分子靶点活性预测装置的方框示意图。
如图3所示,本发明实施例的基于TextCNN的药物小分子靶点活性预测装置可包括:预处理模块10、模型训练模块20、模型测试模块30和预测模块40。
其中,预处理模块10用于对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集。模型训练模块20用于在训练阶段,导入训练集中的药物文本数据,在嵌入层对药物文本数据集中的已编码的自然语言进行向量化,在卷积层对嵌入层进行卷积操作,以提取特征,在最大池化层对卷积层提取的特征进行最大池化,在全连接层对最大池化层后得到的特征向量进行全连接操作,得到分类结果。模型测试模块30用于采用测试集中药物文本数据进行测试,根据测试结果调整TextCNN模型,得到最终的TextCNN模型。预测模块40用于根据最终的TextCNN模型对药物小分子靶点活性预测。
根据本发明的一个实施例,预处理模块10对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集,具体用于,获取药物小分子数据中所有药物小分子的smiles字符串;采用独热编码One-hot的形式对药物小分子的smiles字符串进行编码,并将编码后的药物文本数据集分为训练集和测试集。
根据本发明的一个实施例,预处理模块10还用于,采用smote方法对训练集中的少数类样本进行过采样,得到处理后的训练集;模型训练模块20根据处理后的训练集对TextCNN模型进行训练。
根据本发明的一个实施例,模型训练模块20在TextCNN模型的嵌入层对药物文本数据集中的已编码的自然语言进行向量化时,具体用于,将smiles字符串编码成密集向量,便于训练的嵌入层。
根据本发明的一个实施例,模型训练模块20在TextCNN模型的卷积层对嵌入层进行卷积操作,以提取特征时,具体用于,smiles字符串经过嵌入层处理后,得到一个二维矩阵;使用多个卷积核对嵌入层中的二维矩阵进行卷积操作,得到多个一维向量。
根据本发明的一个实施例,模型训练模块20在TextCNN模型的最大池化层对卷积层提取的特征进行最大池化时,具体用于,对所示卷积操作后得到的多个一维向量取最大值,并拼接一起,作为最大池化层的输出值,以对卷积层得到的特征进行提取和降维。
根据本发明的一个实施例,模型测试模块30在测试阶段,设置迭代次数,使用Adam优化器优化网格参数;模型训练模块20在训练阶段,通过五折交叉验证的方法进行训练,以减小模型过拟合。
需要说明的是,本发明实施例的基于TextCNN的药物小分子靶点活性预测装置装置中未披露的细节,请参照本发明实施例的基于TextCNN的药物小分子靶点活性预测方法中所披露的细节,具体这里不再赘述。
综上,本发明将人工智能深度学习算法与药物研发有效结合,实现了能够通过药物小分子的结构分子式特征有效预测药物分子的性质,如靶点结合性质、活性、毒性等,从而为解决药物虚拟筛选时构建算法耗时耗力和通用性不强的问题提供理论基础与技术支撑,进一步为药物研发提供更多有效的性质预测方案。
对应上述实施例,本发明还提出一种计算机设备。
本发明实施例的计算机设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行该计算机程序时,可实现根据本发明上述实施例所述的基于TextCNN的药物小分子靶点活性预测方法。
根据本发明实施例的计算机设备,处理器执行存储在存储器上的计算机程序时,首先对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集,然后进行模型训练和模型测试,最后根据最终测试后的TextCNN模型对药物小分子靶点活性预测,能够提高药物靶点预测虚拟筛选的准确率,有效进行药物分子筛选和特征预测,模型本身的泛化与通用能力较强,具有极大的实用价值。
对应上述实施例,本发明还提出一种非临时性计算机可读存储介质。
本发明实施例的非临时性计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时可实现根据本发明上述实施例所述的基于TextCNN的药物小分子靶点活性预测方法。
根据本发明实施例的非临时性计算机可读存储介质,处理器执行存储在其上的计算机程序时,首先对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集,然后进行模型训练和模型测试,最后根据最终测试后的TextCNN模型对药物小分子靶点活性预测,能够提高药物靶点预测虚拟筛选的准确率,有效进行药物分子筛选和特征预测,模型本身的泛化与通用能力较强,具有极大的实用价值。
根据本发明实施例的计算机程序产品,处理器执行其中的指令时,首先。
在本发明的描述中,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
在本发明中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触,或第一和第二特征通过中间媒介间接接触。而且,第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度小于第二特征。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必针对相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行***、装置或设备(如基于计算机的***、包括处理器的***或其他可以从指令执行***、装置或设备取指令并执行指令的***)使用,或结合这些指令执行***、装置或设备而使用。就本说明书而言,“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行***、装置或设备或结合这些指令执行***、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行***执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种基于TextCNN的药物小分子靶点活性预测方法,其特征在于,包括以下步骤:
对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集;
在训练阶段,导入训练集中的药物文本数据,在所述TextCNN模型的嵌入层对药物文本数据集中的已编码的自然语言进行向量化;
在所述TextCNN模型的卷积层对所述嵌入层进行卷积操作,以提取特征;
在所述TextCNN模型的最大池化层对所述卷积层提取的特征进行最大池化;
在所述TextCNN模型的全连接层对所述最大池化层后得到的特征向量进行全连接操作,得到分类结果;
在测试阶段,采用所述测试集中药物文本数据进行测试,根据测试结果调整所述TextCNN模型,得到最终的TextCNN模型;
根据所述最终的TextCNN模型对所述药物小分子靶点活性预测。
2.根据权利要求1所述的基于TextCNN的药物小分子靶点活性预测方法,其特征在于,对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集,包括:
获取药物小分子数据中所有药物小分子的smiles字符串;
采用独热编码One-hot的形式对药物小分子的smiles字符串进行编码,并将编码后的药物文本数据集分为训练集和测试集。
3.根据权利要求2所述的基于TextCNN的药物小分子靶点活性预测方法,其特征在于,还包括:
采用smote方法对所述训练集中的少数类样本进行过采样,得到处理后的训练集;
根据所述处理后的训练集对所述TextCNN模型进行训练。
4.根据权利要求2所述的基于TextCNN的药物小分子靶点活性预测方法,其特征在于,在所述TextCNN模型的嵌入层对药物文本数据集中的已编码的自然语言进行向量化,包括:
将所述smiles字符串编码成密集向量,便于训练的嵌入层。
5.根据权利要求4所述的基于TextCNN的药物小分子靶点活性预测方法,其特征在于,在所述TextCNN模型的卷积层对所述嵌入层进行卷积操作,以提取特征,包括:
所述smiles字符串经过嵌入层处理后,得到一个二维矩阵;
使用多个卷积核对嵌入层中的二维矩阵进行卷积操作,得到多个一维向量。
6.根据权利要求5所述的基于TextCNN的药物小分子靶点活性预测方法,其特征在于,在所述TextCNN模型的最大池化层对所述卷积层提取的特征进行最大池化,包括:
对所示卷积操作后得到的所述多个一维向量取最大值,并拼接一起,作为所述最大池化层的输出值,以对所述卷积层得到的特征进行提取和降维。
7.根据权利要求1所述的基于TextCNN的药物小分子靶点活性预测方法,其特征在于,在所述测试阶段,设置迭代次数,使用Adam优化器优化网格参数;
在所述训练阶段,通过五折交叉验证的方法进行训练,以减小模型过拟合。
8.一种基于TextCNN的药物小分子靶点活性预测装置,其特征在于,包括:
预处理模块,用于对待训练和测试的药物小分子数据进行预处理,得到自然语言和编码后的药物文本数据集,分为训练集和测试集;
模型训练模块,用于在训练阶段,导入训练集中的药物文本数据,在嵌入层对药物文本数据集中的已编码的自然语言进行向量化,在卷积层对所述嵌入层进行卷积操作,以提取特征,在最大池化层对所述卷积层提取的特征进行最大池化,在全连接层对所述最大池化层后得到的特征向量进行全连接操作,得到分类结果;
模型测试模块,用于采用测试集中药物文本数据进行测试,根据测试结果调整TextCNN模型,得到最终的TextCNN模型;
预测模块,用于根据所述最终的TextCNN模型对所述药物小分子靶点活性预测。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时,实现根据权利要求1-7中任一项所述的基于TextCNN的药物小分子靶点活性预测方法。
10.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现根据权利要求1-7中任一项所述的基于TextCNN的药物小分子靶点活性预测方法。
CN202010998886.9A 2020-09-22 2020-09-22 基于TextCNN的药物小分子靶点活性预测方法和装置 Pending CN112164426A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010998886.9A CN112164426A (zh) 2020-09-22 2020-09-22 基于TextCNN的药物小分子靶点活性预测方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010998886.9A CN112164426A (zh) 2020-09-22 2020-09-22 基于TextCNN的药物小分子靶点活性预测方法和装置

Publications (1)

Publication Number Publication Date
CN112164426A true CN112164426A (zh) 2021-01-01

Family

ID=73863182

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010998886.9A Pending CN112164426A (zh) 2020-09-22 2020-09-22 基于TextCNN的药物小分子靶点活性预测方法和装置

Country Status (1)

Country Link
CN (1) CN112164426A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112786120A (zh) * 2021-01-26 2021-05-11 云南大学 神经网络辅助化学材料合成的方法
CN112820359A (zh) * 2021-02-24 2021-05-18 北京中医药大学东直门医院 一种肝损伤预测方法、装置、设备、介质及程序产品
CN112966111A (zh) * 2021-03-19 2021-06-15 北京星汉博纳医药科技有限公司 一种基于ai的对象化属性文本自动分类方法及***
CN114020910A (zh) * 2021-11-03 2022-02-08 北京中科凡语科技有限公司 基于TextCNN的医疗文本特征提取方法及装置
WO2023029351A1 (zh) * 2021-08-30 2023-03-09 平安科技(深圳)有限公司 基于自监督学习的药物小分子性质预测方法、装置及设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107862173A (zh) * 2017-11-15 2018-03-30 南京邮电大学 一种先导化合物虚拟筛选方法和装置
US20180172667A1 (en) * 2015-06-17 2018-06-21 Uti Limited Partnership Systems and methods for predicting cardiotoxicity of molecular parameters of a compound based on machine learning algorithms
CN110459274A (zh) * 2019-08-01 2019-11-15 南京邮电大学 一种基于深度迁移学习的小分子药物虚拟筛选方法及其应用
CN111090749A (zh) * 2019-12-23 2020-05-01 福州大学 一种基于TextCNN的报刊出版物分类方法及***
CN111640471A (zh) * 2020-05-27 2020-09-08 牛张明 基于双向长短记忆模型的药物小分子活性预测的方法和***
CN111640470A (zh) * 2020-05-27 2020-09-08 牛张明 基于句法模式识别的药物小分子毒性预测的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180172667A1 (en) * 2015-06-17 2018-06-21 Uti Limited Partnership Systems and methods for predicting cardiotoxicity of molecular parameters of a compound based on machine learning algorithms
CN107862173A (zh) * 2017-11-15 2018-03-30 南京邮电大学 一种先导化合物虚拟筛选方法和装置
CN110459274A (zh) * 2019-08-01 2019-11-15 南京邮电大学 一种基于深度迁移学习的小分子药物虚拟筛选方法及其应用
CN111090749A (zh) * 2019-12-23 2020-05-01 福州大学 一种基于TextCNN的报刊出版物分类方法及***
CN111640471A (zh) * 2020-05-27 2020-09-08 牛张明 基于双向长短记忆模型的药物小分子活性预测的方法和***
CN111640470A (zh) * 2020-05-27 2020-09-08 牛张明 基于句法模式识别的药物小分子毒性预测的方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112786120A (zh) * 2021-01-26 2021-05-11 云南大学 神经网络辅助化学材料合成的方法
CN112786120B (zh) * 2021-01-26 2022-07-05 云南大学 神经网络辅助化学材料合成的方法
CN112820359A (zh) * 2021-02-24 2021-05-18 北京中医药大学东直门医院 一种肝损伤预测方法、装置、设备、介质及程序产品
CN112966111A (zh) * 2021-03-19 2021-06-15 北京星汉博纳医药科技有限公司 一种基于ai的对象化属性文本自动分类方法及***
WO2023029351A1 (zh) * 2021-08-30 2023-03-09 平安科技(深圳)有限公司 基于自监督学习的药物小分子性质预测方法、装置及设备
CN114020910A (zh) * 2021-11-03 2022-02-08 北京中科凡语科技有限公司 基于TextCNN的医疗文本特征提取方法及装置

Similar Documents

Publication Publication Date Title
CN112164426A (zh) 基于TextCNN的药物小分子靶点活性预测方法和装置
US20210081798A1 (en) Neural network method and apparatus
CN112164427A (zh) 基于深度学习的药物小分子靶点活性预测方法和装置
CN110853756B (zh) 基于som神经网络和svm的食管癌风险预测方法
CN112102899A (zh) 一种分子预测模型的构建方法和计算设备
CN113488104A (zh) 基于局部和全局的网络中心性分析的癌症驱动基因预测方法及***
CN114444668A (zh) 网络量化方法及***及装置及介质及图像处理方法
CN116467141A (zh) 日志识别模型训练、日志聚类方法和相关***、设备
Kotanchek et al. Symbolic regression via genetic programming as a discovery engine: Insights on outliers and prototypes
CN112164428B (zh) 基于深度学习的药物小分子性质预测方法和装置
CN115394383A (zh) 磷光材料的发光波长预测方法及***
KR20220110620A (ko) 유사도 검색을 위한 신경 해싱
CN111048145B (zh) 蛋白质预测模型的生成方法、装置、设备和存储介质
CN116646001B (zh) 基于联合式跨域注意力模型预测药物靶标结合性的方法
Ma et al. Kernel soft-neighborhood network fusion for MiRNA-disease interaction prediction
CN110837853A (zh) 一种快速分类模型构建方法
CN115936773A (zh) 一种互联网金融黑产识别方法与***
CN115908909A (zh) 基于贝叶斯卷积神经网络的进化神经架构搜索方法及***
CN113724779A (zh) 基于机器学习技术的SNAREs蛋白识别方法、***、存储介质及设备
US12013938B2 (en) Apparatus for generating a signature that reflects the similarity of a malware detection and classification system based on deep neural networks, method therefor, and computer-readable recording medium recorded with a program for performing the method
CN111091865B (zh) MoRFs预测模型的生成方法、装置、设备和存储介质
CN117689011B (zh) 一种模型调整方法、装置、设备及存储介质
CN115146258B (zh) 请求处理方法、装置、存储介质及电子设备
CN117558349A (zh) 基于概率图模型的miRNA-疾病-类型的关联预测方法及装置
CN117275516A (zh) 音频指纹识别模型训练方法、音频识别方法、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210101