CN107729159B - 一种共享内存的地址映射方法及装置 - Google Patents

一种共享内存的地址映射方法及装置 Download PDF

Info

Publication number
CN107729159B
CN107729159B CN201710909286.9A CN201710909286A CN107729159B CN 107729159 B CN107729159 B CN 107729159B CN 201710909286 A CN201710909286 A CN 201710909286A CN 107729159 B CN107729159 B CN 107729159B
Authority
CN
China
Prior art keywords
virtual address
kernel
controller
state
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710909286.9A
Other languages
English (en)
Other versions
CN107729159A (zh
Inventor
赵冬梅
邓晓阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Huawei Technology Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201710909286.9A priority Critical patent/CN107729159B/zh
Publication of CN107729159A publication Critical patent/CN107729159A/zh
Application granted granted Critical
Publication of CN107729159B publication Critical patent/CN107729159B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/544Buffers; Shared memory; Pipes

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本申请提供一种共享内存的地址映射方法及装置,涉及数据存储技术领域,用于提高共享内存的各地址之间的转换效率。该方法包括:当第一控制器接收到第一用户态进程触发的共享内存映射请求时,第一控制器从指定虚拟地址区间中获取第一用户态虚拟地址;第一控制器根据所述指定虚拟地址区间、第一用户态虚拟地址和第一线性关系,确定第一用户态虚拟地址对应的第一内核态虚拟地址,第一线性关系用于指示用户态虚拟地址与内核态虚拟地址之间的关系;根据第一内核态虚拟地址和第二线性关系,确定共享内存的第一物理地址,共享内存为用户态进程和内核态进程共享的内存,第二线性关系用于指示内核态虚拟地址与物理地址之间的关系。

Description

一种共享内存的地址映射方法及装置
技术领域
本申请实施例涉及数据存储技术领域,尤其涉及一种共享内存的地址映射方法及装置。
背景技术
目前,内存部署逐渐由内核态向用户态切换,大部分业务已部署于用户态,部署于用户态的内存需要使用用户态虚拟地址进行访问。少部分业务(比如,驱动等)仍部署于内核态,主要用于直接内存存取(Direct Memory Access,DMA)、以及远程直接内存存取(Remote Direct Memory Access,RDMA)操作。为了减小用户态进程间、以及用户态进程与内核态进程之间的数据拷贝,可以通过共享内存的方式来实现。共享内存是指允许多个进程共享的一个逻辑内存,共享内存是进程间共享数据的一种最快的方法。当用户态和内核态的多个进程访问同一共享内存时,该共享内存的地址需要同时被映射到该多个进程的地址空间中。
现有Linux***中,提供了一种常用的用户态与内核态共享内存映射机制,该共享内存映射机制包括以下步骤:在用户态通过***调用函数,***自动分配空闲的用户态虚拟地址。在内核态通过内存分配函数分配一段内存,得到该段内存的虚拟地址。将该段内存的虚拟地址通过***函数转换成页框,并通过页框与物理地址转换函数将页框转换成对应页面的物理地址。最后,建立物理地址与用户态虚拟地址之间的映射关系,从而实现共享内存在用户态与内核态进程间的映射。但是,由于***自动分配的用户态虚拟地址比较随机,从而导致用户态虚拟地址与内存的虚拟地址之间的转换无规律可循。同时,内存的虚拟地址与物理地址之间的转换,需要两次***内核函数的调用,因此,上述映射机制中的地址转换效率较低。
发明内容
本发明的实施例提供一种共享内存的地址映射方法及装置,解决了现有技术中共享内存的各地址之间转换效率低问题。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,提供一种共享内存的地址映射方法,该方法包括:当第一控制器接收到第一用户态进程触发的共享内存映射请求时,第一控制器从指定虚拟地址区间中获取第一用户态虚拟地址;第一控制器根据该指定虚拟地址区间、第一用户态虚拟地址和第一线性关系,确定第一用户态虚拟地址对应的第一内核态虚拟地址,第一线性关系用于指示用户态虚拟地址与内核态虚拟地址之间的关系;根据第一内核态虚拟地址和第二线性关系,确定共享内存的第一物理地址,该共享内存为用户态进程和内核态进程共享的内存,第二线性关系用于指示内核态虚拟地址与物理地址之间的关系。上述技术方案中,第一控制器可以通过指定用户态虚拟地址区间和第一线性关系,实现用户态虚拟地址与内核态虚拟地址之间的线性转换,通过第二线性关系实现内核态虚拟地址与共享内存的物理地址之间的线性转换,从而可以提高各地址之间的转换效率,进而提高共享内存中数据的访问效率。
在第一方面的一种可能的实现方式中,当该指定虚拟地址区间的起始地址为A0,第一用户态虚拟地址为A1,第一内核态虚拟地址为A2时,第一线性关系包括公式(1),式中m为常数:
A2=A1-A0+m (1)。
在第一方面的一种可能的实现方式中,当第一内核态虚拟地址为A2,第一物理地址为A3时,第二线性关系包括公式(2),式中m为常数:
A3=A2-m (2)。
上述可能的两种实现方式中,提供了一种用于用户态虚拟地址与内核态虚拟地址之间进行线性转换的关系,以及用于内核态虚拟地址与物理地址之间进行线性转换的关系。
在第一方面的一种可能的实现方式中,当第二用户态进程共享该共享内存时,该方法还包括:第一控制器为第二用户态进程配置以下信息中的一项或多项:该指定虚拟地址空间、该共享空间的物理地址区间、第一线性关系、第二线性关系。上述可能的实现方式中,第一用户态进程和第二用户态进程可以共享同一共享内存,从而第一用户态进程可以访问第二用户态进程在共享内存中写入数据,同时第二用户态进程也可以访问第一用户态进程在共享内存中写入数据,从而避免了用户态进程之间数据的拷贝,提高了数据的访问效率
在第一方面的一种可能的实现方式中,当第三内核态进程共享该共享内存时,该方法还包括:第一控制器为第三内核态进程配置以下信息中的一项或多项:该共享空间的物理地址区间、第二线性关系。上述可能的实现方式中,第一用户态进程和第三内核态进程可以共享同一共享内存,从而第一用户态进程可以访问第三内核态进程在共享内存中写入数据,同时第三内核态进程也可以访问第一用户态进程在共享内存中写入数据,从而避免了用户态进程与内核态进程之间数据的拷贝,提高了数据的访问效率。
在第一方面的一种可能的实现方式中,该方法还包括:第一控制器向第二控制器发送数据访问请求,该数据访问请求用于访问第二控制器中内存的数据,第二控制器中内存的内核态虚拟地址与内存的物理地址满足第二线性关系。上述可能的实现方式中,第一控制器和第二控制器之间可以直接进行数据的转发和存取,从而实现了跨控制器间的数据访问,从而可以提高存储***的性能。
第二方面,提供一种控制器,该控制器作为第一控制器,包括:获取单元,用于当接收到第一用户态进程触发的共享内存映射请求时,从指定虚拟地址区间中获取第一用户态虚拟地址;确定单元,用于第一控制器根据该指定虚拟地址区间、第一用户态虚拟地址和第一线性关系,确定第一用户态虚拟地址对应的第一内核态虚拟地址,第一线性关系用于指示用户态虚拟地址与内核态虚拟地址之间的关系;确定单元,还用于根据第一内核态虚拟地址和第二线性关系,确定共享内存的第一物理地址,该共享内存为用户态进程和内核态进程共享的内存,第二线性关系用于指示内核态虚拟地址与物理地址之间的关系。
在第二方面的一种可能的实现方式中,当该指定虚拟地址区间的起始地址为A0,第一用户态虚拟地址为A1,第一内核态虚拟地址为A2时,第一线性关系包括公式(3),式中m为常数:
A2=A1-A0+m (3)。
在第二方面的一种可能的实现方式中,当第一内核态虚拟地址为A2,第一物理地址为A3时,第二线性关系包括公式(4),式中m为常数:
A3=A2-m (4)。
在第二方面的一种可能的实现方式中,当第二用户态进程共享该共享内存时,该控制器还包括:配置单元,用于为第二用户态进程配置以下信息中的一项或多项:该指定虚拟地址空间、该共享空间的物理地址区间、第一线性关系、第二线性关系。
在第二方面的一种可能的实现方式中,当第三内核态进程共享该共享内存时,第一控制器还包括:配置单元,用于为第三内核态进程配置以下信息中的一项或多项:该共享空间的物理地址区间、第二线性关系。
在第二方面的一种可能的实现方式中,第一控制器还包括:发送单元,用于向第二控制器发送数据访问请求,该数据访问请求用于访问第二控制器中内存的数据,第二控制器中该内存的内核态虚拟地址与该内存的物理地址满足第二线性关系。
第三方面,提供一种控制器,该控制器包括处理器、存储器、总线和通信接口,存储器中存储代码和数据,处理器与存储器通过总线连接,处理器运行存储器中的代码,使得控制器执行第一方面或第一方面的任一种可能的实现方式所提供的共享内存的地址映射方法。
本申请的又一方面,提供了一种可读存储介质,该可读存储介质中存储有指令,当该可读存储介质在设备上运行时,使得该设备执行第一方面或第一方面的任一种可能的实现方式所提供的共享内存的地址映射方法。
本申请的又一方面,提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得该计算机执行第一方面或第一方面的任一种可能的实现方式所提供的共享内存的地址映射方法。
可以理解地,上述提供的任一种共享内存的地址映射方法的装置、计算机存储介质或者计算机程序产品均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
附图说明
图1为本发明实施例提供的一种共享内存的示意图;
图2为现有技术中提供的一种共享内存的地址映射的流程图;
图3为本发明实施例提供的一种共享内存的地址映射方法的流程示意图;
图4为本发明实施例提供的一种***内存的分布示意图;
图5为本发明实施例提供的一种共享内存的地址映射的流程图;
图6为本发明实施例提供的另一种共享内存的地址映射方法的流程示意图;
图7为本发明实施例提供的又一种共享内存的地址映射方法的流程示意图;
图8为本发明实施例提供的一种控制器间进行数据访问的示意图;
图9为本发明实施例提供的一种控制器的结构示意图;
图10为本发明实施例提供的另一种控制器的结构示意图。
具体实施方式
目前,控制器中内存的部署逐渐由内核态向用户态切换,大部分业务已部署于用户态,少部分业务(比如,驱动等)仍部署于内核态。其中,部署于用户态的内存需要使用用户态虚拟地址进行访问,部署于内核态的内存需要使用内核态虚拟地址进行访问。这里的用户态和内核态是操作***的两种运行级别,Intel CPU提供Ring0-Ring3三种级别的运行模式。Ring0级别最高,Ring3最低。
用户态:当进程在执行用户的代码时,则称该进程处于用户运行态,也可以简称为用户态,此时处理器在特权级最低的(3级)用户代码中运行。内核态:当一个任务(进程)执行***调用而陷入内核代码中执行时,则称该进程处于内核运行态或简称为内核态,此时处理器处于特权级最高的0级内核代码中执行。当进程处于内核态时,执行的内核代码会使用当前进程的内核栈。这里的进程可以是指程序在一个数据集合上的运行过程,它是***进行资源分配和调度的一个独立单位。
为了减小用户态进程间、以及用户态进程与内核态进程之间的数据拷贝,可以通过共享内存的方式来实现不同进程对同一内存中数据的共享。共享内存是指允许多个进程共享或访问的一个逻辑内存,共享内存是进程间共享数据的一种最快的方法。比如,如图1所示,控制器中的进程A、进程B和进程C共享同一共享内存,其中进程A和进程B是处于用户态的进程,进程C是处于内核态的进程。进程A、进程B和进程C可以是互不相关的进程。
现有技术中,Linux操作***提供了一种用户态与内核态共享内存的映射机制mmap。mmap()***调用使得进程之间通过映射同一个普通文件实现共享内存。普通文件被映射到进程地址空间后,进程可以像访问普通内存一样对文件进行访问,而不必再调用read()、write()等操作。映射具体流程如图2所示,步骤1:调用用户态map函数,然后通过***调用mmap函数,***自动分配空闲的用户态虚拟地址(假设为A1)。步骤2:在内核态通过vmalloc分配一段内存,得到该段内存的虚拟地址(即内核态虚拟地址,假设为A2);步骤3:将该段内存的虚拟地址A2通过***函数vmalloc_to_page转换成页框,并通过page_to_phys将页框转换成对应页面的物理地址(假设为A3)。步骤4:通过vm_insert_page建立物理地址A3与用户态虚拟地址A1之间的映射关系。
但是,上述方法中,***自动分配的用户态虚拟地址比较随机,从而导致用户态虚拟地址与内存的虚拟地址之间的转换效率无规律可循,进而致使用户态虚拟地址与内核态虚拟地址之间的转换效率较低。同时,内存的虚拟地址与物理地址之间的转换,需要两次***内核函数vmalloc_to_page和page_to_phys的调用,因此,内存的虚拟地址与物理地址之间的转换效率也较低。此外,由于上述转换方法仅支持同一控制器中用户态与内核态的地址之间的转换,即两个内核函数只能转换本控制器范围内的内存地址,而不支持不同控制器之间的内存地址。
基于此,本申请实施例提供一种支持共享内存中各地址之间的线性转换的方法及装置,从而可以提高共享内存中各地址之间的转换效率,进而提高存储***的性能。
图3为本申请实施例提供的一种共享内存的地址映射方法的流程示意图,参见图3,该方法包括以下几个步骤。
步骤301:当第一控制器接收到第一用户态进程触发的共享内存映射请求时,第一控制器从指定虚拟地址区间中获取第一用户态虚拟地址。
其中,第一控制器中可以安装有多个程序,第一控制器可以运行该多个程序中一个或者多个程序。第一控制器通过运行不同的程序可以为用户提供不同的服务。第一控制器运行一个程序时,该程序会创建相应的进程,同时为该进程分配一定的内存。本申请实施例中,当一个进程执行用户代码时,可以称该进程为用户态进程。当一个进程执行***调用而陷入内核代码中执行时,可以称该进程为内核态进程。
另外,第一用户态进程可以是指第一控制器中处于用户态的多个进程中的任一进程。第一用户态进程可以与处于用户态的其他进程、以及处于内核态的进程共享同一共享内存,即该共享内存为用户态进程和内核态进程共享的内存,第一用户态进程和共享该共享内存的其他进程都可以访问该共享内存。
第一用户态虚拟地址是指第一用户态进程用于访问共享内存的虚拟地址。指定虚拟地址区间是指一段连续的虚拟地址范围,也可以称为虚拟地址空间范围。该指定虚拟地址区间可以事先进行设置或规划,第一用户态虚拟地址可以是该指定虚拟地址区间中的虚拟地址。
具体的,当第一控制器中的第一用户态进程与其他进程共享同一内存时,第一控制器在创建第一用户态进程时会触发共享内存映射请求,该共享内存映射请求用于将共享内存映射在第一用户态进程的地址空间中。当第一控制器接收到第一用户态进程触发的共享内存映射请求时,第一控制器可以从指定虚拟地址区间中获取处于空闲状态的第一用户态虚拟地址。
步骤302:第一控制器根据指定虚拟地址区间、第一用户态虚拟地址和第一线性关系,确定第一用户态虚拟地址对应的第一内核态虚拟地址,第一线性关系用于指示用户态虚拟地址与内核态虚拟地址之间的关系。
其中,该指定虚拟地址区间可以表示为[USR_START,USR_END],USR_START可以是指共享内存用户态虚拟地址的起始地址,USR_END可以是指共享内存用户态虚拟地址的结束地址。该指定虚拟地址区间的设置与共享内存的物理地址区间有关。
另外,第一内核态虚拟地址是指该第一用户态进程穿越到内核态访问共享内存时,第一用户态虚拟地址在内核态中对应的用于访问共享内存的虚拟地址。第一线性关系用于指示用户态虚拟地址与内核态虚拟地址之间的关系,即用于用户态虚拟地址与内核态虚拟地址之间进行相互转换的关系,且是线性转换的关系。通过第一线性关系进行用户态虚拟地址与内核态虚拟地址之间的转换,可以简化转换过程,提高其转换效率。
具体的,当该指定虚拟地址区间的起始地址表示为A0,从该指定虚拟地址区间中获取的第一用户态虚拟地址表示为A1,第一内核态虚拟地址表示为A2时,第一线性关系可以如下公式(1)所示,式中m为常数。
A2=A1-A0+m (1)
可选的,该指定虚拟地址区间的起始地址也可以根据该指定虚拟地址区间的区间长度和该虚拟地址区间的结束地址来表示。假设区间长度为L,结束地址为An,则A0可以表示为An-L,相应的公式(1)可以如下公式(1-1)所示。
A2=A1-A0+m=An-L+m (1-1)
比如,在内核态,通过重定义共享内存映射文件的操作函数(伪代码如下所示),通过get_shm_umapped_area()函数从指定虚拟地址区间[USR_START,USR_END]中分配未使用的虚拟地址,得到A1。之后,通过公式(1)得到第一内核态虚拟地址A2。
Figure BDA0001424625630000051
进一步的,当第一控制器确定第一内核态虚拟地址A2之后,第一控制器可以从内存空间中分配一段指定大小的内存(即共享内存),且可以将第一内核态虚拟地址A2作为访该共享内存的虚拟起始地址。
其中,第一控制器中的内存空间可以如图4所示。在第一控制器的***启动时,在内核态中,除了一部分内存预留给操作***(即操作***内存),剩余部分的内存可以由内存管理模块进行管理,包括该剩余部分内存的映射关系,该剩余部分内存用于整个***运行过程中的所有内存分配请求。该剩余部分内存的映射关系可以为线性映射。
需要说明的是,该内存管理模块可以位于内核态中,且可以是通过软件的方式来实现。该内存管理模块可以为内核态虚拟地址与内存的物理地址之间建立映射关系,该映射关系具体可以是通过对物理地址进行固定的加减偏移来实现。
步骤303:根据第一内核态虚拟地址和第二线性关系,确定共享内存的第一物理地址,第二线性关系用于指示内核态虚拟地址与物理地址之间的关系。
其中,第一物理地址是指与第一内核态虚拟地址对应的共享内存的物理地址。第二线性关系用于指示内核态虚拟地址与物理地址之间的关系,即用于内核态虚拟地址与物理地址之间进行相互转换的关系,且是线性转换的关系。通过第二线性关系进行内核态虚拟地址与用户态虚拟地址之间的转换,可以简化转换过程,提高其转换效率。
具体的,当第一内核态虚拟地址为A2,第一物理地址为A3时,第二线性关系可以如下公式(2)所示,式中m为常数,且与公式(1)中m的取值相同。
A3=A2-m (2)
需要说明的是,公式(2)所示的第二线性关系,可以是由内存管理模块为第一用户态进程分配共享内存时,为该共享内存分配的内核态虚拟地址与物理地址之间分配的映射关系。也即是,内存管理模块通过对物理地址进行固定的加减偏移(比如,m),得到相应的内核态虚拟地址。因此,当第一控制器获取第一内核态虚拟地址A2时,可以根据第一内核态虚拟地址A2和公式(2)所示的第二线性关系,确定第一内核态虚拟地址A2对应的第一物理地址A3。
示例性的,如图5所示,该共享内存的地址映射流程具体可以为:在用户态调用用户态map函数,通过mmap***调用从指定虚拟地址区间中获取用户态虚拟地址A1;通过第一线性关系转换得到A1对应的内核态虚拟地址A2;从线性行映内存区域分配一段内存,起始地址为A2;通过公第二线性关系将内核态虚拟地址A2转换为物理地址A3;建立物理地址A3与用户态虚拟地址A1之间的映射。
在实际应用中,用户运行一个程序,该程序所创建的进程开始是运行在用户态的,如果要执行文件操作、或网络数据发送等操作,则必须通过write、或者send等***调用,这些***调用会利用内核中的代码来完成操作。此时,该进程必须切换到内核态,然后进入共享地址区间中的内核地址空间去执行这些代码完成操作,完成后再切换回用户态。因此,当一个进程在用户态申请共享空间,并写入数据时,如果该进程穿越到内核态,则可以根据第一线性关系快速的获取内核态虚拟地址,进而通过内核态虚拟地址对写入的数据进行访问。同样,当一个进程在内核态申请共享空间,并写入数据时,如果该进程穿越到用户态,则可以根据第一线性关系快速的获取用户态虚拟地址,进而通过用户态虚拟地址对写入的数据进行访问,从而避免了用户态与内核态之间的数据拷贝,提高了数据的访问效率。
在本申请实施例中,第一控制器可以通过指定用户态虚拟地址区间和第一线性关系,实现用户态虚拟地址与内核态虚拟地址之间的线性转换,通过第二线性关系实现内核态虚拟地址与共享内存的物理地址之间的线性转换,从而可以提高各地址之间的转换效率,进而提高共享内存中数据的访问效率。
进一步的,当第一控制器的第二用户态进程与第一用户态进程共享第一用户态进程建立的共享内存时,如图6所示,该方法还可以包括:步骤304。
步骤304:第一控制器为第二用户态进程配置以下信息中的一项或多项:该指定虚拟地址空间、共享空间的物理地址区间、第一线性关系、第二线性关系。
当第一控制器中的第二用户态进程共享第一用户态进程建立的共享内存时,第一控制器可以将该指定虚拟地址空间、共享空间的物理地址区间、第一线性关系和第二线性关系中一项或者多项配置给第二用户态进程。当配置上述多个信息中的部分信息时,其余未配置的信息可以事先进行约定或者设置,本申请实施例对此不作具体限定。
因此,当第二用户态进程实现共享内存映射时,可以根据该指定虚拟地址空间、共享空间的物理地址区间、第一线性关系和第二线性关系,通过与第一用户态进程类似的方法实现共享内存的映射,即根据上述步骤301-步骤303将共享内存映射在第二用户态进程的地址空间中,从而第一用户态进程和第二用户态进程都可以对内存共享进行访问。
在本申请实施例中,第一用户态进程和第二用户态进程可以共享同一共享内存,从而第一用户态进程可以访问第二用户态进程在共享内存中写入数据,同时第二用户态进程也可以访问第一用户态进程在共享内存中写入数据,从而避免了用户态进程之间数据的拷贝,提高了数据的访问效率。
进一步的,当第一控制器的第三内核态进程与第一用户态进程共享第一用户态进程建立的共享内存时,如图7所示,该方法还可以包括:步骤305。
步骤305:第一控制器为第三内核态进程配置以下信息中的一项或多项:共享空间的物理地址区间、第二线性关系。
当第一控制器中的第三内核态进程共享第一用户态进程建立的共享内存时,第一控制器可以将该指定虚拟地址空间和第二线性关系中一项或者多项配置给第三内核态进程。当仅配置上述两个信息中的一个信息时,未配置的信息可以事先进行约定或者设置,本申请实施例对此不作具体限定。
因此,当第三内核态进程进行共享内存映射时,可以根据该共享空间的物理地址区间和第二线性关系,实现内核态虚拟地址与物理地址之间的映射,即根据上述步骤303将共享内存映射在第三内核态进程的地址空间中,从而第一用户态进程和第三内核态进程都可以对内存共享进行访问。
进一步的,如果共享内存是由第三内核态进程建立的,则第一控制器可以为第一用户态进程配置第二线性关系和共享内存的物理地址区间,从而第一用户态进程可以根据指定虚拟地址区间、物理地址区间、第一线性关系和第二线性关系,将共享内存映射到第一用户态进程的地址空间中。
在本申请实施例中,第一用户态进程和第三内核态进程可以共享同一共享内存,从而第一用户态进程可以访问第三内核态进程在共享内存中写入数据,同时第三内核态进程也可以访问第一用户态进程在共享内存中写入数据,从而避免了用户态进程与内核态进程之间数据的拷贝,提高了数据的访问效率。
进一步的,该方法还包括:第一控制器向第二控制器发送数据访问请求,该数据访问请求用于访问第二控制器中内存的数据,第二控制器中内存的内核态虚拟地址与内存的物理地址满足第二线性关系。
其中,第二控制器可以与第一控制器一样,通过上述第二线性关系进行内核态虚拟地址与内存的物理地址之间的线性转换,从而可以保证第一控制器和第二控制器具有相同的地址转换关系。因此,第一控制器可以直接向第二控制器发送数据访问请求,当第二控制器接收到该数据访问请求时,第二控制器可以根据该数据访问请求中的内核态虚拟地址,直接对第二控制器中的内存进行访问,从而实现第一控制器与第二控制器之间的直接数据存取的过程。
示例性的,如图8所示,第一控制器表示为A控,第二控制器表示为B控,假设A控的用户态中包括进程A和进程B,B控的用户态中包括进程C和进程D。A控和B控的内核态中均包括驱动和用于数据处理的芯片,驱动在运行时可以在内核态中创建相应的进程,由于内核态本身就是个大进程,因此驱动在运行时创建的进程也可以称为线程。A控和B控中的内核态虚拟地址与物理地址之间的转换关系均满足第二线性关系,从而A控中的驱动可以与B控中的驱动进行数据转发和远程直接数据存取RDMA。
在本申请实施例中,第一控制器和第二控制器可以均通过第二线性关系实现内核态虚拟地址与物理地址之间的线性转换,保证了第一控制器和第二控制器具有相同的地址转换关系,从而第一控制器和第二控制器之间可以直接进行数据的转发和存取,实现了跨控制器间的数据访问,进而可以提高存储***的性能。
上述主要从各个网元的角度对本申请实施例提供的方案进行了介绍。可以理解的是,各个网元,例如第一控制器、第二控制器等为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的网元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对第一控制器进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图9示出了上述实施例中所涉及的第一控制器的一种可能的结构示意图,第一控制器包括:获取单元901和确定单元902。其中,获取单元901用于支持第一控制器执行图3、图6或图7中的步骤301;确定单元902用于支持第一控制器执行图3、图6或图7中的步骤302和步骤303。进一步的,第一控制器还可以包括:配置单元903和发送单元904;其中,配置单元903用于支持第一控制器执行图6中的步骤304、或者图7中的步骤304和步骤305;发送单元904用于第一控制器向第二控制器发送数据访问请求的步骤。
在硬件实现上,上述确定单元902和配置单元903可以为处理器;获取单元901可以为接收器,发送单元904可以为发送器,接收器和发送器可以构成通信接口。
图10所示,为本申请的实施例提供的上述实施例中所涉及的第一控制器的一种可能的逻辑结构示意图。第一控制器包括:处理器1002、通信接口1003、存储器1001以及总线1004。处理器1002、通信接口1003以及存储器1001通过总线1004相互连接。在本申请的实施例中,处理器1002用于对第一控制器的动作进行控制管理,例如,处理器1002用于支持第一控制器执行图3中的步骤302-步骤303,图6中的步骤302-步骤304,图7中的步骤302-步骤305,和/或用于本文所描述的技术的其他过程。通信接口1003用于支持第一控制器进行通信。存储器1001,用于存储第一控制器的程序代码和数据。
其中,处理器1002可以是中央处理器单元,通用处理器,数字信号处理器,专用集成电路,现场可编程门阵列或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。所述处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理器和微处理器的组合等等。总线1004可以是外设部件互连标准(PeripheralComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图10中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
在本申请的另一实施例中,还提供一种可读存储介质,可读存储介质中存储有计算机执行指令,当一个设备(可以是单片机,芯片等)或者处理器执行图3、图6或者图7所提供的共享内存的地址映射方法。前述的可读存储介质可以包括:U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
在本申请的另一实施例中,还提供一种计算机程序产品,该计算机程序产品包括计算机执行指令,该计算机执行指令存储在计算机可读存储介质中;设备的至少一个处理器可以从计算机可读存储介质读取该计算机执行指令,至少一个处理器执行该计算机执行指令使得设备实施执行图3、图6或者图7所提供的共享内存的地址映射方法。
在本申请实施例中,第一控制器可以通过指定用户态虚拟地址区间和第一线性关系,实现用户态虚拟地址与内核态虚拟地址之间的线性转换,通过第二线性关系实现内核态虚拟地址与共享内存的物理地址之间的线性转换,从而可以提高各地址之间的转换效率,进而提高共享内存中数据的访问效率。
最后应说明的是:以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (14)

1.一种共享内存的地址映射方法,其特征在于,所述方法包括:
当第一控制器接收到第一用户态进程触发的共享内存映射请求时,所述第一控制器从指定虚拟地址区间中获取第一用户态虚拟地址;
所述第一控制器根据所述指定虚拟地址区间、所述第一用户态虚拟地址和第一线性关系,确定所述第一用户态虚拟地址对应的第一内核态虚拟地址,所述第一线性关系用于指示用户态虚拟地址与内核态虚拟地址之间的关系;
根据所述第一内核态虚拟地址和第二线性关系,确定共享内存的第一物理地址,所述共享内存为用户态进程和内核态进程共享的内存,所述第二线性关系用于指示内核态虚拟地址与物理地址之间的关系。
2.根据权利要求1所述的方法,其特征在于,当所述指定虚拟地址区间的起始地址为A0,所述第一用户态虚拟地址为A1,所述第一内核态虚拟地址为A2时,所述第一线性关系包括公式(1),式中m为常数:
A2=A1-A0+m (1)。
3.根据权利要求1或2所述的方法,其特征在于,当所述第一内核态虚拟地址为A2,所述第一物理地址为A3时,所述第二线性关系包括公式(2),式中m为常数:
A3=A2-m (2)。
4.根据权利要求3所述的方法,其特征在于,当第二用户态进程共享所述共享内存时,所述方法还包括:
所述第一控制器为所述第二用户态进程配置以下信息中的一项或多项:所述指定虚拟地址空间、共享空间的物理地址区间、所述第一线性关系、所述第二线性关系。
5.根据权利要求4所述的方法,其特征在于,当第三内核态进程共享所述共享内存时,所述方法还包括:
所述第一控制器为所述第三内核态进程配置以下信息中的一项或多项:所述共享空间的物理地址区间、所述第二线性关系。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
所述第一控制器向第二控制器发送数据访问请求,所述数据访问请求用于访问所述第二控制器中内存的数据,所述第二控制器中所述内存的内核态虚拟地址与所述内存的物理地址满足所述第二线性关系。
7.一种控制器,其特征在于,所述控制器作为第一控制器,包括:
获取单元,用于当接收到第一用户态进程触发的共享内存映射请求时,从指定虚拟地址区间中获取第一用户态虚拟地址;
确定单元,用于第一控制器根据所述指定虚拟地址区间、所述第一用户态虚拟地址和第一线性关系,确定所述第一用户态虚拟地址对应的第一内核态虚拟地址,所述第一线性关系用于指示用户态虚拟地址与内核态虚拟地址之间的关系;
所述确定单元,还用于根据所述第一内核态虚拟地址和第二线性关系,确定共享内存的第一物理地址,所述共享内存为用户态进程和内核态进程共享的内存,所述第二线性关系用于指示内核态虚拟地址与物理地址之间的关系。
8.根据权利要求7所述的控制器,其特征在于,当所述指定虚拟地址区间的起始地址为A0,所述第一用户态虚拟地址为A1,所述第一内核态虚拟地址为A2时,所述第一线性关系包括公式(3),式中m为常数:
A2=A1-A0+m (3)。
9.根据权利要求7或8所述的控制器,其特征在于,当所述第一内核态虚拟地址为A2,所述第一物理地址为A3时,所述第二线性关系包括公式(4),式中m为常数:
A3=A2-m (4)。
10.根据权利要求9所述的控制器,其特征在于,当第二用户态进程共享所述共享内存时,所述控制器还包括:
配置单元,用于为所述第二用户态进程配置以下信息中的一项或多项:所述指定虚拟地址空间、共享空间的物理地址区间、所述第一线性关系、所述第二线性关系。
11.根据权利要求10所述的控制器,其特征在于,当第三内核态进程共享所述共享内存时,所述控制器还包括:
配置单元,用于为所述第三内核态进程配置以下信息中的一项或多项:所述共享空间的物理地址区间、所述第二线性关系。
12.根据权利要求11所述的控制器,其特征在于,所述控制器还包括:
发送单元,用于向第二控制器发送数据访问请求,所述数据访问请求用于访问所述第二控制器中内存的数据,所述第二控制器中所述内存的内核态虚拟地址与所述内存的物理地址满足所述第二线性关系。
13.一种控制器,其特征在于,所述控制器包括处理器、存储器、总线和通信接口,所述存储器中存储代码和数据,所述处理器与所述存储器通过总线连接,所述处理器运行所述存储器中的代码,使得所述控制器执行权利要求1-6任一项所述的共享内存的地址映射方法。
14.一种可读存储介质,其特征在于,所述可读存储介质中存储有指令,当所述可读存储介质在设备上运行时,使得所述设备执行权利要求1-6任一项所述的共享内存的地址映射方法。
CN201710909286.9A 2017-09-29 2017-09-29 一种共享内存的地址映射方法及装置 Active CN107729159B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710909286.9A CN107729159B (zh) 2017-09-29 2017-09-29 一种共享内存的地址映射方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710909286.9A CN107729159B (zh) 2017-09-29 2017-09-29 一种共享内存的地址映射方法及装置

Publications (2)

Publication Number Publication Date
CN107729159A CN107729159A (zh) 2018-02-23
CN107729159B true CN107729159B (zh) 2021-01-15

Family

ID=61209174

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710909286.9A Active CN107729159B (zh) 2017-09-29 2017-09-29 一种共享内存的地址映射方法及装置

Country Status (1)

Country Link
CN (1) CN107729159B (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112422615B (zh) * 2018-02-24 2023-11-10 华为技术有限公司 一种通信的方法及装置
CN110231988B (zh) * 2018-03-05 2021-08-03 龙芯中科技术股份有限公司 显存访问方法、装置及存储介质
CN109408226A (zh) * 2018-09-19 2019-03-01 深圳传音通讯有限公司 数据处理方法、装置及终端设备
CN109445685B (zh) * 2018-09-26 2020-06-30 华中科技大学 一种用户态文件***处理方法
CN109857677B (zh) * 2018-12-28 2023-03-31 晶晨半导体(上海)股份有限公司 内核栈的分配方法及装置
CN111444113B (zh) * 2019-01-16 2023-06-13 阿里巴巴集团控股有限公司 非易失性存储介质共享方法、装置、电子设备及存储设备
EP3900308A4 (en) * 2019-01-30 2022-02-23 Huawei Technologies Co., Ltd. I/O PROCESSING IN A DISTRIBUTED STORAGE NODE WITH RDMA
CN110456994B (zh) * 2019-07-19 2023-03-10 南京芯驰半导体科技有限公司 一种远程显示***及方法
CN111143072B (zh) * 2019-12-29 2023-09-08 浪潮(北京)电子信息产业有限公司 用户态程序内存分配方法、***及相关组件
CN114090273B (zh) * 2020-07-30 2024-07-05 华为技术有限公司 一种进程间通信的方法、装置及计算机存储介质
EP4195045A4 (en) * 2020-08-14 2023-09-27 Huawei Technologies Co., Ltd. METHOD FOR DATA INTERACTION BETWEEN MAIN CPU AND NPU, AND COMPUTER DEVICE
CN112532585A (zh) * 2020-11-02 2021-03-19 杭州迪普科技股份有限公司 一种进程间报文传输的方法、设备及介质
CN112395220B (zh) * 2020-11-18 2023-02-28 海光信息技术股份有限公司 共享存储控制器的处理方法、装置、***及存储控制器
CN112612623B (zh) * 2020-12-25 2022-08-09 苏州浪潮智能科技有限公司 一种共享内存管理的方法和设备
CN112650603B (zh) * 2020-12-28 2024-02-06 北京天融信网络安全技术有限公司 内存管理方法、装置、电子设备及存储介质
CN112804223B (zh) * 2021-01-06 2024-04-16 腾讯科技(深圳)有限公司 一种报文处理方法和装置
CN112769716B (zh) * 2021-01-12 2022-03-18 烽火通信科技股份有限公司 基于混合型虚拟网桥的虚拟交换机的数据转发方法及装置
CN114879962B (zh) * 2021-02-05 2024-06-04 华为技术有限公司 一种实现批量***调用的方法及装置
CN114003520B (zh) * 2021-09-28 2023-06-20 苏州浪潮智能科技有限公司 一种主机与设备之间的数据传输方法、装置、***及介质
CN115878210A (zh) * 2021-09-29 2023-03-31 华为技术有限公司 一种***配置处理方法及相关设备
CN114048502B (zh) * 2021-10-15 2023-08-15 中国科学院信息工程研究所 一种轻量级可信通道及其通信控制方法
CN116418848A (zh) * 2021-12-31 2023-07-11 华为技术有限公司 网络节点的配置和访问请求的处理方法、装置
CN114610660A (zh) * 2022-03-01 2022-06-10 Oppo广东移动通信有限公司 控制接口数据的方法、装置及***

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5960190A (en) * 1997-02-12 1999-09-28 Zilog, Inc. In-circuit emulation system with minimal impact on target environment
US9081501B2 (en) * 2010-01-08 2015-07-14 International Business Machines Corporation Multi-petascale highly efficient parallel supercomputer
CN103257936B (zh) * 2012-02-17 2016-03-02 联想(北京)有限公司 内存映射方法和内存映射模块
CN103034544B (zh) * 2012-12-04 2015-08-05 杭州迪普科技有限公司 一种用户态与内核态共享内存的管理方法和装置
CN104572313B (zh) * 2013-10-22 2018-03-13 华为技术有限公司 一种进程间的通信方法及装置
CN105677597A (zh) * 2014-11-20 2016-06-15 中兴通讯股份有限公司 数据写入方法及装置
CN104809183B (zh) * 2015-04-17 2018-06-22 北京奇艺世纪科技有限公司 一种数据读取及写入的方法和装置

Also Published As

Publication number Publication date
CN107729159A (zh) 2018-02-23

Similar Documents

Publication Publication Date Title
CN107729159B (zh) 一种共享内存的地址映射方法及装置
US11194626B2 (en) Dynamic resource allocation based on data transferring to a tiered storage
CN107690622B (zh) 实现硬件加速处理的方法、设备和***
KR101952795B1 (ko) 자원 프로세싱 방법, 운영체제, 및 장치
EP1805629B1 (en) System and method for virtualization of processor resources
US10191759B2 (en) Apparatus and method for scheduling graphics processing unit workloads from virtual machines
WO2018010654A1 (zh) 一种虚拟机热迁移的方法、装置及***
KR20150139408A (ko) 이종의 저장 매체들을 이용하는 분산 파일 시스템을 구동하는 전자 시스템, 및 그것의 데이터 저장 방법 및 관리 방법
US10013264B2 (en) Affinity of virtual processor dispatching
US10579416B2 (en) Thread interrupt offload re-prioritization
US10310759B2 (en) Use efficiency of platform memory resources through firmware managed I/O translation table paging
US10534739B2 (en) Indicating a privilege level
US8751724B2 (en) Dynamic memory reconfiguration to delay performance overhead
KR20050076702A (ko) 멀티프로세서 시스템에서의 데이터 전송 방법과, 그방법을 수행하는 멀티프로세서 및 프로세서
US9088569B2 (en) Managing access to a shared resource using client access credentials
US11853798B2 (en) Disaggregated memory pool assignment
CN108228496B (zh) 一种直接内存访问内存管理方法、装置和主控设备
CN114281516A (zh) 一种基于numa属性的资源分配方法及装置
US20190258399A1 (en) Virtualization of memory compute functionality
CN116069451B (zh) 一种虚拟化方法、装置、设备、介质、加速器及***
JP2003248620A (ja) 動的メモリ管理方法及び動的メモリ管理情報処理装置
KR20230086548A (ko) 이종의 멀티 cpu 간에 물리 자원을 공유하기 위한 제어권을 관리하는 시스템온칩 및 그 동작 방법
JP2015170270A (ja) 情報処理装置、及び、そのリソースアクセス方法、並びに、リソースアクセスプログラム
JP2007280209A (ja) マルチコアプロセッサの監視方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220908

Address after: No. 1899 Xiyuan Avenue, high tech Zone (West District), Chengdu, Sichuan 610041

Patentee after: Chengdu Huawei Technologies Co.,Ltd.

Address before: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen

Patentee before: HUAWEI TECHNOLOGIES Co.,Ltd.

TR01 Transfer of patent right