CN114637703B - 数据访问装置、方法、可读介质和电子设备 - Google Patents

数据访问装置、方法、可读介质和电子设备 Download PDF

Info

Publication number
CN114637703B
CN114637703B CN202210307683.XA CN202210307683A CN114637703B CN 114637703 B CN114637703 B CN 114637703B CN 202210307683 A CN202210307683 A CN 202210307683A CN 114637703 B CN114637703 B CN 114637703B
Authority
CN
China
Prior art keywords
target
data access
socket interface
memory
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210307683.XA
Other languages
English (en)
Other versions
CN114637703A (zh
Inventor
谢永吉
张佳辰
柴稳
张宇
王剑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Youzhuju Network Technology Co Ltd
Original Assignee
Beijing Youzhuju Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Youzhuju Network Technology Co Ltd filed Critical Beijing Youzhuju Network Technology Co Ltd
Priority to CN202210307683.XA priority Critical patent/CN114637703B/zh
Publication of CN114637703A publication Critical patent/CN114637703A/zh
Priority to PCT/CN2023/082366 priority patent/WO2023179509A1/zh
Application granted granted Critical
Publication of CN114637703B publication Critical patent/CN114637703B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/10—Program control for peripheral devices
    • G06F13/102—Program control for peripheral devices where the programme performs an interfacing function, e.g. device driver
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/545—Interprogram communication where tasks reside in different layers, e.g. user- and kernel-space
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Stored Programmes (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开涉及一种数据访问装置、方法、可读介质和电子设备，该数据访问装置包括Fuse模块、多个第一套接字接口以及存储器，Fuse模块通过多个第一套接字接口与存储器进行通信，Fuse模块和第一套接字接口位于内核空间，Fuse模块，用于接收数据访问请求，并从多个第一套接字接口中，确定与数据访问请求对应的目标套接字接口，Fuse模块，还用于利用目标套接字接口从存储器中获取目标数据，并将目标数据发送至目标应用程序。本公开可以通过Fuse模块，根据数据访问请求，利用目标套接字接口从存储器中获取目标数据，不需要在用户空间进行中转，能够直接在内核空间将数据访问请求发送到存储器，提高了对目标数据的访问性能。

Description

数据访问装置、方法、可读介质和电子设备
技术领域
本公开涉及计算机技术领域，具体地，涉及一种数据访问装置、方法、可读介质和电子设备。
背景技术
在计算存储分离这种架构下，当计算节点需要访问分布式文件存储提供的服务时，通常需要挂载一个Fuse(英文：Filesystem in Userspace，中文：用户空间文件***)模块来实现接入。对这个分布式文件存储的访问请求，会被内核的Fuse模块截获并转发给用户态的Daemon(中文：进程)。然后，用户态的Daemon通过网络将访问请求发送到分布式文件存储的后端，以完成数据的访问。然而，采用这样的方式，文件的访问请求需要从用户态Daemon进行一次中转再通过网络发送出去，在此过程中会涉及到多次拷贝、***调用和上下文切换等操作，这会影响对数据的访问性能。
发明内容
提供该部分内容以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该部分内容并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。
第一方面，本公开提供一种数据访问装置，所述数据访问装置包括用户空间文件***Fuse模块、多个第一套接字接口以及存储器，所述Fuse模块通过多个所述第一套接字接口与所述存储器进行通信，所述Fuse模块和所述第一套接字接口位于内核空间；
所述Fuse模块，用于接收目标应用程序对目标数据的数据访问请求，并从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口；
所述Fuse模块，还用于利用所述目标套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序，以完成数据的访问。
第二方面，本公开提供一种数据访问方法，应用于第一方面所述的装置，所述方法包括：
通过所述Fuse模块接收目标应用程序对目标数据的数据访问请求，并从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口；
通过所述Fuse模块利用所述目标套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序，以完成数据的访问。
第三方面，本公开提供一种计算机可读介质，其上存储有计算机程序，该程序被处理装置执行时实现本公开第二方面所述方法的步骤。
第四方面，本公开提供一种电子设备，包括：
存储装置，其上存储有至少一个计算机程序；
至少一个处理装置，用于执行所述存储装置中的所述至少一个计算机程序，以实现本公开第二方面所述方法的步骤。
通过上述技术方案，本公开中的数据访问装置包括Fuse模块、多个第一套接字接口以及存储器，Fuse模块通过多个第一套接字接口与存储器进行通信，Fuse模块和第一套接字接口位于内核空间，Fuse模块，用于先接收目标应用程序对目标数据的数据访问请求，之后从多个第一套接字接口中，确定与数据访问请求对应的目标套接字接口，再利用目标套接字接口从存储器中获取目标数据，并将目标数据发送至目标应用程序，以完成数据的访问。本公开可以通过Fuse模块，根据数据访问请求，利用目标套接字接口从存储器中获取目标数据，不需要在用户空间进行中转，能够直接在内核空间将数据访问请求发送到存储器，提高了对目标数据的访问性能。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。在附图中：
图1是根据一示例性实施例示出的一种数据访问装置的框图；
图2是根据一示例性实施例示出的另一种数据访问装置的框图；
图3是根据一示例性实施例示出的一种数据访问方法的流程图；
图4是根据图3所示实施例示出的一种步骤201的流程图；
图5是根据图3所示实施例示出的又一种步骤201的流程图；
图6是根据一示例性实施例示出的一种电子设备的框图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
本公开中所有获取信号、信息或数据的动作都是在遵照所在地国家相应的数据保护法规政策的前提下，并获得由相应装置所有者给予授权的情况下进行的。
图1是根据一示例性实施例示出的一种数据访问装置的框图。如图1所示，该数据访问装置100包括Fuse模块101、多个第一套接字接口102以及存储器103，Fuse模块101通过多个第一套接字接口102与存储器103进行通信，Fuse模块101和第一套接字接口102位于内核空间。
Fuse模块101，用于接收目标应用程序对目标数据的数据访问请求，并从多个第一套接字接口102中，确定与数据访问请求对应的目标套接字接口。
示例地，对于分布式文件存储来说，计算节点上呈现的一个文件通常会以分片的形式，以将不同文件区段存储在不同的存储后端节点上。也就是说，对某个文件区段的读写实际上可以通过某个特定的Socket(中文：套接字)接口来进行收发。因此，可以通过使Fuse模块感知文件区段与Socket之间的映射关系，从而绕过用户态Daemon，直接在内核中将文件的读写请求通过Socket接口发送到存储后端节点上，以改善对数据的访问性能。
具体地，在计算存储分离架构下，数据存储在远端的存储器103，当目标应用程序需要在本地对目标文件中的目标数据进行数据访问时，首先可以通过目标应用程序的挂载点(英文：Mount Point)，将对目标数据的数据访问请求发送给内核中的VFS(英文：VirtualFile System，中文：虚拟文件***)，并由VFS将该数据访问请求发送给Fuse模块101。然后，Fuse模块101可以根据该数据访问请求，从内核中的多个第一套接字接口102中，确定目标套接字接口。例如，在数据访问请求为目标数据在目标文件中所处的文件区段时，可以预先建立该文件区段与第一套接字接口102之间的对应关系，在接收到数据访问请求后，Fuse模块101可以根据目标数据在目标文件中的位置，利用该对应关系从多个第一套接字接口102中，确定目标套接字接口。
Fuse模块101，还用于利用目标套接字接口从存储器103中获取目标数据，并将目标数据发送至目标应用程序，以完成数据的访问。
举例来说，Fuse模块101可以将数据访问请求，利用目标套接字接口通过网络直接发送至远端的存储器103。其中，存储器103可以是远程存储器(英文：Remote Storage)。存储器103在接收到数据访问请求之后，可以根据数据访问请求获取存储的目标数据，并将目标数据通过目标套接字接口返回给Fuse模块101。之后Fuse模块101可以将接收到的目标数据发送给VFS，并由VFS将目标数据返回给目标应用程序，以完成数据的访问。
需要说明的是，Fuse模块101通过目标套接字接口直接将数据访问请求发送至存储器103，实际上是建立了一条由VFS、Fuse模块101、第一套接字接口102以及存储器103组成的快速路径，该快速路径不需要再由用户态Daemon进行中转，能够避免在用户态Daemon中转的过程中涉及到的多次拷贝、***调用和上下文切换等操作，从而降低对数据的访问性能。
综上所述，本公开中的数据访问装置包括Fuse模块、多个第一套接字接口以及存储器，Fuse模块通过多个第一套接字接口与存储器进行通信，Fuse模块和第一套接字接口位于内核空间，Fuse模块，用于先接收目标应用程序对目标数据的数据访问请求，之后从多个第一套接字接口中，确定与数据访问请求对应的目标套接字接口，再利用目标套接字接口从存储器中获取目标数据，并将目标数据发送至目标应用程序，以完成数据的访问。本公开可以通过Fuse模块，根据数据访问请求，利用目标套接字接口从存储器中获取目标数据，不需要在用户空间进行中转，能够直接在内核空间将数据访问请求发送到存储器，提高了对目标数据的访问性能。
可选地，数据访问请求可以包括目标数据在目标应用程序所要进行数据访问的目标文件中所处的文件区段。其中，Fuse模块101，用于根据文件区段，利用预设对应关系，从多个第一套接字接口102中，确定是否存在与文件区段对应的目标套接字接口，并在确定存在目标套接字接口的情况下，利用目标套接字接口将数据访问请求发送至存储器103。其中，预设对应关系为文件区段与第一套接字接口之间的对应关系。
举例来说，数据访问请求实际上是用于告诉存储器103目标应用程序所要获取的目标数据在目标文件中的位置。为了提高对数据的访问性能，可以预先在内核建立多条快速路径，并通过构建预设对应关系的方式去记录这些建立好的快速路径。其中，该预设对应关系可以是映射表，例如该映射表可以包括文件区段与第一套接字接口之间的对应关系。在数据访问请求包括目标数据在目标文件中所处的文件区段的情况下，当数据访问请求经过内核的Fuse模块101时，Fuse模块101可以根据文件区段，利用预设对应关系，从多个第一套接字接口102中，确定是否存在与文件区段对应的目标套接字接口。如果存在目标套接字接口，Fuse模块101可以根据目标套接字接口对应的通信协议，利用目标套接字接口，将数据访问请求发送至存储器103。其中，通信协议可以是TCP/IP(英文：Transmission ControlProtocol/Internet Protocol，中文：传输控制协议/网际协议)协议。
需要说明的是，Fuse模块101确定是否存在目标套接字接口的过程，实际上是Fuse模块101通过查询预设对应关系(例如映射表)来确定是否存在快速路径的过程，如果存在目标套接字接口，则说明存在快速路径，那么可以将能够执行快速路径的文件区段的数据访问请求单独通过目标套接字接口发送到存储器103。也就是说，本公开实际上是通过在内核建立预设对应关系，生成Fuse模块101进行数据访问的快速路径，并将对目标文件的数据访问请求直接在内核通过套接字接口发送到存储器103，而不再转发到用户态的Daemon，提高了对目标数据的访问性能。
图2是根据一示例性实施例示出的另一种数据访问装置的框图。如图2所示，数据访问装置100还包括Fuse Daemon模块104和第二套接字接口105，Fuse Daemon模块104通过第二套接字接口105与存储器103进行通信，Fuse Daemon模块104和第二套接字接口105位于用户空间。
Fuse模块101，还用于在确定不存在目标套接字接口的情况下，将数据访问请求发送至Fuse Daemon模块104。
Fuse Daemon模块104，用于利用第二套接字接口105从存储器103中获取目标数据，并将目标数据发送至目标应用程序。
在一种场景中，如果不存在目标套接字接口，说明数据访问请求所包括的文件区段为不能执行快速路径的文件区段，那么可以按照原本的处理方式将数据访问请求转发到用户态的Daemon进行处理。也就是说，Fuse模块101可以在确定不存在目标套接字接口时，将数据访问请求发送至Fuse Daemon模块104进行中转。之后可以由Fuse Daemon模块104利用与数据访问请求对应的第二套接字接口105，通过该第二套接字接口105对应的TCP/IP协议将数据访问请求发送至存储器103。存储器103在接收到数据访问请求之后，可以根据数据访问请求获取存储的目标数据，并将目标数据通过该第二套接字接口105、Fuse Daemon模块104、Fuse模块101以及VFS原路返回给目标应用程序，以完成数据的访问。另外，如果内核的多个第一套接字接口102的通信流程出现异常(例如，连接被关闭或者请求超时)，Fuse模块101也需要将能够执行快速路径的文件区段的数据访问请求，转发到Fuse Daemon模块104进行处理。
需要说明的是，通过Fuse Daemon模块104对数据访问请求进行中转，实际上是建立了一条由VFS、Fuse模块101、Fuse Daemon模块104、第二套接字接口105以及存储器103组成的慢速路径。并且，本公开区分了快速路径的套接字接口和慢速路径的套接字接口，这样便于兼容原有的通信方式，不需要将慢速路径收发的数据格式改成Fuse的请求格式。
可选地，Fuse Daemon模块104还用于在将目标数据发送至目标应用程序后，从存储器103中获取数据访问请求对应的通信信息，并根据通信信息构建新的第一套接字接口102，并将新的第一套接字接口102注册到内核空间中。其中，通信信息包括通信地址和通信端口。
示例地，在内核中建立对应关系是完成数据访问的核心，也就是说，需要在内核中建立新的第一套接字接口102。具体地，可以在Fuse Daemon模块104执行完一次数据访问后，从存储器103中获取此次数据访问请求对应的通信信息，再根据通信信息，在内核中建立新的第一套接字接口102，即建立新的Socket连接。
然后Fuse Daemon模块104可以通知存储器103，这些新连接用于快速路径。在存储器103同意新连接用于快速路径后，Fuse Daemon模块104可以将新的第一套接字接口102注册到内核空间中。其中，通信信息可以包括通信地址和通信端口，通信地址例如可以是IP地址，通信端口例如可以是TCP端口。
进一步地，可以在Fuse模块101中设置多种类型的用于建立快速路径的用户态接口。例如，可以在Fuse模块101中提供了四个用户态接口来建立或调整快速路径，具体可以包括以下4个用户态接口：
1)FUSE_ADD_FAST_PATH，用于向内核注册新的快速路径。其输入为：打开的目标文件对应的file handle(中文：文件句柄)，需要映射的目标文件的起始位置，映射的目标文件的文件长度，需要映射的Socket fd(英文：file descriptor)数组以及需要映射的Socket fd的数组长度。其输出为：如果成功的话，返回一个id标识该快速路径，失败则返回错误码。需要说明的是，这里是以目标文件的file handle为对象建立快速路径，而不是以目标文件的inode，这样主要便于进行进程级别的控制(如：只允许某些用户进程能够使用快速路径)。同时，还允许为同一文件区段，注册多个Socket fd，这种情况，内核需要将文件请求往所有对应的Socket上发送。
2)FUSE_REMOVE_FAST_PATH，用于向删掉内核注册的快速路径。其输入为：快速路径对应的id。其输出为：如果成功的话，返回0，失败则返回错误码。需要说明的是，对应目标文件被close之后，相应的快速路径会被内核自动删除。
3)FUSE_UPDATE_FAST_PATH，用于更新内核建立的预设对应关系，其输入为：快速路径对应的id，需要映射的Socket fd数组，需要映射的Socket fd的数组长度。其输出为：如果成功的话，返回0，失败则返回错误码。
4)FUSE_QUERY_FAST_PATH，用于向查询内核注册的快速路径。其输入为：目标文件对应的file handle，需要映射的目标文件的起始位置，映射的目标文件的文件长度。其输出为：如果存在相应快速路径，则返回快速路径对应的id、实际映射的目标文件的起始位置、实际映射的目标文件的长度以及Socket fd列表，不存在则返回-1。
综上所述，本公开中的数据访问装置包括Fuse模块、多个第一套接字接口以及存储器，Fuse模块通过多个第一套接字接口与存储器进行通信，Fuse模块和第一套接字接口位于内核空间，Fuse模块，用于先接收目标应用程序对目标数据的数据访问请求，之后从多个第一套接字接口中，确定与数据访问请求对应的目标套接字接口，再利用目标套接字接口从存储器中获取目标数据，并将目标数据发送至目标应用程序，以完成数据的访问。本公开可以通过Fuse模块，根据数据访问请求，利用目标套接字接口从存储器中获取目标数据，不需要在用户空间进行中转，能够直接在内核空间将数据访问请求发送到存储器，提高了对目标数据的访问性能。
图3是根据一示例性实施例示出的一种数据访问方法的流程图。如图3所示，应用于上述任一的数据访问装置，该方法可以包括以下步骤：
步骤201，通过Fuse模块接收目标应用程序对目标数据的数据访问请求，并从多个第一套接字接口中，确定与数据访问请求对应的目标套接字接口。
步骤202，通过Fuse模块利用目标套接字接口从存储器中获取目标数据，并将目标数据发送至目标应用程序，以完成数据的访问。
可选地，步骤201可以通过以下方式实现：
通过Fuse模块根据文件区段，利用预设对应关系，从多个第一套接字接口中，确定是否存在与文件区段对应的目标套接字接口，并在确定存在目标套接字接口的情况下，利用目标套接字接口将数据访问请求发送至存储器。其中，预设对应关系为文件区段与第一套接字接口之间的对应关系。
可选地，步骤201可以通过以下方式实现：
通过Fuse模块根据目标套接字接口对应的通信协议，利用目标套接字接口，将数据访问请求发送至存储器。
图4是根据图3所示实施例示出的另一种步骤201的流程图。如图4所示，步骤201可以包括以下步骤：
步骤2011，通过Fuse模块在确定不存在目标套接字接口的情况下，将数据访问请求发送至Fuse Daemon模块。
步骤2012，通过Fuse Daemon模块利用第二套接字接口从存储器中获取目标数据，并将目标数据发送至目标应用程序。
图5是根据图3所示实施例示出的又一种步骤201的流程图。如图5所示，步骤201还可以包括以下步骤：
步骤2013，通过Fuse Daemon模块在将目标数据发送至目标应用程序后，从存储器中获取数据访问请求对应的通信信息，并根据通信信息构建新的第一套接字接口，并将新的第一套接字接口注册到内核空间中。其中，通信信息包括通信地址和通信端口。
综上所述，本公开中的数据访问装置包括Fuse模块、多个第一套接字接口以及存储器，Fuse模块通过多个第一套接字接口与存储器进行通信，Fuse模块和第一套接字接口位于内核空间，Fuse模块，用于先接收目标应用程序对目标数据的数据访问请求，之后从多个第一套接字接口中，确定与数据访问请求对应的目标套接字接口，再利用目标套接字接口从存储器中获取目标数据，并将目标数据发送至目标应用程序，以完成数据的访问。本公开可以通过Fuse模块，根据数据访问请求，利用目标套接字接口从存储器中获取目标数据，不需要在用户空间进行中转，能够直接在内核空间将数据访问请求发送到存储器，提高了对目标数据的访问性能。
下面参考图6，其示出了适于用来实现本公开实施例的电子设备(例如图1中的终端设备或服务器)600的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图6示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示，电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601，其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中，还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常，以下装置可以连接至I/O接口605：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607；包括例如磁带、硬盘等的存储装置608；以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备600，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置609从网络上被下载和安装，或者从存储装置608被安装，或者从ROM 602被安装。在该计算机程序被处理装置601执行时，执行本公开实施例的方法中限定的上述功能。
需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：通过所述Fuse模块接收目标应用程序对目标数据的数据访问请求，并从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口；通过所述Fuse模块利用所述目标套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序，以完成数据的访问。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言——诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的***来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，模块的名称在某种情况下并不构成对该模块本身的限定，例如，Fuse模块还可以被描述为“接收对目标数据的数据访问请求的模块”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上***(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行***、装置或设备使用或与指令执行***、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体***、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例，示例1提供了一种数据访问装置，所述数据访问装置包括用户空间文件***Fuse模块、多个第一套接字接口以及存储器，所述Fuse模块通过多个所述第一套接字接口与所述存储器进行通信，所述Fuse模块和所述第一套接字接口位于内核空间；所述Fuse模块，用于接收目标应用程序对目标数据的数据访问请求，并从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口；所述Fuse模块，还用于利用所述目标套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序，以完成数据的访问。
根据本公开的一个或多个实施例，示例2提供了示例1的装置，所述数据访问请求包括所述目标数据在所述目标应用程序所要进行数据访问的目标文件中所处的文件区段；所述Fuse模块，用于根据所述文件区段，利用预设对应关系，从多个所述第一套接字接口中，确定是否存在与所述文件区段对应的目标套接字接口，并在确定存在所述目标套接字接口的情况下，利用所述目标套接字接口将所述数据访问请求发送至所述存储器；所述预设对应关系为所述文件区段与所述第一套接字接口之间的对应关系。
根据本公开的一个或多个实施例，示例3提供了示例2的装置，所述Fuse模块，用于根据所述目标套接字接口对应的通信协议，利用所述目标套接字接口，将所述数据访问请求发送至所述存储器。
根据本公开的一个或多个实施例，示例4提供了示例2的装置，所述数据访问装置还包括Fuse Daemon模块和第二套接字接口，所述Fuse Daemon模块通过所述第二套接字接口与所述存储器进行通信，所述Fuse Daemon模块和所述第二套接字接口位于用户空间；所述Fuse模块，还用于在确定不存在所述目标套接字接口的情况下，将所述数据访问请求发送至所述Fuse Daemon模块；所述Fuse Daemon模块，用于利用所述第二套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序。
根据本公开的一个或多个实施例，示例5提供了示例4所述的装置，所述FuseDaemon模块还用于在将所述目标数据发送至所述目标应用程序后，从所述存储器中获取所述数据访问请求对应的通信信息，并根据所述通信信息构建新的第一套接字接口，并将所述新的第一套接字接口注册到所述内核空间中；所述通信信息包括通信地址和通信端口。
根据本公开的一个或多个实施例，示例6提供了一种数据访问方法，应用于示例1至示例5中任一项所述的装置，所述方法包括：通过所述Fuse模块接收目标应用程序对目标数据的数据访问请求，并从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口；通过所述Fuse模块利用所述目标套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序，以完成数据的访问。
根据本公开的一个或多个实施例，示例7提供了示例6的方法，所述从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口，包括：通过所述Fuse模块根据所述文件区段，利用预设对应关系，从多个所述第一套接字接口中，确定是否存在与所述文件区段对应的目标套接字接口，并在确定存在所述目标套接字接口的情况下，利用所述目标套接字接口将所述数据访问请求发送至所述存储器；所述预设对应关系为所述文件区段与所述第一套接字接口之间的对应关系。
根据本公开的一个或多个实施例，示例8提供了示例7的方法，所述在确定存在所述目标套接字接口的情况下，利用所述目标套接字接口将所述数据访问请求发送至所述存储器，包括：通过所述Fuse模块根据所述目标套接字接口对应的通信协议，利用所述目标套接字接口，将所述数据访问请求发送至所述存储器。
根据本公开的一个或多个实施例，示例9提供了示例7的方法，所述从多个所述套接字接口中，确定与所述数据访问请求对应的目标套接字接口，包括：通过所述Fuse模块在确定不存在所述目标套接字接口的情况下，将所述数据访问请求发送至所述Fuse Daemon模块；通过所述Fuse Daemon模块利用所述第二套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序。
根据本公开的一个或多个实施例，示例10提供了示例7的方法，所述所述从多个所述套接字接口中，确定与所述数据访问请求对应的目标套接字接口，还包括：通过所述FuseDaemon模块在将所述目标数据发送至所述目标应用程序后，从所述存储器中获取所述数据访问请求对应的通信信息，并根据所述通信信息构建新的第一套接字接口，并将所述新的第一套接字接口注册到所述内核空间中；所述通信信息包括通信地址和通信端口。
根据本公开的一个或多个实施例，示例11提供了一种计算机可读介质，其上存储有计算机程序，该程序被处理装置执行时实现示例6至示例10中所述方法的步骤。
根据本公开的一个或多个实施例，示例12提供了一种电子设备，包括：存储装置，其上存储有至少一个计算机程序；至少一个处理装置，用于执行所述存储装置中的所述计算机程序，以实现示例6至示例10中所述方法的步骤。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外，虽然采用特定次序描绘了各操作，但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下，多任务和并行处理可能是有利的。同样地，虽然在上面论述中包含了若干具体实现细节，但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地，在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题，但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反，上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

Claims (8)

1.一种数据访问装置，其特征在于，所述数据访问装置包括用户空间文件***Fuse模块、多个第一套接字接口以及存储器，所述Fuse模块通过多个所述第一套接字接口与所述存储器进行通信，所述Fuse模块和所述第一套接字接口位于内核空间；
所述Fuse模块，用于接收目标应用程序对目标数据的数据访问请求，并从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口；
所述Fuse模块，还用于利用所述目标套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序，以完成数据的访问；
所述数据访问请求包括所述目标数据在所述目标应用程序所要进行数据访问的目标文件中所处的文件区段；
所述Fuse模块，用于根据所述文件区段，利用预设对应关系，从多个所述第一套接字接口中，确定是否存在与所述文件区段对应的目标套接字接口，并在确定存在所述目标套接字接口的情况下，利用所述目标套接字接口将所述数据访问请求发送至所述存储器；所述预设对应关系为所述文件区段与所述第一套接字接口之间的对应关系。
2.根据权利要求1所述的装置，其特征在于，所述Fuse模块，用于根据所述目标套接字接口对应的通信协议，利用所述目标套接字接口，将所述数据访问请求发送至所述存储器。
3.根据权利要求1所述的装置，其特征在于，所述数据访问装置还包括Fuse Daemon模块和第二套接字接口，所述Fuse Daemon模块通过所述第二套接字接口与所述存储器进行通信，所述Fuse Daemon模块和所述第二套接字接口位于用户空间；
所述Fuse模块，还用于在确定不存在所述目标套接字接口的情况下，将所述数据访问请求发送至所述Fuse Daemon模块；
所述Fuse Daemon模块，用于利用所述第二套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序。
4.根据权利要求3所述的装置，其特征在于，所述Fuse Daemon模块还用于在将所述目标数据发送至所述目标应用程序后，从所述存储器中获取所述数据访问请求对应的通信信息，并根据所述通信信息构建新的第一套接字接口，并将所述新的第一套接字接口注册到所述内核空间中；所述通信信息包括通信地址和通信端口。
5.一种数据访问方法，其特征在于，应用于权利要求1-4中任一项所述的装置，所述方法包括：
通过所述Fuse模块接收目标应用程序对目标数据的数据访问请求，并从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口；
通过所述Fuse模块利用所述目标套接字接口从所述存储器中获取所述目标数据，并将所述目标数据发送至所述目标应用程序，以完成数据的访问；
所述数据访问请求包括所述目标数据在所述目标应用程序所要进行数据访问的目标文件中所处的文件区段；所述从多个所述第一套接字接口中，确定与所述数据访问请求对应的目标套接字接口，包括：
通过所述Fuse模块根据所述文件区段，利用预设对应关系，从多个所述第一套接字接口中，确定是否存在与所述文件区段对应的目标套接字接口，并在确定存在所述目标套接字接口的情况下，利用所述目标套接字接口将所述数据访问请求发送至所述存储器；所述预设对应关系为所述文件区段与所述第一套接字接口之间的对应关系。
6.根据权利要求5所述的方法，其特征在于，所述在确定存在所述目标套接字接口的情况下，利用所述目标套接字接口将所述数据访问请求发送至所述存储器，包括：
通过所述Fuse模块根据所述目标套接字接口对应的通信协议，利用所述目标套接字接口，将所述数据访问请求发送至所述存储器。
7.一种计算机可读介质，其上存储有计算机程序，其特征在于，该程序被处理装置执行时实现权利要求5或6所述方法的步骤。
8.一种电子设备，其特征在于，包括：
存储装置，其上存储有至少一个计算机程序；
至少一个处理装置，用于执行所述存储装置中的所述至少一个计算机程序，以实现权利要求5或6所述方法的步骤。
CN202210307683.XA 2022-03-25 2022-03-25 数据访问装置、方法、可读介质和电子设备 Active CN114637703B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210307683.XA CN114637703B (zh) 2022-03-25 2022-03-25 数据访问装置、方法、可读介质和电子设备
PCT/CN2023/082366 WO2023179509A1 (zh) 2022-03-25 2023-03-18 数据访问装置、方法、可读介质和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210307683.XA CN114637703B (zh) 2022-03-25 2022-03-25 数据访问装置、方法、可读介质和电子设备

Publications (2)

Publication Number Publication Date
CN114637703A CN114637703A (zh) 2022-06-17
CN114637703B true CN114637703B (zh) 2023-09-01

Family

ID=81949214

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210307683.XA Active CN114637703B (zh) 2022-03-25 2022-03-25 数据访问装置、方法、可读介质和电子设备

Country Status (2)

Country Link
CN (1) CN114637703B (zh)
WO (1) WO2023179509A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114637703B (zh) * 2022-03-25 2023-09-01 北京有竹居网络技术有限公司 数据访问装置、方法、可读介质和电子设备
CN114979305B (zh) * 2022-06-30 2024-03-22 京东方科技集团股份有限公司 一种通信方法、装置、设备、存储介质及程序产品

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104301442A (zh) * 2014-11-17 2015-01-21 浪潮电子信息产业股份有限公司 一种基于fuse的访问对象存储集群的客户端的实现方法
CN107329838A (zh) * 2017-05-23 2017-11-07 努比亚技术有限公司 一种业务交互方法、终端和计算机可读存储介质
CN107479991A (zh) * 2017-08-25 2017-12-15 郑州云海信息技术有限公司 基于内核文件***的对象存储操作方法、装置及***
CN109857545A (zh) * 2018-12-29 2019-06-07 华为技术有限公司 一种数据传输方法及装置
CN112653740A (zh) * 2020-12-11 2021-04-13 北京金山云网络技术有限公司 支持quic连接迁移的负载均衡方法、装置及计算机产品
CN113591139A (zh) * 2021-10-08 2021-11-02 北京海誉动想科技股份有限公司 文件访问控制方法与装置
CN114089920A (zh) * 2021-11-25 2022-02-25 北京字节跳动网络技术有限公司 数据存储方法、装置、可读介质及电子设备

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6963905B1 (en) * 1997-09-29 2005-11-08 Emc Corporation System and method including a communication interface for transferring information between at least two processes
US10705952B2 (en) * 2015-11-04 2020-07-07 Sandisk Technologies Llc User space data storage management
CN108268609B (zh) * 2017-12-29 2022-01-28 星潮闪耀移动网络科技（中国）有限公司 一种文件路径的建立、访问方法和装置
CN114637703B (zh) * 2022-03-25 2023-09-01 北京有竹居网络技术有限公司 数据访问装置、方法、可读介质和电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104301442A (zh) * 2014-11-17 2015-01-21 浪潮电子信息产业股份有限公司 一种基于fuse的访问对象存储集群的客户端的实现方法
CN107329838A (zh) * 2017-05-23 2017-11-07 努比亚技术有限公司 一种业务交互方法、终端和计算机可读存储介质
CN107479991A (zh) * 2017-08-25 2017-12-15 郑州云海信息技术有限公司 基于内核文件***的对象存储操作方法、装置及***
CN109857545A (zh) * 2018-12-29 2019-06-07 华为技术有限公司 一种数据传输方法及装置
CN112653740A (zh) * 2020-12-11 2021-04-13 北京金山云网络技术有限公司 支持quic连接迁移的负载均衡方法、装置及计算机产品
CN113591139A (zh) * 2021-10-08 2021-11-02 北京海誉动想科技股份有限公司 文件访问控制方法与装置
CN114089920A (zh) * 2021-11-25 2022-02-25 北京字节跳动网络技术有限公司 数据存储方法、装置、可读介质及电子设备

Also Published As

Publication number Publication date
WO2023179509A1 (zh) 2023-09-28
CN114637703A (zh) 2022-06-17

Similar Documents

Publication Publication Date Title
CN114637703B (zh) 数据访问装置、方法、可读介质和电子设备
WO2023279891A1 (zh) 投屏设备的发现方法、装置、电子设备和存储介质
CN111400625B (zh) 页面处理方法、装置、电子设备及计算机可读存储介质
CN110996372B (zh) 消息路由方法、装置、***及电子设备
WO2023202276A1 (zh) 域名解析请求的处理方法、装置、设备、介质和程序产品
CN114201317B (zh) 数据传输方法、装置、存储介质及电子设备
CN111209306A (zh) 业务逻辑判断方法、装置、电子设备和存储介质
CN111241137B (zh) 数据处理方法、装置、电子设备及存储介质
CN112035529A (zh) 缓存方法、装置、电子设备及计算机可读存储介质
CN112099982A (zh) 一种崩溃信息定位方法、装置、介质和电子设备
CN112714042B (zh) 压力测试方法、装置、电子设备和存储介质
CN111309366B (zh) 一种管理注册核心的方法、装置、介质和电子设备
CN113391860B (zh) 服务请求处理方法、装置、电子设备及计算机存储介质
CN110545313B (zh) 消息推送控制方法、装置及电子设备
CN112162987A (zh) 数据处理方法、装置、设备及存储介质
CN116743785A (zh) 基于雾计算的云网数据存储方法、装置、设备及介质
CN111143355B (zh) 数据处理方法及装置
CN111787043A (zh) 数据请求方法和装置
CN115348260B (zh) 基于校园信息安全的信息处理方法、装置、设备和介质
CN116820354B (zh) 数据存储方法、数据存储装置和数据存储***
CN111314457B (zh) 设置虚拟私有云的方法和装置
CN112559394B (zh) ***库访问方法、装置以及电子设备
CN114297157B (zh) 文件处理方法、装置、设备及介质
CN116455652A (zh) 一种基于鉴权路由规则的处理方法、装置、设备及介质
CN112596753A (zh) 依赖包安装方法、装置、电子设备和计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant