技术领域
[0001] 本
发明涉及一种数据存储技术，特别是涉及一种数据读写请求方法、客户端及系统。
背景技术
[0002] 开源分布式
基础架构(Hadoop)为apache基金会开发的一个分布式系统架构，其三个主要的子项目分别为Hadoop分布式文件系统(Hadoop Distributed Filesystem，HDFS)，MapReduce，Hbase。在该分布式的存储
框架，存在一个主
节点和多个从节点。从节点定时向主节点发送心跳，与主节点之间维持通讯。客户端机器可以向从节点集群发送读写请求。现有的实现读写操作的方案为：客户端发起读写操作请求时，先向主节点请求，主节点告知客户端所请求读写操作对应的从节点，客户端再跟对应的从节点建立连接，进而完成数据的读写请求过程。整个交互的过程与从节点的所有操作均走某一特定网卡，一般为外网网卡。
[0003] 在实际的存储场景中，一般均为多个客户端同时并发进行读写，向从节点集群发送数据读写请求。如果多个客户端的并发数据读写请求落在从节点集群中的同一个从节点上，这样多个并发数据读写请求只能通过该一个从节点上的同一个网卡建立网络连接。由于一个网卡的网络上线传输速度固定，如千兆网卡每秒的传输数据量上线为1000Mb。所以多并发数据读写请求下，网卡可能成为读写流程的
瓶颈。
发明内容
[0004] 鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的数据读写请求方法、客户端及系统。
[0005] 依据本发明一个方面，提供了一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主
服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0006] 客户端从所述主服务器获取数据读写请求对应的数据服务器信息；
[0007] 获取
选定网卡，所述选定网卡为从所述数据读写请求对应的数据服务器的至少两个网卡中选取的用于数据服务器与客户端建立网络连接的网卡；
[0008] 向所述选定网卡发送数据读写请求。
[0009] 本发明另一个方面，提供了一种客户端，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0010] 获取单元，用于从所述主服务器获取数据读写请求对应的数据服务器信息；并获取选定网卡，所述选定网卡为从所述数据读写请求对应的数据服务器的至少两个网卡中选取的用于数据服务器与客户端建立网络连接的网卡；
[0011] 发送单元，用于向所述获取单元获取的选定网卡发送数据读写请求。
[0012] 本发明另一个方面，提供了一种数据读写请求系统，包括主服务器、数据服务器和如上所述的客户端；
[0013] 所述数据服务器定时向所述主服务器发送心跳，保持与所述主服务器的通信连接；
[0014] 所述主服务器接收所述客户端发送的获取数据读写请求对应的数据服务器信息的请求，并根据所述请求获取所述数据读写请求对应的数据服务器的信息，将所述数据服务器的信息发送给所述客户端。
[0015] 本发明另一个方面，提供了一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0016] 所述数据服务器向所述主服务器发送其自身至少两个网卡的网卡信息；
[0017] 所述主服务器接收并存储所述网卡信息；
[0018] 客户端从所述主服务器获取数据读写请求对应的数据服务器信息以及所述数据服务至少两个网卡的网卡信息；
[0019] 所述客户端根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡；
[0020] 向所述选定网卡发送数据读写请求。
[0021] 本发明另一个方面，提供了一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0022] 所述数据服务器向所述主服务器发送其自身至少两个网卡的网卡信息；
[0023] 所述主服务器接收并存储所述网卡信息；
[0024] 客户端向所述主服务器发送获取数据读写请求对应的数据服务器以及数据服务器中与所述客户端建立网络连接网卡的请求；
[0025] 所述主服务器接收所述请求，并根据所述请求获取数据读写请求对应的数据服务器信息以及所述数据服务器至少两个网卡的网卡信息；根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡，将获取的所述数据服务器信息和选定网卡的网卡信息发送给所述客户端；
[0026] 所述客户端接收所述主服务器发送的数据服务器信息和选定网卡的网卡信息；并根据所述数据服务器信息和选定网卡的网卡信息向所述选定网卡发送数据读写请求。
[0027] 本发明另一个方面，提供了一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0028] 客户端从所述主服务器获取数据读写请求对应的数据服务器信息；
[0029] 所述客户端根据所述数据服务器信息向对应的数据服务器发送获取网卡信息的请求；
[0030] 所述数据服务器接收到该请求后，获取其自身至少两个网卡的网卡信息，并将所述网卡信息发送给所述客户端；
[0031] 所述客户端接收所述网卡信息，根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡，并向所述选定网卡发送数据读写请求。
[0032] 借由上述技术方案，本发明
实施例提供的技术方案至少具有下列优点：
[0033] 本发明的数据读写请求方法、客户端及系统，在向数据服务器发送数据读写请求时，充分利用分布式存储系统中数据服务器的至少两个网卡，从所述至少两个网卡中选择一个网卡作为与所述客户端建立网络连接的网卡，当多个并发读写请求针对一个数据服务器时，可以使得读写请求通过不同的网卡进行，避免多个并发数据读写请求都通过同一个网卡建立连接，解决了网卡成为读写流程瓶颈的问题，在一定程度上提升了数据服务器的传输数据的吞吐量；并且使得分布式存储系统中数据服务器的至少两个网卡得到充分利用，提升了资源的利用率。
[0034] 上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照
说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
[0035] 通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
[0036] 图1示出了本发明实施例提供的一种数据读写请求方法
流程图；
[0037] 图2示出了本发明实施例提供的一种获取网卡信息的方法流程图；
[0038] 图3示出了本发明实施例提供的另一种获取网卡信息的方法流程图；
[0039] 图4示出了本发明实施例提供的另一种获取网卡信息的方法流程图；
[0040] 图5示出了本发明实施例提供的一种数据读写请求方法交互操作流程图；
[0041] 图6示出了本发明实施例提供的另一种数据读写请求方法交互操作流程图；
[0042] 图7示出了本发明实施例提供的另一种数据读写请求方法交互操作流程图；
[0043] 图8示出了本发明实施例提供的Hdfs框架下的写操作示意图；
[0044] 图9示出了本发明实施例提供的Hdfs框架下的读操作示意图；
[0045] 图10示出了本发明实施例提供的Hdfs框架下数据读写请求方法流程图；
[0046] 图11示出了本发明实施例提供的Hbase框架下的读写操作示意图；
[0047] 图12示出了本发明实施例提供的Hbase框架下数据读写请求方法流程图；
[0048] 图13示出了本发明实施例提供的另一种客户端的组成
框图；
[0049] 图14示出了本发明实施例提供的另一种客户端的组成框图；
[0050] 图15示出了本发明实施例提供的另一种客户端的组成框图；
[0051] 图16示出了本发明实施例提供的另一种客户端的组成框图；
[0052] 图17示出了本发明实施例提供的另一种客户端的组成框图；
[0053] 图18示出了本发明实施例提供的另一种客户端的组成框图；
[0054] 图19示出了本发明实施例提供的数据读写请求系统的组成框图。
具体实施方式
[0055] 下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
[0056] 本发明的实施例提供一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，如图1所示，该方法包括：包括：
[0057] 101、客户端从所述主服务器获取数据读写请求对应的数据服务器信息。
[0058] 其中，客户端从所述主服务器获取数据读写请求对应的数据服务器信息可以采用但不局限于以下的方法实现，该方法包括：
[0059] 客户端向该主服务器发送获取数据读写请求对应的数据服务器信息的请求，所述主服务器接收所述客户端的请求并根据所述请求获取所述数据读写请求对应的数据服务器的信息，将所述数据服务器的信息发送给所述客户端；客户端接收所述主服务器发送的所述数据读写请求对应的数据服务器信息。
[0060] 102、获取选定网卡，所述选定网卡为从所述数据读写请求对应的数据服务器的至少两个网卡中选取的用于数据服务器与客户端建立网络连接的网卡。
[0061] 需要说明的是，客户端在获取选定网卡时，基于其所处网络构架的不同，可以采用但不局限于以下的三种方法：
[0062] 第一种，从所述主服务器获取选定网卡。
[0063] 第二种，从所述主服务器获取数据读写请求对应的数据服务器的至少两个网卡的网卡信息，并根据该网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0064] 第三种，从所述数据读写请求对应的数据服务器获取数据服务器至少两个网卡的网卡信息，并根据该网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0065] 当客户端所处的网络构架为以下该种情况时，采用第一种或第二种方法获取选定网卡：数据服务器获取自身的至少两个网卡的网卡信息，并定期向主服务器汇报，主服务器根据汇报的数据服务器的网卡信息，建立一个新的数据结构来存储各个数据服务器以及其各自对应的至少两
块网卡的网卡信息的映射。
[0066] 当客户端所处的网络构架为以下该种情况时，采用第三种方法获取选定网卡：数据服务器获取自身的至少两个网卡的网卡信息，并存储在本地。
[0067] 103、向所述选定网卡发送数据读写请求。
[0068] 当采用第一种方法时，本发明的实施例提供一种获取选定网卡的方法，该方法可以为但不局限于以下方法，具体包括：
[0069] 向所述主服务器发送获取选定网卡的请求，以便所述主服务器接收到所述请求后，根据所述读写数据服务器上报的至少两个网卡的网卡信息，从所述至少两个网卡中选择一个网卡作为选定网卡，并将所述选定网卡的网卡信息发送给所述客户端。其中，需要说明的是，该向所述主服务器发送获取选定网卡的请求可以是单独向主服务器发送的请求，也可以是携带在向所述主服务器发送获取数据读写请求对应的数据服务器的请求中的请求，具体的本发明实施例对此不进行限制。
[0070] 接收所述主服务器发送的选定网卡的网卡信息，根据所所述网卡信息获取所述选定网卡。
[0071] 当采用第二种方法时，本发明的实施例提供一种获取选定网卡的方法，如图2所示，该方法包括：
[0072] 201、客户端向所述主服务器发送获取数据读写请求对应的数据服务器的请求。
[0073] 需要说明的是，在该种模式下，数据服务器获取自身的至少两块网卡的网卡信息，并定期向主服务器汇报，主服务器根据汇报的数据服务器的网卡信息，建立一个新的数据结构来存储各个数据服务器以及其各自对应的至少两块网卡的网卡信息的映射。在接收到客户端发送的所述请求后，主服务器确定该请求对应的数据服务器，并到该表格中查询该数据服务器对应的至少两个网卡的网卡信息；在获取该数据服务器的网卡信息之后，将该请求对应的数据服务器以及该数据服务器至少两个网卡的网卡信息一并发送给请求的客户端。
[0074] 202、客户端接收所述主服务器发送的所述读写数据服务器的信息和所述读写数据服务器对应的至少两个网卡的网卡信息。
[0075] 203、客户端根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0076] 当然，在从所述主服务器获取数据读写请求对应的数据服务器至少两个网卡的网卡信息时，除了上述方法以外，客户端还可以在从主服务器获取了对应的数据服务器之后，再单独向主服务器发送获取对应数据服务的网卡信息的请求，从而获取数据服务器至少两个网卡的网卡信息。本发明实施例对此不进行限定，任何一种方法都可以用于本发明实施中。
[0077] 当采用第三种方法获取选定网卡时，本发明的实施例提供一种获取选定网卡的方法，如图3所示，该方法包括：
[0078] 301、客户端向所述数据读写请求对应的数据服务器发送获取网卡信息的请求，以便所述数据读写请求对应的数据服务器在接收到该请求后获取其自身至少两个网卡的网卡信息，并将所述网卡信息反馈给所述客户端；
[0079] 302、客户端接收所述数据读写请求对应的数据服务器发送的其自身至少两个网卡的网卡信息。
[0080] 303、客户端根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0081] 进一步的，在将网卡信息获取后，客户端将网卡信息缓存在客户端本地，等到下次读写请求时，若该网卡信息还有效，则无需再向对应的数据服务器建立连接获取网卡信息。
[0082] 基于该网卡信息的存储，本发明实施例提供一种获取选定网卡的方法，如图4所示，该方法包括：
[0083] 401、检查所述客户端本地是否存储有所述数据读写请求对应的数据服务器的网卡信息；若存在，则执行402；若不存在，则执行403。
[0084] 402、确定所述客户端本地存储的网卡信息是否有效；若无效，则执行403；若有效，则执行405。
[0085] 其中，确定所述客户端本地存储的网卡信息是否有效可以通过但不局限于以下的方法实现，该方法为：客户端向所述网卡发送数据读写请求，以与数据服务器建立连接；若建立连接失败，则确定客户端本地存储的网卡信息失效；若建立连接成功，则确定客户端本地存储的网卡信息有效。
[0086] 除了上述方法以外，还可以设置网卡信息有效的期限，确定有效性时，检查其设定的有效期限是否已过，若有效期限已过，则确定客户端本地存储的网卡信息失效；若有效期限没过，则确定客户端本地存储的网卡有效。
[0087] 403、向所述数据读写请求对应的数据服务器发送获取网卡信息的请求。
[0088] 404、接收所述数据读写请求对应的数据服务器发送的其自身至少两个网卡的网卡信息。之后，执行406。
[0089] 405、从所述客户端本地获取所述数据读写请求对应的数据服务器至少两个网卡的网卡信息。之后，执行406。
[0090] 406、根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0091] 进一步的，在根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡时，可以采用但不局限于以下的方法，该方法包括：
[0092] 根据所述网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡。其中，所述网卡信息包括网卡的利用率，在根据所述网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡时，可以根据网卡的利用率，从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡。
[0093] 或者根据所述网卡信息从所述至少两个网卡中随机选择一个网卡作为选定网卡。
[0094] 进一步的，在写过程，因为要建立多数据服务器的pipeline，为了提高网卡的利用率，进而提升数据服务器的吞吐量，本发明实施例还提供一种方法，该方法包括：所述网卡类型包括内网网卡和外网网卡，在写操作请求的过程中，所述多个数据服务器之间均使用与选定网卡类型相同的网卡进行通信连接。例如，当选用的网卡为内网时，整个pipeline均使用内网网卡建立连接，当选用的网卡为外网时，整个pipeline均使用外网网卡建立连接。
[0095] 基于上述描述，本发明实施例以系统为例，具体阐述数据读写请求方法。
[0096] 本发明实施例提供了一种数据读写请求方法，如图5所示，该方法应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0097] 501、所述数据服务器向所述主服务器发送其自身至少两个网卡的网卡信息。
[0098] 502、所述主服务器接收并存储所述网卡信息。
[0099] 503、客户端从所述主服务器获取数据读写请求对应的数据服务器信息以及所述数据服务至少两个网卡的网卡信息。
[0100] 504、所述客户端根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡。
[0101] 505、向所述选定网卡发送数据读写请求。
[0102] 本发明实施例还提供了一种数据读写请求方法，如图6所示，该方法应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0103] 601、所述数据服务器向所述主服务器发送其自身至少两个网卡的网卡信息。
[0104] 602、所述主服务器接收并存储所述网卡信息。
[0105] 603、客户端向所述主服务器发送获取数据读写请求对应的数据服务器以及数据服务器中与所述客户端建立网络连接网卡的请求。
[0106] 604、所述主服务器接收所述请求，并根据所述请求获取数据读写请求对应的数据服务器信息以及所述数据服务器至少两个网卡的网卡信息。
[0107] 605、根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡。
[0108] 606、将获取的所述数据服务器信息和选定网卡的网卡信息发送给所述客户端。
[0109] 607、所述客户端接收所述主服务器发送的数据服务器信息和选定网卡的网卡信息；并根据所述数据服务器信息和选定网卡的网卡信息向所述选定网卡发送数据读写请求。
[0110] 本发明实施例还提供了一种数据读写请求方法，如图7所示，该方法应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0111] 701、客户端从所述主服务器获取数据读写请求对应的数据服务器信息。
[0112] 702、所述客户端根据所述数据服务器信息向对应的数据服务器发送获取网卡信息的请求。
[0113] 703、所述数据服务器接收到该请求后，获取其自身至少两个网卡的网卡信息。
[0114] 704、将所述网卡信息发送给所述客户端。
[0115] 705、所述客户端接收所述网卡信息，根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡。
[0116] 706、向所述选定网卡发送数据读写请求。
[0117] 需要说明的是，该分布式存储系统可以为但不局限于Hadoop系统，本发明实施例将以Hadoop系统为例进行具体实施例的阐述。
[0118] 其中，Hadoop系统的Hdfs框架如图8和图9所示，在Hdfs框架下，Datanode为从节点即数据服务器；Namenode为主节点即主服务器，client为客户端。Datanode机器可以通过java api获取到本机器的多块(至少两块)网卡信息，即多个ip。集群中的Datanode会定期将获取到的多个网卡信息均汇报给NameNode，在NameNode中建立一个新的数据结构来存储各个Datanode及其多个网卡信息的映射。基于上述工作模式，Hdfs适用于第一种获取网卡信息的方法。在Hdfs中实现数据读写请求的方法，如图10所示，包括：
[0119] 801、客户端向NameNode发请求获取需要读写的块对应的Datanode信息。
[0120] 802、NameNode将Datanode和其多个网卡信息均告知客户端。
[0121] 803、客户端获得到接下来要建立请求的Datanode的多个网卡信息，通过一个
算法，选择此次请求所使用的网卡。
[0122] 804、客户端向选择的网卡发送数据读写请求。
[0123] 另外注意，在写过程，因为要建立多台datanode的pipeline，客户端选择使用外网网卡还是内网网卡，一旦选定，则整个pipeline均使用同一类型的网卡建立连接。如选定使用内网网卡，则整个pipeline均使用内网网卡建立连接；如选定使用外网网卡，则整个pipeline均使用外网网卡建立连接。
[0124] 其中，Hadoop系统的Hbase框架如图11所示，其组成及工作原理如下：在Hbase的框架中，Hbase的存储单元为region，客户端要进行读写时,要向Hmaster进行请求获取对应region所在的server机器,成为RegionServer.然后客户端向RegionServer建立连接进行读写。在该框架下，RegionServer为从节点，即数据服务器，Hmaster为主节点，即主服务器，client为客户端。基于上述工作模式，Hbase适用于第二种获取网卡信息的方法。在Hdfs中实现数据读写请求的方法，如图12所示，包括：
[0125] 901、客户端向Hmaster获取要请求的regionserver机器。
[0126] 902、Hmaster将请求的regionserver机器发送给客户端。
[0127] 903、客户端通过外网向regionserver发送获取该regionserver的网卡信息的请求。
[0128] 904、Regionserver将自己的多个网卡信息发送给客户端。
[0129] 905、客户端接收Regionserver发送的网卡信息，并将该网卡信息缓存到本地。
[0130] 906、根据获取到的多个网卡信息选择一块用于建立连接的网卡。
[0131] 907、向选择的网卡发送数据读写请求。
[0132] 本发明的实施例还提供一种客户端，该客户端应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，如图13所示，该客户端包括：
[0133] 第一获取单元1001，用于从所述主服务器获取数据读写请求对应的数据服务器信息；并获取选定网卡，所述选定网卡为从所述数据读写请求对应的数据服务器的至少两个网卡中选取的用于数据服务器与客户端建立网络连接的网卡。
[0134] 发送单元1002，用于向所述获取单元获取的选定网卡发送数据读写请求。
[0135] 进一步的，如图14所示，所述获取单元1001在获取选定网卡时包括：
[0136] 第一获取模块10011，用于从所述主服务器获取数据读写请求对应的数据服务器至少两个网卡的网卡信息；其中，第一获取模块10011包括：发送子模块，用于向所述主服务器发送获取数据读写请求对应的数据服务器网卡信息的请求，以便所述主服务器接收到所述请求后将所述读写数据服务器上报的至少两个网卡的网卡信息反馈给所述客户端。第一接收子模块，用于接收所述主服务器发送的所述读写数据服务器对应的至少两个网卡的网卡信息。
[0137] 第一选择模块10012，用根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡
[0138] 进一步的，在根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数选定网卡时，可以采用但不局限于以下的方式，该方式包括：
[0139] 根据所述网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡。其中，所述网卡信息包括网卡的利用率，在根据所述网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡时，可以根据网卡的利用率，从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡。
[0140] 或者根据所述网卡信息从所述至少两个网卡中随机选择一个网卡作为选定网卡。
[0141] 进一步的，如图15所示，所述获取单元1001在获取选定网卡时包括：
[0142] 第一发送模块10013，用于向所述主服务器发送获取选定网卡的请求，以便所述主服务器接收到所述请求后，根据所述读写数据服务器上报的至少两个网卡的网卡信息，从所述至少两个网卡中选择一个网卡作为选定网卡，并将所述选定网卡的网卡信息发送给所述客户端。
[0143] 第一接收模块10014，用于接收所述主服务器发送的选定网卡的网卡信息，根据所所述网卡信息获取所述选定网卡。
[0144] 进一步的，如图16所示，所述获取单元1001在获取选定网卡时包括：
[0145] 第二发送模块10015，用于向所述数据读写请求对应的数据服务器发送获取网卡信息的请求，以便所述数据读写请求对应的数据服务器在接收到该请求后获取其自身至少两个网卡的网卡信息，并将所述网卡信息反馈给所述客户端。
[0146] 第二接收模块10016，用于接收所述数据读写请求对应的数据服务器发送的其自身至少两个网卡的网卡信息。
[0147] 第二选择模块10017，用于根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0148] 进一步的，如图17所示，该客户端还包括：
[0149] 存储单元1003，用于将获取的所述数据读写请求对应的数据服务器的至少两个网卡的网卡信息缓存在所述客户端本地。
[0150] 进一步的，如图18所示，所述获取模块1001还包括：
[0151] 检查模块10018，用于检查所述客户端本地是否存储有所述数据读写请求对应的数据服务器的网卡信息。
[0152] 确定模块10019，用于在检查到所述客户端本地存储有所述数据读写请求对应的数据服务器的网卡信息时，确定所述客户端本地存储的网卡信息是否有效。
[0153] 第二发送模块10015还用于，在确定所述客户端本地存储的网卡信息无效时，向所述数据读写请求对应的数据服务器发送获取网卡信息的请求。
[0154] 第二获取模块10020，用于在确定所述客户端本地存储的网卡信息有效时，从所述客户端本地获取所述数据读写请求对应的数据服务器至少两个网卡的网卡信息。
[0155] 需要说明的是，本发明实施中涉及客户端的各个组成模块的相关描述，可以参考方法部分的对应描述，本发明实施例此处将不再赘述。
[0156] 本发明的实施例还提供一种数据读写请求系统，如图19所示，该数据读写请求系统包括主服务器1101、数据服务器1102和如上所述的客户端1103。
[0157] 所述数据服务器1102定时向所述主服务器发送心跳，保持与所述主服务器1101的通信连接。
[0158] 所述主服务器1101接收所述客户端1103发送的获取数据读写请求对应的数据服务器信息的请求并根据所述请求获取所述获取数据读写请求对应的数据服务器的信息，将所述数据服务器的信息发送给所述客户端1103。
[0159] 需要说明的是，本发明实施中涉及的数据读写请求系统各组成部分的相关描述，可以参考方法部分以及客户端部分的对应描述，本发明实施例此处将不再赘述。
[0160] 借由上述技术方案，本发明实施例提供的技术方案至少具有下列优点：
[0161] 本发明的数据读写请求方法、客户端及系统，在向数据服务器发送数据读写请求时，充分利用分布式存储系统中数据服务器的至少两个网卡，根据网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为与所述客户端建立网络连接的网卡，当多个并发读写请求针对一个数据服务器时，可以使得读写请求通过不同的网卡进行，避免多个并发数据读写请求都通过同一个网卡建立连接，解决了网卡成为读写流程瓶颈的问题，在一定程度上提升了数据服务器的传输数据的吞吐量；并且使得分布式存储系统中数据服务器的至少两个网卡得到充分利用，提升了资源的利用率。
[0162] 在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
[0163] 可以理解的是，上述方法及装置中的相关特征可以相互参考。另外，上述实施例中的“第一”、“第二”等是用于区分各实施例，而并不代表各实施例的优劣。
[0164] 所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
[0165] 在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
[0166] 在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
[0167] 类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个
权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
[0168] 本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、
摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
[0169] 此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
[0170] 本发明的各个部件实施例可以以
硬件实现，或者以在一个或者多个处理器上运行的
软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用
微处理器或者数字
信号处理器(DSP)来实现根据本发明实施例的数据读写请求方法、客户端及系统中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，
计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网
网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
[0171] 应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干客户端的单元权利要求中，这些客户端中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
[0172] 本发明公开了A1、一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0173] 客户端从所述主服务器获取数据读写请求对应的数据服务器信息；
[0174] 获取选定网卡，所述选定网卡为从所述数据读写请求对应的数据服务器的至少两个网卡中选取的用于数据服务器与客户端建立网络连接的网卡；
[0175] 向所述选定的网卡发送数据读写请求。
[0176] A2、根据A1所述的方法，所述获取选定网卡包括：
[0177] 从所述主服务器获取数据读写请求对应的数据服务器至少两个网卡的网卡信息；
[0178] 根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0179] A3、根据A2所述的方法，从所述主服务器获取数据读写请求对应的数据服务器至少两个网卡的网卡信息具体包括：
[0180] 向所述主服务器发送获取数据读写请求对应的数据服务器网卡信息的请求，以便所述主服务器接收到所述请求后，将所述读写数据服务器上报的至少两个网卡的网卡信息反馈给所述客户端；
[0181] 接收所述主服务器发送的所述读写数据服务器对应的至少两个网卡的网卡信息。
[0182] A4、根据A1所述的方法，所述获取选定网卡包括：
[0183] 向所述主服务器发送获取选定网卡的请求，以便所述主服务器接收到所述请求后，根据所述读写数据服务器上报的至少两个网卡的网卡信息，从所述至少两个网卡中选择一个网卡作为选定网卡，并将所述选定网卡的网卡信息发送给所述客户端；
[0184] 接收所述主服务器发送的选定网卡的网卡信息，根据所所述网卡信息获取所述选定网卡。
[0185] A5、根据A1所述的方法，所述获取选定网卡包括：
[0186] 向所述数据读写请求对应的数据服务器发送获取网卡信息的请求，以便所述数据读写请求对应的数据服务器在接收到该请求后获取其自身至少两个网卡的网卡信息，并将所述网卡信息反馈给所述客户端；
[0187] 接收所述数据读写请求对应的数据服务器发送的其自身至少两个网卡的网卡信息；
[0188] 根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0189] A6、根据A5所述的方法，在接收所述数据读写请求对应的数据服务器发送的其自身至少两个网卡的网卡信息之后，还包括：
[0190] 将获取的所述数据读写请求对应的数据服务器至少两个网卡的网卡信息缓存在所述客户端本地。
[0191] A7、根据A6所述的方法，在向所述数据读写请求对应的数据服务器发送获取网卡信息的请求之前，还包括：
[0192] 检查所述客户端本地是否存储有所述数据读写请求对应的数据服务器的网卡信息；
[0193] 若存在，则确定所述客户端本地存储的网卡信息是否有效；
[0194] 若无效，则执行向所述数据读写请求对应的数据服务器发送获取网卡信息的请求；
[0195] 若有效，则从所述客户端本地获取所述数据读写请求对应的数据服务器至少两个网卡的网卡信息。
[0196] A8、根据A2、A4、A5任一项所述的方法，根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡具体包括：
[0197] 根据所述网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡；
[0198] 或者根据所述网卡信息从所述至少两个网卡中随机选择一个网卡作为选定网卡。
[0199] A9、根据A8所述的方法，所述网卡信息包括网卡的利用率，根据所述网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡具体为：
[0200] 根据网卡的利用率，从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡。
[0201] A10、根据A9所述的方法，所述网卡信息还包括网卡类型，所述网卡类型包括内网网卡和外网网卡，在写操作请求的过程中，所述多个数据服务器之间均使用与选定网卡类型相同的网卡进行通信连接。
[0202] 本发明公开B1、一种客户端，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0203] 获取单元，用于从所述主服务器获取数据读写请求对应的数据服务器信息；并获取选定网卡，所述选定网卡为从所述数据读写请求对应的数据服务器的至少两个网卡中选取的用于数据服务器与客户端建立网络连接的网卡；
[0204] 发送单元，用于向所述获取单元获取的选定网卡发送数据读写请求。
[0205] B2、根据B1所述的客户端，所述获取单元在获取数选定网卡时包括：
[0206] 第一获取模块，用于从所述主服务器获取数据读写请求对应的数据服务器至少两个网卡的网卡信息；
[0207] 第一选择模块，用根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0208] B3、根据B2所述的客户端，第一获取模块包括：
[0209] 发送子模块，用于向所述主服务器发送获取数据读写请求对应的数据服务器网卡信息的请求，以便所述主服务器接收到所述请求后，将所述读写数据服务器上报的至少两个网卡的网卡信息反馈给所述客户端；
[0210] 接收子模块，用于接收所述主服务器发送的所述读写数据服务器对应的至少两个网卡的网卡信息。
[0211] B4、根据B1所述的客户端，所述获取单元在获取数选定网卡时包括：
[0212] 第一发送模块，用于向所述主服务器发送获取选定网卡的请求，以便所述主服务器接收到所述请求后，根据所述读写数据服务器上报的至少两个网卡的网卡信息，从所述至少两个网卡中选择一个网卡作为选定网卡，并将所述选定网卡的网卡信息发送给所述客户端；
[0213] 第一接收模块，用于接收所述主服务器发送的选定网卡的网卡信息，根据所所述网卡信息获取所述选定网卡。
[0214] B5、根据B1所述的客户端，所述获取单元在获取数选定网卡时包括：
[0215] 第二发送模块，用于向所述数据读写请求对应的数据服务器发送获取网卡信息的请求，以便所述数据读写请求对应的数据服务器在接收到该请求后获取其自身至少两个网卡的网卡信息，并将所述网卡信息反馈给所述客户端；
[0216] 第二接收模块，用于接收所述数据读写请求对应的数据服务器发送的其自身至少两个网卡的网卡信息；
[0217] 第二选择模块，用于根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡。
[0218] B6、根据B5所述的客户端，还包括：
[0219] 存储单元，用于将获取的所述数据读写请求对应的数据服务器的至少两个网卡的网卡信息缓存在所述客户端本地。
[0220] B7、根据B6所述的客户端，所述获取单元还包括：
[0221] 检查模块，用于检查所述客户端本地是否存储有所述数据读写请求对应的数据服务器的网卡信息；
[0222] 确定模块，用于在检查到所述客户端本地存储有所述数据读写请求对应的数据服务器的网卡信息时，确定所述客户端本地存储的网卡信息是否有效；
[0223] 所述第二发送模块还用于，在确定所述客户端本地存储的网卡信息无效时，向所述数据读写请求对应的数据服务器发送获取网卡信息的请求；
[0224] 第二获取模块，用于在确定所述客户端本地存储的网卡信息有效时，从所述客户端本地获取所述数据读写请求对应的数据服务器至少两个网卡的网卡信息。
[0225] B8、根据B2、B4、B5任一项所述的客户端，根据所述网卡信息从所述至少两个网卡中选择一个网卡作为选定网卡具体包括：
[0226] 根据所述网卡信息从所述至少两个网卡中选择一个负载量低的网卡作为选定网卡；
[0227] 或者根据所述网卡信息从所述至少两个网卡中随机选择一个网卡作为选定网卡。
[0228] B9、根据B8所述的客户端，所述网卡信息包括网卡的利用率时，根据网卡的利用率，从所述至少两个网卡中选择一个负载低的网卡作为选定网卡。
[0229] 本发明公开了C1、一种数据读写请求系统，包括主服务器、数据服务器和如B1-B9任一项所述的客户端；
[0230] 所述数据服务器定时向所述主服务器发送心跳，保持与所述主服务器的通信连接；
[0231] 所述主服务器接收所述客户端发送的获取数据读写请求对应的服务器信息的请求，并根据所述请求获取所述数据读写请求对应的数据服务器的信息，将所述数据服务器的信息发送给所述客户端。
[0232] 本发明公开了D1、一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0233] 所述数据服务器向所述主服务器发送其自身至少两个网卡的网卡信息；
[0234] 所述主服务器接收并存储所述网卡信息；
[0235] 客户端从所述主服务器获取数据读写请求对应的数据服务器信息以及所述数据服务至少两个网卡的网卡信息；
[0236] 所述客户端根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡；
[0237] 向所述选定网卡发送数据读写请求。
[0238] 本发明公开了E1、一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0239] 所述数据服务器向所述主服务器发送其自身至少两个网卡的网卡信息；
[0240] 所述主服务器接收并存储所述网卡信息；
[0241] 客户端向所述主服务器发送获取数据读写请求对应的数据服务器以及数据服务器中与所述客户端建立网络连接网卡的请求；
[0242] 所述主服务器接收所述请求，并根据所述请求获取数据读写请求对应的数据服务器信息以及所述数据服务器至少两个网卡的网卡信息；根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡，将获取的所述数据服务器信息和选定网卡的网卡信息发送给所述客户端；
[0243] 所述客户端接收所述主服务器发送的数据服务器信息和选定网卡的网卡信息；并根据所述数据服务器信息和选定网卡的网卡信息向所述选定网卡发送数据读写请求。
[0244] 本发明公开了F1、一种数据读写请求方法，应用于分布式存储系统，所述分布式存储系统包括主服务器和数据服务器，所述数据服务器设置有至少两个网卡，包括：
[0245] 客户端从所述主服务器获取数据读写请求对应的数据服务器信息；
[0246] 所述客户端根据所述数据服务器信息向对应的数据服务器发送获取网卡信息的请求；
[0247] 所述数据服务器接收到该请求后，获取其自身至少两个网卡的网卡信息，并将所述网卡信息发送给所述客户端；
[0248] 所述客户端接收所述网卡信息，根据所述网卡信息从所述至少两个网卡中选择一个网卡作为数据服务器与所述客户端建立网络连接的选定网卡，并向所述选定网卡发送数据读写请求。
