掌桥专利:专业的专利平台
掌桥专利
首页

访问数据源的方法、装置、设备和计算机可读介质

文献发布时间:2023-06-19 11:52:33


访问数据源的方法、装置、设备和计算机可读介质

技术领域

本发明涉及大数据技术领域,尤其涉及一种访问数据源的方法、装置、设备和计算机可读介质。

背景技术

单体应用是单个应用程序的应用。单体应用一般是采用分层、分包的方式,来实现代码的解耦和管理。

目前,单体应用为了连接多个数据源,会在应用层面进行改造,修改业务逻辑,以完成对每个数据源访问。

在实现本发明过程中,发明人发现现有技术中至少存在如下问题:应用层面的改造涉及改造业务代码,对业务具有侵入性。

发明内容

有鉴于此,本发明实施例提供一种访问数据源的方法、装置、设备和计算机可读介质,能够无需改造业务代码,避免对业务的侵入性。

为实现上述目的,根据本发明实施例的一个方面,提供了一种访问数据源的方法,包括:

获取多个数据源中每个数据源的标识;

按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法;

按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。

所述获取多个数据源中每个数据源的标识,包括:

从业务请求中,获取多个数据源中每个数据源的标识。

所述业务请求是通过客户端的输入参数建立的请求。

所述数据源的标识包括以下一种或多种:SQL语句标识、交易码和模块号。

所述按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法,包括:

按照所述每个数据源的标识所属种类,在多个路由算法中配置所述数据源的路由算法。

所述路由算法包括以下一种或多种:一致性哈希算法、随机算法、单库算法、交易码单库算法、模块号单库算法和SQL语句单库算法。

所述按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法,包括:

所述数据源的标识属于SQL语句标识,在多个路由算法中配置哈希算法或随机算法。

所述按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法,包括:

所述数据源的标识属于SQL语句标识,在多个路由算法中配置SQL语句单库算法。

所述按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法,包括:

所述数据源的标识属于交易码,在多个路由算法中配置交易码单库算法。

所述按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法,包括:

所述数据源的标识属于模块号,在多个路由算法中配置模块号单库算法。

所述按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法,包括:

所述数据源的标识属于非交易码、非模块号且非SQL语句标识,在多个路由算法中配置一致性哈希算法。

所述按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法,包括:

所述数据源的标识属于非交易码、非模块号且非SQL语句标识,在多个路由算法中配置单库算法。

所述按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源,包括:

按照所述单库算法访问对应的数据源的默认数据库,以实现访问多个数据源。

所述按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源,包括:

按照所述SQL语句单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

所述按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源,包括:

按照所述交易码单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

所述按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源,包括:

按照所述模块号单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

所述方法还包括:

按照所述数据源的预设算法标识,调用底层数据库。

根据本发明实施例的第二方面,提供了一种访问数据源的装置,包括:

获取模块,用于获取多个数据源中每个数据源的标识;

配置模块,用于按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法;

访问模块,用于按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。

根据本发明实施例的第三方面,提供了一种访问数据源的电子设备,包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如上述的方法。

根据本发明实施例的第四方面,提供了一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现如上述的方法。

上述发明中的一个实施例具有如下优点或有益效果:获取多个数据源中每个数据源的标识;按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法;按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。按照数据源的路由算法实现访问多个数据源,而无需改造业务代码,因而避免对业务的侵入性。

上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。

附图说明

附图用于更好地理解本发明,不构成对本发明的不当限定。其中:

图1是根据本发明实施例的访问数据源的方法的主要流程的示意图;

图2是根据本发明实施例的数据源的标识的示意图;

图3是根据本发明实施例的路由算法的种类示意图;

图4是根据本发明实施例的访问数据源的装置的主要结构的示意图;

图5是本发明实施例可以应用于其中的示例性系统架构图;

图6是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。

具体实施方式

以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。

单体应用为了连接多个数据源,改造应用层面涉及业务代码,以访问多个数据源。如,单体应用是信用卡系统,或单体应用是企业现金系统。

作为一个示例,单体应用包括大量数据,需要拆分数据。如:拆分信号卡账户涉及数据,或拆分消费服务涉及数据。拆分数据涉及不同数据库。那么,单体应用需要连接多个数据库的数据源。

但在上述应用层面的改造,涉及改造业务代码,对业务具有侵入性。

为了解决改造业务代码,对业务具有侵入性的技术问题,可以采用以下本发明实施例中的技术方案。

参见图1,图1是根据本发明实施例的访问数据源的方法主要流程的示意图,通过路由算法实现访问多个数据源的数据库。如图1所示,具体包括以下步骤:

S101、获取多个数据源中每个数据源的标识。

数据源是指数据库应用程序所使用的数据库或者数据库服务器。在数据源中存储所有建立数据库连接的信息。类似于通过指定文件名称,就可以在文件系统中找到文件一样,通过提供正确的数据源名称,可以找到相应的数据库连接。

在本发明实施例中,为了在不修改代码的情况下连接多个数据源,首先需要为数据源配置路由算法。然后,再按照路由算法访问数据源。

在本发明的一个实施例中,从业务请求中,获取多个数据源中每个数据源的标识。业务请求是用户通过客户端建立的信息。在客户端处,用户设置输入参数以建立业务请求。也就是说,业务请求是通过客户端的输入参数建立的请求。作为一个示例,业务请求是请求报文。

在客户端用户可以输入参数。作为一个示例,用户输入数据源的标识。其中,客户端可以位于PC端和/或移动终端。

参见图2,图2是根据本发明实施例的数据源的标识的示意图。在本发明的一个实施例中,数据源的标识包括以下一种或多种:SQL语句标识、交易码和模块号。

SQL语句标识(SQLMAPID)是用于区分不同的SQL语句。交易码是唯一标识交易的交易识别要素。作为一个示例,请求报文中包括交易码。模块号是预定义模块的标识。作为一个示例,预定义模块是信用卡的消费模块、信用卡的账户模块或信用卡的业务审批模块。

S102、按照每个数据源的标识,在多个路由算法中配置数据源的路由算法。

对于每个数据源而言均有对应的标识。按照每个数据源的标识,在多个路由算法中配置数据源的路由算法。具体来说,属于同一种类的数据的标识,配置相同的路由算法。

即,按照每个数据源的标识所属种类,在多个路由算法中配置数据源的路由算法。两个数据源的属于相同种类,则所配置数据源的路由算法一致;两个数据源不属于相同种类,则所配置数据源的路由算法不一致的情况居多。

在本发明实施例,数据源的标识的种类包括SQL语句标识种类、交易码种类和模块号种类。SQL语句标识种类包括SQL语句标识。交易码种类包括交易码。模块号种类包括模块号。

参见图3,图3是根据本发明实施例的路由算法的种类示意图。在本发明的实施例中,路由算法包括以下一种或多种:一致性哈希算法(hashAlg)、随机算法(randomAlg)、单库算法、交易码单库算法(systxcodeAlg)、模块号单库算法(modelAlg)和SQL语句单库算法(singleAlg)。

下面针对不同类别的数据源进行示例性的说明。

数据源的标识属于SQL语句标识:

在本发明的一个实施例中,每个数据源的标识属于SQL语句标识,在多个路由算法中配置哈希算法或随机算法。

作为一个示例,采用以下方式为属于SQL语句标识的数据源的标识配置随机算法。

multidb.routingAlgorithm.sqlmapidStrategy.SQLMAPID=算法名

multidb.routingAlgorithm.sqlmapidStrategy.s11.pogetbypk=randomAlg

上述内容表示,SQLMAPID为s11.po-getbypk的数据库访问语句,路由算法采用随机算法。

在本发明的一个实施例中,数据源的标识属于SQL语句标识,在多个路由算法中配置SQL语句单库算法。

作为一个示例,采用以下方式为属于SQL语句标识的数据源的标识配置,SQL语句单库算法。

multidb.routingAlgorithm.singleStrategy.sqlmapid.SQLMAPID=singleAlg

multidb.routingAlgorithm.singleStrategy.sqlmapid.s31.rpo-getbypk=singleAlg

multidb.routingSetSingle.sqlmapid.s31.rpo-getbypk=1

上述内容表示,SQLMAPID为s31.rpo-getbypk的数据库访问语句,访问配置的数据库。

数据源的标识属于交易码:

在本发明的一个实施例中,数据源的标识属于交易码,在多个路由算法中配置,交易码单库算法。

作为一个示例,采用以下方式为属于交易码的数据源的标识配置,交易码单库算法。

multidb.routingAlgorithm.txcodeStrategy.交易码=算法名

multidb.routingAlgorithm.txcodeStrategy.A05817102=systxcodeAlg

上述内容表示,交易码A05817102,使用交易码单库算法。

数据源标识属于模块号:

在本发明的一个实施例中,数据源的标识属于模块号,在多个路由算法中配置模块号单库算法。

作为一个示例,采用以下方式为属于模块号的数据源的标识配置,模块号单库算法。

multidb.routingAlgorithm.modelStrategy.模块号=算法名

multidb.routingAlgorithm.modelStrategy.71=modelAlg

上述内容表示71的模块,使用模块号单库算法。

在本发明的一个实施例中,数据源的标识属于非交易码、非模块号且非SQL语句标识,在多个路由算法中配置一致性哈希算法。

作为一个示例,采用以下方式为属于非交易码、非模块号且非SQL语句标识的标识,配置一致性哈希算法。

multidb.routingAlgorithm.default=算法名

multidb.routingAlgorithm.default=hashAlg

上述内容表示,上述标识属于非交易码、非模块号且非SQL语句标识。也就是说,上述标识不属于下述任意一种标识:交易码、模块号和SQL语句标识。那么,采用一致性哈希算法作为默认路由算法。

在本发明的一个实施例中,数据源的标识属于非交易码、非模块号且非SQL语句标识,在多个路由算法中配置单库算法。

作为一个示例,采用以下方式为属于非交易码、非模块号且非SQL语句标识的标识,配置单库算法。

采用以下方式为属于非交易码、非模块号且非SQL语句标识的标识,配置单库算法。

配置规则如下:

multidb.routingAlgorithm.default=defaultSingleAlg

multidb.routingSetDefault.single=1

上述内容表示,上述标识属于非交易码、非模块号且非SQL语句标识,缺省使用单库算法。

S103、按照数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。

在确定每个数据源的路由算法之后,就可以按照数据源的路由算法访问对应的数据源的数据库。对于每个数据源而言,都可以实现访问,进而实现访问多个数据源。

下面结合不同数据源的标识进行示例性的说明。

在本发明的一个实施例中,对于数据源的标识属于非交易码、非模块号且非SQL语句标识,是按照单库算法访问对应的数据源的数据库。其中,所访问数据源的数据库是默认数据库。作为一个示例,默认数据库编号为1。

在本发明的一个实施例中,数据源的标识属于SQL语句,按照SQL语句单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

作为一个示例,multidb.routingSetSingle.sqlmapid.SQLMAPID=单库编号

multidb.routingSetSingle.sqlmapid.s31.rpo-getbypk=1

上述内容表示,SQLMAPID为s31.rpo-getbypk的语句,访问数据库编号为1。

在本发明的一个实施例中,数据源的标识属于交易码,按照交易码单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

作为一个示例,multidb.routingSetTxcode.交易码=数据库号

multidb.routingSetTxcode.A05817102=1

上述内容表示,交易码A05817102,访问数据库编号是1。

在本发明的一个实施例中,数据源的标识属于模块号,按照模块号单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

作为一个示例,multidb.routingSetModel.模块号=数据库号

示例:multidb.routingSetModel.71=2

上述内容表示,模块号是71访问的数据库编号为2。

在本发明的一个实施例中,为了调用底层数据库,还可以按照数据源的预设算法标识,调用底层数据库。

作为一个示例,针对数据源的标识设置noAlg,则可以直接调用底层数据库。

在上述本发明的实施例中,获取多个数据源中每个数据源的标识;按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法;按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。按照数据源的路由算法实现访问多个数据源,而无需改造业务代码,因而避免对业务的侵入性。

参见图4,图4是根据本发明实施例的访问数据源的装置的主要结构的示意图,访问数据源的装置可以实现访问数据源的方法,如图4所示,访问数据源的装置具体包括:

获取模块401,用于获取多个数据源中每个数据源的标识;

配置模块402,用于按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法;

访问模块403,用于按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。

在本发明的一个实施例中,获取模块401,具体用于从业务请求中,获取多个数据源中每个数据源的标识。

在本发明的一个实施例中,所述业务请求是通过客户端的输入参数建立的请求。

在本发明的一个实施例中,所述数据源的标识包括以下一种或多种:SQL语句标识、交易码和模块号。

在本发明的一个实施例中,配置模块402,具体用于按照所述每个数据源的标识所属种类,在多个路由算法中配置所述数据源的路由算法。

在本发明的一个实施例中,所述路由算法包括以下一种或多种:一致性哈希算法、随机算法、单库算法、交易码单库算法、模块号单库算法和SQL语句单库算法。

在本发明的一个实施例中,配置模块402,具体用于所述数据源的标识属于SQL语句标识,在多个路由算法中配置哈希算法或随机算法。

在本发明的一个实施例中,配置模块402,具体用于所述数据源的标识属于SQL语句标识,在多个路由算法中配置SQL语句单库算法。

在本发明的一个实施例中,配置模块402,具体用于所述数据源的标识属于交易码,在多个路由算法中配置交易码单库算法。

在本发明的一个实施例中,配置模块402,具体用于所述数据源的标识属于模块号,在多个路由算法中配置模块号单库算法。

在本发明的一个实施例中,配置模块402,具体用于所述数据源的标识属于非交易码、非模块号且非SQL语句标识,在多个路由算法中配置一致性哈希算法。

在本发明的一个实施例中,配置模块402,具体用于所述数据源的标识属于非交易码、非模块号且非SQL语句标识,在多个路由算法中配置单库算法。

在本发明的一个实施例中,访问模块403,具体用于按照所述单库算法访问对应的数据源的默认数据库,以实现访问多个数据源。

在本发明的一个实施例中,访问模块403,具体用于按照所述SQL语句单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

在本发明的一个实施例中,访问模块403,具体用于按照所述交易码单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

在本发明的一个实施例中,访问模块403,具体用于按照所述模块号单库算法访问对应的数据源的配置数据库,以实现访问多个数据源。

在本发明的一个实施例中,访问模块403,还用于按照所述数据源的预设算法标识,调用底层数据库。

图5示出了可以应用本发明实施例的访问数据源的方法或访问数据源的装置的示例性系统架构500。

如图5所示,系统架构500可以包括终端设备501、502、503,网络504和服务器505。网络504用以在终端设备501、502、503和服务器505之间提供通信链路的介质。网络504可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备501、502、503通过网络504与服务器505交互,以接收或发送消息等。终端设备501、502、503上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。

终端设备501、502、503可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器505可以是提供各种服务的服务器,例如对用户利用终端设备501、502、503所浏览的购物类网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理,并将处理结果(例如目标推送信息、产品信息--仅为示例)反馈给终端设备。

需要说明的是,本发明实施例所提供的访问数据源的方法一般由服务器505执行,相应地,访问数据源的装置一般设置于服务器505中。

应该理解,图5中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。

下面参考图6,其示出了适于用来实现本发明实施例的终端设备的计算机系统600的结构示意图。图6示出的终端设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。

如图6所示,计算机系统600包括中央处理单元(CPU)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。

以下部件连接至I/O接口605:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。

特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时,执行本发明的系统中限定的上述功能。

需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。

附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括获取模块、配置模块和访问模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,获取模块还可以被描述为“用于获取多个数据源中每个数据源的标识”。

作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:

获取多个数据源中每个数据源的标识;

按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法;

按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。

根据本发明实施例的技术方案,获取多个数据源中每个数据源的标识;按照所述每个数据源的标识,在多个路由算法中配置所述数据源的路由算法;按照所述数据源的路由算法访问对应的数据源的数据库,以实现访问多个数据源。按照数据源的路由算法实现访问多个数据源,而无需改造业务代码,因而避免对业务的侵入性。

上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

相关技术
  • 访问数据源的方法、装置、设备和计算机可读介质
  • 多数据源的处理方法、装置、设备及计算机可读存储介质
技术分类

06120113083801