分布式数据库系统

摘要： 文章设计了一种基于区块链的分布式电子文件安全存储模型,实现了电子文件数据的可信、去中心化管理。模型主要包括以下实体:(1)分布式数据库系统。将电子文件以密文的形式存储到数据库中。Step1生成电子文件的元数据。参考电子文件统一元数据模型,提取电子文件的技术环境、责任者、业务和法规等关键词。

摘要： 随着互联网技术与电子应用的高速发展,大数据所表现出的复杂性与多样性使得传统的存储方案的安全性已难以满足大部分用户的需求,分布式数据库系统凭借其灵活的体系结构以及高扩展性,迅速发展为数据库系统的大趋势,但在互联网时代下分布式数据库在网络安全方面仍面临着巨大的挑战.本文以分布式数据库系统的结构和不稳定因素为重点展开探讨,结合系统入侵案例展开分析,设计制定网络安全策略以保证系统的安全性与稳定性.

摘要： 文章根据国内外区块链技术发展现状,为改善传统农业供应链管理手段的不足,设计利用区块链技术来管理农业供应链平台.利用分布式数据库系统的技术原理,设计出适用于现代化标准的管理农业供应链的商用平台,以达到分布式 、 网络化 、 智能化管理农业供应链的目的,对于消除从农场到餐桌或者原材料到客户端的全流程管理不受信任,以及解决供应链各环节成交效率低下导致农民亏损的问题具有重要意义.

摘要： 我国企业数量庞大,这些企业的良性发展也使得国家的经济能够稳定增长,企业财务管理的好坏直接影响企业未来的发展前景,随 着计算机技术的不断发展,企业建立财务管理系统来帮助企业财务人员进行财务管理工作已经是十分普遍的现象,但是随着企业规模的不断扩 大,传统利用集中式数据库系统建立的财务管理系统已经难以满足企业的需求,加重了财务管理人员的负担,影响财务工作效率。利用新兴的 分布式数据库系统建立财务管理系统,提高财务工作效率是企业管理层应该思考的问题。

摘要： 区块链(Blockchain)是通过去中心化的方式,由多个网络节点集体维护一个分布式数据库的技术方案。数据存储在区块中,区块按时间顺序先后生成,每个区块中包含了过去一段时间内网络上所有交易信息,区块与区块相连成链条构成区块链。从技术角度看,区块链是在点对点网络上构建一个分布式数据库系统,利用非对称加密算法对每一个区块进行加密,区块相连形成区块链。

摘要： 当前区块链行业鱼龙混杂,各种概念泛滥、混淆视听。想必很多人对于区块链的类型还不甚明白,对于商家卖给自己链的类型还不清楚,而要想搞明白自家链究竟是什么链,首先得清楚区块链的定义。区块链是由多个独立节点共同参与的分布式数据库系统,也可以理解为一种特别的分布式账本,由这些节点共同维护,它很难修改、很难伪造、可追溯。

摘要： Recently,RDF (resource description framework) has been widely used to expose,share,and connect pieces of data on the Web,while SPARQL (simple protocol and RDF query language) is a structured query language to access RDF repository.As RDF datasets increase in size,evaluating SPARQL queries over current RDF repositories is beyond the capacity of a single machine.As a result,a high performance distributed RDF database system is needed to efficiently evaluate SPARQL queries.There are a huge number of works for distributed RDF data management following different approaches.In this paper we provide an overview of these works.This survey considers three kinds of distributed data management approaches,including cloud-based distributed data management approaches,partitioning-based distributed data management approaches and federated RDF systems.Simply speaking,cloud-based distributed data management approaches use existing cloud platforms to manage large RDF datasets;partitioning-based distributed data management approaches divide an RDF graph into several fragments and place each fragment at a different site in a distributed system;and federated RDF systems disallow for re-partitioning the data,since the data has been distributed over their own autonomous sites.In each kind of distributed data management approaches,further discussions are also provided to help readers to understand the characteristics of different approaches.%资源描述框架(resource description framework,RDF)作为一个展示、共享和连接网络上的数据的模型,已经被广泛地用在各种应用中.同时,SPARQL(simple protocol and RDF query language)作为一种结构化查询语言则被用来支持对RDF数据进行查询检索.随着RDF数据规模的日益增长,在现有RDF数据库上进行SPARQL查询处理已经超出了单机的处理能力.于是,人们需要设计出高性能的分布式RDF数据库以支持对SPARQL查询进行高效的处理.当前,已经有大量的工作来讨论如何搭建分布式RDF数据管理系统.对这些不同的分布式RDF数据管理方法进行综述,将现有的分布式RDF数据管理方法分成3类:基于云计算平台的分布式RDF数据管理方法、基于数据划分的分布式RDF数据管理方法和联邦式系统.基于云计算平台的分布式RDF数据管理方法利用已有云平台进行RDF数据的管理;基于数据划分的分布式RDF数据管理方法首先将RDF数据图划分成若干子图,然后将这些子图分配到不同计算节点上;联邦式系统的特点是数据已经分布在不同节点上,数据管理系统无法控制数据的分布.在每类分布式RDF数据管理方法的介绍中,将深入讨论以帮助读者了解各种方法的特点.

摘要： Aiming at uneven load between servers in distributed database,a two layer load balancing strategy based on data locality was proposed.The nodes were divided uniformly into several subblocks according to regional locality of data access.A sub-load equalizer was used for load balance,eventually the central load equilizer was selected to complete global co-ordination.The local property of the data was utilized to avoid the congestion of the load equalizer message communication with one total load equalizer.At the same time,a low overhead load monitoring method was presented,in which the node was changed to send its load status to load equalizer in a lazy way,thus communication overhead and load equalizer of the queue length could be effectively reduced.A lazy load transfer method was proposed based on this strategy,combing data access and load transfer.Through accessing to the inter node indirectly the load transfer,the two operations were overlapped to reduce system overhead.The experimental results of Q22 test based on complex query algorithm shows that the proposed method has the average response time of no more than 10 seconds under different threads and methods,which can reduce the overhead of load balancing and ensure the system efficiency.%针对现有分布式数据库的服务器间负载不均的问题,提出了一种基于数据局部性的两层负载均衡方法.该方法根据数据访问的区域局部性将节点均匀地划分为若干子分块,并由子负载均衡器统筹子块中的负载均衡分配,最终通过中央负载进行全局统筹.该方法一方面利用了数据可能的局部性,另一方面避免了只有一个总负载均衡器的结构中,负载均衡器消息通信拥塞的情况.同时,提出一种低开销的负载监控方法,节点以懒惰的方式向负载均衡器发送自己的负载状态变化情况,可以有效地降低系统通信开销和负载均衡器的队列长度.在此基础上提出一种懒惰负载迁移方法,该方法将数据访问与负载转移相结合,通过跨节点访问的方式间接地进行了负载迁移,通过将两种操作重叠来减少系统的额外开销.基于复杂query算法的Q22测试结果显示该方法在不同线程和方法下的平均响应时间变化不超过10s,表明此方法能够有效减少负载均衡过程中产生的额外开销,保证系统的高效运行.

摘要： 文章首先分析了基于分布式数据库系统的并发控制算法引入形式,以及控制功能实现的理论基础.在此基础上针对运行使用技术方法探讨有效的解决技术措施,针对控制方法实现特征整理出需要注意的相关技术因素,为数据库系统运行使用创造稳定的基础环境,进一步提升并发控制方法的问题解决能力.

摘要： 分布武数据库系统是数据库领域中的一个主要研究方向,数据一致性维护是分布式数据库系统中的一个非常关键的技术问题.在分析分布式数据库系统体系结构的基础上,讨论了两种一致性方法:两阶段提交和复制服务器,并提出一种具有复制服务器的分布式数据库系统的结构框架,它具有有效性和实用性.

摘要： 分布式数据库系统实现了应用数据的合理分布和有效共享,是信息系统建设的核心.数据一致性和系统健壮性问题是分布式数据库系统建设中的主要技术难题,本文在研究分布式数据库系统多种实现模式的基础上,重点讨论了对称复制的技术特点,在解决分布式数据库系统建设问题上提出主结点与快照相结合的实现模式.

摘要： 针对分布式存储系统上使用非主键访问数据带来的性能问题,探讨在分布式存储系统上实现索引的相关关键技术.在充分分析分布式存储特征的基础上,本文提出了分布式索引设计和实现的关键点,并结合分布式存储系统的特点及相关的索引技术,讨论了索引的组织形式、索引的维护和数据一致性等问题.然后基于如上的分析,本文选择在分布式数据库系统OceanBase开源版本上,设计和实现分布式索引机制,并通过基准测试工具YCSB进行性能测试.实验表明,该分布式索引能够极大地提高OceanBase的非主键访问性能.虽然增加辅助索引会对系统的性能产生影响,但是充分地考虑系统特征,存储特点,应用需求和索引形式,可以保证低维护代价的同时实现提高索引的可用性和可靠性.

摘要： 文章简单介绍JMX架构及坝群监测分布式数据库系统,并在此基础上提出了使用JMX方案解决分布式数据库管理的构想，结合JMX规范提出实现方法，即封装被管理资源、将MBean集成到智能代理中、代理的远程访问。采用基于JMX的分布式数据库管理系统有如下三个优势：分布的数据库的封装、智能代理使管理程序的开发变得简单；跨协议的兼容和协议的独立性带来的灵活分布；可动态扩展和可伸缩性。

摘要： 基于航天发射场信息化建设的需要,本文立足于发射场现有的完善的信息网络基础设施,采用分布式数据库技术,提出了设计和实现航天发射场分布式数据库系统的思路,并从组成模型、体系结构及站点分布等方面简单描述了对发射场分布式数据库系统实例的设计和实现的思路,并构建了发射场的同构同质的全局控制集中型大型分布式数据库系统模型.

摘要： 数据库系统是信息管理的基础.长期以来,高校管理在选用数据库系统的问题上一直存在争议.事实上,这与高校的发展及其信息需求有关,也与计算机技术特别是数据库技术的发展有关.本文在对分布式数据库系统和多数据库系统管理模式的特点和适用范围进行探讨的基础上,结合高校管理实际提出:高校各部门的管理,特别是在教学点分散时应首先选择分布式数据库系统;在建设高校管理信息系统时,应将局部的基于部门的数据库系统集成为多数据库系统,这不仅在技术上是可行的,并且具有现实意义。

摘要： 应用了客户端/服务器结构,采用三层模式建立了一套服务于城市电磁环境管理部门的分布式电磁环境数据库系统.本文阐述了该分布式数据库系统的系统功能、系统的设计与实现,并对分布式查询处理器的实现做了详细的叙述.该系统的建立实现了城市电磁环境数据管理的正规化、网络化、自动化.

摘要： 数据库的建设规模和数据量大小是衡量一个国家信息化程度的重要指标.显然,为数据库稳定运行保驾护航的数据库监控系统也具有重要的地位.特别对成长中的OceanBase,其监控还处于探索阶段.利用OceanBase基本信息、主机监控数据以及OceanBase监控数据,本文设计并实现了一个分布式部署的、可伸缩的、多元化展示的OceanBase监控系统OBDMS.该系统不仅有助于OceanBase系统预警、故障定位和决策优化,而且具备部署简单、分析全面以及监控多元化等特点.

摘要： 数据库的建设规模和数据量大小是衡量一个国家信息化程度的重要指标.显然,为数据库稳定运行保驾护航的数据库监控系统也具有重要的地位.特别对成长中的OceanBase,其监控还处于探索阶段.利用OceanBase基本信息、主机监控数据以及OceanBase监控数据,本文设计并实现了一个分布式部署的、可伸缩的、多元化展示的OceanBase监控系统OBDMS.该系统不仅有助于OceanBase系统预警、故障定位和决策优化,而且具备部署简单、分析全面以及监控多元化等特点.

摘要： 数据库的建设规模和数据量大小是衡量一个国家信息化程度的重要指标.显然,为数据库稳定运行保驾护航的数据库监控系统也具有重要的地位.特别对成长中的OceanBase,其监控还处于探索阶段.利用OceanBase基本信息、主机监控数据以及OceanBase监控数据,本文设计并实现了一个分布式部署的、可伸缩的、多元化展示的OceanBase监控系统OBDMS.该系统不仅有助于OceanBase系统预警、故障定位和决策优化,而且具备部署简单、分析全面以及监控多元化等特点.

摘要： 本发明公开了一种分布式数据库中的表连接方法及系统，属于信息技术领域。包括：将协调节点发送的第一数据表中第一目标列的数据存储在本地存储器；接收表连接请求；当第一目标列上的第一数据与第二目标列上的第二数据相同时，将第一数据所在行的数据与第二数据所在行的数据进行连接；向协调节点发送连接结果。本发明中数据节点通过存储第一数据表的第一目标列的数据，在接收到将第一数据表的第一目标列和第二数据表的第二目标列作连接的表连接请求后，直接在本地作连接，无需将节点上存储的数据发送至协调节点，不仅减少了数据传输量，缩短了网络响应时间，提高了业务性能，而且减少对协调节点和数据节点存储资源的占用，节省了存储空间。

摘要： 本发明提供一种支持分布式数据库的分布锁方法，包括将分布式数据库所需要的锁资源作为一个整体形成虚拟分布式锁管理器，虚拟分布式锁管理器在分布式数据库的每个节点内设置本地映像，并使所有本地映像保持同步；虚拟分布式锁管理器的任一节点的本地映像收到应用系统的请求后，确定与该请求对应的分布式锁对象，并同步到所有其他节点的分布式锁管理器本地映像上；分布式数据库的节点通过虚拟分布式锁管理器的本地映像，来进行数据库的资源锁定操作。本发明的优点是：能够提供给分布式数据库一种事务资源独占方式，避免资源在分布系统下的访问冲突；同时，也能够保障在高可用性和高性能的前提下，资源在分布式数据系统的一致性。

摘要： 本发明公开了一种分布式数据库中的表连接方法及系统，属于信息技术领域。包括：将协调节点发送的第一数据表中第一目标列的数据存储在本地存储器；接收表连接请求；当第一目标列上的第一数据与第二目标列上的第二数据相同时，将第一数据所在行的数据与第二数据所在行的数据进行连接；向协调节点发送连接结果。本发明中数据节点通过存储第一数据表的第一目标列的数据，在接收到将第一数据表的第一目标列和第二数据表的第二目标列作连接的表连接请求后，直接在本地作连接，无需将节点上存储的数据发送至协调节点，不仅减少了数据传输量，缩短了网络响应时间，提高了业务性能，而且减少对协调节点和数据节点存储资源的占用，节省了存储空间。

摘要： 本发明提供一种支持分布式数据库的分布锁方法，包括将分布式数据库所需要的锁资源作为一个整体形成虚拟分布式锁管理器，虚拟分布式锁管理器在分布式数据库的每个节点内设置本地映像，并使所有本地映像保持同步；虚拟分布式锁管理器的任一节点的本地映像收到应用系统的请求后，确定与该请求对应的分布式锁对象，并同步到所有其他节点的分布式锁管理器本地映像上；分布式数据库的节点通过虚拟分布式锁管理器的本地映像，来进行数据库的资源锁定操作。本发明的优点是：能够提供给分布式数据库一种事务资源独占方式，避免资源在分布系统下的访问冲突；同时，也能够保障在高可用性和高性能的前提下，资源在分布式数据系统的一致性。

摘要： 本申请提供分布式数据库系统和分布式数据库系统中的数据处理方法。该数据处理方法包括：数据库引擎接收插入数据请求消息，插入数据请求消息携带第一数据；数据库引擎确定第一数据所属的目标页的标识信息；数据库引擎生成第一重做日志，第一重做日志包括第一数据和目标页的标识信息；数据库引擎根据第一重做日志中目标页的标识信息，确定至少一个分区中与目标页对应的目标分区；数据库引擎将第一重做日志中的第一数据和目标页的标识信息，存入目标分区中用于存储目标页的重做日志的物理地址空间，目标分区为至少一个存储节点中的目标存储节点所包括的分区。本申请的分布式数据库系统和数据处理方法使得该分布式数据库系统可以灵活动态地扩容。

摘要： 本发明提供应用于分布式数据库系统中的方法及分布式数据库系统，用以解决现有技术中的分布式数据系统容易发生性能瓶颈，并且对分布式数据系统进行改造的难度高的技术问题。其中，分布式数据库系统的分区管理方法，包括：管理子系统确定至少一个第一性能状态系数，并确定至少一个第一性能状态系数之和为分布式数据库系统当前的第一散列基数；管理子系统确定是否对分布式数据库内当前所有可分配的主键ID进行分区；在为是时，管理子系统确定第一散列基数、至少一个第一性能状态系数为用于确定新分配的主键ID所对应的数据库节点时采用的散列基数、性能状态系数；其中，新分配的主键ID为下一次分区前分布式数据库系统内新分配的主键ID。

摘要： 本发明提供了一种分布式数据库数据处理方法，所述方法包括管理节点接收客户端发送的请求；所述管理节点根据所述请求和存储的全局元数据生成分布式执行计划；所述管理节点将所述分布式执行计划发送到相应的数据节点执行；所述管理节点接收相应数据节点发送的执行分布式计划的结果；所述管理节点将接收的所述结果发送给客户端。本发明为基于海量数据的大数据OLAP应用提供处理解决方案，能满足处理数据量大、数据透明分布存储、多表进行关联操作等要求。本发明还提供一种分布式数据库系统。

摘要： 本申请提供分布式数据库系统和分布式数据库系统中的数据处理方法。该数据处理方法包括：数据库引擎接收插入数据请求消息，插入数据请求消息携带第一数据；数据库引擎确定第一数据所属的目标页的标识信息；数据库引擎生成第一重做日志，第一重做日志包括第一数据和目标页的标识信息；数据库引擎根据第一重做日志中目标页的标识信息，确定至少一个分区中与目标页对应的目标分区；数据库引擎将第一重做日志中的第一数据和目标页的标识信息，存入目标分区中用于存储目标页的重做日志的物理地址空间，目标分区为至少一个存储节点中的目标存储节点所包括的分区。本申请的分布式数据库系统和数据处理方法使得该分布式数据库系统可以灵活动态地扩容。

摘要： 在一种用于运行分布式数据库系统（1）的方法中，所述分布式数据库系统具有用于尤其是以区块链（BC）的方式提供相互关联的数据块（Bi）的分布式节点装置（2‑6），所述区块链记录用户（8）之间的事务，其中用户（8）之间的事务（TD）借助于事务数据和密码签名方法被保护，对于每个事务，规定用于保护相应事务的密码签名方法，其中对所规定的密码签名方法进行标识的签名信息是事务的一部分或用于所述事务的实施请求的一部分。然后对于每个事务，经由所述事务数据的至少一部分或其哈希值按照所规定的密码签名方法计算签名数据，并且将签名数据添加到所述事务数据。

摘要： 本发明提供应用于分布式数据库系统中的方法及分布式数据库系统，用以解决现有技术中的分布式数据系统容易发生性能瓶颈，并且对分布式数据系统进行改造的难度高的技术问题。其中，分布式数据库系统的分区管理方法，包括：管理子系统确定至少一个第一性能状态系数，并确定至少一个第一性能状态系数之和为分布式数据库系统当前的第一散列基数；管理子系统确定是否对分布式数据库内当前所有可分配的主键ID进行分区；在为是时，管理子系统确定第一散列基数、至少一个第一性能状态系数为用于确定新分配的主键ID所对应的数据库节点时采用的散列基数、性能状态系数；其中，新分配的主键ID为下一次分区前分布式数据库系统内新分配的主键ID。