区块链存储结构化数据库 大数据与区块链

bmyFD67bmjhk3周前 (04-21)众测1

一、组成区块链基础运算功能的组织架构内容

随着互联网的都不发展,消费者对区块链技术和数字虚拟货币的认知程度也在不断的提高。今天,我们就一起来了解一下区块链技术的基础运算方法都有哪些结构构成的。下面java课程就一起来了解一下具体情况吧。

构成计算技术的基本元素是存储、处理和通信。大型主机、PC、移动设备和云服务都以各自的方式展现这些元素。各个元素之内还有专门的构件块来分配资源。

本文聚焦于区块链的大框架:介绍区块链中各个计算元素的模块以及各个模块的一些实现案例,偏向概论而非详解。

区块链的组成模块

以下是去中心化技术中各个计算元素的构件块:

存储:代币存储、数据库、文件系统/blob

处理:有状态的业务逻辑、无状态的业务逻辑、高性能计算

通信:数据、价值和状态的连接网络

存储

作为基本计算元素,存储部分包含了以下构件块。

代币存储。代币是价值的存储媒介(例如资产、证券等),价值可以是比特币、航空里程或是数字作品的版权。代币存储系统的主要作用是发放和传输代币(有多种变体),同时防止多重支付之类的事件发生。

比特币和Zcash是两大“纯净”的、只关注代币本身的系统。以太坊则开始将代币用于各种服务,以实现其充当全球计算中心的理想。这些例子中代币被用作运营整个网络架构的内部激励。

还有些代币不是网络用来推动自身运行的内部工具,而是用做更高级别网络的激励,但它们的代币实际上是存储在底层架构中的。一个例子是像Golem这样的ERC20代币,运行在以太坊网络层上。另一个例子是Envoke的IP授权代币,运行在IPDB网络层上。

数据库。数据库专门用来存储结构化的元数据,例如数据表(关系型数据库)、文档存储(例如JSON)、键值存储、时间序列或图数据库。数据库可以使用SQL这样的查询快速检索数据。

传统的分布式(但中心化)数据库如MongoDB和Cassandra通常会存储数百TB甚至PB级的数据,性能可达到每秒百万次写入。

SQL这样的查询语言是很强大的,因为它将实现与规范区分开来,这样就不会绑定在某个具体的应用上。SQL已经作为标准应用了数十年,所以同一个数据库系统可以用在很多不同的行业中。

换言之,要在比特币之外讨论一般性,不一定要拿图灵完备性说事。你只需要一个数据库就够了,这样既简洁又方便扩展。有些时候图灵完备也是很有用的,我们将在“去中心化处理”一节具体讨论。

BigchainDB是去中心化的数据库软件,是专门的文档存储系统。它基于MongoDB(或RethinkDB),继承了后者的查询和扩展逻辑。但它也具备了区块链的特征,诸如去中心化控制、防篡改和代币支持。IPDB是BigchainDB的一个受监管的公开实例。

在区块链领域,也可以说IOTA是一个时间序列数据库。

文件系统/blob数据存储。这些系统以目录和文件的层级结构来存储大文件(电影、音乐、大数据集)。

IPFS和Tahoe-LAFS是去中心化的文件系统,包含去中心化或中心化的blob存储。FileCoin、Storj、Sia和Tieron是去中心化的blob存储系统,古老而出色的BitTorrent也是如此,虽然后者使用的是p2p体系而非代币。以太坊Swarm、Dat、Swarm-JS基本上都支持上述两种方式。

数据市场。这种系统将数据所有者(比如企业)与数据使用者(比如AI创业公司)连接在一起。它们位于数据库与文件系统的上层,但依旧是核心架构,因为数不清的需要数据的应用(例如AI)都依赖这类服务。Ocean就是协议和网络的一个例子,可以基于它创建数据市场。还有一些特定应用的数据市场:EnigmaCatalyst用于加密市场,Datum用于私人数据,DataBrokerDAO则用于物联网数据流。

处理

接下来讨论处理这个基本计算元素。

“智能合约”系统,通常指的是以去中心化形式处理数据的系统[3]。它其实有两个属性完全不同的子集:无状态(组合式)业务逻辑和有状态(顺序式)业务逻辑。无状态和有状态在复杂性、可验证性等方面差异巨大。三种去中心化的处理模块是高性能计算(HPC)。

无状态(组合式)业务逻辑。这是一种任意逻辑,不在内部保留状态。用电子工程术语来说,它可以理解为组合式数字逻辑电路。这一逻辑可以表现为真值表、逻辑示意图、或者带条件语句的代码(if/then、and、or、not等判断的组合)。因为它们没有状态,很容易验证大型无状态智能合约,从而创建大型可验证的安全系统。N个输入和一个输出需要O(2^N)个计算来验证。

跨账本协议(ILP)包含crypto-conditions(CC)协议,以便清楚地标出组合电路。CC很好理解,因为它通过IETF成为了互联网标准,而ILP则在各种中心和去中心化的支付网络(例如超过75家银行使用的瑞波)中广泛应用。CC有很多独立实现的版本,包括JavaScript、Python、Java等。BigchainDB、瑞波等系统也用CC,用以支持组合式业务逻辑/智能合约。

二、大数据与区块链的区别

1、大数据需要应对海量且快速增长的存储,这就要求底层硬件架构和文件系统在性价比上要远高于传统技术,并且能够灵活扩展存储容量。 Hadoop的HDFS为大数据存储技术奠定了基础。此外,大数据对存储技术提出的另一个挑战是多种数据格式的适应性。因此,大数据的底层存储层不仅仅是HDFS,还有HBase、kudu等存储架构。大数据一般是指海量且复杂的数据集。传统的数据处理软件无法在合理的时间内捕获和处理这些数据。这些大数据集包括结构化、非结构化和半结构化数据,每个数据集都可以通过分析获得洞察。

2、区块链本质上是一个去中心化的分布式账本。区块链技术作为一种不断增长的链式数据结构,按顺序排列成块,通过网络中的多个节点参与数据的计算和记录,并相互验证其信息的有效性。从这个角度来看,区块链技术也是一种特定的数据持久化技术。由于去中心化的安全性和便利性,很多业内人士看好其发展,认为是对现有互联网技术的升级和补充。区块链的共识机制是如何在所有分布式部分之间达成共识,通过算法生成和更新数据以确定记录的有效性,这不仅是一种识别手段,也是一种防止篡改的手段。区块链主要包括四种不同的共识机制,适用于不同的应用场景,在效率和安全性之间取得平衡。

3、大数据通常用于描述足够大且复杂到难以以传统方式处理的数据集。区块链所能承载的信息和数据是有限的,与“大数据”的标准相去甚远。区块链和大数据之间有几个显着的区别:结构化与非结构化:区块链是一个具有明确结构的块。由指针组成的链是典型的结构化数据,而大数据需要处理更多的非结构化数据;独立vs集成:为了保证区块链系统的安全,信息是相对独立的,而大数据则侧重于信息的整合和分析;直接vs间接:区块链系统本身就是一个数据库,而大数据是指对数据进行深度分析和挖掘,属于间接数据;数学与数据:区块链试图用数学说话。区块链倡导“代码就是法律”,而大数据试图用数据说话。

三、大数据与区块链

这个故事还是要从比特币谈起

比特币这个电子现金系统是同时去中介化(个人与个人之间的电子现金无须可信第三方中介的介入)和去中心化(由某个机构负责维护)的(交易双方可以在无须建立信任关系的前提下完成交易)

哈希函数:将任意长的字符串,转变成固定长度的输出(计算过程不能太复杂),只要输入字符串发生微小变化,哈希函数的输出就会完全不同。

区块链:把大的东西切分成很多个区块进行存储,只要其中有一个东西被篡改,下边的数据都不一样,就会被发现

采用区块链(数据结构哈希函数),保障账本不能被篡改,采用数字签名技术,保证只有自己才能够使用自己的账户,采用p2p网络和pow共识机制,保证去中心化的运作方式

区块链是利用块链式数据结构来验证与存储数据,利用分布式节点共识算法来生成和更新数据,利用密码学的方式保证数据传输和访问安全的一种全新的分布式基础架构与计算机范式。

三要素:

区块链的本质就是分布式账本,是一种数据库。区块链用哈希算法实现信息不可篡改,用公钥,私钥来标识身份,以去中心化和去中介化的方式,来集体维护一个可靠数据库。

大数据与区块链的区别主要表现在以下几个方面。

(1)数据量。区块链技术是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链处理的数据量小,具有细致的处理方式。而大数据管理的是海量数据,要求广度和数量,处理方式上会更粗糙。

(2)结构化和非结构化。区块链是结构定义严谨的块,通过指针组成的链,是典型的结构化数据,而大数据需要处理的更多的是非结构化数据。

(3)独立和整合。区块链系统为保证安全性,信息是相对独立的,而大数据的重点是信息的整合分析。

(4)直接和间接。区块链是一个分布式账本,本质上就是一个数据库,而大数据指的是对数据深度分析和挖掘,是一种间接的数据。

(5)CAP理论。C(Consistency)是一致性,它是指任何一个读操作总是能够读到之前完成的写操作的结果,也就是在分布式环境中,多点的数据是一致的。A(Availability)是可用性,它是指快速获取数据,可以在确定的时间内返回操作结果。P(Tolerance of Network Partition)是分区容忍性,它是指当出现网络分区的情况时(即系统中的一部分节点无法和其他节点进行通信),分离的系统也能够正常运行。CAP理论告诉我们,一个分布式系统不可能同时满足一致性、可用性和分区容忍性这3个需求,最多只能同时满足其中2个,正所谓“鱼和熊掌不可兼得”。大数据通常选择实现AP,区块链则选择实现CP。

(6)基础网络。大数据底层的基础设施通常是计算机集群,而区块链的基础设施通常是P2P网络。

(7)价值来源。对于大数据而言,数据是信息,需要从数据中提炼得到价值。而对于区块链而言,数据是资产,是价值的传承。

(8)计算模式。在大数据的场景中,是把一件事情分给多个人做,比如,在MapReduce计算框架中,一个大型任务会被分解成很多个子任务,分配给很多个节点同时去计算。而在区块链的场景中,是让多个人重复做一件事情,比如,P2P网络中的很多个节点同时记录一笔交易。

相关文章

做出防水11,100米的它,有哪些抢眼的新款

做出防水11,100米的它,有哪些抢眼的新款,一起来阅读精彩内容。有些表外观酷炫,辨识度很高。当然,喜不喜欢看个人。但起码这样的表能给你带来冲击力,看过以后难忘记。比如柏莱士(Bell & Ross)...

尊尼获加蓝牌威士忌携手设计师Angel Chen推兔年特别版

尊尼获加蓝牌威士忌携手设计师Angel Chen推兔年特别版,一起来阅读精彩内容。尊尼获加蓝牌威士忌兔年特别版,以艺术演绎风味美学,设计师陈安琪以尊尼获加蓝牌颜色为灵感,大胆结合了西方美学元素,对蓝进...

最全不锈钢知识,别再问我201、202、301、302、304哪个是好钢!

最全不锈钢知识,别再问我201、202、301、302、304哪个是好钢!,一起来阅读精彩内容。不锈钢(Stainless Steel)是不锈耐酸钢的简称,耐空气、蒸汽、水等弱腐蚀介质或具有不锈性的钢...

最轻巧的真无线蓝牙耳机JEET AIR2听见

最轻巧的真无线蓝牙耳机JEET AIR2听见,一起来阅读精彩内容。JEET AIR2真无线蓝牙耳机,是我见过的最轻巧的TWS耳机。真无线TWS耳机新品JEET Air 2,看外观就很独特,重量3.4g...

最近成都周边哪个小城最火那必须是郫都!

最近成都周边哪个小城最火那必须是郫都!,一起来阅读精彩内容。图源小红书:胖虎的小虎牙儿场馆外的萤火秘境内,还有一个名为三体宇宙的科幻装置,直接再现了《三体》中的名场面!图源小红书:是燃燃_在这里你还可...

总投资521亿元!东莞新增一批重大项目!

总投资521亿元!东莞新增一批重大项目!,一起来阅读精彩内容。·10月7日东莞市发展和改革局发布2023年第四批市重大项目增补计划的通知总投资高达521亿元!东莞市重大项目增加89项!按照《东莞市重大...