一、大数据与区块链

这个故事还是要从比特币谈起

比特币这个电子现金系统是同时去中介化(个人与个人之间的电子现金无须可信第三方中介的介入)和去中心化(由某个机构负责维护)的(交易双方可以在无须建立信任关系的前提下完成交易)

哈希函数:将任意长的字符串，转变成固定长度的输出(计算过程不能太复杂)，只要输入字符串发生微小变化，哈希函数的输出就会完全不同。

区块链:把大的东西切分成很多个区块进行存储，只要其中有一个东西被篡改，下边的数据都不一样，就会被发现

采用区块链(数据结构哈希函数)，保障账本不能被篡改，采用数字签名技术，保证只有自己才能够使用自己的账户，采用p2p网络和pow共识机制，保证去中心化的运作方式

区块链是利用块链式数据结构来验证与存储数据，利用分布式节点共识算法来生成和更新数据，利用密码学的方式保证数据传输和访问安全的一种全新的分布式基础架构与计算机范式。

三要素:

区块链的本质就是分布式账本，是一种数据库。区块链用哈希算法实现信息不可篡改，用公钥，私钥来标识身份，以去中心化和去中介化的方式，来集体维护一个可靠数据库。

大数据与区块链的区别主要表现在以下几个方面。

(1)数据量。区块链技术是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链处理的数据量小，具有细致的处理方式。而大数据管理的是海量数据，要求广度和数量，处理方式上会更粗糙。

(2)结构化和非结构化。区块链是结构定义严谨的块，通过指针组成的链，是典型的结构化数据，而大数据需要处理的更多的是非结构化数据。

(3)独立和整合。区块链系统为保证安全性，信息是相对独立的，而大数据的重点是信息的整合分析。

(4)直接和间接。区块链是一个分布式账本，本质上就是一个数据库，而大数据指的是对数据深度分析和挖掘，是一种间接的数据。

(5)CAP理论。C(Consistency)是一致性，它是指任何一个读操作总是能够读到之前完成的写操作的结果，也就是在分布式环境中，多点的数据是一致的。A(Availability)是可用性，它是指快速获取数据，可以在确定的时间内返回操作结果。P(Tolerance of Network Partition)是分区容忍性，它是指当出现网络分区的情况时(即系统中的一部分节点无法和其他节点进行通信)，分离的系统也能够正常运行。CAP理论告诉我们，一个分布式系统不可能同时满足一致性、可用性和分区容忍性这3个需求，最多只能同时满足其中2个，正所谓“鱼和熊掌不可兼得”。大数据通常选择实现AP，区块链则选择实现CP。

(6)基础网络。大数据底层的基础设施通常是计算机集群，而区块链的基础设施通常是P2P网络。

(7)价值来源。对于大数据而言，数据是信息，需要从数据中提炼得到价值。而对于区块链而言，数据是资产，是价值的传承。

(8)计算模式。在大数据的场景中，是把一件事情分给多个人做，比如，在MapReduce计算框架中，一个大型任务会被分解成很多个子任务，分配给很多个节点同时去计算。而在区块链的场景中，是让多个人重复做一件事情，比如，P2P网络中的很多个节点同时记录一笔交易。

二、什么是区块链,什么是大数据

1、区块链：是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。所谓共识机制是区块链系统中实现不同节点之间建立信任、获取权益的数学算法。

区块链（Blockchain）是比特币的一个重要概念，货币联合清华大学五道口金融学院互联网金融实验室、新浪科技发布的《2014—2016全球比特币发展研究报告》提到区块链是比特币的底层技术和基础架构[2]。本质上是一个去中心化的数据库，同时作为比特币的底层技术。区块链是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一次比特币网络交易的信息，用于验证其信息的有效性（防伪）和生成下一个区块。

2、大数据：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

三、大数据和区块链有什么关系

1.区块链与大数据的关联

大数据是由各种社会活动产生的庞大数据集。区块链则是一种底层技术，类似于互联网，构建了一个区块链网络，被称作“价值互联网”。大数据可以与区块链技术结合，例如，利用区块链的可追溯性，能够在全网追踪数据包的流向，对数据包进行确权和跟踪。

2.区块链与大数据的关系分析

尽管区块链和大数据的关系并不密切，它们针对不同场景提供不同的数据解决方案。大数据主要处理海量数据的管理，而区块链的核心在于在没有中心化中介的情况下，实现数据的安全和高可靠性。两者不会互相冲突，也不会取代对方。

3.区块链与大数据的结合效应

将发展中的区块链技术与大数据相结合，将产生新的效应。从技术角度看，大数据技术用信任换取计算资源，而区块链技术用计算资源换取信任。这种结合将引领信息安全的新浪潮。

4.大数据与区块链技术的技术差异

大数据技术利用分布式技术来利用多台机器的计算资源，进行数据处理。区块链技术则使用分布式技术来建立多个实体之间的信任。两者在技术上有相似之处，但在目的和应用上存在明显差异。

5.区块链在大数据领域的应用

在数据部分，区块链可以增加数据的可信度，特别是在多方参与数据收集和提供时。区块链的可追溯性和不可否认性有助于维护大数据的完整性。在数据流通行业，区块链可以实现分散式的大数据交易，减少数据泄漏和资产损失的风险。

6.区块链在大数据服务中的应用

在大数据服务中，区块链可以发挥重要作用，特别是在数字资产的交易中。新技术如同态加密可以进一步将数据服务功能转化为数字资产，而无需复制原始数据，从而降低风险。

四、大数据与区块链的区别

1、大数据需要应对海量且快速增长的存储，这就要求底层硬件架构和文件系统在性价比上要远高于传统技术，并且能够灵活扩展存储容量。 Hadoop的HDFS为大数据存储技术奠定了基础。此外，大数据对存储技术提出的另一个挑战是多种数据格式的适应性。因此，大数据的底层存储层不仅仅是HDFS，还有HBase、kudu等存储架构。大数据一般是指海量且复杂的数据集。传统的数据处理软件无法在合理的时间内捕获和处理这些数据。这些大数据集包括结构化、非结构化和半结构化数据，每个数据集都可以通过分析获得洞察。

2、区块链本质上是一个去中心化的分布式账本。区块链技术作为一种不断增长的链式数据结构，按顺序排列成块，通过网络中的多个节点参与数据的计算和记录，并相互验证其信息的有效性。从这个角度来看，区块链技术也是一种特定的数据持久化技术。由于去中心化的安全性和便利性，很多业内人士看好其发展，认为是对现有互联网技术的升级和补充。区块链的共识机制是如何在所有分布式部分之间达成共识，通过算法生成和更新数据以确定记录的有效性，这不仅是一种识别手段，也是一种防止篡改的手段。区块链主要包括四种不同的共识机制，适用于不同的应用场景，在效率和安全性之间取得平衡。

3、大数据通常用于描述足够大且复杂到难以以传统方式处理的数据集。区块链所能承载的信息和数据是有限的，与“大数据”的标准相去甚远。区块链和大数据之间有几个显着的区别：结构化与非结构化：区块链是一个具有明确结构的块。由指针组成的链是典型的结构化数据，而大数据需要处理更多的非结构化数据；独立vs集成：为了保证区块链系统的安全，信息是相对独立的，而大数据则侧重于信息的整合和分析；直接vs间接：区块链系统本身就是一个数据库，而大数据是指对数据进行深度分析和挖掘，属于间接数据；数学与数据：区块链试图用数学说话。区块链倡导“代码就是法律”，而大数据试图用数据说话。