大数据学习(一)HDFS - 代思豪

大数据产生的背景

• 前言

  在学习大数据之前，先要了解他解决了什么问题，能给我们带来什么价值。一方面，以前IT行业发展没有那么快，系统的应用也不完善，数据库足够支撑业务系统。但是随着行业的发展，系统运行的时间越来越长，搜集到的数据也越来越多，传统的数据库已经不能支撑全量数据的存储工作；另一方面，数据越来越多，单机的计算已经成为瓶颈。因此，基于分布式的大数据系统崭露头角。首先我们来了解一下如何如何解决数据存储问题。

• 分布式文件系统(Hadoop Distributed File System)

  HDFS 是做什么的

  HDF 大专栏  大数据学习(一)HDFS - 代思豪S（Hadoop Distributed File System）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错、高可靠性、高可扩展性、高获得性、高吞吐率等特征为海量数据提供了不怕故障的存储，为超大数据集（Large Data Set）的应用处理带来了很多便利。

  HDFS 从何而来

  为什么选择 HDFS 存储数据

  HDFS 如何存储数据

  HDFS 如何读取文件

  HDFS 如何写入文件

  HDFS 副本存放策略

  Hadoop2.x新特性

---

来源：https://www.cnblogs.com/liuzhongrong/p/11921219.html