标签： hadoop

HDFS教程：使用Java API读写命令

Hadoop附带一个名为 HDFS 的分布式文件系统，基于HADOOP的应用程序利用HDFS。当数据超过单个物理机器上的存储容量时，必须将其划分为多台独立的计算机。

java 2023年7月21日点赞(2)评论关闭阅读(122)

文章来源：加米谷大数据Hadoop和Spark是大数据生态系统中流行的apache项目。Apache Spark是对hadoop大数据生态系统的原始Hadoop MapReduce组件的改进。

java 2023年7月19日点赞(3)评论关闭阅读(63)

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。1.文档编写目的在开发Hadoop应用时，需要用到hadoop-client API来访问HDFS并进行本地调试。

java 2023年7月18日点赞(3)评论关闭阅读(82)

Hive介绍最初 Hive 是由 Facebook 开发的，主要用于查询Hadoop集群当中的数据。后来 Apache 软件基金会接受了它，并以 Apache Hive 的名义将其进一步开发为开源，被大家所熟悉和使用，作为一个数据仓库基础设施工具。

java 2023年7月14日点赞(1)评论关闭阅读(96)

Spring Boot与Hadoop HDFS分布式文件系统一、HDFS概念HDFS属于Hadoop大数据生态圈，最早是由谷歌GFS论文中引申出来的概念，全名叫做Hadoop Distributed File System。也就是分布式文件系统，按区域进行存储数据。1.

java 2023年7月2日点赞(1)评论关闭阅读(191)

我们知道，前几天Oracle官宣对Java8的官方支持时间持续到2020年12月，之后将不再为个人桌面用户提供OracleJDK8的修复更新。

java 2023年6月16日点赞(0)评论关闭阅读(72)

作者：郑锴，花名铁杰，阿里巴巴高级技术专家，ApacheHadoopPMC，ApacheKerby创立者。深耕分布式系统开发和开源大数据多年，先后专注在安全，存储和计算领域。

java 2023年6月14日点赞(0)评论关闭阅读(48)

花絮上一篇文章Hadoop系列之1.0和2.0架构中，提到了Google的三驾马车。关于分布式存储，计算以及列式存储的论文，分别对应开源的HDFS,Mapreduce以及HBase。

java 2023年5月31日点赞(0)评论关闭阅读(174)

等BAT公司所做的大数据面试题汇总。主要包括以下几大类：一、spark相关1.Spark的Shuffle原理及调优。

java 2023年5月14日点赞(4)评论关闭阅读(107)

对于大数据来说java是一门基础的工具类语言，Java语言具有功能强大和简单易用两个特征。目前Java基础工程师已经比较多了，很多人工作4~5年月薪也难上2万，能上2.5万的更是寥寥。

java 2023年5月6日点赞(0)评论关闭阅读(86)