Hadoop(一) 大数据常用组件概述

痛定思痛。 2022-08-29 15:58 184阅读 0赞

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mzg4OTg0MQ_size_16_color_FFFFFF_t_70]

<table> 
 <thead> 
  <tr> 
   <th></th> 
   <th></th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>HDFS</td> 
   <td>Hadoop的分布式文件系统（Hadoop Distributed File System，HDFS）是Hadoop两大核心之一。</td> 
  </tr> 
  <tr> 
   <td>HBase</td> 
   <td>一个提供高可靠性、高性能、可伸缩、实时读写、分布式的列式数据库。</td> 
  </tr> 
  <tr> 
   <td>MapReduce</td> 
   <td>分布式并行编程模型，用于大规模数据集（大于1TB）的并行运算。</td> 
  </tr> 
  <tr> 
   <td>Hive</td> 
   <td>一个基于Hadoop的数据仓库工具，可用于对Hadoop文件中的数据集进行数据整理、特殊查询和分析存储。</td> 
  </tr> 
  <tr> 
   <td>Pig</td> 
   <td>一个基于Hadoop的大规模数据分析平台，提供类似SQL的查询语言Pig Latin。</td> 
  </tr> 
  <tr> 
   <td>Zookeeper</td> 
   <td>提供分布式协调一致性服务。</td> 
  </tr> 
  <tr> 
   <td>Sqoop</td> 
   <td>SQL-to-Hadoop的缩写，主要用来在Hadoop与传统数据库之间进行数据传递。</td> 
  </tr> 
  <tr> 
   <td>Flume</td> 
   <td>一个高可用的、高可靠的、分布式的海量日志采集、集合和传输的系统。</td> 
  </tr> 
  <tr> 
   <td>Ambari</td> 
   <td>一种基于Web的工具，支持Apache Hadoop集群的安装、部署、配置和管理。</td> 
  </tr> 
 </tbody> 
</table>

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80Mzg4OTg0MQ_size_16_color_FFFFFF_t_70]: /images/20220829/eb3d27d832d94077b262a55e0c5aaa2f.png

发表评论取消回复

表情：

评论列表（有 0 条评论，184人围观）

还没有评论，来说两句吧...

相关阅读

相关 SpringCloud五大常用组件

SpringCloud五大常用组件 SpringCloud项目是由多个独立小项目集合而成（即把系统拆分成各个模块），每个项目都是独立的，各自进行自己的迭代和版本发布。

╰半夏微凉°/ 2024年03月27日 14:13/ 0 赞/ 78 阅读

相关大数据之Hadoop（一）

目录一、准备三台服务器二、虚拟机间配置免密登录三、安装JDK 四、关闭防火墙五、关闭安全模块SELinux 六、修改时区和自动时间同步 ---------

迷南。/ 2024年03月23日 17:26/ 0 赞/ 89 阅读

相关大数据：Hadoop文件操作HDFS常用命令（一）

大数据：Hadoop文件操作HDFS常用命令（一） 1、创建目录。在HDFS中创建一个文件目录： hadoop dfs -mkdir 2、查看文件结构目录：

左手的ㄟ右手/ 2024年02月19日 21:52/ 0 赞/ 25 阅读

相关 Hadoop常用组件

文章目录基础组件 Hadoop HDFS YARN MapReduce ZooKeeper

喜欢ヅ旅行/ 2023年06月29日 10:59/ 0 赞/ 25 阅读

相关大数据技术之Hadoop概述

目录大数据概述第 1 章 Hadoop 概述 1.1 Hadoop 基本概念 1.2 Hadoop 发展历史 1.3 Hadoop 优势（4高） 1.4 Ha

Bertha 。/ 2023年01月24日 02:12/ 0 赞/ 36 阅读

相关 Hadoop教程第一弹大数据概述

1、大数据概述 1.1、大数据是什么？大数据（Big Data）：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强

た入场券/ 2022年12月10日 11:22/ 0 赞/ 188 阅读

相关 SpringCloud常用组件（一）

SpringCloudEureka ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0c

小咪咪/ 2022年11月21日 04:15/ 0 赞/ 253 阅读

相关 Hadoop 大数据平台常用组件端口号汇总

<table> <thead> <tr> <th>组件</th> <th>端口及说明</th> </tr> </thead> <t

浅浅的花香味﹌/ 2022年11月07日 01:52/ 0 赞/ 311 阅读

相关 Hadoop(一) 大数据常用组件概述

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

痛定思痛。/ 2022年08月29日 15:58/ 0 赞/ 185 阅读

相关 Hadoop（一）：大数据与 Hadoop

大数据背景大数据特征：海量数据规模、多样数据类型、快速数据流转（实时性）-> 数据价值大数据流程：数据采集->数据存储->数据处理／分析／挖掘->可视化

﹏ヽ暗。殇╰゛Y/ 2021年09月10日 10:12/ 0 赞/ 571 阅读