admin管理员组

文章数量:1487745

大数据基本内容

hadoop：

大规模数据处理软件系统（谷歌的三篇论文中受到启发）

MapReduce ：

并行计算框架

HDFS：

分布式文件系统

HBase：

非关系型分布式数据库

Hive：

数据仓库，用于管理存储于HDFS或HBase中的结构化/半结构化数据（Hive 在加载数据过程中不会对数据进行任何的修改，只是将数据移动到 HDFS 中 Hive 设定的目录下，因此 Hive 不支持对数据的改写和添加，所有的数据都是在加载的时候确定的。）

Spark：

基于内存计算的大数据并行计算框架

Spark SQL ：

即席查询（以单独的SQL语句的形式执行的查询就是即席查询，立马生效的查询。）

SparkStreaming ：

实时处理应用

本文参与 腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。 原始发表：2024-10-15，如有侵权请联系 cloudcommunity@tencent 删除存储大数据管理框架数据

本文标签： 大数据基本内容

版权声明：本文标题：大数据基本内容 内容由网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：http://www.betaflare.com/shuma/1754836836a3180245.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。