为什么说 hive 是 hadoop 数据仓库,从方 面理解

2025-05-14 17:47:58
推荐回答(1个)
回答(1):

hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL),这是一种可以存储、查询和分析存储在 Hadoop中的大规模数据的机制。 
(1).hive由FaceBook开源用于解决海量结构化日志的数据统计。 
(2).hive是基于hadoop的一个数据仓库工具,可以将结构化的数据文件映射成一张表,并提供类SQL查询功能。 
(3).hive是构建在hadoop之上的数据仓库:

  • 使用HQL语句作为查询接口

  • 使用HDFS进行存储

  • 使用mapreduce进行计算。 
    (4).hive本质是:将HQL转化成MapReduce程序。 
    (5).灵活和扩展性比较好:支持UDF,自定义存储格式。 
    (6).适合离线处理。 
    (7).查询和管理在分布式存储的大的数据集(数据库:增删改查,hive不支持增删该)。管理主要是对表的管理。