程序中的Hive具体是干什么用的呢？
发布网友
发布时间：2022-04-21 06:07
我来回答
共1个回答
热心网友
时间：2022-06-18 09:54
Hive是什么
1）Hive
是建立在Hadoop
(HDFS/MR)上的用于管理和查询结果化/非结构化的数据仓库；
2）一种可以存储、查询和分析存储在Hadoop
中的大规模数据的机制；
3）Hive
定义了简单的类SQL
查询语言，称为HQL，它允许熟悉SQL
的用户查询数据；
4）允许用Java开发自定义的函数UDF来处理内置无法完成的复杂的分析工作；
5）Hive没有专门的数据格式（分隔符等可以自己灵活的设定）；
ETL的流程（Extraction-Transformate-Loading）：将关系型数据库的数据抽取到HDFS上，hive作为数据仓库，经过hive的计算分析后，将结果再导入到关系型数据库的过程。
Hive是构建在Hadoop之上的数据仓库
1）使用HQL作为查询接口；
2）使用HDFS作为存储；
3）使用MapRece作为计算；
Hive应用场景
数据源：
1）文件数据，如中国移动某设备每天产生大量固定格式的文件；
2）数据库
以上两种不同的数据源有个共同点：要使用hive，那么必须要将数据放到hive中；通常采用如下两种方式：
1）文件数据：load到hive
2）数据库:
sqoop到hive
数据的离线处理；
hive的执行延迟比较高，因为hive常用于数据分析的，对实时性要求不高；
hive优势在于处理大数据，对于处理小数据没有优势，因为hive的执行延迟比较高。
处理数据存放在hive表中，那么前台系统怎么去访问hive的数据呢？
先将hive的处理结果数据转移到关系型数据库中才可以，sqoop就是执行导入导出的操作
程序中的Hive具体是干什么用的呢?
Hive是基于Hadoop平台的数仓工具，具有海量数据存储、水平可扩展、离线批量处理的优点，解决了传统关系型数仓不能支持海量数据存储、水平可扩展性差等问题，但是由于Hive数据存储和数据处理是依赖于HDFS和MapReduce，因此在Hive进行数据离线批量处理时，需将查询语言先转换成MR任务，由MR批量处理返回结果，所以Hi...
aippt如何制作
随着AI技术的飞速发展，如今市面上涌现了许多实用易操作的AI生成工具1、简介：AiPPT: 这款AI工具智能理解用户输入的主题，提供“AI智能生成”和“导入本地大纲”的选项，生成的PPT内容丰富多样，可自由编辑和添加元素，图表类型包括柱状图、条形...
hive是什么
Hive是一个基于Hadoop的数据仓库工具，用于处理和分析大规模数据。一、Hive的背景和基本概念 Hive是Apache的一个开源项目，建立在Hadoop之上。它提供了一种类似SQL的查询语言——Hive QL（HQL），使得非程序员也能轻松进行大数据查询和分析。在Hive中，数据被存储在Hadoop的HDFS（分布式文件系统）中，而Hive...
hive是基于hadoop的一个什么工具
hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低，可以通过类似SQL语句实现...
hive内核是什么意思?
Hive是一种用来处理大规模数据的数据仓库工具，是基于Hadoop的一个数据仓库软件，主要用于数据的存储和分析。而Hive内核则是其核心部分，也是其重要组成部分，其主要功能是实现将Hive的高层语言转化为底层Hadoop MapReduce程序，并协调Hadoop集群中的底层运算。Hive内核的主要特点是高效性和可扩展性。它采用分布...
hive是什么意思
Hive是一个基于Hadoop的数据仓库工具，用于处理大型分布式数据集，允许用户使用类似于SQL的语言来管理和查询数据。1.概述 Hive是一个数据仓库工具，可以将数据存储在Hadoop文件系统中，并使用SQL风格的查询语言对这些数据进行操作。它可以轻松地处理结构化、半结构化和非结构化数据。Hive使用类似于SQL的语言来...
求解释下Apache Hive是什么鬼?
Hive是一个建立在Hadoop上的开源数据仓库基础设施，通过Hive可以很容易的进行数据的ETL,对数据进行结构化处理,并对Hadoop上大数据文件进行查询和处理等。 Hive提供了一种简单的类似SQL的查询语言—HiveQL,这为熟悉SQL语言的用户查询数据提供了方便。
大数据面试题汇总之Hive
Hive是由Facebook开源用于解决海量结构化日志的数据统计工具；Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。Hive的本质是将HQL转化成MapReduce程序。数据仓库是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它是单个数据存储，出于分析性...
大数据Hive仓库是什么?
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射成一张表，并提供类SQL查询功能；其本质是将HQL转化成MapReduce程序。构建在Hadoop之上的数据仓库：使用HQL作为查询接口 使用HDFS存储 使用MapReduce计算 灵活性和扩展性比较好：支持UDF，自定义存储格式等：适合离线数据处理 ...
hadoop和hive之间有什么关系?
hive是hadoop的延申。hadoop是一个分布式的软件处理框架，hive是一个提供了查询功能的数据仓库，而hadoop底层的hdfs为hive提供了数据存储。hive将用户提交的SQL解析成mapreduce任务供hadoop直接运行，结合两者的优势，进行数据决策。一个擅长大数据并行计算，一个支持SQL数据查询，方便是显而易见的。但hive只要...
Hive快速学习指南
Hive，由Facebook开源，是Hadoop生态中极其关键的数据仓库工具，能够将结构化数据文件映射为表，并提供SQL查询功能。它本质上是将HQL转换为MapReduce程序，通过封装多个“SQL—MapReduce”框架，实现了用户通过SQL语言获取数据分析结果的目标。Hive的优点在于简化了Hadoop的使用门槛，让非专业开发人员也能进行...
