Hive3：基本介绍

一、概述

Apache Hive是一款分布式SQL计算的工具， 其主要功能是：
将SQL语句翻译成MapReduce程序运行

Hive是单机工具，只需要部署在一台服务器即可。
Hive虽然是单机的，但是它可以提交分布式运行的MapReduce程序运行。

二、基本逻辑简介

主要由两大模块组成：元数据管理，SQL解析器
在这里插入图片描述

1、元数据管理

在这里插入图片描述
即：数据位置信息、数据结构信息、对数据进行描述与记录

2、SQL解析器

主要功能：

  • SQL分析
  • SQL到MapReduce程序的转换
  • 提交MapReduce程序运行并收集执行结果

3、简单流程图

在这里插入图片描述

三、基础架构

在这里插入图片描述

  • 元数据管理，称之为Metastore服务
    在这里插入图片描述
  • SQL解析器（Driver驱动程序），完成SQL解析、执行优化、代码提交等功能
    在这里插入图片描述
  • 用户接口：提供用户和Hive交互的功能
    在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/876163.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

友盟U-APM——优秀的前端性能监控工具

友盟U-APM——优秀的前端性能监控工具

在数字化转型浪潮的推动下,移动应用已成为企业连接用户、驱动业务增长的核心载体。然而,随着应用复杂度的日益提升,用户对于应用性能稳定性的期待也水涨船高。面对应用崩溃、卡顿、加载缓慢等频发问题,如何确保应用的流畅运行,成为产研团队亟待解决的关键挑战。在此背景下,友盟…
阅读更多...
苦学Opencv的第九天：模板匹配

苦学Opencv的第九天：模板匹配

Python OpenCV入门到精通学习日记：模板匹配 前言 模板匹配是一种最原始、最基本的识别方法，可以在原始图像中寻找特定图像的位置。模板匹配经常应用于简单的图像查找场景中，例如，在集体合照中找到某个人的位置。 #mermaid-svg-N…
阅读更多...
在Vim中编译和运行代码：一站式指南

在Vim中编译和运行代码：一站式指南

Vim是一款功能强大的文本编辑器，广泛用于程序员和开发人员中。虽然Vim主要用于文本编辑，但它也提供了一些方便的功能来编译和运行代码。本文将详细介绍如何在Vim中编译和运行代码，包括设置编译快捷键、使用插件以及集成构建系统。 1. 引言 …
阅读更多...
面试题005：面向对象的特征 之 多态性

面试题005：面向对象的特征 之 多态性

多态的使用前提： 类的继承关系：在多态中必须存在有继承关系的子类和父类方法的重写：子类对父类中某些方法进行重新定义,在调用这些方法时就会调用子类的方法。当子类重写父类的方法被调用时,只有对象继承链中的最末端的方法才会被调用。向上…
阅读更多...
C#中的异步编程：Task、Await 和 Async

C#中的异步编程：Task、Await 和 Async

public async void DoSth() {await Task.Run(() > {//...DoSth...}); } ①函数的返回类型前加上： async ②函数内加上： await Task.Run(() > { }); ③在上面{ ... } 内添加要处理的程序代码， 这样运行到 DoSth() 函数就…
阅读更多...
PYTHON学习笔记（八、字符串及的使用）

PYTHON学习笔记（八、字符串及的使用）

目录 1、字符串 1.1、字符串的常用操作 1.2、格式化字符串 1.2.1、占位符格式化字符串 1.2.2、f-string格式化字符串 1.2.3、str.format( )格式化字符串 1.3、数据的验证 1.4、正则表达式 1.5.1元字符 1.5.2限定符 1.5.3其他字符 1.5.4re模块 1、字符串 1.1、字符…
阅读更多...
PySimpleGUI的安装、使用介绍

PySimpleGUI的安装、使用介绍

PySimpleGUI的安装等介绍 如果直接使用pip命令是无法下载免费版的，通过设置的python Interpreter也不可以下载到5.0.0之前的版本了。 现在已经无法通过pycharm直接获取到PySimpleGUI的免费（无需登录）版，不过听说可以登入官网然后进…
阅读更多...
C语言 写一个函数days,实现某日在本年中是第几天计算。

C语言 写一个函数days,实现某日在本年中是第几天计算。

写一个函数days, 【定义一个结构体变量(包括年、月、日)。计算该日在本年中是第几天,注意闰年问题&#xff08;即将闰年情况包含在内&#xff09;】 由主函数将年、月、日传递给days函数,计算后将日子数传回主函数输出。 ​#include <stdio.h>typedef struct {int yea…
阅读更多...
【JS逆向课件：第十八课：JS操作2】

【JS逆向课件：第十八课：JS操作2】

4.12、BOM对象&#xff08;了解&#xff09; BOM:Broswer object model,即浏览器提供我们开发者在javascript用于操作浏览器的对象。 4.12.1、window对象 窗口方法 // BOM Browser object model 浏览器对象模型// js中最大的一个对象.整个浏览器窗口出现的所有东西都是win…
阅读更多...
十大排序的稳定性和时间复杂度

十大排序的稳定性和时间复杂度

十大排序算法的稳定性和时间复杂度是数据结构和算法中的重要内容。 以下是对这些算法的稳定性和时间复杂度的详细分析&#xff1a; 稳定性 稳定性指的是排序算法在排序过程中是否能够保持相等元素的原始相对顺序。根据这个定义&#xff0c;我们可以将排序算法分为稳定排序和…
阅读更多...
大数据｜使用Apache Spark 删除指定表中的指定分区数据

大数据｜使用Apache Spark 删除指定表中的指定分区数据

文章目录 概述方法 1: 使用 Spark SQL 语句方法 2: 使用 DataFrame API方法 3: 使用 Hadoop 文件系统 API方法 4: 使用 Delta Lake使用注意事项常见相关问题及处理结论 概述 Apache Spark 是一个强大的分布式数据处理引擎&#xff0c;支持多种数据处理模式。在处理大型数据集时…
阅读更多...
C#中的异步编程：如何有效地使用async和await关键字以提高应用程序的性能和响应性

C#中的异步编程：如何有效地使用async和await关键字以提高应用程序的性能和响应性

在C#中&#xff0c;异步编程是一种处理并发操作和提高应用程序性能的重要技术。使用async和await关键字可以简化异步编程&#xff0c;并提供更清晰和可读的代码。 以下是一些有效使用async和await关键字的方法&#xff0c;以提高应用程序性能和响应性&#xff1a; 使用异步方…
阅读更多...
【OCPP】ocpp1.6协议第5.7章节Get Composite Schedule的介绍及翻译

【OCPP】ocpp1.6协议第5.7章节Get Composite Schedule的介绍及翻译

目录 5.7 获取组合计划Get Composite Schedule-概述 1. 目的 2. 消息类型 3. 消息格式 GetCompositeSchedule.req GetCompositeSchedule.conf 4. 使用场景 5.7 获取组合计划Get Composite Schedule-原文译文 5.7 获取组合计划Get Composite Schedule-概述 在OCPP 1.6协议中，第…
阅读更多...
C++笔记---缺省参数和函数重载

C++笔记---缺省参数和函数重载

1. 缺省参数 1.1 定义 缺省参数是声明或定义函数时为函数的参数指定一个缺省值&#xff08;默认值&#xff09;。在调用该函数时&#xff0c;如果没有指定实参 则采用该形参的缺省值&#xff0c;否则使用指定的实参&#xff0c;缺省参数分为全缺省和半缺省参数。 void Func(…
阅读更多...
XML 和 SimpleXML 入门教程

XML 和 SimpleXML 入门教程

XML 和 SimpleXML 入门教程 XML&#xff08;可扩展标记语言&#xff09;是一种用于存储和传输数据的标记语言。它是一种自我描述的语言&#xff0c;允许用户定义自己的标签来表示数据。SimpleXML 是 PHP 中的一个扩展&#xff0c;用于解析和操作 XML 数据。本文将介绍 XML 和 …
阅读更多...
CSDN中各种公式编辑格式记录

CSDN中各种公式编辑格式记录

在CSDN博客平台码公式可太难记格式了。CSDN支持Markdown语法&#xff0c;并集成了MathJax库来渲染LaTeX公式&#xff0c;做个笔记给自己时时翻翻吧。 1. 插入行内公式 行内公式是指嵌入在文本行中的公式&#xff0c;它不会独占一行。在CSDN中使用$符号来包围LaTeX公式代码&am…
阅读更多...
docker 安装单机版redis

docker 安装单机版redis

把这三个放上去 修改成自己的 按照自己需求来 照图片做 vim redis.conf vim startRedis.sh mv startRedis.sh deployRedis.sh sh deployRedis.sh docker run --privilegedtrue \ --name dev.redis --restartalways \ --network dev-net \ -v ./config/redis.conf:/etc/r…
阅读更多...
《昇思25天学习打卡营第三十三天|7月26号》

《昇思25天学习打卡营第三十三天|7月26号》

昇思25天学习打卡营 在昇思25天学习打卡营的第33天7月26号&#xff0c;我深入学习了Python编程。通过课程的系统学习和实践编程项目&#xff0c;我逐渐掌握了Python语言的基本语法和核心概念。 特别是在函数定义和数据结构的应用上&#xff0c;我学习到了一些新的东西。以为平…
阅读更多...
鸿蒙华为登录（以及导航页面跳转）

鸿蒙华为登录（以及导航页面跳转）

//登录华为登录界面以及跳转 //切记一定要写路径&#xff0c;不写路径&#xff0c;容易报错&#xff0c;还有一定要记得导一下包&#xff08;Arouter&#xff09; //接下来是鸿蒙界面导航跳转 //进行跳转 TabContent组件不支持设置通用宽度属性&#xff0c;其宽度默认撑满Tab…
阅读更多...
RedHat9 | Ansible 处理任务失败

RedHat9 | Ansible 处理任务失败

环境版本说明 RedHat9 [Red Hat Enterprise Linux release 9.0]Ansible [core 2.13.3]Python [3.9.10]jinja [3.1.2] 1. 忽略任务失败 Ansible评估各任务的返回代码&#xff0c;从而确定任务是成功还是失败通常而言&#xff0c;当任务失败时&#xff0c;Ansible将立即在该主…
阅读更多...
最新文章

Copyright @ 2022~2023