Hive教程:触发 MapReduce 的查询类型

Hive 底层依赖 MapReduce(或 Tez/Spark)执行分布式计算,并非所有查询都触发 MapReduce:简单的元数据查询(如查表结构)仅访问 Hive Metastore,而涉及 数据扫描、计算、聚合 的查询会触发 MapReduce 任务。

Azkaban3.81.0介绍

Azkaban 是一款开源的分布式工作流调度工具,由 LinkedIn 开发并捐赠给 Apache 社区(目前属于 Apache 顶级项目),核心用于调度、监控和管理一系列关联的任务(Job),尤其适用于大数据场景下的离线任务编排(如 Hadoop、Spark、Hive 任务等),也可支持 Shell、Python、Java 等各类脚本/程序的定时/依赖执行。