Hive编程技术与应用第1章.pptxVIP

智慧交通概述;;第1章Hive介绍;1.1Hive工作原理;如图1-1所示，HiveQL通过HiveCLI、Thrift、jdbc服务接口提交，经过Hive的SQL解析引擎解析，并且结合MetaStore中的元数据进行类型检测和语法分析，生成一个逻辑方案，同时进行内部的简单的优化处理，产生一个以有向无环图DAG数据结构形式展现的MapReduce任务，其中涉及的组件有：

元存储（MetaStore）。该组件存储了Hive中表的描述信息，其中包含表、表的分区、模式、列及其类型、表数据映射关系等。通常在实际的应用中会考虑将MetaStore中的数据存储到RDBMS，比如MySQL。

驱动（Driver）。控制HiveQL生命周期的组件，当HiveQL查询提交到Hive时，该驱动管理着会话句柄以及任何会话的统计。

查询编译器（QueryCompiler）。该组件将HiveQL编译成有向无环图形式的MapReduce任务。

执行引擎（ExecutionEngine）。该组件按照依赖性顺序执行由编译器产生的任务。

Hive服务器（HiveServer）。目前该组件提供Thrift、JDBC远程语句接口等。

客户端组件。提供命令行接口HiveCLI、WebUI以及JDBC驱动。

;;;1.2Hive的数据类型;;1.4本章小结

;