hive与关系型数据库的比较
hive与关系型数据库的比较
对比项 | Hive | 关系型数据库 |
查询语言 | HQL | SQL |
数据存储 | HDFS | Llocal FS or RawDevice |
执行器 | MapReducer | Executor |
数据insert | 支持批量导入和单条插入 | 支持批量导入和单条插入 |
数据update和delete | 支持追加，不支持删除 | 行级别的更新和删除 |
数据规模 | 大 | 小 |
执行延迟 | 高 | 低 |
分区 | 支持 | 支持 |
索引 | v0.8之后支持 | 支持 |
数据加载模式 | 读时模式（快） | 写时模式(慢) |
扩展性 | 高 | 低 |
应用场景 | 海量数据查询 | 实时查询 |
Hive架构
Hive架构
- 编译器将一个Hive SQL转换操作符
- 操作符是Hive的最小的处理单元
- 每个操作符代表HDFS的一个操作或者一道MapReduce作业
Operator(操作符)
- Operator都是Hive定义的处理过程
- Operator的定义有：protected List <Operator<? extends Serializable>> child Operators;proetected List <Operator<? extends Serializable>> parentOperators;protected boolean done; // 初始化值为false
Hive三种安装方式区别和搭建
Hive中metastore(元数据存储)的三种模式：
- 内嵌Derby模式
- 直连数据库模式
- 远程服务器模式
