实战化教学领导品牌  全国咨询热线:400-009-1906
首页>视频下载>Impala&Oozie视频教程
  • 课程介绍
  • 课程目录
  • 配套文档
  • 课程评论

Impala是Cloudera公司主导开发的新型查询系统,它提供SQL语义,能查询存储在Hadoop的HDFS和HBase中的PB级大数据。

优点:

1、Impala不需要把中间结果写入磁盘,省掉了大量的I/O开销。

2、省掉了MapReduce作业启动的开销。MapReduce启动task的速度很慢(默认每个心跳间隔是3秒钟),Impala直接通过相应的服务进程来进行作业调度,速度快了很多。

3、Impala完全抛弃了MapReduce这个不太适合做SQL查询的范式,而是像Dremel一样借鉴了MPP并行数据库的思想另起炉灶,因此可做更多的查询优化,从而省掉不必要的shuffle、sort等开销。

4、通过使用LLVM来统一编译运行时代码,避免了为支持通用编译而带来的不必要开销。

5、用C++实现,做了很多有针对性的硬件优化,例如使用SSE指令。

6、使用了支持Data locality的I/O调度机制,尽可能地将数据和计算分配在同一台机器上进行,减少了网络开销。

尚学堂科技_庞磊_01.impala简介
尚学堂科技_庞磊_02.impala架构、外部shell_3
尚学堂科技_庞磊_03.impala内部shell、存储、sql
尚学堂科技_庞磊_05.oozie简介
尚学堂科技_庞磊_06.oozie视频
看过该课程的同学还看过
课程咨询

北京 400-009-1906

  • 北京尚学堂
  • 北京尚学堂
  • 北京尚学堂
  • 北京尚学堂
  • 北京尚学堂
  • 北京尚学堂

长沙 0731-83072091

四川 028-65176856

  • 四川尚学堂
  • 四川尚学堂
  • 四川尚学堂

上海 021-67690939

  • 上海尚学堂
  • 上海尚学堂
  • 上海尚学堂

广州 020-29896995

  • 广州尚学堂
  • 广州尚学堂
  • 广州尚学堂

武汉 027-87989193

  • 武汉尚学堂
  • 武汉尚学堂
  • 武汉尚学堂

太原 0354-3052381

  • 太原尚学堂
  • 太原尚学堂
  • 太原尚学堂

郑州 0371-55177956

  • 郑州尚学堂
  • 郑州尚学堂
  • 郑州尚学堂

济南 0531-83136618

  • 郑州尚学堂
  • 郑州尚学堂
  • 郑州尚学堂