根据AtScale测试结果,所有SQL引擎的效率较之过去都有明显提高,通过使用一个长久存活的守护程序(LLAP)代替与HDFS datanode的直接交互和一个紧密集成的DAG框架,Hive/Tez取得了令人瞩目的成果。不过,性能上依然不及Impala和Spark,但也不像以前一样缓慢笨拙了。推出了LLAP的Hive/Tez现在已在BI场景中实践了。
完整的测试报告非常值得一读,其中涉及的几大亮点有:
1、Spark 2.0应对大量查询的性能大幅改善,平均为1.6版本的2.4倍。小型查询性能早已经很好了,2.0保持了同样的水平。
【免责声明】本文仅代表作者个人观点,与中国数码招商网无关。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。您若对该稿件内容有任何疑问或质疑,请联系本网将迅速给您回应并做处理。