Hive LLAP no funciona con el formato Parquet

hdinsight

Question

Después de descubrir Hive LLAP , realmente quiero usarlo.

Inicié el clúster de Azure HDinsight con LLAP habilitado. Sin embargo, no parece funcionar mejor que la Colmena normal. Tengo datos almacenados en archivos de Parquet. Solo veo archivos ORC mencionados en los documentos o conversaciones relacionados con LLAP.

¿También es compatible con el formato Parquet?

Answer 1

Respondiendo mi propia pregunta.

Nos comunicamos con el apoyo de Azure. Hive LLAP solo funciona con el formato de archivo ORC (a partir del 05.2017).

Entonces, con Parquet, debemos utilizar Apache Impala para consultas interactivas rápidas ( https://impala.incubator.apache.org ) como alternativa a LLAP o cambiar el formato de archivo almacenado a ORC.