formato - Crear tabla Hive para leer archivos de parquet del esquema de parquet/avro

formato parquet

Question

Estamos buscando una solución para crear una tabla de colmena externa para leer los datos de los archivos de parquet de acuerdo con un esquema de parquet / avro.

de otra manera, ¿cómo generar una tabla de colmena a partir de un esquema de parquet / avro?

Gracias :)

Answer 1

Pruebe a continuación usando el esquema de Avro:

CREATE TABLE avro_test ROW FORMAT SERDE ''org.apache.hadoop.hive.serde2.avro.AvroSerDe'' STORED AS AVRO TBLPROPERTIES (''avro.schema.url''=''myHost/myAvroSchema.avsc''); 

CREATE EXTERNAL TABLE parquet_test LIKE avro_test STORED AS PARQUET LOCATION ''hdfs://myParquetFilesPath'';

Se realiza la misma consulta en Crear dinámicamente tabla externa Hive con esquema Avro en Datos de parquet