type conversion - regexp_extract - Cómo convertir la fecha ISO a la fecha UTC en Hive

regexp_extract hive

Question

Tengo datos JSON como a continuación: Necesito convertir esa fecha o mongo_date en utc timestamp, para analizar los datos en la colmena según el ejemplo de la línea de tiempo por año, por mes, por semana usando map map

{
    "_id" : ObjectId("51ac77050e9edcdad271ce2d"),
    "company" : null,
    "date" : "19760224",
    "mongo_date" : ISODate("1976-02-24T00:00:00Z")

Answer 1

Hive entiende este formato: ''aaaa-MM-dd HH: mm: ss.SSS''. Para la marca de tiempo UTC puede convertir simplemente reemplazando ''T'' con espacio ('''') y eliminando ''Z'':

from_unixtime(unix_timestamp(
  concat(substr(''2014-01-29T18:15:12.429Z'',1,10),'' '',
         substr(''2014-01-29T18:15:12.429Z'',12,12)
        ),''yyyy-MM-dd HH:mm:ss.SSS'')
             ) 

Han encontrado una solución más elegante.

 select from_unixtime(UNIX_TIMESTAMP("2017-01-01T05:01:10Z", "yyyy-MM-dd''T''HH:mm:ss''Z''"),"yyyy-MM-dd HH:mm:ss"); 

OK 
2017-01-01 05:01:10

Ver esto: jira