señor - Elasticsearch falla silenciosamente si el documento tiene un error de correspondencia para un campo

la batalla por la tierra media no funciona en windows 7

Question

Estoy enfrentando un problema extraño con Elasticsearch. Mi asignación especifica que un determinado campo es de tipo long . Ahora accidentalmente intenté indexar algunos documentos que tenían tipo de string para ese campo en lugar de long . No recibí ningún error de Elasticsearch pero los documentos nunca fueron indexados. Cuando arreglé el problema, los documentos fueron indexados muy bien.

Ejemplo:

Mi mapeo:

{
    "field1": {
        "type": "long"
    }
}

Cuando envío este documento, falla silenciosamente:

 {
     "field1": "this is a string"
 }

Cuando envío esto, funciona como se esperaba:

 {
     "field1": 12345
 }

¿Hay alguna forma de detectar este tipo de errores?

Answer 1

Si configura cadena ignore_malformed en falso. No indexaría el documento si está mal formado, pero arroja una excepción. Al menos en elasticsearch 1.6.0.

Ejemplo:

put test

put test/test/_mapping 
{
    "properties" : {
        "title" : {"type" : "string"},
        "data" : {"type": "long" ,"ignore_malformed":false}

    }
}

put test/test/1
{
    "data" : "1",
    "title" : "valid coerce string to number"
}

put test/test/2
{
    "data" : "hello",
    "title" : "invalid number"
}

#Failed Response
{
   "error": "MapperParsingException[failed to parse [data]]; nested: NumberFormatException[For input string: /"hello/"]; ",
   "status": 400
}

Query with Get fails

get test/test/2


{
   "_index": "test",
   "_type": "test",
   "_id": "2",
   "found": false
}

Answer 2

Sospecho que su mapeo es similar a esto:

{
    "long_field": {
        "type": "long"
    }
}

Si ese es el caso, puede establecer el indicador de coerce en false ya que es true de manera predeterminada y siempre intentará convertir cadenas a números y truncar fracciones para enteros.

{
    "long_field": {
        "type": "long",
        "coerce": false
    }
}

Si hace esto, la próxima vez que intente indexar un campo largo como una cadena, ES le dirá esto:

MapperParsingException[failed to parse [long_field]]; nested: IllegalArgumentException[Long value passed as String];