machine learning - into - ¿Cómo puedo hacer Train and Test en Giza++?

train test split parameters

Question

En los métodos de inteligencia artificial tenemos dos etapas de entrenamiento. Estas etapas son datos y pruebas.

En la etapa de capacitación, proporcionamos una gran cantidad de datos a un sistema y normalmente lo evaluamos con un volumen de datos menor. Luego evaluamos la salida.

Ahora la pregunta es, ¿esta capacitación se puede realizar a través de la funcionalidad integrada incorporada en GIZA ++ o deberíamos escribir una aplicación separada para eso?

Si debemos escribir una solicitud por separado, ¿alguien puede ayudarme sugiriendo una solicitud ya escrita? O un manual? Nota: Quiero tener un programa de alineación, no una traducción automática estadística

Preferiría entrenar en Giza ++ para poder probar con datos no observados.

Gracias por adelantado.

Answer 1

Este debería ser un buen punto de partida para entrenar un sistema mt de línea de base usando Moses .
Normalmente GIZA ++ se usa para alinear palabras en el corpus paralelo.
Necesitará otras herramientas como IRSTLM, SRILM o KenLM para la estimación del modelo de idioma.