Как я могу сделать шаг Train And Test в Giza++?
В методах искусственного интеллекта есть два этапа обучения. Этими этапами являются данные и тестирование.
На этапе обучения мы предоставляем системе огромный объем данных и обычно тестируем ее на меньшем объеме данных. Затем мы оцениваем результат.
Теперь возникает вопрос: можно ли провести обучение с помощью встроенной функциональности, встроенной в GIZA++, или для этого нужно написать отдельное приложение?
Если мы должны написать отдельное приложение, может ли кто-нибудь помочь мне, предложив уже написанное приложение? Или руководство? Примечание: я хочу иметь программу выравнивания, а не статистический машинный перевод.
Я бы предпочел тренироваться в Giza++, чтобы иметь возможность тестировать с ненаблюдаемыми данными.
Заранее спасибо.
Это должно быть хорошей отправной точкой для обучения базовой системы mt с помощью Moses.
Обычно для выравнивания слов в параллельном корпусе используется GIZA++.
Для оценки языковой модели вам понадобятся другие инструменты, такие как IRSTLM, SRILM или KenLM.
