Kylm Kyoto Language Modeling Toolingkit
Descargar ahora

Kylm Clasificación y resumen

Kylm Etiquetas

modelo kit de herramientas lenguaje modelo modelador de lenguaje Modeler Toolkit modelador

Kylm Descripción

Kyoto Language Modeling Toolkit Kylm es un kit de herramientas de modelado de lenguaje de código abierto y gratuito escrito en Java para aplicaciones de procesamiento de lenguaje natural.Kylm puede manejar el modelado de caracteres por carácter de palabras desconocidas, combinación de modelos de idioma, comparación y evaluación, así como una serie de técnicas de suavizado. Aquí hay algunas características clave de "Kylm": · Dos programas, contadores y CrossEntropy. · Soporte para modelos de lenguaje N-gram y varias técnicas de suavizado (probabilidad máxima, buenas tacturas, descuentos absolutos, campana de suero, Kney Ney) · Soporte para entrada / salida en ARPA y formato binario. · Junit Scripts para realizar pruebas de regresión. Requisitos: · Java ¿Qué hay de nuevo en este lanzamiento: · Soporte para modelos de idioma basados ​​en clase · Soporte para mejorar la suavidad de Kney-ney. 0.0.3 (6/22/2009) · Se corrigió la creación de cadenas vacías cuando existen varios espacios blancos, una variedad de mejoras de velocidad y memoria (eliminación de listas vinculadas, indexación del nodo raíz) · Soporte agregado para el modelado basado en caracteres de palabras desconocidas · Recorte fijo para que funcione con modelos suavizados de buenas. · Se solucionó un problema cuando los datos de tuberías en los conteos fijaron un problema con la salida WFST que estaba matando a un contexto de comienzo de la oración. 0.0.2 (5/28/2009) · Nuevas características: ahora es posible recortar n-gramos por cuenta con un conjunto de vocabulario se puede usar para limitar la salida de vocabulario en formato ATT WFST se ha mejorado la documentación. · Problemas pendientes: el recorte no funciona en tándem con suavizante de buen desempeño

Kylm Software relacionado