Espacio

spaCy ( / s p eɪ ˈ s iː / spay- SEE ) es una biblioteca de software de código abierto para el procesamiento avanzado del lenguaje natural , escrita en los lenguajes de programación Python y Cython . ^{[3] [4]} La biblioteca se publica bajo la licencia MIT y sus principales desarrolladores son Matthew Honnibal e Ines Montani, los fundadores de la empresa de software Explosion.

A diferencia de NLTK , que se usa ampliamente para la enseñanza y la investigación, spaCy se centra en proporcionar software para uso en producción. ^{[5] [6]} spaCy también admite flujos de trabajo de aprendizaje profundo que permiten conectar modelos estadísticos entrenados por bibliotecas de aprendizaje automático populares como TensorFlow , PyTorch o MXNet a través de su propia biblioteca de aprendizaje automático Thinc. ^{[7] [8]} Usando Thinc como su backend, spaCy presenta modelos de redes neuronales convolucionales para etiquetado de partes del discurso , análisis de dependencias , categorización de texto y reconocimiento de entidades nombradas (NER) . Los modelos de redes neuronales estadísticas preconstruidos para realizar estas tareas están disponibles para 23 idiomas, incluidos inglés, portugués, español, ruso y chino, y también hay un modelo NER en varios idiomas . El soporte adicional para tokenización para más de 65 idiomas permite a los usuarios entrenar modelos personalizados en sus propios conjuntos de datos también. ^[9]

• La versión 1.0 se lanzó el 19 de octubre de 2016 e incluyó soporte preliminar para flujos de trabajo de aprendizaje profundo al admitir canales de procesamiento personalizados. ^[10] Además, incluyó un comparador de reglas que admitía anotaciones de entidades y una API de entrenamiento documentada oficialmente.
• La versión 2.0 se lanzó el 7 de noviembre de 2017 e introdujo modelos de redes neuronales convolucionales para siete idiomas diferentes. ^{[11] También admitía componentes de canalización de procesamiento personalizados y atributos de extensión, y presentaba un componente} de clasificación de texto entrenable incorporado .
• La versión 3.0 se lanzó el 1 de febrero de 2021 e introdujo pipelines de última generación basados ​​en transformers . ^[12] También introdujo un nuevo sistema de configuración y flujo de trabajo de capacitación, así como sugerencias de tipo y plantillas de proyecto. Esta versión eliminó la compatibilidad con Python 2 .

• Tokenización no destructiva
• Soporte de "tokenización alfa" para más de 65 idiomas ^[13]
• Soporte integrado para componentes de canalización entrenables , como reconocimiento de entidades con nombre , etiquetado de partes del discurso , análisis de dependencias , clasificación de texto , vinculación de entidades y más
• Modelos estadísticos para 19 idiomas ^[14]
• Aprendizaje multitarea con transformadores entrenados previamente como BERT
• Compatibilidad con modelos personalizados en PyTorch, TensorFlow y otros marcos
• Velocidad y precisión de última generación ^[15]
• Sistema de formación listo para producción
• Visualizadores integrados para sintaxis y entidades con nombre
• Fácil empaquetado, implementación y gestión del flujo de trabajo de modelos

spaCy viene con varias extensiones y visualizaciones que están disponibles como bibliotecas gratuitas de código abierto :

• Thinc: una biblioteca de aprendizaje automático optimizada para el uso de CPU y aprendizaje profundo con entrada de texto.
• sense2vec: una biblioteca para calcular similitudes entre palabras, basada en Word2vec . ^[16]
• displaCy: Un visualizador de árbol de análisis de dependencias de código abierto creado con JavaScript , CSS y SVG .
• displaCy ^ENT : Un visualizador de entidades con nombre de código abierto creado con JavaScript y CSS .

• Sitio web oficial
• Implementación de la biblioteca Spacy