Introducción al PLN 2 Lingüística Computacional vs Tratamiento del Lenguaje Natural (Tratamiento de la Lengua). Disciplinas afines Lingüística Inteligencia Artificial Comprensión vs Generación Lenguaje escrito y Habla Aplicaciones del LN. Niveles de descripción lingüística. Introduction: marc general i la motivació d’aquest treball

Dificultad en PLN Evolución de la lengua Ambigüedad Complejidad Conocimiento impreciso, probabilístico, difuso Necesita conocimiento del mundo Inmerso en un sistema de interacción social

Problemas de la Comprensión de la lengua Ambigüedad léxica Ambigüedad sintáctica Ambigüedad semántica Referencia

Ambigüedad léxica

Ambigüedad sintáctica (4) La vendedora de periódicos del barrio (5) Pedro vió al hombre en lo alto de la montaña con unos prismáticos

(6) Pedro dió un pastel a los niños Ambigüedad semántica (6) Pedro dió un pastel a los niños Uno para todos? Uno a cada uno? A lo mejor depende del tamaño (del pastel, no de Pedro ni de los niños)

(7) él le dijo, después, que lo pusiera encima Quién dijo? A quién? Referencia (7) él le dijo, después, que lo pusiera encima Quién dijo? A quién? Cuándo, después de qué? Que pusiera qué? Encima de dónde?

Propuestas de solución El Modelo racionalista. N. Chomsky Una parte considerable del conocimiento que se debe utilizar para el TL puede ser fijado de antemano y debe ser prescrito, codificado e incorporado como conocimiento inicial para cualquier proceso de TL. El Modelo empiricista. Z. Harris El conocimiento lingüístico se puede inferir a partir de la experiencia, que se puede recoger a través de corpus textuales, mediante la utilización de unos pocos mecanismos simples como la asociación o la generalización. ( Firth "podemos conocer una palabra por la compañia que lleva")

Evolución de la LC 1 Lingüística normativa y descriptiva Estructuralismo (Saussure, 1916) Gramática Transformacional generativa (Chomsky, “Aspects” 1965) Teoría Estándar Teoría Estándard extendida (1970) Semántica Generativa (Lakoff, Fillmore, 70) Gramáticas de Casos (Fillmore 70) Montague (1973, PTQ)

Evolución de la LC 2 Teoría GB (Chomsky, 83) Gramáticas de Estructura de Frase Generalizadas GPSG (Gazdar et al,85) Gramáticas Léxico Funcionales LFG (Kaplan,Bresnan,82) Gramáticas de Estructura de Frase Regidas por el Núcleo HPSG (Pollard,Sag,93) Gramáticas de Cláusulas Definidas DCG (Warren,Pereira,80) Gramáticas Categoriales (Steedman,88)

Evolución de la LC 3 Semántica y Ontología (Katz, Fodor) Semántica Léxica Semántica de Prototipos Semántica de Situaciones (Perry,Barwise, 1983) Lingüística textual y del corpus Lingüística discursiva Teoría de los diálogos,

Niveles de descripción lingüística 1 Nivel fonético Nivel fonológico Nivel léxico Nivel morfológico Nivel sintáctico Nivel lógico Nivel semántico Nivel pragmático Nivel ilocutivo Nivel discursivo

Niveles de descripción lingüística 2 Nivel sintáctico Relaciones estructurales entre las unidades Nivel semántico Significado literal Nivel pragmático Lengua como medio de alcanzar objetivos Nivel discursivo Unidades lingüísticas más amplias que las expresiones

Arquitecturas básicas del PLN Arquitectura por niveles Cada nivel tiene sus propias clases que resuelven determinados problemas Los objetos de un nivel solicitan servicios a los del propio nivel y a los del nivel inmediatamente inferior Los objetos de un nivel serven a los del propio nivel y a los del nivel inmediatamente superior Arquitectura pipes & filters Cada filtro enriquece de alguna forma el stream de entrada y lo pasa al siguiente pipe

Tareas del PLN Tres niveles de complejidad creciente nivel básico Tareas presentes en la mayoría de los sistemas: Segmentadores, identificadores de la lengua, NER, NEC, analizadores morfológicos, analizadores sintácticos, chunkers, ... nivel intermedio Tareas que implican la utilización de componentes básicos Sistemas de clasificación de documentos, sistemas de resumen automático, sistemas de extracción de información, ... nivel aplicación Aplicaciones informáticas de PLN

Historia del procesamiento de la lengua 1 1946, Weaver y Booth Primer sistema de Traducción Automática GAT Georgetown, CETA Grénoble (1961) 1964 Informe ALPAC 1970 SYSTRAN, METAL 70’s: TAUM-Meteo, SUSY, GETA LUNAR (Woods,70), Rendezvous (Codd,74) o LADDER (Hendrix,74)

Historia del procesamiento de la lengua 2 ATN (Woods,70) Gramáticas Procedurales (Winograd, SHRDLU, 1971) GUS, MARGIE, SOPHIE, RUS, SAM, PLANNER, JETS 80’s: Ariane-78, EUROTRA, ATLAS TEAM, CHAT-80, FRED, DATALOG XCALIBUR, XTRA, INKA

Situación actual Incorporación de formalismos sintácticos de unificación Gramáticas de rasgos con y sin tipos Inportancia creciente de la información léxica Ingeniería Lingüística. El LINGWARE Adquisición automática de recursos lingüísticos Integración, Reutilización, Multimodalidad, Transportabilidad, Robustez Técnicas empíricas, Aprendizaje Automático Utilización de técnicas estadísticas e híbridas Competencia y Actuación