La tarea tiene como objetivo encontrar las mejores técnicas para identificar y categorizar tuits propagandísticos de fuentes gubernamentales y diplomáticas sobre un conjunto de datos de 9501 tuits en español, publicados por autoridades de China, Rusia, Estados Unidos y la Unión Europea. La tarea consiste en clasificar los tuits propagandísticos en 15 técnicas propagandísticas.
Publicación
Pablo Moral, Guillermo Marco, Julio Gonzalo, Jorge Carrillo-de-Albornoz, Iván Gonzalo-Verdugo (2023) Overview of DIPROMATS 2023: automatic detection and characterization of propaganda techniques in messages from diplomats and authorities of world powers. Procesamiento del Lenguaje Natural, Revista nº 71, septiembre de 2023, pp. 397-407.
Idioma
Español
NLP topic
Tarea abstracta
Dataset
Año
2023
Enlace publicación
Métrica Ranking
F1
Mejores resultados para la tarea
Sistema | F1 |
---|---|
bertin-roberta-base-spanish | 0.0780 |
ixambert-base-cased | 0.0600 |
bert-base-multilingual-cased | 0.1030 |
PlanTL-GOB-ES-roberta-base-bne | 0.1200 |
distillbert-base-spanish-uncased | 0.0680 |
bert-base-spanish-wwm-cased | 0.1350 |
distilbert-base-multilingual-cased | 0.0920 |
xlm-roberta-base | 0.0990 |
PlanTL-GOB-ES-roberta-large-bne | 0.2380 |
xlm-roberta-large | 0.2600 |