Servei de Gestió Documental, Arxius i Publicacions

Logo Ajuntament de Girona

Inici Activitats i projectes Jornades Imatge i Recerca Programa

Jornades Imatge i Recerca

19 de novembre

Assistent intel·ligent per a la descripció contextualitzada d’imatges en notícies

La descripció d’imatges en entorns periodístics és una tasca necessària tant per contextualitzar les fotografies que acompanyen les notícies com per garantir l’accessibilitat dels continguts digitals per a les persones amb discapacitat visual. Tot i això, la creació de peus de foto i, especialment, de textos alternatius sovint està condicionada pels temps de producció i pels fluxos de treball de les redaccions.
Per donar resposta a aquesta necessitat, el projecte "Assistència intel·ligent a la descripció contextualitzada de fotos per a notícies", desenvolupat per 3Cat i Eurecat en el marc del CIDAI, va explorar l’ús de models d’intel·ligència artificial per generar automàticament textos alternatius i peus de foto a partir de les imatges i del context de les notícies.
Durant el projecte es van realitzar diversos experiments amb notícies i imatges reals per analitzar l’impacte del context informatiu, la identificació de persones, la qualitat de les traduccions i els possibles biaixos derivats de les instruccions. L’avaluació amb professionals va mostrar una preferència general pels textos generats amb el context de la notícia i una millor valoració dels peus de foto respecte als textos alternatius. Tot i això, la supervisió humana continua sent imprescindible per garantir la qualitat editorial.
Els resultats es van transferir posteriorment als entorns de producció de 3Cat mitjançant la integració als seus fluxos de treball. La funcionalitat permet generar propostes automàtiques que els periodistes poden revisar i editar abans de publicar-les, millorant la productivitat, reforçant l’accessibilitat i mantenint el professional com a element central del procés editorial.

Josep Maria Carmona Leyva

Josep Maria Carmona Leyva és enginyer en Informàtica per la UNED, màster en Robòtica i Visió per Computador i doctor en Visió per Computador per la Universitat Politècnica de Catalunya (UPC). Actualment és gestor de projectes d’R+D+I a 3Cat i professor col·laborador de l’àrea d’Intel·ligència Artificial de la Universitat Oberta de Catalunya (UOC).
Amb més de vint anys d’experiència en tecnologies audiovisuals, treballa a la CCMA des del 2003, on ha desenvolupat diversos rols tècnics vinculats als sistemes i al desenvolupament de programari. Des del 2020 exerceix com a gestor de projectes d’innovació tecnològica.
Ha participat com a investigador i gestor en projectes d’àmbit català, estatal i europeu relacionats amb la intel·ligència artificial, l’accessibilitat, la lluita contra la desinformació i la innovació en els mitjans de comunicació. La seva activitat investigadora s’ha materialitzat en diverses publicacions científiques internacionals sobre reconeixement d’accions humanes, segmentació temporal d’accions i reconeixement de gestos mitjançant tècniques de visió per computador i aprenentatge automàtic. També participa com a revisor i membre de comitès científics de congressos internacionals i ha publicat treballs sobre l’ús responsable de la intel·ligència artificial als mitjans públics. A més, impulsa el desenvolupament de proves de concepte (PoC) per a l’avaluació i la incorporació de tecnologies basades en IA en entorns de producció audiovisual, contribuint a la innovació, la transferència de coneixement i l’adopció de solucions avançades als mitjans públics.

Tornar