SlideShare uma empresa Scribd logo
1 de 14
Baixar para ler offline
Analisi e valorizzazione del
patrimonio artistico mediante IA
Giovanna Castellano, Gennaro Vessio
Dipartimento di Informatica, Università degli Studi di Bari
Arte & Scienza
Nuove opportunità
Negli ultimi tempi è stato compiuto uno sforzo di
digitalizzazione su larga scala che ha portato alla
crescente disponibilità di grandi collezioni di opere
dʼarte digitalizzate
Tale disponibilità, unita ai recenti progressi nellʼIA,
ha aperto nuove opportunità agli specialisti in
questo settore per assistere storici dellʼarte,
curatori di musei, ecc., nello studio e in una
migliore fruizione del patrimonio artistico
digitalizzato
Percezione estetica umana
La capacità di riconoscere pattern nelle opere
dʼarte digitalizzate rientra inerentemente nel
dominio della percezione estetica umana
Problema: tale percezione è fortemente soggettiva
e influenzata da diversi fattori (conoscenze storiche
relative allʼopera, emozione che lʼopera suscita in
chi lʼosserva, … )
Pertanto, essa è estremamente difficile da
codificare…
Deep Learning
Primo quesito:
riusciamo a trovare
similarità fra opere d’arte
in maniera automatica e
senza supervisione?
Visual link retrieval
Secondo quesito: per quanto riguarda il clustering?
Problema: sebbene lʼapproccio summenzionato sia
adeguato per trovare opere dʼarte visivamente
collegate, esso non è efficace per raggruppare le
opere in cluster…
8
Deep Embedded
Clustering
Terzo quesito: perché non sfruttare altri (meta)dati?
Problema: stiamo ignorando una grande quantità
di conoscenza di dominio, nonché relazioni e
connessioni note tra opere dʼarte e/o artisti, che
potrebbero aumentare la qualità delle soluzioni
esistenti…
ArtGraph
Direzioni future
12
Cross-modal retrieval Visual question answering
Sfide aperte:
❏ far avanzare la
comprensione “semantica”
di una scena digitalizzata
❏ avvicinare la comunità
dell’IA a quella umanistica
Grazie per lʼattenzione!
gennaro.vessio@uniba.it

Mais conteúdo relacionado

Semelhante a AIUCD.pdf

Curricolo Digitale in ARTE e CULTURA DIGITALE
Curricolo Digitale in ARTE e CULTURA DIGITALE �Curricolo Digitale in ARTE e CULTURA DIGITALE �
Curricolo Digitale in ARTE e CULTURA DIGITALE ArsAcademyResearch
 
La miglior tecnologia al servizio dell’arte
La miglior tecnologia al servizio dell’arteLa miglior tecnologia al servizio dell’arte
La miglior tecnologia al servizio dell’arteUnocad
 
Tesi di Laurea- Anonime Icone
Tesi di Laurea- Anonime IconeTesi di Laurea- Anonime Icone
Tesi di Laurea- Anonime IconeIlaria Trombì
 
Un esempio di storytelling: La realtà aumentata a scuola
Un esempio di storytelling: La realtà aumentata a scuolaUn esempio di storytelling: La realtà aumentata a scuola
Un esempio di storytelling: La realtà aumentata a scuolaMinistry of Education
 
Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...
Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...
Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...EsperoSrl
 
Il futuro delle arti visive in Italia - rapporto
Il futuro delle arti visive in Italia - rapportoIl futuro delle arti visive in Italia - rapporto
Il futuro delle arti visive in Italia - rapportoStefano Palumbo
 
La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...
La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...
La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...Ministry of Education
 
Presentazione Galvani
Presentazione GalvaniPresentazione Galvani
Presentazione Galvaniarcorosca
 

Semelhante a AIUCD.pdf (14)

Fare arte
Fare arteFare arte
Fare arte
 
Curricolo Digitale in ARTE e CULTURA DIGITALE
Curricolo Digitale in ARTE e CULTURA DIGITALE �Curricolo Digitale in ARTE e CULTURA DIGITALE �
Curricolo Digitale in ARTE e CULTURA DIGITALE
 
News
NewsNews
News
 
Giovani musei
Giovani museiGiovani musei
Giovani musei
 
La miglior tecnologia al servizio dell’arte
La miglior tecnologia al servizio dell’arteLa miglior tecnologia al servizio dell’arte
La miglior tecnologia al servizio dell’arte
 
Tesi di Laurea- Anonime Icone
Tesi di Laurea- Anonime IconeTesi di Laurea- Anonime Icone
Tesi di Laurea- Anonime Icone
 
MeB
MeBMeB
MeB
 
Un esempio di storytelling: La realtà aumentata a scuola
Un esempio di storytelling: La realtà aumentata a scuolaUn esempio di storytelling: La realtà aumentata a scuola
Un esempio di storytelling: La realtà aumentata a scuola
 
Venaria, 25maggio 2015
Venaria, 25maggio 2015Venaria, 25maggio 2015
Venaria, 25maggio 2015
 
SMartART: un nuovo modo di fruire il Museo
SMartART: un nuovo modo di fruire il MuseoSMartART: un nuovo modo di fruire il Museo
SMartART: un nuovo modo di fruire il Museo
 
Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...
Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...
Videonarrazioni per innovare la didattica universitaria_Panciroli, Corazza, M...
 
Il futuro delle arti visive in Italia - rapporto
Il futuro delle arti visive in Italia - rapportoIl futuro delle arti visive in Italia - rapporto
Il futuro delle arti visive in Italia - rapporto
 
La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...
La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...
La città si racconta: Realtà aumentata, oggetti comunicativi nuovi e amplific...
 
Presentazione Galvani
Presentazione GalvaniPresentazione Galvani
Presentazione Galvani
 

Mais de Gennaro Vessio

Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...
Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...
Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...Gennaro Vessio
 
Tecniche di Computer Vision per applicazioni di IA sostenibile mediante droni
Tecniche di Computer Vision per applicazioni di IA sostenibile mediante droniTecniche di Computer Vision per applicazioni di IA sostenibile mediante droni
Tecniche di Computer Vision per applicazioni di IA sostenibile mediante droniGennaro Vessio
 
Segmentation of remotely sensed images with a neuro-fuzzy inference system
Segmentation of remotely sensed images with a neuro-fuzzy inference systemSegmentation of remotely sensed images with a neuro-fuzzy inference system
Segmentation of remotely sensed images with a neuro-fuzzy inference systemGennaro Vessio
 
AIxIA Discussion Paper
AIxIA Discussion PaperAIxIA Discussion Paper
AIxIA Discussion PaperGennaro Vessio
 
AIxIA 2021 Main Track Presentation
AIxIA 2021 Main Track PresentationAIxIA 2021 Main Track Presentation
AIxIA 2021 Main Track PresentationGennaro Vessio
 
Integrating Contextual Knowledge to Visual Features for Fine Art Classification
Integrating Contextual Knowledge to Visual Features for Fine Art ClassificationIntegrating Contextual Knowledge to Visual Features for Fine Art Classification
Integrating Contextual Knowledge to Visual Features for Fine Art ClassificationGennaro Vessio
 
Deep Convolutional Embedding for Digitized Painting Clustering
Deep Convolutional Embedding for Digitized Painting ClusteringDeep Convolutional Embedding for Digitized Painting Clustering
Deep Convolutional Embedding for Digitized Painting ClusteringGennaro Vessio
 
A Brief Overview of Deep Learning Approaches to Paintings and Drawings
A Brief Overview of Deep Learning Approaches to Paintings and DrawingsA Brief Overview of Deep Learning Approaches to Paintings and Drawings
A Brief Overview of Deep Learning Approaches to Paintings and DrawingsGennaro Vessio
 
Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...
Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...
Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...Gennaro Vessio
 
Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...
Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...
Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...Gennaro Vessio
 
Crowd Counting from UAVs (ECCV2020)
Crowd Counting from UAVs (ECCV2020)Crowd Counting from UAVs (ECCV2020)
Crowd Counting from UAVs (ECCV2020)Gennaro Vessio
 
Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...
Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...
Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...Gennaro Vessio
 

Mais de Gennaro Vessio (14)

CBMS.pdf
CBMS.pdfCBMS.pdf
CBMS.pdf
 
Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...
Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...
Crowd Flow Detection from Drones with Fully Convolutional Networks and Cluste...
 
Tecniche di Computer Vision per applicazioni di IA sostenibile mediante droni
Tecniche di Computer Vision per applicazioni di IA sostenibile mediante droniTecniche di Computer Vision per applicazioni di IA sostenibile mediante droni
Tecniche di Computer Vision per applicazioni di IA sostenibile mediante droni
 
Segmentation of remotely sensed images with a neuro-fuzzy inference system
Segmentation of remotely sensed images with a neuro-fuzzy inference systemSegmentation of remotely sensed images with a neuro-fuzzy inference system
Segmentation of remotely sensed images with a neuro-fuzzy inference system
 
AIxIA Discussion Paper
AIxIA Discussion PaperAIxIA Discussion Paper
AIxIA Discussion Paper
 
AIxIA 2021 Main Track Presentation
AIxIA 2021 Main Track PresentationAIxIA 2021 Main Track Presentation
AIxIA 2021 Main Track Presentation
 
Integrating Contextual Knowledge to Visual Features for Fine Art Classification
Integrating Contextual Knowledge to Visual Features for Fine Art ClassificationIntegrating Contextual Knowledge to Visual Features for Fine Art Classification
Integrating Contextual Knowledge to Visual Features for Fine Art Classification
 
Deep Convolutional Embedding for Digitized Painting Clustering
Deep Convolutional Embedding for Digitized Painting ClusteringDeep Convolutional Embedding for Digitized Painting Clustering
Deep Convolutional Embedding for Digitized Painting Clustering
 
A Brief Overview of Deep Learning Approaches to Paintings and Drawings
A Brief Overview of Deep Learning Approaches to Paintings and DrawingsA Brief Overview of Deep Learning Approaches to Paintings and Drawings
A Brief Overview of Deep Learning Approaches to Paintings and Drawings
 
Opening welcome
Opening welcomeOpening welcome
Opening welcome
 
Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...
Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...
Preliminary Evaluation of TinyYOLO on a New Dataset for Search-And-Rescue wit...
 
Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...
Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...
Deep Convolutional Embedding for Painting Clustering: Case Study on Picasso's...
 
Crowd Counting from UAVs (ECCV2020)
Crowd Counting from UAVs (ECCV2020)Crowd Counting from UAVs (ECCV2020)
Crowd Counting from UAVs (ECCV2020)
 
Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...
Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...
Evaluation of Cognitive Impairment in Pediatric Multiple Sclerosis with Machi...
 

AIUCD.pdf

  • 1. Analisi e valorizzazione del patrimonio artistico mediante IA Giovanna Castellano, Gennaro Vessio Dipartimento di Informatica, Università degli Studi di Bari
  • 3. Nuove opportunità Negli ultimi tempi è stato compiuto uno sforzo di digitalizzazione su larga scala che ha portato alla crescente disponibilità di grandi collezioni di opere dʼarte digitalizzate Tale disponibilità, unita ai recenti progressi nellʼIA, ha aperto nuove opportunità agli specialisti in questo settore per assistere storici dellʼarte, curatori di musei, ecc., nello studio e in una migliore fruizione del patrimonio artistico digitalizzato
  • 4. Percezione estetica umana La capacità di riconoscere pattern nelle opere dʼarte digitalizzate rientra inerentemente nel dominio della percezione estetica umana Problema: tale percezione è fortemente soggettiva e influenzata da diversi fattori (conoscenze storiche relative allʼopera, emozione che lʼopera suscita in chi lʼosserva, … ) Pertanto, essa è estremamente difficile da codificare…
  • 6. Primo quesito: riusciamo a trovare similarità fra opere d’arte in maniera automatica e senza supervisione?
  • 8. Secondo quesito: per quanto riguarda il clustering? Problema: sebbene lʼapproccio summenzionato sia adeguato per trovare opere dʼarte visivamente collegate, esso non è efficace per raggruppare le opere in cluster… 8
  • 10. Terzo quesito: perché non sfruttare altri (meta)dati? Problema: stiamo ignorando una grande quantità di conoscenza di dominio, nonché relazioni e connessioni note tra opere dʼarte e/o artisti, che potrebbero aumentare la qualità delle soluzioni esistenti…
  • 12. Direzioni future 12 Cross-modal retrieval Visual question answering
  • 13. Sfide aperte: ❏ far avanzare la comprensione “semantica” di una scena digitalizzata ❏ avvicinare la comunità dell’IA a quella umanistica