Arti della memoria e cultural analytics (Napoli)

1. Arti della memoria e cultural analytics
Tommaso Guariento - Ph.D. in Studi Culturali Europei (PA), docente di visual studies – La scuola open source (BA)
Immagineememorianell’epoca digitale, Università degli studi di Napoli Federico II(20-22Febbraio 2018)

2. 1966
1960 19901988
2002
1995 2004
2011 2018
2018
1988 1991

3. Manovich, Lev, «Can we think without categories?», Digital Culture &Society,vol. 4,fasc. 1, 2018,pp.17–28
CulturalAnalytics thus can be also defined as thequantitative analysisofcultural patternson differentscales. But if we accept this definition, we
need to immediately add an important point to this statement.
While wewant todiscover repeating patternson differentscales in culturaldata,weshould alwaysrememberthattheyonlyaccount forsome
aspectsoftheartefactsandtheirreception.
Ourcognition constantly processes sensory information and categorizes it. Apattern weobserve is like constructing a newcategory: a recognition that
some things or some aspects of these things have something incommon. Can we learn tothink about culture without categories?
To observe and analyse culturemeans to be able to map and measurethreefundamental characteristics. Thesecharacteristics arediversity, structures
(e.g., clusters networks, and othertypes of relations), and dynamics (temporal changes). Inthe case of cultural situations wherewe may expect many
works to follow some prescriptive aesthetics or usetemplates […] we can also look at the forth characteristic: variability.

6. Arti della memoria e architettura
1966
1972
20102002
2014
2016

7. Luca Pacioli,
Dedivina proportione(1509)
Cristoforo Giarda
Iconessymbolicae(1628)
NguyenA., Yosinski J., CluneJ., DeepNeuralNetworksare
EasilyFooled (2015)
Archetipi visivi e pattern recognition nella specie homoe nel machine leraning

8. Apophenia is defined as the perception of patterns within randomdata The most common examples are people seeing faces in clouds or on themoon. Apophenia
is about «drawing connections and conclusions from sources with no direct connection other than their indissoluble perceptual simultaneity», as Benjamin
Bratton recentlyargued.
Pattern recognition resonates with thewider question of political recognition. Whois recognizedon a political level andas what? As a subject? Aperson? A
legitimate category of the population? Or perhaps as dirtydata?
But what arewe going to makeof automated apophenia? Arewe to assume that machinic perception has entered its own phase of magical thinking?Isthis what
commodity enchantmentmeans nowadays: hallucinating products? It might bemore accurate to assume that humanityhas entered yetanother new phase of
magical thinking.
Inancient astronomy, star constellations were imagined by projecting animal shapes into the skies. After cosmic rhythmsand trajectories had been recorded on
clay tablets, patterns of movement started to emerge. As additional points of orientation, some star groups were likened to animals and heavenly being.
The patterns were projections, not reality. Whiletoday statisticians and other experts routinely acknowledgethat theirfindings are mostly probabilistic
projections, policymakersof all sorts conveniently ignore this message
Hito Steyerl,“A Sea of Data: Apophenia and Pattern (Mis)Recognition”, E-Flux #72, 2016

9. Dehaene, Stanislas, Reading inthe brain, New York, Viking, 2009.
The occipito-temporal region associated with reading in humans plays amore general role in object andface recognition in all
primates. In spite of massive differences in cortical surface, a great many similarities in the micro-organization ofthe cellular layers
ofcortex point toasystematic correspondence between regions in the human andmonkey brains.In humans, the temporal regions
responsible forobject recognition occupy the lower side ofthe brain.In the macaque monkey, they tend tobe morelateral andto
extend towardthe front tip of the temporal lobe This difference in shape can probablybe attributed toan enlargement of the
associative regions of the human cortex that have todowith language processing andsemantic networks, particularly in the
anterior andlateral temporal lobes
If reading has thus taken possession ofour minds, to such an extent that it now constitutes an essential feature ofour literate culture, it is because it has found its natural cerebral niche in
the occipito-temporal cortex andits connections. The ability of this cortical region to recognize words andtransmit their identity toother areas results from atwo-step evolutionary
process:
•The slow emergence ofefficient mechanisms of invariant object recognition that have appearedin the course of mammalian evolution.
•The rapidcultural adaptation ofwritingsystems tofit this cortical niche, in the course ofcultural evolution over the past five thousand years.
This view holds that the letterbox area of the brain initially evolvedto recognize natural images, but notthe shapes of letters orwords. Nonetheless, evolution endowed it with a
capacity tolearn, andthus to turnitself intoa reading device. Our writing systems haveprogressively discovered andexploited the elementary shapes that this region iscapableof
representing. In brief, our cortex did notspecifically evolve forwriting—there was neither the time norsufficient evolutionary pressure forthis tooccur. On the contrary,writing evolved
tofit the cortex.

10. Dehaene, Stanislas, Reading in the brain, (->continua)
Itis possible that reading animal tracks is the cortical precursor for reading. Ifevolution has yielded bodily specializations
as refined as the eagle’s eye orthe leopard’s leap,it no doubt can modify the predator’s visual brain. Theintense selective
pressure imposed bymillions of years of interaction between predator andpreymayhaveledto a cortical
specialization for reading animal tracks.
Learning seems toplay an important role in synesthesia. To asynesthete, not all objects andshapes appear colored—in most cases,
only letters anddigits areaffected. These areprecisely the symbols that arelearned late in childhood. Cases arealso on recordof
synesthesia formany other domains ofhuman culture such as spoken words,language sounds, symphonies, musical instruments . ..
andeven the taste of dishes. That synesthesia appearsexclusively for learned cultural objects suggests a profound link with
the necessary nature of neuronal recycling. Myrecycling hypothesis predicts that every new cultural object must compete with
representations established earlier in life, as it searches fora “neuronal niche” on the surface of the cortex. This neuronal
competition may create temporary confusion at the cortical level.

11. Aristotele, Lavita,Diego Lanza, Mario Vegetti, Giuseppe Girgenti (a cura di),Milano, Bompiani, 2018. Dememoriaetreminescientia (pp.2043-2083)
Gli esercizi conservano la memoria con il richiamare ripetutamente allamemoria e ciò non èaltro che considerare più volte qualche cosa come figura [eikon] e non in sé (451 a ,
p. 2059)
Una questione ècome mai, essendo presente lo stimolo [pathos] eassente l’oggetto, ci si ricorda di ciòche non èpresente. È chiaroche bisogna pensare che per mezzo della
percezione si produce nell’anima e nella partedel corpoche la comprende qualcosa disimile ad un disegno, il possesso del quale diciamo memoria. L’impulso [kinesis] che si
produce segna all’interno come un’impronta della percezione simile alle incisioni fatte con gli anelli. Anche per questo coloro che si trovano oper qualche accidente oper
l’età in stato di eccessiva mutabilità non hanno memoria, come se si volesse imprimerel’impulso, cioè ilsigillo, in acqua corrente. In altri,amotivo dell’usura, come le antiche
costruzioni, eper larigidità della parte che deve ricevere lo stimolo, l’impronta non si forma. (450b, pp. 2053)
[…]risulta diverso lo stimolo [pathos]di questa considerazione equando si considera un animale disegnato; nell’anima inoltre l’uno si forma come semplice pensiero l’altro, ciò
che nell’esempio è una figura[eikon], come ricordo[mnemoneuma] (450b-451 a, pp. 2057)
Di quale facoltà dell’anima è dunque propriala memoria apparechiaro: della stessa di cui èanche l’immaginazione. È quindi ricordabile in sé e per sé quello di cui vi è
immaginazione (450 a,pp. 2051, 2053)

12. Aristotele, Dememoriaetreminescientia (->continua)
[…]il richiamo è una sorta di calcolo. Coluiche esercita il richiamo svolge il ragionamento di aver visto oudito oprovatoalcun che; si tratta cioè diun tipodiricerca.E ciò è
propriosoltanto di chi èdotato di capacitàdi decisione (451a , p. 2059)
Perciò intraprendiamola caccia dell’immediatamente conseguente [impulso], avendo incominciato a pensare dall’istante presente oda qualche altro,dal simile odall’opposto,
odalcontiguo (451b,p. 2067)
[…]si ritiene che talvolta si possa effettuare il richiamo alla memoria partendo dai luoghi comuni [topoi].Lacausa è che ilpassaggio dall’uno all’altro èrapido, come per esempio
dal latte al bianco,dal biancoall’aria, edaquesta all’umido, dalqualeci si ricorda dell’autunno, se si sta cercando questa stagione (452a , p. 2069)
Iprocessi di richiamo avvengono perché un impulso siproduce naturalmente dopoun altro: se la sequenza è legata allanecessità è che chiaroche avvenuto questo impulso
avverràquest’altro, se invece la sequenza non è legata allanecessità, ma allaconsuetudine, perché per lopiù avverrà.Eaccade che alcuni impulsi divengano in una volta più
abituali che altrispesso ricorrenti; perciò,pur avendo vistoalcune cose una volta solta se ne ha maggiorricordoche di altreviste ripetutamente. (451b, p.2065)

13. Aristotele, Lavita,Diego Lanza, Mario Vegetti,Giuseppe Girgenti (acura di),Milano, Bompiani, 2018.
Deinsomnis (pp.2147-2163)
[…]è chiaroche il sognare è proprietà della facoltà precettiva, edi essa in quanto èun datodell’immaginazione (459 a, pp. 2123-2125)
Duranteil giornoinfatti, essendo in attività i sensi e il ragionamento, essi sono inibiti erestano latenti come un fuoco più piccolo difronte ad unopiù grande, odolori e piaceri di
piccola entità di frontead altridi grande intensità, mentre quanto questi si interrompono anche i piccoli giungonoalla superficie. Di notte, dunque, per l’inoperosità deisensi
particolarie l’incapacità di essere attivi, dovuta alriaffluiredel caldo all’interno delle partiesterne, gli impulsi sono addotti al principiodella percezione [ilcuore] e diventano
chiari perché cessa il turbamento. Si deve dunque suppore che, come i piccolivortici che si formanonei fiumi, così ogni impulso [kinesis] è in continuo divenire, spesso dando
luogoad impulsi simili, spesso per urti reciproci, sciogliendosi in altre figure(4160b- 461 a,p. 2035)
Aristotele, Lavita,Dedivinatione persomnum (pp.2147-2163)
Comequando qualche cosa ha provocato un movimento nell’acqua onell’aria, una partetrasmette l’impulso ad un’altra e cessato l’agente accade che siffatto impulso proceda
finoad un certo punto, così nulla impedisce che un impulso euna percezione giungano alle anime addormentate dagli oggetti dai quali Democrito fa muovere le figure egli
effluvi; e giungendo dove capita sono più facilmente percepibili di notte perché di giorno sono più soggetti a dispersione […]Questi impulsi producono immagini dalle quali si
traggono ipresagi di fatti che stanno per accadere

14. Agostino, Confessioni, Giovanni Reale (a cura di),(tradottoda) Martin Skutella, Milano, Bompiani, 2012.LiberX,8,12–25,36)
Ecosì giungo nei campie neivastipalazzidella memoria,dove si trovanoi tesori di innumerevoli immaginidi ogni genere di cose
introdottedaisensi. Qui è rispostoanchetuttoquello chenoi pensiamo,ampliandoediminuendo ocomunque variandoquello cheèstato
coltodaisensi, equalsiasicosachevi statadepostaemessa daparte,eche l’oblio nonhaancoradivoratoeseppellito. Quandogiungo qui,
posso chiedere chesi faccianoavantitutteleimmagini chedesidero.Ealcunecose sipresentano subito, altresi fannocercare piùa
lungo, comesedovessero essere estrattedaripostigli più nascosti.Altreancorairromponoafrottee,mentre cerco edomandoaltracosa,
balzanoin mezzocome perdire«non siamoforsenoi?» E iocon la manodelcuorele caccio dalmio ricordo,finchéla cosachevoglio nonsi
snebbia, euscendodalsuo nascondiglio,si favedere. Vengonopoi avantifacilmentee inmodoordinato altrecose,secondole richieste,
ele precedenti cedonoil postoaquelle seguenti,e poi,ritirandosi,si dispongonoin mododaessere pronteper ripresentarsiun’altravolta,
quandoio lo vorrò.Tuttoquestoavviene, quandoio raccontoqualche cosaamemoria (12, pp.903,904)

15. Agostino, Confessioni (->continua)
Così, quandovediamoopensiamo un uomo noto, e cerchiamo ilsuo nome che abbiamodimenticato, qualsiasi altronome si presenti a noi che non sia quello giusto, non lo
connettiamo con quell’uomo, perché non avevamo l’abitudinedi pensarli assieme; quindi lo rifiutiamo, finché non si presenti quello a cui corrisponde in modoconveniente
la nozione che ne abbiamo (28, p. 935)
Ho vistodelle linee tracciate da artigianiche sono sottilissime come fili di ragnatela: ma le linee geometriche sono ben diverse dalle immagini di quelle linee che l’occhio
carnale mi ha trasmesso: le conosce nel propriointimo, senza dover pensarea un qualsiasi corpo (19, p. 917)
Io,Signore, certamente mi affatico su questo, emi affatico su me stesso: sono diventato a me stesso terradi sofferenza edi molto sudore. Eppure nonscrutavoleregionidelcielo,
non misuravo le distanze degli astri e non indagavo l’equilibrio della terra. Sono ioche ricordo, ioanima [egosum, quimemini, egoanimus] […]Edecco che propriola forza
della memoria non ècompresa da me, mentre, senza la memoria, io stesso non potrei neppure nominarmi (25, p. 927)
Propriosulla base di questa ricchezza diimmagini, stabilisco via via rapportifracose da me stesso sperimentate ocredute grazie aquelle sperimentate ele collego non solo
con cose passate, ma ordiscosopra di esse azioni, eventi e speranze future, e penso tutte queste cose come se mi fossero presenti (14, p.909)

16. Tommasod’Aquino, LaSommateologica. Secondasezione dellaSecondaparte 1(Secunda Secundae 1).Lafede,LaSperanza,Lacarità̀,Laprudenza,
Lagiustizia., Bologna, Edizioni Studio Domenicano, 1996,questio 49,art. 1,pp.395,396.
Primo,rivestendo le cose che vuole ricordarediimmagini adatte, etuttavia non troppoordinare: poiché le cose straordinariedestano in noi più meraviglia, e quindi l’animo vi
si applica con più forza:dal che deriva il fatto che noi ricordiamomeglio quanto abbiamovistonell’infanzia. Ora,questa ricerca di somiglianze odi immagini ènecessaria
inquantoché le idee semplici e spirituali spariscono più facilmente dell’anima se non sono legate in qualche modoa delle immagini corporee: poiché laconoscenza umana è
più forte nel campo delle realtà sensibili. Per cui anche la memoria viene posta nella parte sensitiva.
Secondo, ènecessario che quanto l’uomo vuole tenere a memoria lo disponga ordinatamente nel suo pensiero, in modo dapassare facilmente da un ricordoaun altro.Per
cui ilFilosofo [Demem.Etrem.2] scrive: «Le reminiscenze taloraprendono lo spunto dal luogo; e questo perché si passa facilmente da un luogoa un altro».
Terzo, ènecessario che si applichi son sollecitudine eaffetto a quanto vuole ricordare: poiché più una cosa è impressa profondamente nell’animo, più difficilmente si
cancella. Infatti Cicerone scrive [AdHerenn. 3, 19]che «lasollecitudine conserva intatte le immagini delle cose rappresentate».
Quarto,le cose che ci preme ricordarebisogna ripensarle spesso. Per cui ilFilosofo [Demem.etrem.1] afferma che «ipensieri assidui salvano lamemoria»; poiché, come
dice ancora [ib.c. 2]«la consuetudine è come una seconda natura;ed è per questo che ci ricordiamosubito le cose acui spesso abbiamopensato, passando dall’una all’altra
quasi secondo un ordine naturale.

17. Halbwachs, Maurice, Lamémoirecollective, Paris,Presses universitaires de France, 1950.
Pour Bergson, le passé demeure tout entier dansnotre mémoire, tel qu'il a été pour nous ; maiscertains obstacles, en particulier le comportement de notrecerveau,
empêchent que nous en évoquions toutes les parties. En tout cas, les images des événements passés sont entièrement achevées dans notre esprit (dans la partie
inconsciente de notre esprit) comme des pages imprimées dans les livresqu'on pourraitouvrir,alors même qu'on ne les ouvre plus.
Pour nous, au contraire, ce qui subsiste, ce n'est pas, dans quelque galerie souterraine de notre pensée, des images toutes faites, mais c'est, dans la société, toutes les
indications nécessaires pour reconstruire telles parts denotre
passé quenous nous représentons defaçon incomplète ou indistincte, ou que, même, nous croyons entièrement sorties denotre mémoire. D'oùvient en effet que,
lorsque le hasardnous remet en présence de ceux qui ont participé aux mêmes événements, qui en ont été acteurs ou témoins en même temps que nous, lorsqu'on nous
raconte ou que nous découvrons autrement ce qui se passait alors autour de nous, nous remplissions ces lacunes apparentes ? […]
Elles existaient donc, mais elles étaient plus marquées dans la mémoire desautres qu'ennous-même. Sans doute nous reconstruisons mais cette reconstruction s'opère
suivant des lignes déjà marquées et dessinées parnos autres souvenirs ou parles souvenirs des autres. Les images nouvelles s'amorcent sur ce qui, dans ces autres souvenirs,
demeurerait sans elles indécis etinexplicable, mais qui n'en a pas moins une réalité. C'est ainsi que, lorsque nous parcourons les vieux quartiers d'unegrande ville, nous
éprouvons une satisfaction particulière à nous faireraconter l'histoire deces rues et de ces maisons. Ce sont là autant denotions nouvelles, mais qui nous paraissent bientôt
familières parce qu'elles s'accordent avec nos impressions et prennent place sans peine dans le décor subsistant. Il nous semble que cedécor lui-même et tout seul aurait
pules évoquer, et que ce que nous imaginons n'est que le développement de ce que nous percevions déjà. (p. 65)
.

18. Rapportoimmagine-parola: arti della memoria, retorica, lavoro onirco
L'inconscient use d'unevéritable « rhétorique » qui, commelestyle, a ses « figures », etle
vieux catalogue destropes fournirait un inventaire appropriéaux deuxregistres de
l'expression. On ytrouve de partet d'autre tous les procédés de substitution engendrés parle
tabou : l'euphémisme, l'allusion, l'antiphrase, la prétérition, lalitote. Lanature du contenu
fera apparaître toutes les variétés de la métaphore, car c'est d'une conversion métaphorique que
les symboles del'inconscient tirent leur sens et leur difficulté à la fois. Ils emploient aussi ce que
la vieille rhétorique appelle la métonymie (contenant pourcontenu) et lasynecdoque (partie
pour le tout), et si la « syntaxe »des enchaînements symboliques évoque un procédé de style
entre tous, c'est l'ellipse. Bref, à mesure qu'on établira un inventaire des images symboliques
dans lemythe, lerêve, etc., on verra probablement plus clair dans les structures
dynamiquesdu style etdans leurs composantes affectives
Benveniste, Émile, Problèmes delinguistique généraleI,1966, pp. 86,87.
Gesualdo, Filippo, Plutosofia, Padova, 1592.

19. The thought-process governing dream-work is in other respects also similar tothe techniques
ofthe artof memory. Ithas high density of figures, even higher than memory images.
Furthermore, they are the same figures preferred bythe manuals of artificial memory: the
dream, too,replaces "internal associations (similarity, causal connection, etc.) by what are
known as external ones (simultaneity, contiguity in space, assonance)." Our memory of
dreams is that ofacontinuous present, which replaces all tenses andmodes. This perception
accounts for the difficulty, when we wake up, of telling what happened in our dream in its
chronological order. Our recall is likea series of pictures set sidebyside. Memory images
achieve the same result. When they havebeen built, every element relating totime has
disappeared, tobe converted in spatial relations: each image is set in aplace, andplaces areset
one beside the other. Itwouldappear that the
suppression of time andcausal connection is achief aim of artificial memory.
Jean-Philippe Antoine, “The Artof Memoryandits Relation tothe
Unconscious” 1988, p.17.
Arti della memoria, lavoro onirco, figurale
Freud dit que le rêve ne pense pas, mais qu’il travaille. Il transforme des pensées
normales en rébus à travers des images. Que fait un tableau classique ?Iltransforme
un texte deréférence en image. Si on n’a pasletexte deréférence, letableau
devient un rébus […]La peinture transformedonc un texte en figure énigmatiques. Le
travail du rêve, les opérations décrites par Freud pour rendre comptedece travail
quefait lerêve, transforment les penséesen images, tout comme un tableau.
Toutes ces opérations de condensation, deprise en considération de la figurabilité,
déplacement et d’élaboration secondaire, sont très opératoires en ce qui concerne
l’analyse de la peinture, pour ce travailproprede pensée de la peinture
Arasse, Daniel,Histoires depeintures, 2006, pp. 310-312
Hubert, Damish, LeJugement dePâris,1997.
Didi-Huberman, Georges, Devantl’image, 1990.
Eco,Umberto, Mnemotecniche erebus, 2013.
Marin,Louis,«Le concept de figurabilité »,1990.
Lyotard,Jean-Franç ois, Discours,figure,1971.

20. Straten,Roelofvan,Anintroductiontoiconography,
1994, p.16
Kandel, Eric,Reductionisminartandbrainscience, 2018, p.113
Saleh,Babak,KanakoAbe,RavneetSinghArora,Ahmed Elgammal,
«Towardautomateddiscoveryofartisticinfluence»,2016, pp.3565–
3591.
Iconologia, Neurologia, Machine Learning
1) Low-levelfeaturescapturedirectlythe formal characteristicsof
paintingssuchascolor, texture, edges,light, etc.
2) Locallevel descriptorsinsteadof summarizingthewhole image,
representslocalizedregionsof an image. A Bag of Wordsmodel is
appliedto generatean intermediaterepresentationof theimage.
3) Semantic-levelfeaturescapturethe semanticcontentclassessuchas
water,sand,cars etc. presentin an image.

21. Kandel, Eric,Reductionisminart
andbrainscience, 2018, p.54
Alpaydin,Ethem,Machinelearning :thenewAI,
2016, p.88

22. Media/ Extended Mind/ Exograms
Memoria individuale Memoria collettiva
Arti della memoria:
Loci + immagini
Pattern recognition
Piattaforme/Istitu
zioni
Plasticità neurale/Riciclaggio neuronale
Memoria, emotività, attenzione
Intelligenza Artificiale
Mente estesa
Piattaforme/Istitu
zioni
Piattaforme/Istitu
zioni
Augé, Marc, La guerredesrêves ,1997.
Baddeley,Alan, La memoria: comefunzionaecomeusarla,1993.
Clark, Andy,Supersizingthemind,2008.
Fodor,Jerry A, Themodularityofmind, 1983.
Halbwachs,Maurice,La mémoirecollective,1950.
Stiegler,Bernard,Réenchanterlemonde,2009.
Berthoz,Alain,Lesbasesneuralesdesartsdelamémoire, 2018
Aubert, Donatien,Lesartsdelamémoiredans
lesmondesnumériques,2018
Dehaene,Stanislas,Lesneuronesdelalecture, 2007.
Sutton,John,Exograms andInterdisciplinarity,2010.

23. Domande
1) Leartidella memoriasonoun artefattoculturaleo l’intersezionedi alcunenormederivatedalfunzionamentocognitivo di alcuniindividui
«neurotipici»?
2) Che rapportoc’è fralo sviluppo della scritturaele artidella memoria, apartiredall’ipotesidel riciclaggio neuronale?
3) Letecnologiedigitali di automatizzazionedelle tecniche di memorizzazionee richiamomnemonico hannounimpattopositivo,negativo oneutro
nello sviluppo delle facoltàcognitiveumane (in particolarequelle degli individui in etàevolutiva)?
4) Lepatologieed i bias cognitivi/percettivi cheaffiggonogli algoritmi di machinelearningpossonoessere eliminati? Stiamoforsericostruendoil
modello di unapercezione«neolitica»?
5) Poiché le tecnologiesonosempreinfluenzatedaelementi politici edeconomici, èpossibilepensareallo sviluppodi nuovi dispositivi/algoritmiche
migliorinole prestazionimnemoniche eattenzionali,datol’ambiente altamenteamnesico/superficialenel qualesiamo inseriti?
6) Ci troviamodi fronteadunnuovogradinodell’evoluzione culturaleumana,oppurele nostreconoscenzesullaplasticità,il riciclaggio neuronalee
l’intelligenza artificialegeneralesonoancoratroppoinvolute?