Thinking out loud v.02

Towards the end of Making[^1], Tim Ingold describes the act of drawing: "…drawing is not the visible shadow of a mental event; it is a process of thinking, not the projection of a thought." (p.128, emphasis in original). He describes the interplay between the artist (both their skill and their intention), the tool (the pencil), the material (the paper) and how the drawing is an artifact that comes into being through the active interaction of these things. He makes a point of emphasizing that it is not the case that the artist conceives of the finished drawing, and then utilizes the available tools (the hand, the pencil, the paper) but rather that all the elements that go into making a drawing are necessary for the act of creation itself.

While Ingold does not refer to 4E cognition directly, it is clear to me that this is what he is talking about — the interplay of the creative impulse, the skilled hand, the pencil, the paper are all part of the artists extended mind, where all the elements go together to create the drawing. Furthermore, the act of creation is not the result of a singular moment of inspiration but rather a process where the artwork is in a state of becoming over time.

Drawing, like all art — and indeed, most human activities — involves and engages the body (ie. the embodied mind) through the senses. While one aspect of my research this fall will be to explore the phenomenology of Merleau-Ponty and our sensory experience of the world, I am also fascinated by the notion of perceptual learning, as described by Kevin Connolly in his Perceptual Learning: the Flexibility of the Senses.[^2]

Connolly, following the research of Eleanor Gibson and others, defines perceptual learning as "…long-lasting changes in perception that result from practice or experience." In the case of drawing, this is relevant in that an experienced artist will feel the movements and pressure necessary to achieve the desired effects in the drawing in a completely different way than I — who can, at best, create the occasional doodle — will. The sense- and motor memory of the body has been attuned through practice and experience. The example used by Connelly (and attributed to William James) is that of the expert wine taster who through long practice and experience has trained her taste buds to identify the origin, the grape, the vintage of the wine with a precision that the wine-loving amateur cannot hope to match.

Another element this brings to mind for me is Dewey: I have yet to read Art as Experience, but have it on my reading list for the fall. Dewey’s ideas of experience in education are foundational for the programmes at the Norwegian Film School (and, I believe, for all education). The interplay between experience and reflection is essential for learning to become an artist. The viewer of a work of art has an experience that is both limited to the time which they are viewing the work, but also ongoing, where the impact of the work can be lasting and permanent.

As much as the artist becomes altered through experience, through cognitive development, and through perceptual learning, so too the audience becomes altered through their experience of art. In film, we often talk about how the audience has developed different sensibilities. We talk about things like attention span, the tolerance for graphic scenes, the expectations of tempo and how these are different today than they were 20, 40, 60 years ago.

Many stray thoughts in this one, but it will tie together in the end — I hope! And the end result should be a better understanding of how artists (and, indeed, all humans) learn and how we can design educational programmes that give emerging artists the tools to embark on long and successful careers.

Footnotes

[^1]: Ingold, Tim. Making: Anthropology, Archaeology, Art and Architecture. Routledge, 2013, https://doi.org/10.4324/9780203559055.
[^2]: Connolly, Kevin. Perceptual Learning: The Flexibility of the Senses. Oxford University Press, 2019. academic.oup.com, https://doi.org/10.1093/oso/9780190662899.001.0001.

KI-retningslinjer for norsk film?

I mai i år publiserte British Film Instutute sin KI-veileder, AI in the Screen Sector: Perspectives and Paths Forward. Rapporten ble utviklet for BFA av CoSTAR Foresight Lab og tar for seg mange sider av KI-utviklingen, både det som skjer (og har skjedd lenge) i bruk av maskinlæring og automatisering i verktøy og programvare som brukes daglig i film og tv-produksjon og de nyere, generative verktøyene som har tatt mye oppmerksomhet de siste 3-4 årene. Rush Print oppsummerer noen av reaksjonene her hjemme i sin artikkel “– Vi trenger en oppdatert og tydelig KI-veiviser.” (bak betalingsmur).

En ting som påpekes i Rush Print-artikkelen er at mye av den offentlige responsen og diskursen virker reaktiv. Vi er tatt på senga, og famler litt rundt for å finne ut hvordan vi skal håndtere den (sannsynligvis) store omveltningen som kommer vaskende over oss som en flodbølge.

Samtidig ser vi andre deler av verden responderer på helt andre måter. I sommer har vi kunnet lese at et indisk produksjonsselskap har brukt KI for å lage en ny versjon av en spillefilm de opprinnelig ga ut i 2013. Den opprinnelige filmen, et romantisk drama, hadde en tragisk slutt. Den nye versjonen har en KI-skapt lykkelig slutt. I vår ga Netflix ut den argentinske science fiction dramaserien El Eternauta. Her har produsentene brukt generativ KI for å skape en storslått VFX-scene som ellers hadde vært utenfor økonomisk rekkevidde for dem. Og fra Hollywood kan vi lese rapporter om økende bruk av KI til å analysere og forbedre manus, hvor menneskelige script doctors og ghost writers erstattes av generative språkmodeller.

Disse tre eksemplene, og utallige andre, viser med all tydelighet at KI ikke er noe som kommer; det er her og i større utstrekning enn de fleste er klar over. Det er en del av hverdagen vi beveger oss i, både i norsk film og i samfunnet forøvrig. Og selv om jeg tør påstå at det store flertallet av skapende filmfolk kanskje blir forferdet over de tre eksemplene jeg trekker frem vil de fleste av oss, mer eller mindre motvillig, innse at dette er en del av fremtiden for store deler av bransjen.

Eksemplet med El Eternauta peker mot at det sannsynligvis blir VFX-bransjen som merker effekten at KI brukes i større skala først. Det er mange tidskrevende og dyre prosesser som relativt enkelt kan automatiseres med KI. Dette vil produksjonsselskaper og distributører ta i bruk, selv om bilder skapt av generativ KI ikke kan manipuleres like nøyaktig og presist som menneskeskapte.

Og med dette kommer også spørsmålet om autentisitet inn. Det virker naturlig å tenke at autentisitet er noe forbeholdt menneskelig kreativitet. For at et kunstverk skal kunne berøre, skal kunne si noe autentisk, vil de fleste av oss mener det må ligge en menneskelig intensjon og kreativitet bak. Men nå begynner forskning å vise at når publikum ikke vet om det de ser eller hører på er menneskeskapt eller ikke så er det ikke så opplagt at de vil foretrekke det menneskeskapte. Det er først når vi gjøres oppmerksom på at det vi har opplevde er skapt av en kunstner eller en KI at vi klart foretrekker det menneskeskapte.

Jeg tenker disse spørsmålene er for store og overgripende til at vi kan — eller bør — forvente at NFI lager en veiledning, et sett med regler, norsk film skal forholde seg til. Samtidig er det klart at Filminstituttet må være viktig del av slike retningslinjer. NFI bør se til BFI, og bestille en rapport med retningslinjer fra de kompetansemiljøene som finnes på dette området. Her må både utdanning — gjennom Den norske filmskolen, TV-skolen og Spillskolen på INN, samt fagmiljøene ved Høgskolen Kristiania og Universitet i Tromsø (filmkunstskolen i Kabelvåg) og flere — bransje gjennom organisasjoner, produksjonsselskap, interesseorganisasjoner og nettverk (som AIAIAI og Oslo Kreativ AI), samt regionale filmsentre og deres samarbeidspartnere på banen. Hvis slike retningslinjer skal speile bredden av behovene i norsk film må de også produseres av en større bredde aktører enn de som sitter i Dronningens gate i Oslo.

I denne sammenheng tror jeg også MishMash — Centre for AI and Creativity vil spille en viktig rolle. MishMash representerer hele bredden av kunstfelt i Norge, og film er representert både gjennom Filmskolen og Høgskolen Kristiania. Senteret skal startes opp i løpet av høsten, og har et viktig oppdrag i å lede utvikling og forståelse for bruk av KI i kunst og kreative næringer, samt beslektede områder. I denne sammenheng vil det også bli åpninger her for flere aktører fra kunstfeltet og bransjen.

Utover dette peker BFIs rapport på noe vesentlig, som også er tilfelle i Norge: manglende ferdigheter og kompetanse. Vi trenger etter- og videreutdanning for både erfarne og nye filmarbeidere. Produsenter, regissører, forfattere, alle trenger mulighet for opplæring innenfor KI. Men også de som vil se jobbene endres eller forsvinne totalt trenger et tilbud som kan gi omskolering; et tilbud som sikrer norsk film ikke mister sårt tiltrengt erfaring og kompetanse men samtidig sikrer at jobbene som gjennomføres er relevante også i fremtiden.

Som undervisningsleder ved Den norske filmskolen er det naturlig for meg å tenke at her skal og må Filmskolen ha en sentral rolle. Men vi kan ikke gjøre dette alene, og vi trenger et konsortium som bringer sammen utdanninger, offentlige instanser, produksjonsselskap, bransjeorganisasjoner og mange flere for å møte disse utfordringene sammen — et konsortium som ansvarliggjør oss alle for å bidra til å løse utfordringene vi står over for og sikrer en felles styrke som gjør det umulig for myndighetene å ignorere.

AI and ethical conundrums

I am one of a group of faculty members who have organised a symposium on «AI and Art» at our university on January 12th. It seemed natural for me; I have always been interested in the ways artists explore new technologies, and push them in ways that perhaps was not intended. This was why I led an initiative that leaned heavily into Virtual and Extended Reality, despite some significant scepsisism from many of the filmmakers who teach at the Norwegian Film School.

New technologies always come with baggage; I don’t believe there is such a thing as a completely neutral technology. There is always a worldview, as set of assumptions and values, and both a cost and a benefit to any technology / tool.

But rarely has this been so evident as in the case of the AI tools that have dominated public discourse in the past 18 or so months. These are tools that can do wonderful things (no link; you can find them easily enough if you haven’t seen them already) but they also come with a significant price attached. We’ve seen the reports of the Kenyan content moderators, exposed to the worst the web has to offer for what amounts to slave wages. We’ve seen the examples of racist and sexist biases build in to the tools.

The biases and prejudices built into the tools are one thing. The other side is it became apparent early on that the companies that have created the AI tools have asserted a right of fair use to copyrighted creations on the web, and copyright holders — including writers, artists, musicians, and more — have launched lawsuits asserting their intellectual property (oh, how I loathe that term) has been stolen.

This means every time, or another artist, uses a generative AI tool like ChatGPT or Midjourney, we are, in fact, using works we do not have to right to in order to create our own.

But is it that simple?

I neither know nor understand all the legal implications of this, but I do know that in the art form I work in — filmmaking — artists have been «stealing» from artists they admire almost for as long as there has been a film industry. Would we have a Kurosawa ouevre to admire if he had not stolen from John Ford? Would we have a Star Wars franchise (that never seems to end) if George Lucas had not stolen from Kurosawa (and many others)?

I know there is a difference between artists taking inspiration from others they admire and a corporation almost mindlessly harvesting artistic works in order to make their machine as slick as possible. But it still gives me pause for thought.

css.php