JON HOEM

Førsteamanuensis ved Institutt for kunstfag, Høgskulen på Vestlandet – Bergen.

Underviser i kunst og håndverk, og forsker på og med nye kunst- og medieformer. Leder forskergruppen MaTecSus.

Jeg er interessert i forholdet mellom medier og fysiske materialer: i 2021 kom boken Digitale medier og materialitet med en grundig diskusjon av denne tematikken. Jeg er særlig interessert i det haptiske (berøring og bevegelse) knyttes til lyd.

Fremover jobber jeg særlig med den telematiske operaen Zosimos (2023-26) og (støy)instrumentet Sonic Greenhouse.

Nylig avsluttede prosjekter er Sonus (2023), Sampling av lyd og bærekraft (2022-), "Auditomosjon" (2021-23) og "Aquafoni" (2022).

Videre sfæriske medier, ulike former for roboter, mm.

Min Dr.-avhandling om personlig publisering (2009).

Siterte artikler og publikasjoner i Cristin.

28. august 2021

"Digitale medier og materialitet" sendt til trykkeriet


Point of no return – Digitale medier og materialitet er sendt til trykkeriet.

En slags gjennomgang. Ikke for at dette skal leses, men videon gir et inntrykk av bokens innhold:


25. august 2021

Ture takkes av

Skrivekamerat og kollega Ture takkes av etter mer enn 30 år ved Bergen lærerskole / Høgskolen i Bergen / Høgskulen på Vestlandet. Det fortjener en slags oppsummering:

22. august 2021

Tesla AI Day Highlights

Jeg satt her om dagen og brukte noen timer på å se hele sendingen fra Tesla AI Day. Mye spennende, selv om jeg ikke har forutsetninger for å forstå mye av det. Mot slutten kom en kort smakebit på det som skal bli Tesla Bot, en robot som skal benytte mye av den samme maskinvaren og ikke minst systemene for autonomi som Tesla forsøker å løse for biler.

Steve Jobs sa i sin tid at Apple først og fremst er et programvareselskap. Det til tross for at de tjener de aller meste av pengene sine på å selge maskinvare. Det samme kan sies om Tesla. De selger biler, men deres store fortrinn er at de egentlig er et programvareselskap. 

Lex Fridman forklarer noen av implikasjonene:


Lex Fridman er til stede i mage kanaler, bl a. en podcast som graver ganske dypt. Et eksempel er Infinity is fake: The base layer of reality is discrete | Joscha Bach and Lex Fridman.

19. august 2021

Materie, materiale, materialitet

Bøygen – tvilen og usikkerheten må overvinnes. Ibsens litterære versjon er kanskje vel så illustrerende, men gitt at jeg vil ha et bilde liker jeg Paul Gauguins variant.

Bøygen i akkurat dette tilfellet er å endelig sende fra seg den ferdige boken Digitale medier og materialitet. En lang skriveprosess, en grundig review og masse korrektur er unnagjort. Ferdig arbeid med andre ord.

Men så kommer den da: tvilen. Er det godt nok?  Mangler noe? Ikke minst fordi Lovise Søyland nylig har disputert med en tematikk som så definitivt befinner seg i det samme landskapet, men selvsagt på et mer fokusert område. Mitt utgangspunkt, eksempler, begrepsforståelse og resonnementer er imidlertid annerledes. Med Digitale medier og materialitet forsøker jeg å finne ut av hvordan de digitale mediene møter fysiske omgivelser på tvers av sjangere og representasjonsformer. 

Beskrivelsen nedenfor er kanskje litt intrikat og i seg selv neppe tidenes salgspitch. Her kan imidlertid potensielle lesere ta det med ro. Bokens 342 sider er nemlig full av konkrete eksempler som jeg føler meg sikker på at vil være interessant for mange. Så får bokens innledning og avslutning være det som holder opp en videre, mer teoretisk orientert horisont.

Materialitet blir sett på som som særlig sentralt i de estetiske fagene, men jeg må innrømme at jeg lenge har slitt med å få ordentlig tak på begrepet. Samtidig er begrepet materialitet så absolutt relevant også innenfor en rekke andre fagtradisjoner, men der det gjerne blir snakket om på forskjellige måter.

I de estetiske fagene blir materialitet i høy grad knyttet til det haptiske (det som angår berøring, dvs taktilt [berøring av huden] og kinestetisk [bevegelse og forflytning av kroppen]). Mitt overordnede prosjekt er å se bak den (fysisk) materielle fasaden av materialitet. 

Først må vi rydde litt i begrepene. Jeg tenker her at vi innledningsvis må skille mellom materie, materiale og materialitet.

Materie tilhører først og fremst fysikken, og materie er ikke noe jeg diskuterer i boken. Men materie er det materialer består av, og jeg kommer så vidt inn på forhold knyttet til hvordan vi i økende grad blir i stand til å manipulere materie (f eks. ved hjelp av nanoteknologi) og dermed skape nye materialer.

Materiale defineres i ordbøkene som tilfang eller råstoff som skal bearbeides. Materialer tilhører estetikken, i den forstand at det er materialene som sanses.

Materiale er imidlertid flertydig. I forhold til design kan fysiske materialer være råstoffet (f eks ull), men også bearbeidet i ulik grad (tekstiler i ull). Artefakter (menneskeskapte objekter) består uansett av materialer.

Her aner vi samtidig hvor problemene rundt det digitale begynner. Vi kan nok snakke om digital materie i form av data, forstått som det Claude Shannon betegnet som bits (Binary digits). Men det blir vanskeligere å snakke presist om digitalt materiale. Her nærmer vi oss et komplekst forhold mellom innhold (innholdsdata) og programvare (instruksjonsdata).

Materialitet finnes imidlertid ikke i de offisielle ordbøkene. Vi må til Det norske akademis ordbok for å finne en betydning: "det å være materiell". Ordet brukes ofte slik, i betydningen at noe er materielt når det er laget med (fysiske) materialer.

Det er her jeg begynner på forsøket på å trenge bak fasaden. Det digitale anskueliggjør noe genrelt, nemlig at materialitet åpenbart handler om materialer, men også noe mer. Dermed holder ikke "det å være materiell", etter mitt syn. Vi må forsøke å holde materialiteten som et overordnet perspektiv, litt adskilt fra de konkrete materialene. Materialene kommer selvsagt alltid frem, gjennom det vi sanser, og ulike medietyper vil alltid ha spesifikke fysiske egenskaper som bidrar til deres estetiske potensial (Jeg kan forresten berolige de som her frykter nok en utledning om multimodalitet – begrepet nevnes knapt i boken). Men en snever oppmerksomhet rettet mot disse fysisk, materielle egenskapene (medienes overflate) kan ende med en begrenset forståelse for det aktuelle mediets materialitet.

Jeg bruker et bilde her, som kanskje er klargjørende:


Dersom vi kun vurderer den fysiske overflaten, blir det knapt mulig å forstå de underliggende forskjellene mellom en Tesla S og en tradisjonell Jaguar XF. Men dersom vi ser på de to bilene som noe mer enn ytre form, finner vi at de er del av to helt forskjellige teknologiske utviklingslinjer, med forskjellig logikk, økonomi, samfunnsmessige konsekvenser osv. Vi bør se på de digitale mediene på en lignende måte: Vi må så å si kikke under panseret og forsøke å forstå hvordan “maskinen” og "systemet" faktisk virker. Vi må da bak materialene.

Innledningsvis setter jeg derfor opp en foreløpig definisjon: "Digital materialitet kan kort forstås som et samspill mellom en rekke betingelser som påvirker hvordan estetiske uttrykk – det vi kan oppfatte med sansene – oppstår og representeres ved hjelp av digital teknologi". Det er disse betingelsene som boken setter seg fore å undersøke og eksemplifisere.

Boken er skrevet fra et faglig ståsted i et felt mellom mediedesign, medievitenskap og undervisningsvitenskap, fagfelt som  med det digitale møter mange av de samme mulighetene og utfordringene.

Og ja, jeg er i ferd med å skrive meg litt tryggere. Det skal holde godt vann dette.

15. august 2021

Cybernetic Serendipity

Kurator Jasia Reichardt introduserer her Cybernetic Serendipity, en utstilling ved Institute of Contemporary Arts, i London, 1968. Dette var den første utstillingen som tok for seg kunst skapt ved hjelp av datamaskiner.

Cybernetic Serendipity dealt broadly with the demonstration of how people can use computers and new technology to extend creativity and inventiveness. It was exhibited at the Institute of Contemporary Arts, Nash House, London, Aug. 2-Oct. 20, 1968.

Jasia Reichardt tar oss også gjennom "Cybernetic Serendipity, A Brief Tour" i forbindelse med utstillingens femtiårsjubileum. Fascinerende tatt i betraktning tiden dette ble laget:



14. august 2021

Skape ulike estetiske utrykk ved hjelp av verbalspråk

For mange år siden skrev jeg en liten tekst der jeg så for meg at det å skrive manus, lage et storyboard og faktisk redigere en film ville smelte sammen. Tanker var at mye av det jeg skrev i et manus og storyboard er instruksjoner som kan minne om et høynivå kodespråk. Videre at kodens som ligger bak dataspill da vil kunne smelte helt sammen med film, og at denne koden kunne skrives via et avansert grensesnitt der en verbalt beskriver hva som skal skje, i konstant dialog med maskinen.

Jeg har tenkt på dette fra tid til annen, men det ligger så langt unna hva jeg er i stand til å realisere at det har vært en utopi.

Det nærmeste jeg kom var kanskje en prototype som Johanens Ringheim og jeg laget, for å styre sfæriske bilder til et filmatisk uttrykk. Jeg presenterte dette på medieforskerkonferansen i 2018, og endte opp med noen tanker om hvorvidt medieforskere bør lære seg å kode (mange gjør jo faktisk det, så det er kanskje vel så mye snakk om at undertegnende må ta et tak). Prototypen var vellykket, men som litt for ofte ender jeg opp med å la prosjektet ligge, uten å publisere noe - dermed finnes kun en uferdig artikkel.

Dvs, det kommer straks noe i boken Digitale medier og materialitet – i det hele ble det følgende svært så relevant for bokens aller siste kapittel "Kybernetisk materialitet". Jeg må bare holde meg i skinnet, og ikke skrive noe om. 

Det som åpnet denne skuffen i hukommelsen var denne videoen om OpenAI Codex (om du synes "Hello world"-eksemplet er litt trivielt [det er ikke det], så spol litt frem til der de koder et enkelt spill). Med denne videoen fikk ideene fra mange år siden nytt liv. Det jeg i alle fall ser er at det å lage sfærisk stillbildefilm med ett kan bli mer tilgjengelig, og at i forlengelsen av dette blir utopien om å kunne skrive frem en film gjennom verbalspråk mer sannsynlig. Det er faktisk litt vanskelig å forestille seg hav dette ikke kan brukes til i fremtiden. Det handler mest om hvilke grensesnitt vi bruker mellom menneske og maskin og hvilke estetiske uttrykksformer vi velger å anvende det til.


Å skrive skolestil blir neppe helt det samme når vi reelt skriver sammen med en datamaskin ....
 
◄ Free Blogger Templates by The Blog Templates | Design by Pocket