Paano Ginagamit ni Ruixian ang mga Mapa na Pinapagana ng AI para Buhayin ang mga Bagay sa Museo, Tula at mga Kuwentong Kultural

12 min. na pagbasa
How Ruixian Uses AI Maps to Bring Museum Objects, Poetry and Cultural Stories to Life

Halos 5,000 bagay, 99 na bansa at isang button na may markang Home

Lumitaw ang halos 5,000 artifact mula sa 99 na bansa sa isang digital na mapa na ginawa ni Ruixian, isang Chinese na designer at nagtapos sa Massachusetts Institute of Technology. Ipinapakita ng isang animasyon kung kailan nakuha ng British Museum ang mga ito. Pindutin ang button na may markang Home, at maglalakbay ang mga bagay sa screen pabalik sa kanilang mga bansang pinagmulan.

Mga Nilalaman
  1. Halos 5,000 bagay, 99 na bansa at isang button na may markang Home
  2. Nagiging interaktibong paglalakbay ang pagbisita sa museo
  3. Kapwa nakikita ng mga manonood ang pag-uwi at ang isang debate
  4. Mula graphic design tungo sa computational storytelling
  5. Bakit tatlong buwan ang ginugol sa mapa ng opera
  6. Nagiging tanawin ng tunog at galaw ang tula
  7. Taglagas, mga nilalang sa mito at pang-araw-araw na kuryosidad
  8. Ang gawaing nananatili sa lumikha
  9. Mahahalagang Punto

Kabilang sa mga halimbawa ang Rosetta Stone ng Egypt at ang Eye of Horus. Kasama rin ang isang serpentine mask ng Olmec mula Mexico, Islamic na kaligrapiya mula Iran at mga likhang Chinese na iniuugnay kay Gu Kaizhi, isang pintor mula sa Eastern Jin. Nagbubukas ang bawat kumikislap na tuldok ng kuwento tungkol sa pinagmulan ng isang bagay, pagdating nito sa museo at kung saan ito nakadispley.

Ginawang madaling sundan sa loob ng isang minuto ng proyekto, na mabilis na kumalat online ang video noong Marso, ang napakalaking koleksiyon: mga bagay na lumalayo sa kanilang tahanan, bago maglakbay pabalik sa isang guniguning pag-uwi.

Ipinaliwanag ni Ruixian, ang lumikha ng application, ang layunin nito sa kalakip na video:

Hindi lamang ito isang malamig na proyektong nakabatay sa datos; sa likod ng bawat kumikislap na tuldok ay may kuwento ng pagkakahiwalay sa tahanan.

Bahagi ang mapa ng museo ng mas malawak na koleksiyon ng mga likha. Gumawa si Ruixian ng mga mapa ng mga nilalang sa mito, tulang Chinese, panrehiyong opera, mga pananim at paggalaw ng mga kulay ng taglagas. Mahigit 300,000 tagasubaybay at mahigit 3 milyong like ang nakuha ng kanyang mga proyekto sa iba’t ibang social platform.

Pinagsasama ng kanyang pamamaraan ang pananaliksik, biswal na disenyo at ang madalas tawaging vibe coding: paglalarawan sa isang sistema ng artificial intelligence ng programang nais gawin, at pagkatapos ay pagtatrabaho kasama ng code na nalilikha nito. Tinutulungan ng computer na buuin ang karanasan. Si Ruixian ang nagpapasya kung aling mga kuwento ang dapat isama rito.

Patalastas

Nagiging interaktibong paglalakbay ang pagbisita sa museo

Sa London nagmula ang tanong. Dumating si Ruixian sa Britain noong 2008, sa edad na 18, upang mag-aral ng graphic design sa Central Saint Martins. Sa paulit-ulit niyang pagbisita sa British Museum, naisip niya kung ilang bansa nagmula ang mga bagay sa museo at kung bakit naroon ang mga iyon.

Makalipas ang ilang taon, nagkaroon ng emosyonal na kahulugan ang tanong dahil sa sarili niyang karanasan sa pag-aaral sa ibang bansa. Inisip niya ang mga bagay bilang mga manlalakbay na may bayang pinagmulan at mga kasaysayan ng pagtawid sa dagat.

Sa application, nakikita ng mga gumagamit ang mga artifact bilang mga card na nakapuwesto sa kanilang mga bansang pinagmulan. Nagdaragdag ng panahon sa heograpiya ang animasyon ng pagkuha sa mga ito, na nagpapakita kung kailan napunta sa British Museum ang mga bagay. Binabaligtad naman ng Home button ang direksiyon ng paglalakbay.

Inilarawan ni Ruixian ang tampok na ito sa kanyang video:

Nagdagdag din ako ng tampok na animasyon na nagpapakita ng takbo ng panahon kung kailan nakuha ng British Museum ang bawat artifact; natural, sa simpleng pag-tap sa button na 'Home' ay mapapanood mong bumalik ang mga ito sa kani-kanilang katutubong lupain.

Nangyayari sa screen ang pagbabalik. Nasa mga institusyon, pamahalaan at iba pang partidong responsable sa mga ito ang mga pasya tungkol sa paglilipat ng mga aktuwal na bagay. Nagbibigay ang mapa sa mga manonood ng paraan para tuklasin ang koleksiyon batay sa mga lugar na pinagmulan ng mga bagay, sa halip na sa pamamagitan ng paglibot sa mga galeriya ng museo.

Kapwa nakikita ng mga manonood ang pag-uwi at ang isang debate

Milyun-milyong tao ang nanood ng proyekto tungkol sa museo sa social media sa ibang bansa. Ibinahagi ito ng mga alagad ng sining, manggagawa sa teknolohiya at mga opisyal na account ng embahada, habang nagpadala naman ang mga manonood kay Ruixian ng mga mensahe tungkol sa kanilang mga reaksiyon.

Pinuna ng ilang nagkomento ang kasaysayan ng kolonyalismo ng Britain at ang presensiya ng mga banyagang bagay na pangkultura sa museo. Sinuportahan naman ng iba ang pananatili roon ng mga bagay, dahil sa akses ng publiko at sa paniniwalang maaaring nalagay sa panganib na mawala o masira ang ilan sa mga ito sa kanilang mga bansang pinagmulan.

Nakasentro ang pagtatalo sa mga konkretong usapin: sino ang makakakita sa mga kayamanang pangkultura, sino ang mag-aalaga sa mga ito at kung saan dapat mapunta ang mga ito. Itinatampok ng biswal na pamamaraan ni Ruixian ang mga lugar na pinagmulan ng mga bagay sa usapang ito. Maaaring magsimula ang mga manonood sa isang bansang kilala nila, at pagkatapos ay buksan ang kasaysayan ng isang partikular na bagay.

Patalastas

Mula graphic design tungo sa computational storytelling

Umiikot sa sining, pagbuo ng produkto at computing ang karera ni Ruixian. Pagkatapos ng kanyang undergraduate na pag-aaral, tinanggihan niya ang pagkakataong magtapos ng master's degree sa Royal College of Art at bumalik sa China para magtrabaho sa pananaliksik at pagpapaunlad ng produkto.

Unti-unting lumampas sa mga teknikal na kagamitang kaya niyang gamitin ang kanyang mga ideya. Nais niyang gawing mga karanasang matutuklasan ng mga tao ang mga paksang pangkultura, sa halip na iwan ang mga ito bilang teksto o mga imaheng hindi gumagalaw.

Hinubog ng ilang yugto ang gawaing ito:

  • Noong 2008, lumipat siya sa Britain upang mag-aral ng graphic design sa Central Saint Martins.
  • Pagkatapos ng pagtatapos, bumalik siya sa China at nagtrabaho sa pananaliksik at pagpapaunlad ng produkto.
  • Noong 2016, nag-apply siya para sa posisyon bilang research assistant sa MIT upang mapaunlad ang kanyang mga kasanayan sa biswalisasyon ng impormasyon.
  • Nag-aral siya kalaunan sa master's program ng Department of Urban Studies and Planning ng MIT, kung saan tumanggap siya ng buong suporta sa matrikula at allowance para sa gastusin sa pamumuhay.

Nangangahulugan ang biswalisasyon ng impormasyon ng pag-aayos ng impormasyon upang mas madaling makita ang mga padron nito. Tinutulungan ng mapa ng subway ang mga pasahero na maunawaan ang mga koneksiyon. Ipinakikita naman ng mapa ng panahon ang pagbabago ng mga kondisyon sa isang rehiyon. Inilalapat ni Ruixian ang parehong prinsipyo sa mga paksang pangkultura, gamit ang lokasyon, galaw, kulay at tunog para ayusin ang mga kuwento.

Sa MIT, pinag-aralan niya kung paano makalilikha ng mga interaktibong mapa ang pakikipag-usap sa AI. Pinag-isa ng mga sumunod niyang proyektong pansarili ang teknikal na interes na iyon at ang mga tanong na bumabagabag sa kanya mula pa noong mga araw niya bilang estudyante sa London.

Bakit tatlong buwan ang ginugol sa mapa ng opera

Ipinakikita ng proyekto ni Ruixian tungkol sa Chinese opera kung gaano karaming trabaho ang ginagawa bago magsulat ng code ang isang sistema ng AI. Tatlong buwan siyang sumangguni sa mahigit 100 sangguniang aklat, at paulit-ulit na binalikan ang 29 na tomo ng Survey of Chinese Opera.

Ikinukumpara ng mapa ang mga panrehiyong tradisyon gamit ang mga pamilyar na tauhan at pagtatanghal. Halimbawa, maaaring maging paraan ang parehong si Judge Bao na may itim na mukha upang mapakinggan ang mga pagkakaiba ng Peking opera, Qinqiang at Henan opera.

Kailangang piliin ni Ruixian kung aling mga tradisyon at papel ang isasama, kung paano pag-uugnayin ang mga ito at kung paano babalansehin ang lawak ng heograpiya at detalye ng kasaysayan. Hinubog ng mga pasyang iyon ang matututuhan ng mga manonood bago pa man mabuo ang interface.

Patalastas

Dalawa kung gayon ang kahulugan ng paglalarawan niya sa paghahanap sa mga koordinado ng isang paksa. Kailangan ng isang pagtatanghal ng puwesto sa mapa, pero kailangan din nito ng puwesto sa mas malawak na kuwento ng kultura. Nangangailangan ng pagbabasa, paghahambing at pagpapasya ang pagpili sa puwestong iyon.

Magkaiba ang direksiyong tinutungo ng engineering at disenyo. Hinihikayat ng engineering ang paglikha ng mga kagamitang magagamit muli upang lutasin ang mga paulit-ulit na problema. Itinatanong naman ng gawaing pansining kung ano ang katangi-tangi sa isang partikular na paksa at kung paano ito mararanasan ng mga manonood. Sinisikap ng kanyang mga mapa na pagsamahin ang dalawang pamamaraang ito sa iisang maliit na screen.

Nagiging tanawin ng tunog at galaw ang tula

Nagbibigay ang tulang Chinese kay Ruixian ng isa pang paraan para iugnay ang mga salita sa mga lugar. Pinagsasama sa isang proyekto sa pagmamapa ang 165 tula at 60 lokasyon. Sa lahat ng kanyang proyekto tungkol sa tula, halos 200 tula na ang sinuri niya na sumasaklaw sa humigit-kumulang 3,000 taon.

Lumitaw ang mga bundok sa gitna ng hamog, gumalaw ang mga alon sa ilalim ng mga taludtod tungkol sa wasak na bayan, at sinabayan ng huni ng mga ibon ang mga taludtod na iniuugnay sa Yellow Crane Tower. Inilalagay niya ang mga tula nang patayo sa ibabaw ng tanawin, bilang pag-angkop sa tradisyonal na patayong pagkakaayos ng sulat na Chinese.

Kasimbigat ng animasyon ang pagpili ng mga tula. Para sa Chang'an, pinili niya ang Spring View ni Du Fu. Para sa Jinan, pinili niya ang tulang may himig na Like a Dream ni Li Qingzhao. Para sa Suzhou, ginamit niya ang Mooring by Maple Bridge at Night ni Zhang Ji. Nagbibigay ng panimulang punto sa mapa ang mga pamilyar na taludtod.

Mas maraming impormasyon ang ibinigay ng AI kaysa sa kaya niyang gamitin. Kailangang bawasan ito ni Ruixian at ayusin bilang sunod-sunod na bahaging kayang sundan at damhin ng mga tao. Ganoon din ang ginawa niya sa itsura: hiniling niya sa AI na kunin ang mga kulay mula sa landscape painting na A Thousand Li of Rivers and Mountains, at sumubok siya ng hindi bababa sa 11 kombinasyon ng kulay.

Kinailangan ang paulit-ulit na tagubilin tungkol sa hamog, transparency, mga gradient, tilamsik at pagkalat ng mga alon upang magawa ang talon. Kahit mabilis makagawa ng code, marami pa ring desisyong kailangang gawin tungkol sa magiging hitsura ng huling tanawin.

Taglagas, mga nilalang sa mito at pang-araw-araw na kuryosidad

Nadiskubre ng isang estudyante sa unibersidad sa Beijing, na kinilala sa sagisag-panulat na Xiao Hu, si Ruixian sa pamamagitan ng mapa ng taglagas noong huling bahagi ng Oktubre. Ipinakita sa humigit-kumulang 90 segundong animasyon nito ang pagbabago ng mga halaman mula berde tungong pula habang lumilipat ang taglagas mula hilaga tungong timog ng China.

Patalastas

Pinanood niya ito nang ilang ulit, at pagkatapos ay sinimulan niyang tuklasin ang iba pang paksa ni Ruixian. Kabilang dito ang 276 na ilustrasyon ng mga nilalang sa mito mula sa Classic of Mountains and Seas, iba’t ibang pagtatanghal ng opera tungkol sa kuwento ni Judge Bao at mga likha ng Chinese na kaligrapiya.

Gumamit ang mapa ni Ruixian tungkol sa mitolohiya ng daigdig ng patak ng tubig upang pag-ugnayin ang mga kuwento tungkol sa baha, kabilang ang pagpigil ni Yu the Great sa baha, Noah's Ark at salaysay ng mga Sumerian tungkol sa baha. Nagsisimula naman ang mapa niya tungkol sa mga pananim sa mga tuwirang tanong tungkol sa pang-araw-araw na buhay: saan tumutubo ang pagkain, gaano karami ang nagagawa at saan ito dinadala.

Nagbibigay rin ng mga ideya ang mga aklat at pangkaraniwang obserbasyon. Nang mabasa niya ang tungkol sa isang ornithologist na naghahanap ng mailap na kuwago sa mga kagubatan ng Malayong Silangan ng Russia, napaisip siya tungkol sa mga uri ng ibon at pagkakaiba ng kanilang mga huni. Nag-udyok naman sa kanya ang mga bulaklak sa tabi ng daan na isipin kung ano ang namumukadkad sa ibang panig ng mundo.

Magkakatulad ang praktikal na balangkas ng mga proyektong ito. Nagiging panimulang punto ang isang pamilyar na bagay o karanasan. Inilalantad naman ng mapa ang mga ugnayang mas mahirap makita sa isang listahan: sa pagitan ng mga rehiyon, sa paglipas ng mga siglo o sa iba’t ibang tradisyong pangkultura.

Ang gawaing nananatili sa lumikha

Maaaring ilang linggo, at kung minsan ay tatlo o apat na buwan, ang paggawa ni Ruixian ng mga video mula sa pagpili ng paksa hanggang sa pagkumpleto ng huling likha. Karaniwan niyang ginagawa nang mag-isa ang proseso.

Nakatulong ang karanasan niya sa isang malaking kompanya ng teknolohiya upang malinawan siya sa nais niyang baguhin. Habang nagiging paulit-ulit ang trabaho, pakiramdam niya ay naglalagay lang siya ng magkakaibang datos sa mga pamilyar na template at kumakaunti ang puwang para sa paglikha. Nagbigay ang malayang paglikha ng paraan upang balikan niya ang mga interes niya.

Pinaiikli ng AI ang agwat sa pagitan ng isang ideya at ng gumaganang programa. Kailangan pa rin ni Ruixian na magsaliksik tungkol sa paksa, mag-ayos ng mga materyal, pumili ng mga halimbawa at baguhin ang presentasyon. Sa kanyang mga proyekto, itinatakda ng mga pasyang ito kung makakakita ang mga manonood ng koleksiyon ng mga simbolong gumagalaw o ng kuwentong nanaisin nilang sundan.

Gumagawa na siya ngayon ng oras para sa pagbabasa, pamilya at pagtakbo ng marathon, sa halip na gawing sentro ng lahat ang trabaho. Iniuugnay niya sa puwang na ito ang muling pagbabalik ng kuryosidad. Simple at kayang itanong ng sinuman ang mga tanong sa likod ng kanyang mga mapa: saan ito nagmula, paano ito nakarating dito at ano ang nag-uugnay rito sa ibang lugar?

Mahahalagang Punto

  • Minamapa ng application ni Ruixian tungkol sa British Museum ang halos 5,000 artifact mula sa 99 na bansa at ipinakikita ang guniguning pagbabalik ng mga ito sa kanilang mga tahanan.
  • Ipinakikita rin ng application kung kailan napunta sa museo ang mga bagay at hinahayaan ang mga gumagamit na tuklasin ang kasaysayan ng bawat isa.
  • Saklaw ng iba pa niyang mga proyekto ang tulang Chinese, panrehiyong opera, mitolohiya, mga pananim at mga kulay ng taglagas.
  • Tatlong buwang pananaliksik gamit ang mahigit 100 sangguniang aklat ang kinailangan para sa mapa ng opera.
  • Tumutulong ang AI sa pagbuo ng code at mga biswal na elemento, samantalang si Ruixian ang pumipili ng materyal at gumagabay sa huling karanasan.
Ibahagi ang artikulong ito

Baka magustuhan mo rin