Muling binuhay ng AI ang 1,600 taong gulang na tulang pag-ibig ng Tsina

Muling natunghayan ang isang sinaunang tula ng pag-ibig

Muling binuo ng isang pangkat ng mga mananaliksik na Tsino sa pamamagitan ng digital na paraan ang isang 1,600 taong gulang na kayamanan ng kaligrapiya, gamit ang artificial intelligence (AI). Inihayag ng Sentro para sa Disenyo at Pananaliksik ng mga Font Tsino ng Peking University na natapos nila ang buong bersiyon ng balumbon ng Rhapsody on the Luo River Goddess, na kilala bilang Luoshen Fu. Isinulat ito noong ikaapat na siglo ng tanyag na kaligrapong si Wang Xianzhi. Mga piraso na lamang ng akda ang nakaligtas. Pinagsama ng pangkat ang disenyo ng mga font para sa kaligrapiya at paglikha ng mga karakter gamit ang AI upang buuin ang mga nawawalang bahagi habang pinananatili ang estilo ng alagad ng sining. Bunga nito ang tuluy-tuloy na balumbon na may 919 karakter, batay sa humigit-kumulang 250 tunay na karakter na nananatili.

Sinuri ng mga mananaliksik ang mga natirang karakter at sinukat ang kapal ng mga hagod, ritmo ng pagsulat gamit ang pinsel, kayarian ng mga karakter, at pagitan ng mga ito. Natutuhan ng modelo kung paano pinakurbada at idiniin ni Wang Xianzhi ang kanyang pinsel, kung paano niya binalanse ang makapal na tinta at maluwag na espasyo, at kung paano niya pinag-ugnay ang mga karakter sa mabilis na pagsulat. Batay sa mga tuntuning ito ng estilo, nilikha ng sistema ang mga nawawalang karakter at inayos ang tula bilang isang buong balumbon. Hindi ito pisikal na pagkukumpuni. Isa itong digital na muling pagbuo na nagbibigay sa mga mambabasa ng pagkakataong maranasan ang tula sa anyong kahawig ng orihinal na sulat-kamay.

Ang Luoshen Fu ay isang tulang pasalaysay sa tuluyan ni Cao Zhi, isang prinsipe ng estadong Cao Wei noong Panahon ng Tatlong Kaharian. Isinulat niya ito bandang AD 222. Inilalarawan ng akda ang pakikipagtagpo sa diyosa ng Ilog Luo, at naging inspirasyon ito sa mga pintor at kaligrapo sa loob ng maraming siglo. Naging tanyag ang bersiyon ni Wang Xianzhi, na nilikha noong panahon ng Silangang Jin, dahil sa marikit na galaw at makahulugang paggamit ng tinta. Muling ipinakikita ng bagong digital na balumbon sa mga makabagong mambabasa ang dumadaloy na sulat-kamay na ito.

Ano ba talaga ang muling binuo

Si Wang Xianzhi, anak ng maalamat na si Wang Xizhi, ay kinikilalang isa sa pinakadakilang tauhan sa kasaysayan ng kaligrapiyang Tsino. Nabuhay siya noong ikaapat na siglo, sa panahon ng Silangang Jin. Kilala bilang Dalawang Wang ang mag-amang ito. Pinahusay nila ang mabilis at kursibong pagsulat, at binigyang-diin ang malayang galaw at banayad na kontrol. Marami sa kanilang mga akda ang nabubuhay lamang sa mga kopya at estampang kinayod mula sa mga inskripsiyon; dahil sa mga puwang sa tala ng kasaysayan, may mahahalagang akdang hindi kumpleto.

Sa Luoshen Fu, humigit-kumulang sangkapat ng kaligrapiya ang nababasa pa sa magkakahiwalay na piraso. Dahil dito, nagkaroon ang pangkat ng Peking University ng mga 250 karakter na masusing mapag-aaralan. May 919 karakter ang buong tula. Bumuo ang mga mananaliksik ng generatibong modelo na kayang sumulat ng mga nawawalang karakter sa estilo ni Wang Xianzhi at ayusin ang mga ito sa isang balumbong umaayon sa mga natirang bahagi. Hindi ipinapahayag ng proyekto na nabawi nito ang nawalang tinta. Inilalahad nito ang tapat na pagpapatuloy sa estilo ng mga piraso upang muling mabasa ang tula bilang isang buo at magkakaugnay na akda.

Sino sina Wang Xianzhi at Cao Zhi

Naglingkod si Wang Xianzhi (AD 344 hanggang 386) bilang opisyal at sumikat bilang alagad ng sining sa sarili niyang karapatan. Hinahangaan ang kanyang kaligrapiya dahil sa eleganteng ritmo at makabagong paglapit sa kayarian. Nag-eksperimento siya sa pag-uugnay ng mga hagod at paglalagay ng mga karakter upang lumikha ng masiglang daloy. Pinag-aralan ng mga sumunod na dinastiya ang kanyang mga gawa at itinuring itong pamantayan ng panlasa.

Si Cao Zhi (AD 192 hanggang 232) ay isang prinsipe at tanyag na makata sa korte ng Cao Wei. Isinulat niya ang Luoshen Fu matapos maglakbay malapit sa Ilog Luo. Pinaghalo sa tula ang pag-iibigan sa korte at pananabik na espirituwal. Inilalarawan nito ang pangitain sa diyosa ng ilog bilang huwaran ng kagandahan at kabutihan. Nang maglaon, isinalin ng mga alagad ng sining ang tula sa pagpipinta at kaligrapiya, at naging batayan ng kultura ng mga literati ang iba’t ibang bersiyon ng Luoshen Fu.

Paano muling binuo ng AI ang estilo ng kaligrapiya

Naiiba ang digital na pagsasauli ng kaligrapiya sa pagpapalinaw ng larawan. Hindi basta pinatingkad ng pangkat ng Peking University ang kupas na tinta. Layunin nilang imodelo ang estilo ng alagad ng sining at sumulat ng mga bagong karakter na babagay dito. Para rito, masusing sinuri ng mga mananaliksik ang 250 natirang karakter at itinala ang mga detalyadong katangian gaya ng direksiyon ng hagod, pagbabago ng diin, kurba, at relatibong laki ng mga bahagi sa loob ng bawat karakter.

Gamit ang mga katangiang ito, sinanay ng pangkat ang isang sistemang lumilikha ng mga karakter at kumikilos na para bang isa itong kaligrapong nag-aral kay Wang Xianzhi. Natututuhan ng modelo kung paano nagsisimula at nagtatapos ang mga hagod, kung paano kumikipot ang mga linya, at kung paano inilalagay ang mga karakter sa loob ng parisukat. Pagkatapos, gumagawa ito ng mga posibleng bersiyon ng nawawalang mga karakter. Sinusuri ng mga eksperto ang mga resulta, pinipino ang mga parameter, at pinipili ang mga bersiyong pinakatumutugma sa orihinal na sulat-kamay. Nakatutulong ang prosesong ito, kung saan may taong gumagabay, upang maiwasan ang mekanikal na pag-uulit at paglihis ng estilo.

Ang panghuling produkto ay isang tuluy-tuloy na digital na balumbon kung saan maiuugnay ang bawat karakter na nilikha sa mga tunay na piraso. Kaayon ng mga natirang linya ang pagitan at ritmo, at pinananatili ng ayos ang pakiramdam ng galaw na katangian ng orihinal. Makikita ng mga mambabasa ang buong tula habang nalalaman kung aling mga bahagi ang orihinal at alin ang muling binuo.

Sa pampublikong pahayag nito, inilarawan ng Peking University ang proyekto bilang eksperimento sa kultura na nag-uugnay sa tradisyonal na sining at mga bagong kasangkapan.

Isinulat ng Peking University: "Malinaw na ipinakikita ng pagsisikap na ito ang potensiyal ng pagsasanib ng AI at kultura, kung saan nagkakaroon ng mga bagong paraan ng pagpapahayag sa digital na panahon ang tradisyonal na sining ng kaligrapiya."

Pandaigdigang pagbabago sa pagsasauli ng mga sinaunang teksto

Kaugnay ang pamamaraang ito ng mas malawak na paglaganap ng paggamit ng AI sa mga larangan ng humanidades. Nakatulong ang mga malalalim na neural network sa mga iskolar na buuin muli ang mga sirang teksto, tukuyin ang pinagmulan ng mga inskripsiyon, at tantiyahin ang mga petsa ng mga ito. Ipinakikita ng sistemang Ithaca, na sinanay sa mga sinaunang inskripsiyong Griyego, kung paano makatutulong ang AI sa mga eksperto. Kapag modelo lamang ang ginamit, naibabalik nito ang mga nasirang teksto nang may katumpakang nasa 62 porsiyento. Kapag ginamit ito ng mga historyador bilang gabay, tumataas ang kanilang katumpakan mula mga 25 porsiyento tungo sa humigit-kumulang 72 porsiyento. Nagmumungkahi rin ang sistema ng posibleng mga lugar at panahong pinagmulan ng mga orihinal na inskripsiyon, kaya nagkakaroon ang mga mananaliksik ng mas matibay na panimulang batayan.

Iniaangkop ng Aeneas ng Google DeepMind ang ideyang ito sa mga inskripsiyong Latin. Pinagsasama nito ang teksto at mga larawan, naghahanap ng mga kahalintulad na halimbawa sa malalawak na koleksiyon, at nagmumungkahi ng mga posibleng rekonstruksiyon para sa mahahabang nawawalang bahagi. Sa mga pagsusulit kasama ang mga historyador, napahusay ng Aeneas ang mga gawain sa pagsasauli at pagtukoy sa pinagmulan, at napatunayang kapaki-pakinabang sa karamihan ng mga kaso. Nanatili sa mga eksperto ang kontrol sa mga proyektong ganito. Bumubuo ng mga palagay ang software, at isinasaalang-alang ng mga tao ang konteksto, estilo, at materyal na ebidensiya bago tumanggap ng anumang pagbabago.

Ipinakikita naman ng gawain sa mga nauling balumbon ng Herculaneum ang isa pang paraan. Gumagamit ang mga mananaliksik ng makabagong pagkuha ng larawan at machine learning upang matukoy ang malalabong letra sa loob ng mga balumbon ng papyrus na naselyuhan mula pa noong AD 79. Nagbibigay-daan ang pagsasama ng hindi mapanirang pag-scan at pagtukoy ng teksto sa tulong ng AI na mabasa ang mga ito nang hindi binubuklat ang marurupok na orihinal. Nakatutulong ang masusing beripikasyon at mga bukas na pamamaraan upang mapanatili ang tiwala.

Mas malawak na mga eksperimento ng Tsina sa AI at pamana ng kultura

Sinusubukan din ng mga unibersidad at institusyong pangkultura sa Tsina ang AI sa mga pinta at mural. Bumuo ang mga mananaliksik sa Zhejiang University, sa pangunguna ni Tang Tan, iskolar ng sining at arkeolohiya, ng isang cross-modal na deep learning model na nag-uugnay sa mga tula at pinta. Sa pamamagitan ng pagkatuto kung paano inilalarawan ng klasikal na tula ang mga tanawin at kulay, nagmumungkahi ang sistema ng mga paletang tumutugma sa layunin ng mga nawalang pigment. Ipinakita ng pangkat ang mabilis at naibabalik na pagkukulay sa mga likhang gaya ng Residents on the Outskirts of Dragon Abode ni Dong Yuan, at nabigyan nito ang mga tagapangalaga ng paraan upang masilip at mapag-usapan ang mga opsiyon bago gumawa ng anumang pisikal na hakbang.

Sa Yongle Palace sa Shanxi, gumamit ng mga kasangkapang AI ang isang kolaborasyong sinimulan noong 2019 upang muling buhayin ang kupas na mga kulay ng Chaoyuan Tu, isang napakalaking mural mula sa dinastiyang Yuan. Halos 100 metro ang haba ng pinta at inilalarawan nito ang isang hanay ng mga tauhang Taoista na magkakasunod at magkakapatong ang hanay. Dahil sa digital na pagpapahusay, mas malinaw na nakikita ng mga bisita ang karilagan ng komposisyon, sa paraang mas malapit sa orihinal nitong dating, nang hindi direktang ginagalaw ang pader.

Gumagamit din ng AI ang mga estasyong pampelikula upang sariwain ang alaala ng kultura. Sa ilalim ng Kung Fu Movie Heritage Project, plano ng mga kumpanya na isauli sa digital na paraan ang isandaang klasikong pelikulang martial arts, mula sa mga tampok nina Bruce Lee at Jackie Chan hanggang sa mga sumunod na patok na pelikula. Nangangako ang proyekto ng mas malinaw na larawan at tunog nang hindi binabago ang mga kuwento. Naging inspirasyon din ito sa isang ganap na animadong muling pagsasalaysay ng A Better Tomorrow, na gumamit ng mga kasangkapang AI sa iba’t ibang yugto ng produksiyon.

Inilarawan ni Tian Ming, tagapangulo ng Canxing Media at pinuno ng inisyatiba, ang balanse sa pagitan ng mga makina at mga tagalikha.

Ang AI ang pinsel, ngunit ang pagkamalikhain ang kaluluwa," sabi ni Tian. "Kinakatawan ng mga klasikong pelikulang kung fu ang espirituwal na gulugod ng Tsina.

Ano ang maituturing na tunay kapag AI ang pumupuno sa mga puwang

Hindi kailanman malaya sa pagpapahalaga ang pagsasauli ng mga akda. Ang digital na muling pagbuo ng kaligrapiya ay pagbasa sa estilo, hindi pagbawi sa tinta. Dapat matukoy ng mga tumitingin kung alin ang orihinal at alin ang nilikha, at malaman kung paano ginawa ang mga pagpili. Pinangangalagaan ng malinaw na paglalagay ng pagkakakilanlan ang likhang-sining at ang publiko, at pinatitibay nito ang tiwala sa resulta.

Nakatutulong ang mga pananggalang na teknikal. Maaaring humilig ang mga generatibong modelo sa maayos na simetriya o paulit-ulit na hugis na iiwasan ng isang dalubhasang tao. Nakababawas sa mga panganib na ito ang paglilimita ng pagsasanay sa mga tunay na piraso, pagpapatupad ng mga tuntunin sa pagkakasunod-sunod ng mga hagod, at paghahambing sa mga beripikadong halimbawa. Nagdaragdag ng pagpapasyang hindi kayang ibigay ng software ang pagsusuri ng mga kaligrapo, historyador, at tagapangalaga.

Mga praktikal na hakbang para sa responsableng digital na pagsasauli

• Laging markahan ang mga muling binuong bahagi at ilista ang pangkat, petsa, at mga ginamit na kasangkapan.
• Maglathala ng magkatabing larawan ng mga piraso, mungkahing pagkumpleto, at buong balumbon.
• Magsama ng metadata at mga nakikitang watermark na tumutukoy sa mga karakter na nilikha ng sistema.
• Mag-anyaya ng malayang pagsusuri ng mga panlabas na eksperto at magpanatili ng talaan ng mga pagbabago.
• Ibahagi ang datos at code kung maaari upang masubukan at mapahusay ng ibang pangkat ang mga pamamaraan.
• Maglabas ng maraming bersiyon kung nananatili ang kawalang-katiyakan sa kasaysayan, sa halip na magtakda ng iisang pagbasa.
• Linawin ang mga karapatan at lisensiya upang mahikayat ang paggamit sa edukasyon at pananaliksik.

Bakit mahalaga pa rin ang Luoshen Fu

Nagmumula ang pang-akit ng Luoshen Fu sa pagsasanib ng teksto at sulat-kamay. Itinuturing ng kaligrapiyang Tsino ang nakasulat na salita bilang sining ng galaw, kung saan nag-iiwan ng bakas ng isip ang hininga, galaw ng pulsuhan, at tinta. Taglay ng interpretasyon ni Wang Xianzhi sa tula ni Cao Zhi kapwa ang kariktan ng panitikan at pansariling damdamin. Mapalalawak ng isang digital na balumbong gumagalang sa mga katangiang ito ang pag-access nang hindi pinapayat ang kahulugan.

Maipakikita na ngayon ng mga paaralan at museo ang buong tula, maipaliliwanag kung aling mga karakter ang nakaligtas, at maipakikita kung paano hininuha ng mga eksperto ang iba pa. Maaaring mag-zoom ang mga interaktibong display mula sa malawak na galaw ng balumbon hanggang sa kapal ng iisang hagod. Masisilayan ng mga mambabasa ang buong salaysay ng pananabik at kariktan, habang natututuhan din nila kung paano nakikibahagi ang mga makabagong kasangkapan sa pangangalaga ng marupok na pamana.

Mananatiling matibay ang mga proyektong gaya nito kung uunahin ang katumpakan at pagiging malinaw. Kapag itinatala ng mga pangkat ang kanilang proseso, tumatanggap ng puna, at ina-update ang mga resulta, nagiging bahagi ng talaang pang-iskolar ang mga digital na pagsasauli. Dahil dito, kapwa pagpupugay kay Wang Xianzhi at buhay na sanggunian para sa pag-aaral sa hinaharap ang bagong bersiyon ng Luoshen Fu.

Mahahalagang punto

• Gumamit ang Peking University ng AI upang makalikha ng kumpletong digital na balumbon ng Luoshen Fu ni Wang Xianzhi, batay sa humigit-kumulang 250 natirang karakter.
• May kabuuang 919 karakter ang muling binuong akda at inilalahad nito ang tula bilang magkakaugnay na balumbon para sa mga makabagong mambabasa.
• Pinagsasama ng proyekto ang disenyo ng mga font para sa kaligrapiya at paglikha ng mga karakter gamit ang AI, sa gabay ng pagsusuri ng mga eksperto.
• Tumutulong sa mga historyador ang mga katulad na kasangkapang AI gaya ng Ithaca at Aeneas na magsauli at magtakda ng petsa sa mga sinaunang inskripsiyon sa pamamagitan ng pagsasama ng mga algoritmo at pagpapasya ng tao.
• Gumagamit din ang mga pangkat sa Tsina ng AI upang magsauli ng mga kulay sa mga pinta at digital na ayusin muli ang mga klasikong pelikulang kung fu.
• Nakatutulong ang malinaw na paglalagay ng pagkakakilanlan, mga watermark, bukas na pamamaraan, at malayang pagsusuri upang mapanatili ang tiwala sa mga digital na muling pagbuo.
• Ipinakikita ng muling pagsasauli sa Luoshen Fu kung paano mapalalawak ng teknolohiya ang pag-access habang iginagalang ang diwa ng tradisyonal na kaligrapiya.