Kenali SpatialLabs Dengan Lebih Mendalam — Interview Bersama Jane Hsu dari Acer! [GDC2023]

Kita telah diperkenalkan dengan SpatialLabs sejak 2021. Nampaknya teknologi tersebut sudah diletakkan pada peranti gaming Predator. Semasa acara Games Developers Conference 2023, kami berpeluang untuk bercakap dengan Jane Hsu, Head of Business Development, Spatial Computing Product BU di Acer tentang SpatialLabs. Tanpa membuang masa, berikut adalah hasil temu ramah kami bersamanya!

Bolehkah anda menjelaskan tentang pengumuman yang dibuat seminggu lalu di mana anda mendedahkan tentang update SpatialLabs dan profil baharu yang sedang dikerjakan?

Jane Hsu: Setakat ini kami mempunyai 70 game yang dibangunkan di TrueGame, dan kemudian kami masih cara untuk menyediakan lebih banyak game setiap bulan.

Satu perkara yang baru kami selesaikan pembangunan ialah panggil Unity dan Unreal TrueGame Base Profile. Kerana game menggunakan game engine ini, mereka berkongsi pipeline rendering yang serupa. Dengan Base Profile menjaga beberapa hal umum -tetapi setiap game adalah berbeza- kami boleh meluangkan lebih banyak masa dan mengubah suai, dan mengoptimumkan prestasi, dan melakukan banyak ujian, supaya boleh menumpukan perhatian pada tugas tersebut untuk memastikan bahawa kami sentiasa memberikan pengalaman terbaik

Tetapi sebagai contoh Base Profiles jenis ini, kami bekerjasama dengan Square Enix. Mereka baru-baru ini mengeluarkan Octopath Traveler II terbaharu, dan kami mendapat game itu dua minggu sebelum keluaran rasmi mereka, dan profil 3D dilakukan dalam masa tiga minggu. Pada masa [game] dikeluarkan, kami hampir bersedia untuk pengalaman 3D.

Dan ini adalah situasi menang-menang. Studio dan pemaju game ini menggunakan Unity atau Unreal, kami benar-benar boleh mempercepatkan proses untuk menyokongnya pada hari pertama. 

Kita melihat banyak syarikat mengeluarkan port game konsol pada PC gara-gara prestasi pasaran game konsol yang mula menurun. Adakah ia membantu SpatialLabs mendapatkan lebih banyak game pada konsol?

Jane Hsu: Cara saya melihatnya, saya tidak akan mengatakan ia trend tetapi kerana kekurangan perkakasan. Pembangun di studio mula memahami bahawa sebenarnya game PC juga boleh memberikan pengalaman berkualiti tinggi.

Saya fikir ketika itu kerana konsol PC, mereka hanya menumpukan pada grafik game, dan mereka cenderung untuk memberikan pengalaman yang lebih baik dari segi prestasi grafik. Tetapi kini, seluruh industri PC bergerak dengan begitu pantas, terutamanya rendering dan grafik. Saya melihat perubahan seperti itu, bukan sahaja daripada PS Studios, tetapi juga Xbox. Microsoft juga memberi dan mendapatkan semua game yang tersedia ke platform Windows.

Saya rasa, terima kasih kepada kuasa rendering dan cara ia bergerak, ia pasti membantu dengan menyediakannya untuk kami mencipta pengalaman SpatialLabs, kerana buat masa ini kami benar-benar berasaskan Windows.

Adakah anda mempunyai sebarang game akan datang yang boleh dikongsikan dengan kami yang sedang dikerjakan?

Jane Hsu: Saya akan kata banyak game AAA, beberapa retro. Sebagai contoh, saya boleh memberitahu ialah Diablo III, itu satu contoh bagus. Untuk yang akan datang, kami ingin [memberitahu anda], tetapi kami belum mendapat peluang untuk bercakap dengan studio lagi, jadi lihat dahulu. Kami ingin melihat bagaimana kami juga boleh mendapatkan judul baru akan datang.

Berapakah kuasa pengkomputeran yang diperlukan oleh SpatialLabs berbanding pemaparan 2D tradisional?

Jane Hsu: Untuk perkakasan kami, kami memerlukan dua pandangan, kan? Kami memerlukan satu untuk mata kiri, dan satu untuk mata kanan, jadi anda akan render dua imej. Itu 2K [resolusi] bagi setiap mata, jadi lihat apa untuk render game dalam 4K, dan kemudian itulah jumlah kuasa pengkomputeran.

Katakan anda bermain God of War, yang kami sokong, maka ya, anda memerlukan mesin yang sangat berkuasa. Tetapi jika anda bermain Octopath Traveler II, maka itu memerlukan lebih sedikit [kuasa pengkomputeran].

Kami mendapati bahawa Predator Helios 300 SpatialLabs Edition, mereka menghadkannya pada 60Hz, adakah ia boleh untuk pergi lebih tinggi daripada itu?

Jane Hsu: Kami ingin melakukannya, tetapi ia juga bergantung jika anda memerlukan sistem prestasi yang lebih tinggi bukan? Itu pastinya sesuatu yang kami sedang lihat sekarang, untuk melihat bagaimana kami boleh mendapatkan frame rate yang lebih tinggi. 

Adakah anda fikir harga untuk produk untuk SpatialLabs masa ini lebih kepada bahagian premium?

Jane Hsu: Sudah semestinya, ya.

Lebih premium produk, lebih tinggi tahap entri. Jika saya ingin membeli produk tersebut, saya perlu mengeluarkan wang yang banyak untuk mencuba. Jika halangannya lebih rendah, maka lebih ramai orang akan mendapat mencuba produk ini. Apakah pendapat anda tentang harga dan adakah anda fikir ia akan menjadi lebih murah pada masa hadapan?

Jane Hsu: Saya rasa anda boleh melihatnya dalam dua cara. Satu ialah adakah kita mempunyai pengalaman yang cukup baik yang boleh dijenamakan sebagai pengalaman premium? Untuk itu, saya fikir kami melakukan kerja yang cukup baik, dari segi kualiti visual dan kemudian semuanya. Anda mendapat kualiti visual 3D yang sangat tajam dan sangat baik, dan untuk pengalaman itu, ya, ia sememangnya premium. Tetapi ini tidak bermakna kami sentiasa menetapkannya pada harga premium, bukan?

Saya fikir pada masa ini, bukan sahaja keperluan sistem, tetapi juga pengeluaran modul 3D. Kami sedang bekerjasama dengan rakan kongsi kami untuk melihat bagaimana kami boleh meningkatkan kadar hasil, dan kemudian juga mengurangkan harga untuk pengeluarannya.

Tetapi pada masa ini, saya perlu mengakui bahawa ia adalah proses pengeluaran yang sangat maju. Jadi malangnya, dalam tempoh 12 bulan akan datang, saya akan mengatakan bahawa ia mungkin masih dalam julat kos untuk modul 3D.

Kita lihat dalam masa tiga hingga lima tahun lagi, ia boleh menjadi sesuatu yang sangat biasa kepada sesiapa sahaja.

Memandangkan SpatialLabs mengambil kira pengesanan muka, adakah anda mempunyai sebarang masalah dengan orang yang mempunyai ciri berbeza seperti saiz mata atau warna kulit yang berbeza-beza? Jika ya, bagaimana anda mengatasi masalah tersebut?

Jane Hsu: Ya, itu sangat menarik. Kerana untuk pengesanan, kami telah melalui begitu banyak kerana kami memang [mempunyai masalah itu pada satu ketika]. Kami mendapati bahawa kami tidak mempunyai sokongan yang mencukupi untuk memahami seperti ton kulit yang lebih gelap, atau cara kami boleh menavigasinya, dan pada masa itu kami juga menghadapi masalah dengan topeng.

Apabila mula menggunakan teknologi, kami mengesan [tracking] seluruh muka. Dan kemudian apabila anda memakai topeng, terutamanya jika topeng hitam, kami akan menghadapi masalah dengan itu.

Nasib baik, bahagian yang terbaik ialah pembelajaran mesin, jadi kami boleh terus melatih algoritma untuk memahami dengan lebih baik. Jadi kami mula meletakkan lebih banyak variasi, seperti orang yang memakai topeng. Kami mula melatih algoritma dengan orang yang mempunyai ton kulit yang lebih gelap, wajah Asia, semua jenis etnik.

Kadang-kadang anda mendapati bahawa anda tidak mempunyai liputan lengkap untuknya, tetapi bahagian baik tentang teknologi ini adalah anda boleh melatihnya. Kami sentiasa boleh memasukkan lebih banyak variasi atau lebih jenis orang yang berbeza, malah topeng.

Kini dengan algoritma yang terlatih, kami boleh menyokong orang yang memakai topeng dengan sangat baik.

Apabila bercakap tentang 3D, VR atau apa sahaja yang berkaitan dengannya, terdapat ramai orang yang mengalami 3D motion sickness. Bagaimanakah SpatialLabs mengurangkan masalah seperti ini?

Jane Hsu: VR sedikit berbeza, seperti motion sickness, ia disebabkan latency. Dan apabila dalam VR, anda seperti diliputi sepenuhnya dalam dunia yang berbeza daripada realiti, dan anda bergerak, tetapi otak berkata “tidak, anda tidak bergerak”. Di situlah kekeliruan datang dan kemudian otak anda akan menjadi seperti “sesuatu yang tidak kena”.

Itulah sebabnya bagi orang yang sensitif terhadap pengalaman tidak selaras seperti ini, sesetengah deria visual memberitahu anda sedang bergerak, tetapi badan anda berasa seperti tidak bergerak, jadi otak akan keliru dan kemudiannya menimbulkan motion sickness. Itulah sebahagian daripada motion sickness, walaupun kadangkala latency tidak menghalang, anda mempunyai kandungan yang lancar, tetapi sesetengah orang masih akan merasakannya.

Saya fikir 3D adalah berbeza. Saya tahu pada zaman dahulu, apabila kita mempunyai TV 3D atau peranti gaming 3D, sesetengah orang masih berasa 3D motion sickness. Alasan besar adalah kerana; bayangkan napa yang sepatutnya masuk ke mata kanan anda, telah bocor ke mata kiri. Jadi anda mendapat mesej kabur dan bercampur-campur, dan kemudian otak anda mula memproses stereo, dan kemudian anda rasa ia tidak benar-benar sepadan. Di situlah  3D motion sickness datang dengan mata kasar.

Itulah sebabnya kami memperkenalkan eye tracking dan sentiasa memahami di mana mata anda berada, jadi kami memastikan bahawa piksel yang perlu masuk ke mata kiri tidak pergi ke mata kanan anda. Kelebihannya ialah anda tidak mendapat sebarang  3D motion sickness, dan satu lagi perkara lain ialah anda mendapat visual yang sangat tajam, bukan seperti yang anda alami yang tidak tajam dan jelas.

Masalah lain semasa menggunakan SpatialLabs, apabila memiringkan kepala atau menggerakkan kepala sedikit, pasti imejnya tidak lagi sepadan. Adakah cara untuk menyelesaikan masalah itu?

Jane Hsu: Ada dua perkara tentang ini. Yang pertama, ini bukan tentang pergerakan kepala, ini mungkin kerana mata keluar dari jangkauan “eye tracker”. Terdapat jarak yang terhad pada pelaksanaan tracker pada laptop kerana anda mempunyai bezel yang begitu nipis. Jadi lensa kamera mempunyai medan pandangan yang mungkin tidak akan dapat menampung semua pergerakan yang anda lakukan.

Terdapat juga perkara lain tentang 3D adalah apabila anda melihat 3D dari sisi, ia akan hilang. Ia akan hilang, tidak kira sama ada ia menjejaki mata anda atau tidak kerana apabila ia datang kepada kanta “lenticular”, reka bentuk kanta ”lenticular” akan memberi anda kotak, di mana anda sebenarnya boleh melihat secara 3D. Jika anda berada di luar julat itu, ia tidak akan mendapat kedudukan mata anda dengan betul.

Jadi ya, masih terdapat perkara yang mengehadkannya seperti sedemikian. Saya tidak akan mengatakan ia mengenai penjejakan, sebaliknya had paparan terhadap modul 3D. Ia tidak meliputi semua sudut, dan jika anda berada di luar skrin, maka anda akan mempunyai had untuk melihat 3D.

Adakah anda mempunyai apa-apa yang anda fikir perlu kami ketahui atau apa-apa yang anda ingin beritahu kami?

Jane Hsu: Saya hanya ingin mengatakan bahawa kami berada di GDC untuk memahami bagaimana komuniti game, seperti game producer dan art design merasakan teknologi SpatialLabs ini. 

Satu soalan yang sering saya terima adalah sama ada perkara seperti SpatialLabs ini telah tersedia di pasaran. Dan saya mengatakan ya dan mereka tidak percaya dengan jawapan saya. Mereka merasakan yang teknologi ini hanyalah sebuah konsep kerana ia sangat futuristik dan ia tidak merasakan sesuatu perkara yang patut berlaku sekarang. 

Ia benar-benar menarik kerana stereo 3D pastinya bukan teknologi baharu. Tetapi apa yang saya lihat ialah apabila anda memperkenalkannya, kemudian mendapat pengalaman yang tidak hebat, seperti yang anda katakan. Ia mungkin berasa kabur apabila anda merasakan pada masa lalu, orang akan rasa sakit 3D dan lain-lain. 

Kami fikir ia adalah masa yang tepat untuk semua teknologi ini, dengan prestasi sistem jauh lebih baik daripada lima tahun lalu, dan kemudian juga panel dengan 4K, “eye tracker”, “Machine Learning AI”. Semua perkara ini disatukan dan benar-benar boleh memberikan pengalaman yang sangat baik. 

Walaupun mereka berkata “Baiklah, saya hanya ingin tahu jenis stereo 3D”, mereka menyedari ia sebenarnya tidak seperti yang mereka sangkakan, dan semua orang terpesona. Saya fikir bagi mereka, ia benar-benar pengalaman bermain game yang futuristik.

Saya sangat teruja dan saya sangat tidak sabar untuk melihat komen mereka atau apa yang mereka lihat teknologi ini boleh membawa mereka. Ramai daripada mereka hanya bertanya kepada kami “Apa yang perlu kami lakukan untuk menjadikan game kami menjadi seperti ini.”

Saya rasa kami benar-benar mendapat perhatian mereka dan tanda kelulusan mereka. Jadi, saya sangat gembira berada di sini dan mendapat maklum balas langsung daripada komuniti gamer.

Itu sahaja yang kami boleh kongsikan kepada anda kali ini. Terima kasih banyak-banyak kepada Jane Hsu kerana menjawab soalan-soalan kami. Untuk anda yang ingin melihat maklumat lanjut mengenai SpatialLabs atau produk Acer yang lain, boleh ke laman web rasmi mereka.

Jangan lupa untuk ikuti kami di TikTok!

@gamersantaimy