近日,由網易遊戲使用者體驗中心設計的《AI Eyes: Enhancing Visual Accessibility Using AI
》(遊戲自適應視障模式:AI助力視覺無障礙設計,以下簡稱“AI Eyes”)獲得“設計界的奧斯卡”2024年iF設計獎。據南方+記者瞭解到,該方案運用網易互娛AI Lab等提供的AI影象識別與語音技術,跟蹤遊戲畫面的變化,主動播報新生成的資訊,使視障人士能夠從影象、模型和場景等多個維度感知、理解和體驗遊戲。
據網易遊戲方面透露,這是全球首個運用AI技術為視障玩家提供無障礙遊戲的互動設計,讓視障人士從“聽遊戲”到真正沉浸式玩遊戲。接下來,該方案將在網易遊戲多款產品中探索應用落地,讓視障人群也能跟健全人一樣享受社交娛樂的快樂。
資料顯示,目前全世界的盲人及中重度視障人群超過3億人,無障礙的互動設計逐漸成為國際對網路應用、電子遊戲的基礎要求。但相關資料報告顯示,受視力的侷限再加上很多遊戲應用並沒有進行無障礙最佳化,絕大多數的遊戲視障者很難參與到遊戲中。他們有的只能用“文字朗讀”功能“聽遊戲”,透過聲音在想象的世界裡馳騁。即使市面上有專門針對盲人玩家定製的小型遊戲,但玩法種類有侷限性、體量小,視障人士無法跟健全人一樣體驗更高質量、最熱門的遊戲。
“我們不能假想他們不喜歡玩,而將他們拒之門外。”網易遊戲使用者體驗中心相關團隊在無障礙研究中發現,殘障人士跟健全人士在娛樂上的需求是沒有區別的,遊戲是他們對外社交的橋樑,藉助遊戲,能幫助視障人士更好地融入社會。甚至,視障群體在一些遊戲品類中還有更大的興趣和優勢。比如因為聽覺靈敏,聽聲辯位是他們的樂趣,所以在射擊、槍戰類遊戲非常擅長,甚至比健全玩家還厲害。
隨著AI生成技術湧現,網易遊戲使用者體驗中心團隊透過使用AI影象識別、AI文字釋義、AI語音播報等技術,為遊戲提供通用、低成本、易操作的是視障人士互動方案。
據介紹,網易遊戲使用者體驗中心團隊設計研發的AI Eyes ,基於影象識別、AI文字語義生成和AI語音生成技術,一旦識別到視障玩家在介面上的點觸、划動互動,AI將會執行畫面解釋,講述畫面上區域性的內容。遊戲中精彩的場景畫面、角色、服飾、物品均可以實時呈現給視障玩家,提升了對遊戲畫面的感知範圍,讓視障玩家能夠更全面的瞭解遊戲畫面內容。
不僅如此,AI Eyes能實時感應遊戲內環境、事件、角色動作等情況,AI感應後對相關實時變化內容進行自主播報,視障玩家能夠第一時間瞭解遊戲內容變化資訊,從而提高遊玩的沉浸感,包括天氣、彈窗UI、角色待機動作等……
研發團隊主設計師羅丹舉例說道:“假設你看不到這個螢幕上的任何東西,但我並不想告訴你,這裡有一個種植按鈕。而是告訴你——這裡是一個油畫風格的場景,是你的家園,這裡有一個簡單的庇護所,一方田地。你的寵物在圍著你轉圈。田地裡是枯萎的植物,介面上有一個澆水按鈕和種植按鈕。又比如在《蛋仔派對》中,其他玩家可以舉著視障玩家探索和感受樂園的溫暖。”
另外還值得注意的是,AI Eyes符合視障使用者互動習慣,在使用者端操作與當前主流的“talkback”“旁白模式”等盲人互動模式無太大區別,因此視障群體能以通用、習慣的互動方式使用。
據介紹,該AI輔助無障礙遊戲互動方案具有跨國際、跨遊戲型別的普適性,既適用於如經營建造、RPG等以影象、場景氛圍表現為主的遊戲,又適用於2D遊戲等以介面控制元件為主要形態的遊戲,還能適用於以影象分享為主的流媒體網站。網易遊戲方面透露,接下來該方案將在網易遊戲多款產品中探索應用落地。
南方+記者 葉丹
【作者】 葉丹
【來源】 南方報業傳媒集團南方+客戶端