精選聯盟

一款有AI的相框:在中東意外成爆款,能導覽科普、親情陪伴

作者:南方都市報

粵來粵AI系列報道

今年政府工作報告提出,要大力推進現代化産業體系建設,加快發展新質生産力。其中提到要深化大資料、人工智能等研發應用,開展“人工智能+”行動,打造具有國際競争力的數字産業叢集。

“通用人工智能産業發展22條”釋出不久,廣東做出“加快培育人工智能等新興産業,大力發展新質生産力”的新年部署。南都大資料研究院今年開展“粵來粵AI”大型研究,将以多個篇章描摹發展現狀,考量應用實效,研判治理風險,助力廣東加快建設通用人工智能産業創新引領地,協同探索人工智能監管模式創新。本次推出“有AI應用篇”系列報道,走訪廣東人工智能相關企業,揭秘那些與我們工作生活息息相關的AI應用産品的研發故事。

第二期,走進深圳市前海手繪科技文化有限公司,看AI如何為數字相框賦予靈魂,在中東市場成為爆款。

一款有AI的相框:在中東意外成爆款,能導覽科普、親情陪伴

想不到,一款會說話的AI數字相框,竟在中東成了爆款。隻需上傳一張人像照片和一段聲音素材,就能生成相框裡的數字人,他/她不僅能克隆你的聲線,還能講50多種語言,和使用者無障礙交流。

這款相框來自深圳的一家AIGC品牌——來畫,可應用在展館導覽、親情陪伴、逝者悼念等場景。今年以來,該品牌已亮相于廣東省高品質發展大會産業科技融合發展成果展、2024沙特阿拉伯通信科技與資訊技術展覽會等國内外多個展會。

有AI産品:AI相框

産品特性:

用一張照片就能生成可以對話的數字人視訊。

應用場景:

可運用于政務/金融/醫療等場景的服務助手,博物館、文化館、展覽館等講解助手,陪伴空巢老人、悼念逝者、傳遞哀思等。

使用效果:

增強講解趣味,為使用者提供相關資訊及個性化服務,可全天候、全方位地與閱聽人進行實時互動。

打響中東“第一炮”

“AI相框的靈感來自于迪拜的金像框,配合着AI數字人的生成技術,你可以跟世界上任何一個人對話,這個創意将哈利·波特電影中會說話的相框複現了”,來畫創始人魏博介紹,中東國家有将尊貴人士照片挂在牆上的文化習俗,這一市場潛力被來到沙特拓展業務的他敏銳捕捉到,AI相框由此誕生。

一款有AI的相框:在中東意外成爆款,能導覽科普、親情陪伴

2月18日,來畫AI相框亮相廣東省産業科技融合發展成果展。

定位于“好看的皮囊,有趣的靈魂”,但AI相框起初隻能實作簡單的特效,“皮囊并不智能”。在魏博看來,ChatGPT 的誕生真正為AI相框賦予了靈魂,通過綁定APP并上傳相應素材,就能夠實作和相框人物對話、生成視訊等功能,目前可支援50多種語言。在國外,一些足球俱樂部将内馬爾、C羅等球星的AI數字人相框放進球迷商店售賣,受到了“瘋搶”。

來畫聯合創始人全倖慧告訴南都記者,AI相框是公司在中東打響的“第一炮”,她也驚訝于整個中東地區的阿拉伯人對于“相框”的文化寄托和情感寄托。據了解,這款AI數字相框在海外已經售賣了上萬台,不僅挂入了阿布紮比皇宮,還作為國禮被皇室饋贈給遠道而來的貴客。

從相框到AI助手

“它更像是一個AI助手的角色”,接受采訪時,全倖慧更願意将AI相框定義為基于技術驅動的消費電子産品。将Al助手SDK運用內建到不同硬體中,就能實作對多行業智能互動場景的連接配接。

不僅可以做成“相框”,AI助手還能化身咖啡廳點單員、博物館講解員、企業前台等,在政務、金融、醫療等場景進行答疑解惑,在博物館、文化館、展覽館等場景開展科普教育,成為陪伴空巢老人的心靈伴侶、悼念逝去親人的媒介等等。南都記者注意到,來畫的AI助手已被應用于COP28聯合國氣候變化大會IP助手、阿布紮比大清真寺AI導覽助手、阿布紮比警察局官網AI助手、阿布紮比咖啡廳點單助手等案例中。

全倖慧談到,在文化領域,AI助手也能被應用于與孔子、魯迅、蒙娜麗莎、愛因斯坦等古今中外名人跨時空對話的場景,像《長安三萬裡》李白的動畫形象登上了今年的春晚舞台,來畫也借機推出了李白形象的AI助手,使用者可與其吟詩對談,進行有趣互動。

一款有AI的相框:在中東意外成爆款,能導覽科普、親情陪伴

來畫新産品:李白形象的AI助手。

AI創作如何煉成

今年1月,來畫釋出了2023年度報告,AI動畫、AI數字人視訊、AI助手、AI相框成為産品核心關鍵詞,不難看出,“AI創作”已成為該品牌的核心。

起初來畫的定位并非AIGC,而是希望傳遞“讓視訊創作更加簡單”的理念。2015年,來畫所屬“深圳市前海手繪科技文化有限公司”創立,“我們早期并沒有推崇AIGC,之是以一步步發展成為AI公司,源于我們持續将小的AI功能植入到産品中去賦能使用者”,全倖慧透露,公司創立的早期想法是去打造動畫技術,研究動畫的自動手繪路徑,基于動畫智能生成平台不斷疊代使用者體驗,将自定義國際電話預付卡通形象等功能植入到産品中,使用者可以建立角色并驅動其講話,這也是早期的數字人技術。

随着數字人的出圈,來畫科技開始大規模雇傭畫師,手繪出一個個數字人IP模版。據全倖慧介紹,來畫的驅動技術可以做到通過上傳一張照片,連接配接到手機APP後遠端操控數字人形象,進而生成數字人口播視訊、數字人動畫、數字人直播等等。“如今的來畫科技已蛻變為一個AI創作平台。”全倖慧說。

3000萬+資料驅動模型

2023年,人工智能迎來“奇點”:大語言模型ChatGPT橫空出世,“生成式AI”形成奔湧大潮,幾乎每天都有新的生成式AI産品誕生。乘着東風,來畫依托自身1800萬動畫資料資産,推出動畫領域的垂直模型SkinSoul,這成為平台智能内容創作與互動體驗能力的驅動器,由此支撐着視訊、動畫創作。

譬如,使用者使用平台推出的商業視訊制作工具URL TO VIDEO,将亞馬遜、淘寶等網頁連結導入後,就能快速批量化生成多種不同風格的視訊,且可以在Al動畫線上創作平台進行簡單拖拽等二次編輯,生成動畫視訊。目前,該功能已被線上教育、媒體宣傳、廣告營銷、金融、醫療等行業使用,比如幫助教師将課程内容一鍵轉換成相關的視訊,快速制作出生動的課件,再配以數字人去做講解,提升授課的趣味性和效率;再如,賦能電商營運,幫助中小企業提升營銷能力和體驗;還有幫助醫生制作科普視訊等等。

8年多時間裡,來畫科技已積累起3000萬+動畫資料資産,這成為訓練模型的原料。全倖慧指出,在大模型研發方面,來畫選擇與基于開源大模型進行應用層的訓練,并針對不同大模型生成的效果進行測試。

目前,來畫與大模型創業公司月之暗面展開了合作,基于大模型Kimi去進行“可控視訊”的生成訓練,進而達到内容與畫面的強比對。據悉,Kimi見長于長文本處理能力,可以從複雜和冗長的文檔中迅速提取關鍵資訊。Kimi智能助手支援輸入20萬漢字,按OpenAI的計算标準約為40萬token(模型可以了解和生成的最小意義機關),是彼時全球大模型産品中所能支援的最長上下文輸入長度。

“這些所生産出來的,不管是裡面運用的背景素材也好,還是被運用的這些數字人也好,它們皆是正版可商用的”,全倖慧強調。

出海拓展全球版圖

對于來畫而言,帶着“AI相框”走出國門成為品牌發展的重大轉折。以沙特、阿聯酋、卡達、科威特等為代表的諸多中東富裕國家,均已部署各類“2030遠景”,從能源型國家向多元化、數字化國家轉型,在一次海外市場調研中,來畫敏銳捕捉到了商機。

2022年以來,該公司開始關注中東市場,并将阿聯酋作為落地的首站,成立阿布紮比中東總部,出海拓展全球商業版圖。其推出的海外動畫産品Doratoon、海外數字人産品InnAIO均受到廣泛關注,也帶來了覆寫全球100多個國家和地區的數千萬使用者。去年以來,來畫的産品在土耳其國家峰會、GITEX GLOBAL 2023全球科技盛會、沙特LEAP科技展等海外知名活動上相繼亮相,并與迪拜中阿衛視等衆多機構企業達成AI數字人合作。

“參加這些展會時,我們的AI相框常被‘瘋搶一空’,因為文化屬性不同,會出現不同的需求,形成出其不意的‘爆款産品’”。談及下一步産品規劃,全倖慧表示,在拓展海外市場時會較早地認知到海外的AI行業趨勢,也會及時将這些資訊帶到國内,賦能下一步的産品研發方向。

一款有AI的相框:在中東意外成爆款,能導覽科普、親情陪伴

出品:南都大資料研究院

策劃:鄒瑩

統籌:張純

采寫:南都記者 張雨亭 李偉鋒

設計:張博