HKBU at the forefront of human-AI symbiotic art creation with innovative performance
香港浸會大學在香港舉辦一場結合音樂、跨媒體藝術與舞蹈的表演,展示人類與 AI 協作進行藝術創作。演出包括由 320 位虛擬表演者獻聲的 AI 虛擬合唱團、按歌詞創作視覺敍事的 AI 媒體藝術家,以及與香港舞蹈團專業舞者合作編排的 AI 虛擬舞者。
香港浸會大學在香港舉辦一場結合音樂、跨媒體藝術與舞蹈的表演,展示人類與 AI 協作進行藝術創作。演出包括由 320 位虛擬表演者獻聲的 AI 虛擬合唱團、按歌詞創作視覺敍事的 AI 媒體藝術家,以及與香港舞蹈團專業舞者合作編排的 AI 虛擬舞者。
Hugging Face 為 🤗 Datasets 新增音訊與圖像資料集文件,並更新 Quickstart,提供使用 PyTorch 或 TensorFlow 載入及處理資料集的端到端示例。
香港浸會大學交響樂團年度音樂會呈獻全球首個同類人機協作演出,結合 AI 虛擬合唱團、虛擬舞者及 AI 媒體藝術家。AI 合唱團根據人類歌唱及説話數據學習演唱,並與機器生成的視覺敍事者、指揮及樂團互動演出。虛擬舞者的舞蹈以香港新發現的箱形水母為靈感,並根據自然景象中的模式編排。
香港浸會大學交響樂團將於7月14日晚上8時在香港大會堂舉行年度音樂會,與 AI 虛擬合唱團及虛擬舞者同台,並呈獻 AI 媒體藝術家的跨媒體視覺敍事。這場人機協作演出包括全球首個演唱中文歌詞合唱作品的 AI 合唱團,以及配合樂團演出《Daphnis et Chloé》芭蕾舞的 AI 虛擬舞者。
Hugging Face 多模態學習團隊為研究項目制定倫理章程,把倫理原則納入機器學習研究生命週期。章程列明須防範歧視、侵犯私隱與權利、生成個人識別資料及有害虛假資訊,並警示醫療、法律、金融和移民等高風險用途。文件截至 2022 年 5 月仍在完善,倡議透明、開放可重現、公平、自我批判及尊重貢獻。
Soundify 是一套為影片配對音效的系統,透過帶標籤的錄音室級音效庫,並將 CLIP 擴展為「zero-shot detector」,產生高質素結果。系統無須耗費大量資源進行音視覺對應學習或音訊生成;研究人員訪問 10 位專業影片剪輯師後,發現尋找合適音效、精確配對影片及逐格調校參數都十分耗時。
OpenAI 發現,CLIP 中有些神經元在同一概念以字面、符號或概念方式呈現時,均會作出反應。這或可解釋 CLIP 為何能準確分類出人意料的概念視覺呈現,也有助理解 CLIP 及類似模型學到的聯想與偏見。
OpenAI 推出神經網絡 CLIP,讓模型透過自然語言監督高效學習視覺概念。只需提供待識別的視覺類別名稱,CLIP 即可套用於任何視覺分類基準,其零樣本能力類似 GPT-2 和 GPT-3。
推薦理由:CLIP 將自然語言監督與視覺分類連接,並以類別名稱作為套用基準的入口,呈現其零樣本使用方式。
Runway 正開發新一代創意工具,運用 AI 重新構想影像與影片的創作方式,讓更多創作者實現以往難以做到的事。平台用戶已訓練超過 50,000 個 AI 模型,並上載約 24 million 項素材;其工具涵蓋文字編輯影片及以影片生成影片。
OpenAI 開發了 Sparse Transformer,這種深度神經網絡在預測文字、圖像或聲音序列中的下一項內容方面創下新紀錄。它改進了注意力機制算法,能從長度達此前可處理上限 30x 的序列中提取模式。