感謝邀請,這次主要也是嘗試下目前大模型在遊戲裏可以做到什麽地步,其實東西還比較粗糙,只能算個demo。
有幾點補充下:
首先影片裏錄的遊戲demo是剪輯加速過的,平台調模型介面寫劇情很快,但SD+ControlNet批次出圖的速度沒那麽快(取決於配置,A4000大概2秒左右一張,還要重繪尺寸)所以別看它只是個靜態AVG遊戲,配置要求高得離譜,得4070以上。我們還嘗試過生成影片,如AnimateDiff和SVD,但效果都不如靜態圖,視訊記憶體也高的離譜。
實話說,為了影片效果我們其實錄了很多遍,最後只選了其中一段發出來,因為AI生成的遊戲內容有時還不穩定。最後還有個TIPS是用大語言模型來二次最佳化場景描述,把它轉寫成正向prompt再輸入SD效果會更好,供參考~
最後希望可以和知乎的其他大佬們多多交流,也相信未來會有更多更成熟的遊戲出現~