AniSora 是什么？
AniSora 是由 Bilibili 推出的開源動漫視頻生成模型，旨在通過 AI 技術生成多種風格的動漫視頻。它支持從番劇片段、國創(chuàng)動畫到漫畫改編、VTuber 內容等各種類型的視頻生成，并提供關鍵幀插幀、局部圖像引導等功能。基于強化學習與人類反饋（RLHF），AniSora 能生成風格一致且質量優(yōu)異的動漫視頻，廣泛應用于動漫創(chuàng)作、二次創(chuàng)作、動畫制作輔助、學術研究以及泛ACG生態(tài)等多個領域。
AniSora 的功能特性
- 多樣化視頻生成：AniSora 支持根據(jù)文本描述生成多種風格的動漫視頻，包括番劇片段、國創(chuàng)動畫、漫畫改編、VTuber 內容和鬼畜（MAD）視頻等。通過這種多樣化的生成能力，用戶可以根據(jù)自己的需求輕松創(chuàng)造不同類型的動畫作品。
- 強大的模型支持：AniSora V1.0 基于 CogVideoX-5B 模型，支持局部區(qū)域控制和時間控制，可以精確調整視頻的時間進度和畫面內容。而 AniSora V2.0 采用更強大的 Wan2.1-14B 模型，在生成質量和推理速度上都有顯著提升，能夠應對更復雜的視頻生成任務。
- 時間與空間控制：AniSora 提供精準的時間控制和空間控制功能，允許用戶通過控制首幀、尾幀以及關鍵幀插幀來調節(jié)視頻的時間流動，同時可以通過局部圖像引導功能來調整特定區(qū)域的畫面內容，從而確保生成的動畫符合預期的風格和質量。
- 強化學習優(yōu)化（RLHF）：引入強化學習與人類反饋（RLHF） 技術，AniSora 使得生成的視頻在風格一致性和美學效果上更加優(yōu)越。通過不斷優(yōu)化和調整，模型能夠更好地理解用戶的需求，生成更加符合預期的動漫視頻。
- 高效數(shù)據(jù)處理：AniSora 配備了完整的數(shù)據(jù)流水線，能夠高效處理大量的動漫數(shù)據(jù)，支持對超過 1000 萬的高質量數(shù)據(jù)進行清洗和訓練。這一數(shù)據(jù)處理能力大大提高了模型訓練和生成過程的效率，為大規(guī)模動漫視頻的自動生成提供了有力支持。
AniSora 的應用場景
- 動漫內容創(chuàng)作：AniSora 快速生成番劇、國創(chuàng)動畫、漫畫視頻，降低制作成本，提升效率，支持 VTuber、動畫 PV、鬼畜（MAD）等二次創(chuàng)作需求。
- 動畫制作輔助：為動畫師提供關鍵幀插幀、局部修改功能，簡化中間幀生成，適配國產(chǎn)芯片（如華為 Ascend 910B），推動國產(chǎn)化動畫工具鏈建設。
- 學術與研究：作為開源項目，AniSora 提供研究基準，支持開發(fā)者進行二次創(chuàng)新，優(yōu)化生成算法或擴展風格類型，推動學術研究和技術進步。
- 泛 ACG 生態(tài)應用：AniSora 支持游戲動畫、虛擬偶像直播背景視頻生成，增強二次元內容的多樣性與生產(chǎn)效率，豐富 ACG 生態(tài)應用場景。
AniSora 的案例展示
| 提示詞 | 圖片 | 視頻 |
|---|---|---|
| 畫面中，角色坐在前進的汽車里， 朝后方揮手，長發(fā)在風中左右擺動。 |  |  |
| 老人目光鎖定寶石，右手微調放大鏡， 似在揭示古老秘密。 |  |  |
| 畫面中，一人高速沖刺向前，速度導致動作出現(xiàn)輕微拖影。 |  |  |
AniSora 的項目信息
- 在線體驗demo：https://www.modelscope.cn/studios/bilibili-index/Anisora
- GitHub倉庫：https://github.com/bilibili/Index-anisora
- Hugging Face 模型：https://huggingface.co/IndexTeam/Index-anisora
?版權聲明：如無特殊說明，本站所有內容均為AIHub.cn原創(chuàng)發(fā)布和所有。任何個人或組織，在未征得本站同意時，禁止復制、盜用、采集、發(fā)布本站內容到任何網(wǎng)站、書籍等各類媒體平臺。否則，我站將依法保留追究相關法律責任的權利。
