豆包PixelDance是字節(jié)跳動(dòng)最新推出的AI視頻生成模型，采用DiT結(jié)構(gòu)，支持文生視頻和圖生視頻。它能理解復(fù)雜指令，生成長(zhǎng)達(dá)10秒的連貫視頻片段，涵蓋多主體交互和時(shí)序性動(dòng)作。豆包PixelDance模型具備卓越的語(yǔ)義理解力和豐富的運(yùn)鏡效果，能一鍵生成具有故事性的多鏡頭短片。豆包PixelDance支持多種風(fēng)格和視頻比例，適用于影視、廣告、短視頻等多種場(chǎng)景，極大簡(jiǎn)化視頻創(chuàng)作流程。
豆包PixelDance的主要功能復(fù)雜指令理解：豆包PixelDance能理解并執(zhí)行復(fù)雜的文本提示，生成與描述相匹配的視頻內(nèi)容。時(shí)序性動(dòng)作生成：支持生成具有連貫動(dòng)作的視頻，包括多主體間的交互和復(fù)雜動(dòng)作序列。多鏡頭語(yǔ)言能力：具備豐富的運(yùn)鏡技巧，如環(huán)繞、縮放、平移等，提供接近專業(yè)攝像的視覺效果。一鍵短片生成：能夠根據(jù)單一文本提示生成具有起承轉(zhuǎn)合的完整故事短片。多風(fēng)格支持：支持多種藝術(shù)風(fēng)格，包括3D動(dòng)畫、2D動(dòng)畫、國(guó)畫、黑白、水彩、水粉等。多比例適配：兼容多種視頻比例，如1:1、3:4、4:3、16:9、9:16、21:9，適應(yīng)不同播放設(shè)備。高效DiT融合計(jì)算單元：優(yōu)化的計(jì)算單元讓視頻動(dòng)作更自然，表情更豐富，細(xì)節(jié)更精細(xì)。擴(kuò)散模型訓(xùn)練方法：創(chuàng)新的訓(xùn)練方法提升了模型生成故事性視頻的能力。一致性保持：在多鏡頭切換中保持主體、風(fēng)格和氛圍的一致性。泛化能力：深度優(yōu)化的Transformer結(jié)構(gòu)提升了模型的泛化能力，使其能夠適應(yīng)各種不同的視頻生成任務(wù)。如何使用豆包PixelDance訪問火山引擎官網(wǎng)：使用電腦訪問豆包大模型官網(wǎng)，完成注冊(cè)賬號(hào)并登錄。找到豆包視頻生成模型：點(diǎn)擊立即體驗(yàn)，找到豆包視頻生成模型 PixelDance 和 Seaweed 。體驗(yàn)豆包視頻生成模型：如果是個(gè)人：直接訪問“Doubao-視頻生成-PixelDance”，每周10次免費(fèi)體驗(yàn)（2024年10月31日截止）。如果是企業(yè)：需要提交申請(qǐng)表單，說(shuō)明使用場(chǎng)景申請(qǐng)API對(duì)接（暫未對(duì)外開放）。
豆包PixelDance的應(yīng)用場(chǎng)景影視制作：使用PixelDance快速生成電影預(yù)告片和動(dòng)態(tài)故事板，提升前期制作效率。廣告?zhèn)髅?/strong>：創(chuàng)造吸引人的廣告內(nèi)容，通過精準(zhǔn)的視頻營(yíng)銷提高品牌影響力。短視頻內(nèi)容創(chuàng)作：生成適合社交媒體傳播的短視頻，增加用戶互動(dòng)和參與度。直播行業(yè)：提供動(dòng)態(tài)背景和視覺效果，豐富直播觀看體驗(yàn)。電商：制作高質(zhì)量的產(chǎn)品介紹視頻，提高在線購(gòu)物的轉(zhuǎn)化率。動(dòng)畫制作：輔助動(dòng)畫師快速迭代創(chuàng)意，加速動(dòng)畫內(nèi)容的制作流程。 
