月15日，騰訊和清華大學(xué)、香港科技大學(xué)聯(lián)合推出全新圖生視頻模型Follow-Your-Click，基于輸入模型的圖片，只需點(diǎn)擊對應(yīng)區(qū)域，加上少量提示詞，就可以讓圖片中原本靜態(tài)的區(qū)域動(dòng)起來，一鍵轉(zhuǎn)換成視頻。
當(dāng)前的圖生視頻大模型中，一般的生成方法不僅需要用戶在提示詞中描述運(yùn)動(dòng)區(qū)域，還需要提供運(yùn)動(dòng)指令的詳細(xì)描述，過程較為復(fù)雜。另外，從生成的效果來看，現(xiàn)有圖像生成視頻技術(shù)在移動(dòng)圖像的指定部分上缺乏控制，生成的視頻往往需要移動(dòng)整個(gè)場景，而不是圖像上的某一個(gè)區(qū)域，精準(zhǔn)度和靈活性上有所欠缺。
為了解決這些問題，騰訊混元大模型團(tuán)隊(duì)、清華和港科大的聯(lián)合項(xiàng)目組提出了更實(shí)用和可控的圖像到視頻生成模型Follow-Your-Click，帶來更加便捷的交互，也讓圖片“一鍵點(diǎn)，萬物動(dòng)”成為現(xiàn)實(shí)。
圖像到視頻生成的技術(shù)在電影內(nèi)容制作、增強(qiáng)現(xiàn)實(shí)、游戲制作以及廣告等多個(gè)行業(yè)的AIGC應(yīng)用上有著廣泛前景，是2024年最熱門的AI技術(shù)之一。
據(jù)了解，本聯(lián)合項(xiàng)目組中的騰訊混元大模型團(tuán)隊(duì)，正在持續(xù)研究和探索多模態(tài)技術(shù)，該團(tuán)隊(duì)在模型架構(gòu)設(shè)計(jì)、訓(xùn)練算法優(yōu)化、大數(shù)據(jù)處理、硬件資源調(diào)配等方面擁有深厚的專業(yè)積累和豐富經(jīng)驗(yàn)。此前，騰訊混元大模型作為技術(shù)合作伙伴，支持媒體打造原創(chuàng)視頻《江山如此多嬌》，生成中國大美河山的精美視頻片段，展示出了較強(qiáng)的內(nèi)容理解、邏輯推理和畫面生成能力。
月15日，騰訊和清華大學(xué)、香港科技大學(xué)聯(lián)合推出全新圖生視頻模型Follow-Your-Click，基于輸入模型的圖片，只需點(diǎn)擊對應(yīng)區(qū)域，加上少量提示詞，就可以讓圖片中原本靜態(tài)的區(qū)域動(dòng)起來，一鍵轉(zhuǎn)換成視頻。
當(dāng)前的圖生視頻大模型中，一般的生成方法不僅需要用戶在提示詞中描述運(yùn)動(dòng)區(qū)域，還需要提供運(yùn)動(dòng)指令的詳細(xì)描述，過程較為復(fù)雜。另外，從生成的效果來看，現(xiàn)有圖像生成視頻技術(shù)在移動(dòng)圖像的指定部分上缺乏控制，生成的視頻往往需要移動(dòng)整個(gè)場景，而不是圖像上的某一個(gè)區(qū)域，精準(zhǔn)度和靈活性上有所欠缺。
為了解決這些問題，騰訊混元大模型團(tuán)隊(duì)、清華和港科大的聯(lián)合項(xiàng)目組提出了更實(shí)用和可控的圖像到視頻生成模型Follow-Your-Click，帶來更加便捷的交互，也讓圖片“一鍵點(diǎn)，萬物動(dòng)”成為現(xiàn)實(shí)。
圖像到視頻生成的技術(shù)在電影內(nèi)容制作、增強(qiáng)現(xiàn)實(shí)、游戲制作以及廣告等多個(gè)行業(yè)的AIGC應(yīng)用上有著廣泛前景，是2024年最熱門的AI技術(shù)之一。
據(jù)了解，本聯(lián)合項(xiàng)目組中的騰訊混元大模型團(tuán)隊(duì)，正在持續(xù)研究和探索多模態(tài)技術(shù)，該團(tuán)隊(duì)在模型架構(gòu)設(shè)計(jì)、訓(xùn)練算法優(yōu)化、大數(shù)據(jù)處理、硬件資源調(diào)配等方面擁有深厚的專業(yè)積累和豐富經(jīng)驗(yàn)。此前，騰訊混元大模型作為技術(shù)合作伙伴，支持媒體打造原創(chuàng)視頻《江山如此多嬌》，生成中國大美河山的精美視頻片段，展示出了較強(qiáng)的內(nèi)容理解、邏輯推理和畫面生成能力。
本文鏈接：騰訊聯(lián)合清華、港科大推出圖生視頻大模型 可一鍵轉(zhuǎn)換視頻http://www.sq15.cn/show-2-3961-0.html
聲明：本網(wǎng)站為非營利性網(wǎng)站，本網(wǎng)頁內(nèi)容由互聯(lián)網(wǎng)博主自發(fā)貢獻(xiàn)，不代表本站觀點(diǎn)，本站不承擔(dān)任何法律責(zé)任。天上不會(huì)到餡餅，請大家謹(jǐn)防詐騙！若有侵權(quán)等問題請及時(shí)與本網(wǎng)聯(lián)系，我們將在第一時(shí)間刪除處理。
上一篇： 科技賦能，讓千年壁畫動(dòng)起來