字節(jié)、快手、Vidu“打野”升級,AI視頻小步快跑
文|白 鴿
編|王一粟
繼9月份版本更新之后,光錐智能從生數(shù)科技聯(lián)合創(chuàng)始人兼CEO唐家渝朋友圈獲悉,Vidu大模型將于本周再次進行版本升級,Vidu-1.5版本即將上線。
此版本更新方向仍是重點延伸大模型的泛化能力和主體一致性問題。上一版本重點是單一主體的一致性,而最新版本則能夠理解和整合人物、物體、環(huán)境等多個概念,遵循用戶指令30秒內(nèi)生成多個主體融合的相關視頻結果,率先實現(xiàn)視頻創(chuàng)作中的多主體一致性生成。
除Vidu外,自今年9月份以來,據(jù)不完全統(tǒng)計,包括字節(jié)旗下即夢AI、快手可靈AI、Runway、智譜清影、愛詩科技PixVerse、Pika等主流的AI視頻生成平臺,都已經(jīng)進行了版本更新。
當前,在爆火的AI視頻生成賽道中,大模型創(chuàng)企、互聯(lián)網(wǎng)大廠等紛紛入局,而在經(jīng)過前期各家密集進行產(chǎn)品發(fā)布階段后,如今已進入產(chǎn)品迭代升級比拼階段。
通過各家版本更新的內(nèi)容,不難發(fā)現(xiàn),AI視頻生成大模型能力迭代的大方向,仍是生成視頻的時長、畫面的穩(wěn)定性、連續(xù)性和主體前后的一致性上。
但與此同時,各個玩家又在實際功能應用中,開始出現(xiàn)“分野”,各有側重,部分中小玩家也開始找到自己的細分市場。
比如Runway最新版本中更新了可將真人面部表情精確復刻給AI角色的Act-One,以能夠?qū)崿F(xiàn)3D化的AI攝像頭控件。PixVerse則上線了各種萬圣節(jié)特效、毒液特效等。
對此輪各AI視頻生成平臺的更新,星賢文化創(chuàng)始人、AI原創(chuàng)玄幻IP《山海奇鏡》制作人陳坤認為:“最大的更新應該是Act-One這種表情遷移,提供了人物表演的基礎可能性。”而對于人物主體的一致性和穩(wěn)定性,“有進步,但并沒有代際型進步。”
在AI視頻創(chuàng)作者尾鰭Vicky看來,相比上半年初代產(chǎn)品,最新更新的AI視頻平臺,除了在底層模型能力上的迭代之外,在功能上也進行了更新,比如首尾針、畫質(zhì)和幀率的補足、配音等功能,“這些功能的完善,實際上是比上半年更全面。”
如果說2024上半年,是AI視頻生成賽道的軍備競賽,那么下半年則是進入小步快跑的版本更新周期。
而在此階段,字節(jié)和快手的交鋒仍在激烈進行中,中小廠商開始找到自己獨特賽道,而一些企業(yè)專注走海外市場,也實現(xiàn)了“國內(nèi)開花,墻外香”的效果。
無疑,這一階段的廝殺,看似溫和,但卻實質(zhì)性的影響平臺自身的定位和未來發(fā)展的方向,以及后續(xù)用戶群體和數(shù)量規(guī)模的可持續(xù)增長。
字節(jié)狂追,快手搶跑
“即夢有些掉隊。”這是AI視頻生成平臺用戶給出的客觀評價。
作為去年第一批的AI視頻生成平臺,以及字節(jié)旗下的產(chǎn)品,即夢AI的視頻生成效果一直備受使用者詬病,處于被Runway、Pika等同一批玩家吊打的狀態(tài)。
今年6月,字節(jié)在短視頻領域的直接競爭對手——快手,正式在官網(wǎng)上線了“可靈”視頻生成大模型,并火速出圈。同時,越來越多AI視頻生成平臺如雨后春筍般推出,AI視頻生成賽道徹底爆火。
在強大競爭壓力之下,作為國內(nèi)AI產(chǎn)品第一梯隊,補上視頻生成這一塊短板,已成為字節(jié)跳動面臨的當務之急,而其奮起直追的速度也超乎想象。
9月24日,2024火山引擎AI創(chuàng)新巡展深圳舉辦,原抖音藝術負責人陳欣然以即夢AI及剪映市場和運營負責人的身份亮相,并宣布即夢AI已經(jīng)接入了豆包最新的視頻生成模型。
同期,字節(jié)跳動發(fā)布豆包模型家族的兩款視頻生成模型Seaweed和Pixeldance,并通過即夢 AI、火山引擎分別面向創(chuàng)作者和企業(yè)客戶小范圍邀測。
11月8日,字節(jié)跳動旗下的AI內(nèi)容平臺即夢AI宣布,由字節(jié)跳動自研的視頻生成模型Seaweed面向平臺用戶正式開放。
據(jù)字節(jié)跳動方面介紹,本次開放使用的豆包視頻生成模型Seaweed是該款模型的標準版,僅需60秒即能生成時長5秒的高質(zhì)量AI視頻,領先國內(nèi)業(yè)界3至5分鐘的所需生成時間。
即夢AI還透露,近期Seaweed和Pixeldance兩款視頻生成模型的Pro版也將開放使用。Pro 版模型能實現(xiàn)自然連貫的多拍動作與多主體復雜交互,攻克了多鏡頭切換的一致性難題,在鏡頭切換時可同時保持主體、風格、氛圍的一致性,適配電影、電視、電腦、手機等各種設備的比例。
字節(jié)抖音和快手,作為國內(nèi)短視頻平臺的領軍者,雙方的競爭已經(jīng)從短視頻、電商轉(zhuǎn)移至AI領域,客觀來說,抖音在各方面都壓快手一頭。但唯獨在AI領域,快手給出了漂亮的反擊。
自6月一鳴驚人之后,快手可靈其實已經(jīng)有數(shù)次的小版本的迭代。
但在底層大模型能力上,今年9月20日,快手發(fā)布可靈1.5版本,接入新一代模型,實現(xiàn)了畫質(zhì)和動態(tài)質(zhì)量都大幅提升,原有的模型也加入了新功能——運動筆刷,生成效果可控性增強。
“可靈1.5很強,可以說是所有模型里面最真實的,吊打Runway,基本上已經(jīng)克服了之前人物變形的問題。”AIGC創(chuàng)業(yè)者洋芋醬AIgen(藝名)如此對光錐智能說道。
在實際生成的視頻效果中,對比可靈和Runway,可以看到,同一個提示詞,兩者在實際人物主體的穩(wěn)定性上效果都很強,但可靈生成出的視頻效果能夠自動解鎖面部表情。
“Runway其實也能自主生成面部表情,但效果非常詭異。”洋芋醬AIgen如此說道,不過,可靈AI和Runway這種能力是隨機的,并不固定。
這其實也能夠看到,可靈AI和Runway在實際生成效果上更勝一籌,而在對提示詞的理解上,可靈AI也確實走在前列,但未來也仍需要不斷迭代升級,才能將這一能力固化下來。
(Runway,提示詞一個穿著新中式服裝的女模特,正在展示自己的造型,背景是彩色的煙霧飄散,洋芋醬AIgen提供)
(可靈AI,提示詞一個穿著新中式服裝的女模特,正在展示自己的造型,背景是彩色的煙霧飄散,洋芋醬AIgen提供)
不過,此次即夢上線最新視頻生成大模型之后,尾鰭Vicky則認為其在模型能力和UI設計上,與可靈差距不大。同時,在內(nèi)測即夢平臺Pro版模型的時候,其能夠輕松控制畫面的運動幅度和動作。
作為國內(nèi)頭部的短視頻平臺,快手和字節(jié),在AI視頻生成賽道的布局,終局目的是要吸引和留住用戶的注意力,而這就需要不斷生產(chǎn)出新穎、有質(zhì)量、有創(chuàng)意的內(nèi)容。
基于此,AI短劇,也成為字節(jié)即夢和快手可靈競爭的焦點之一。
今年7月份,由“可靈AI”創(chuàng)作出的AI短劇《山海奇鏡之劈波斬浪》引發(fā)廣泛關注,該短劇成為國內(nèi)首部AIGC原創(chuàng)奇幻微短劇。
9月,快手星芒短劇聯(lián)合“可靈AI”推出了“星有靈犀-AI短劇創(chuàng)作大賽”。據(jù)悉,大賽以流量獎勵、榮譽獎勵、內(nèi)容簽約等多項舉措激勵更多人加入AI短劇創(chuàng)作。
字節(jié)同樣不甘示弱,即夢AI在聯(lián)手博納影業(yè)發(fā)布首部AIGC生成科幻短劇《三星堆:未來啟示錄》的同時,也在聯(lián)手抖音平臺多位“超級創(chuàng)作者”實現(xiàn)共創(chuàng),邀請平臺上有高質(zhì)量粉絲及高影響力的達人,共同加入“超級創(chuàng)作者聯(lián)盟”計劃,希望借此打造國內(nèi)最大的虛擬創(chuàng)作社群。
但現(xiàn)階段不管是抖音,還是快手,其視頻平臺的影視創(chuàng)作者創(chuàng)作的內(nèi)容,“很難破圈兒。”尾鰭Vicky如此說道,“因為現(xiàn)在整個市場尚未形成,C端用戶并不知道用它來干嘛。頭部會有一些商業(yè)化需求,但需求并不多,整體并不穩(wěn)定。”
畢竟,現(xiàn)階段全球的專業(yè)創(chuàng)作者還比較少,且AI視頻生成大模型技術尚處于早期階段。
因此,作為頭部視頻平臺,字節(jié)和快手之間的競爭也日趨激烈,而除了底層AI技術、產(chǎn)品之爭外,更重要的則在于誰能夠率先探索出技術賦能內(nèi)容之路。畢竟,平臺如果能夠聚集更多具有創(chuàng)新意識的內(nèi)容創(chuàng)作者,就能夠打造出一個更受用戶關注和喜愛的社區(qū)生態(tài)。
當然,除了字節(jié)和快手之外,在AI視頻生成賽道中的其他玩家,也開始出現(xiàn)“分野”,部分中小廠商,也開始探索并走出了一條屬于自己的差異化競爭之路。
細分市場崛起,找準自身定位是王道
在抖音、快手等短視頻平臺上,一些創(chuàng)作者創(chuàng)作的內(nèi)容可能破圈兒難度比較大,但一些包含鬼畜特效的視頻,卻異常的火爆,比如由AI生成的何炅和黃磊突然打架的視頻。
對于AI視頻生成賽道的玩家來說,如果字節(jié)和快手,是全方位的技術和內(nèi)容生態(tài)體系的競爭,而其他中小玩家更多的則是聚焦在細分賽道,找準自身平臺和產(chǎn)品定位,則成為生存發(fā)展的基礎。
10月底,Runway的CEO在公開信中明確表示, Runway并不是一家AI公司,而是一家媒體和娛樂公司,“我認為 AI 公司的時代已經(jīng)結束了。”
基于此,在各大公司爭相卷AI視頻生成長度、逼真度、流暢度的時候,Runway顯然已經(jīng)在AI視頻賽道中走出了自己的特色——做專門服務于藝術、媒體和娛樂的AI。
從Runway的實際視頻生成效果來看,其在人物穩(wěn)定性、一致性上的效果可以說走在前列。而除了基礎技術能力外,在最新的版本更新中,Runway上線的2個新功能雖小,但都將為動畫師、游戲開發(fā)者和電影制作人提供非常大的便利、節(jié)約巨大的成本。
Runway可以說是最受影視從業(yè)者歡迎的產(chǎn)品之一,除技術實力之外,更重要的還在于性價比。
“ Runway實在是太香了,我們用可靈都是省著用,但是Runway是無限次數(shù)的,每天抽個幾百次都無所謂。”洋芋醬AIgen表示,“AI視頻的隨機性還是很強的,如果按次收費,普通創(chuàng)作者可能很難承受起這個成本。”
反觀可靈,如果用1000元購買積分,能夠購買15000可靈值,每次用35可靈值,1000元只能生成428次。對于真正的創(chuàng)業(yè)者來說,基本不夠用,“按照我在Runway每天要生成兩百多次視頻的頻率來看,可靈1000元購買的積分基本2天就燒完了。”洋芋醬AIgen如此說道。
在光錐智能上一篇《爆“卷”的AI視頻,大廠向左,創(chuàng)企向右》文章中也提到過,對于現(xiàn)階段各平臺采用的會員制收費方式,對于不能夠商業(yè)化閉環(huán)的創(chuàng)業(yè)者而言,后續(xù)的付費率和付費意愿都不會很高。而現(xiàn)如今看來,對于即使能夠?qū)崿F(xiàn)商業(yè)化閉環(huán)的創(chuàng)業(yè)者而言,性價比也是影響其使用產(chǎn)品的關鍵因素。
而除了Runway之外,Pika和Pixverse也找到了自己的賽道。從他們最新更新的版本中可以看到,這兩家重點是訓練了一些用戶能夠直接使用的特效效果,“雖然比喻可能會不太恰當,但是有點接近之前抖音做的那種貼紙。”洋芋醬AIgen說道。
比如在10月底萬圣節(jié)期間,PixVerse V3版本新增了不少萬圣節(jié)主題的特效,包括僵尸模式、巫師帽和怪物入侵等主題效果,還有類似于Pika很火的AI捏捏特效,視頻延長功能,用戶可以為已有視頻額外增加5-8秒的內(nèi)容,并能精確控制新增片段的內(nèi)容走向。
而隨著最近《毒液:最后一舞》電影的上映,PixVerse基于最新視頻模型PixVerse V3推出了新特效“我們是毒液”的視頻效果,能夠一鍵將圖片生成酷炫毒液動畫。
當前,在社交平臺上,這種鬼畜特效非常受用戶歡迎。此前Pika在1.5版本中,就推出了AI捏捏的特效,一經(jīng)推出,就備受用戶喜愛,其也靠著這一波特效,實現(xiàn)了彎道超車。而和Pika差不多時間開始增長的海螺AI,其實也是靠人物表演和meme表情包直接拉爆了海外輿論,彎道超車。
Pika的AI捏捏特效
事實上,盡管海螺AI推出時間較晚,但行業(yè)從業(yè)者對海螺AI的評價并不低。“海螺AI在人物動作上的表現(xiàn)很厲害,最近何炅和黃磊打架的AI生成視頻,就是通過海螺AI生成。”洋芋醬AIgen說道。
不過,海螺AI更重要的是實現(xiàn)了“國內(nèi)開花,墻外香”的效果。作為國內(nèi)AI公司MiniMax在海外推出的AI視頻生成平臺,其一經(jīng)推出,搜索熱度持續(xù)攀升。
據(jù)“AI產(chǎn)品榜”統(tǒng)計,海螺AI網(wǎng)頁版9月訪問量大漲860%,登頂9月全球及國內(nèi)增速榜首。海外用戶紛紛在社交平臺分享使用體驗,普遍認為海螺AI是目前市面上最出色的AI視頻生成工具之一。
而憑借產(chǎn)品在海外市場的爆火,MiniMax在商業(yè)化能力上,已經(jīng)走在大模型六小虎的前列。
相比較來說,像Vidu和智譜清影這一類的平臺,在主體一致性和人物穩(wěn)定性中,視頻生成時長等方向上正在不斷進化,但尚未形成專屬于自己風格的賽道和獨特的競爭優(yōu)勢。
盡管AI視頻生成技術正不斷進化,并衍生出具有特色的細分賽道。但信達證券研報也顯示,AI視頻生成技術在人物一致性、所需時長、畫面質(zhì)量等方面仍需進一步提升,以滿足商業(yè)化水準。
同時,目前主流AI視頻工具還處在視頻生成競爭的階段,且大多數(shù)為單一功能產(chǎn)品,仍需要多種不同的視頻創(chuàng)作工具串聯(lián)使用才能達到直接輸出可商業(yè)化視頻的效果。
未來,AI視頻生成大模型平臺,仍需要不斷迭代進化。
原文標題 : 字節(jié)、快手、Vidu“打野”升級,AI視頻小步快跑
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
11月28日立即報名>>> 2024工程師系列—工業(yè)電子技術在線會議
-
12月19日立即報名>> 【線下會議】OFweek 2024(第九屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會
-
即日-12.26火熱報名中>> OFweek2024中國智造CIO在線峰會
-
即日-2025.8.1立即下載>> 《2024智能制造產(chǎn)業(yè)高端化、智能化、綠色化發(fā)展藍皮書》
-
精彩回顧立即查看>> 2024 智能家居出海論壇
-
精彩回顧立即查看>> 【在線會議】多物理場仿真助跑新能源汽車
推薦專題
- 高級軟件工程師 廣東省/深圳市
- 自動化高級工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)(光器件) 北京市/海淀區(qū)
- 激光器高級銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結構工程師 廣東省/深圳市