展會信息港展會大全

“即夢AI”上架,字節(jié)跳動能否在視頻大模型上趕超快手?
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-08-15 11:13:32   瀏覽:3753次  

導讀:每經(jīng)記者:楊昕怡每經(jīng)編輯:魏官紅 近日,字節(jié)跳動旗下剪映團隊研發(fā)的一站式AI創(chuàng)作平臺即夢AI移動版正式上架至蘋果應(yīng)用商店。記者了解到,該應(yīng)用目前擁有文生圖和文/圖生視頻等功能。另外,即夢已經(jīng)上線會員體系,推出了多種訂閱方式。 通過對即夢、可靈以及...

每經(jīng)記者:楊昕怡每經(jīng)編輯:魏官紅

近日,字節(jié)跳動旗下剪映團隊研發(fā)的一站式AI創(chuàng)作平臺“即夢AI”移動版正式上架至蘋果應(yīng)用商店。記者了解到,該應(yīng)用目前擁有文生圖和文/圖生視頻等功能。另外,即夢已經(jīng)上線會員體系,推出了多種訂閱方式。

通過對即夢、可靈以及Sora的實際應(yīng)用對比,《每日經(jīng)濟新聞》記者發(fā)現(xiàn),三款視頻生成大模型在對提示詞的捕捉和理解上都較為準確、完整,但即夢的人物塑造、內(nèi)容的豐富度和視頻流暢度等能力相對有所欠缺。在生成內(nèi)容的時長上,即夢支持最多12秒的視頻生成。

“生成流暢視頻的秒數(shù)是判斷一個視頻生成大模型能力優(yōu)劣的關(guān)鍵因素。”一位大模型工程師在接受《每日經(jīng)濟新聞》記者采訪時表示,流暢與否需從多個維度評判,比如生成的內(nèi)容有沒有事實錯誤以及空間感對不對等。

動作自然度略遜一籌

今年初,Sora的橫空出世開啟了“視頻的ChatGPT時代”。隨后,快手推出的可靈讓人們對國產(chǎn)AI視頻大模型的表現(xiàn)有了越來越多的期待。同為短視頻巨頭的抖音母公司字節(jié)跳動,則被視為賽道內(nèi)最具趕超可能的選手之一。

3月底,字節(jié)跳動旗下剪映團隊研發(fā)的AI創(chuàng)作平臺“即夢AI”開放內(nèi)測;5月9日,該應(yīng)用上線網(wǎng)頁版,上線之初只有圖片生成、智能畫布和視頻生成三大功能;8月6日,該應(yīng)用移動版正式上架至蘋果應(yīng)用商店,擁有文生圖和文/圖生視頻等功能。

至于即夢的實際使用效果,今年7月初,全國首部AIGC生成式連續(xù)性敘事科幻短劇集《三星堆:未來啟示錄》在抖音上線。在這部總共13集的短劇集里,即夢作為首席AI技術(shù)支持方出現(xiàn)。

據(jù)媒體報道,在和博納影業(yè)合作推出《三星堆:未來啟示錄》的過程中,即夢AI改進了“視頻生成”功能,包括支持24fps、30fps、60fps的補幀以及二倍超分的能力,新增鏡頭水平移動、上下移動,支持鏡頭移動的方向和幅度控制等。

在即夢App上線后,《每日經(jīng)濟新聞》記者選取了OpenAI官方公布的多條Sora視頻提示詞對即夢、可靈和Sora進行對比測試。從測試結(jié)果來看,三款視頻生成大模型在對提示詞的捕捉和理解上都較為準確、完整,生成視頻內(nèi)容的畫面表現(xiàn)也都連貫且流暢。

在人物形象的刻畫精細度上,Sora相較于即夢和可靈有一定的優(yōu)勢;在動作的自然度上,即夢在三個測試產(chǎn)品中略遜一籌,例如在以“東京街頭的女士”為主題的視頻畫面呈現(xiàn)上,即夢生成的人物在轉(zhuǎn)頭時頭頸部略顯扭曲,拎包的手部動作也有所變形。

而在生產(chǎn)內(nèi)容的元素豐富程度上,Sora在三者中表現(xiàn)最優(yōu)。例如在以“太空人”為主題的生成視頻內(nèi)容里,Sora給出了飛船、艙外景象等多個有關(guān)提示詞的聯(lián)想內(nèi)容,而即夢和可靈僅呈現(xiàn)了一個穿著宇航服的男性角色。

易觀分析研究合伙人陳晨在接受《每日經(jīng)濟新聞》記者采訪時表示,在生成效果上,即夢的AI圖像整體質(zhì)量較好,AI視頻則在時長、元素豐富性、動作連貫性等細節(jié)處理上仍然有所欠缺。

“如果缺失了從‘太空人’聯(lián)想到‘飛船’的能力,應(yīng)該是基座模型的能力問題。”一位大模型工程師向《每日經(jīng)濟新聞》記者指出,生成流暢視頻的秒數(shù)是判斷一個視頻生成大模型能力優(yōu)劣的關(guān)鍵因素,“流暢”需要從多個維度來看,比如生成的內(nèi)容有沒有事實錯誤、記憶能力如何以及空間感對不對等。

目前,即夢支持3秒、6秒、9秒和12秒的視頻內(nèi)容生成,分別對應(yīng)不同的積分消耗。而Sora早在發(fā)布時就已經(jīng)能合成1分鐘的超長視頻;6月21日,可靈推出了圖生視頻功能,支持根據(jù)不同文本內(nèi)容,將靜態(tài)圖像轉(zhuǎn)化為生動的5秒視頻,且續(xù)寫功能可讓視頻延續(xù)約5秒,最長可生成約3分鐘視頻。

AI視頻能賺到錢嗎?

Sora的出現(xiàn)無疑給大模型開辟了新的賽常今年7月,阿里達摩院發(fā)布了一站式AI視頻創(chuàng)作平臺“尋光”,商湯科技推出了首個面向C端用戶的可控人物視頻生成大模型Vimi,智譜AI也宣布將AI生成視頻模型清影(Ying)正式上線智譜清言。

在AI頭部玩家集體向視頻生成大模型發(fā)起猛攻時,一個不能回避的問題就在眼前:AI視頻能讓大模型公司賺到錢嗎?

以業(yè)內(nèi)明星公司OpenAI為例,在推出了Sora等一眾能力領(lǐng)先的大模型的情況下,今年7月,有媒體援引知情人士以及未公開的內(nèi)部財務(wù)數(shù)據(jù)分析稱,OpenAI今年或面臨高達50億美元的巨額虧損,預(yù)估公司全年收入可能在35億美元到45億美元之間,遠低于運營成本。

同時,國內(nèi)視頻大模型在商業(yè)化落地上也顯得有些“著急”。7月30日,可靈上線了面向全球的會員體系,該體系與其在國內(nèi)市場推出的會員體系相仿,例如月卡分為10美元、37美元和92美元三檔,可對應(yīng)生成約66個、300個和800個5秒視頻。

《每日經(jīng)濟新聞》記者注意到,即夢也已推出會員體系,有79元單月、69元連續(xù)包月和659元包年的基礎(chǔ)會員等不同訂閱方式。具體來說,基礎(chǔ)會員每月可使用505個積分生成約2020張圖片或168個AI視頻。此外,每月2020個積分的標準會員和每月6555個積分的高級會員服務(wù)即將上線。

“由于AI大模型高昂的模型訓練與推理成本,加之C端用戶對AI工具的需求相對分散,付費意愿不足,視頻大模型在C端市場的商業(yè)化仍然會面臨一個較長的培育期。”陳晨認為,對于C端市場而言,視頻大模型的商業(yè)化落地道阻且長。

而從B端市場出發(fā),陳晨向《每日經(jīng)濟新聞》記者表示:“對于B端而言,AI技術(shù)革命正在重塑原有的工作流程,壓縮冗余環(huán)節(jié)并引發(fā)新的創(chuàng)作工具需求。在這個過程中,AI視頻大模型可以逐步與現(xiàn)有的影視制作、廣告創(chuàng)意、媒體內(nèi)容策劃結(jié)合,輔助進行復(fù)雜工序自動化處理和智能化內(nèi)容生產(chǎn)。而模型能力是否有效嵌入實際工作流程,帶來實質(zhì)性的效率提升以及成本降低,是構(gòu)建商業(yè)化能力的關(guān)鍵因素。”

“公司會逐步開始探索Kimi的商業(yè)化,但目前的重點還是打造能力更強的下一代模型。”今年8月,月之暗面方面在接受《每日經(jīng)濟新聞》記者采訪時表示,現(xiàn)階段還不是以商業(yè)化為重的時候。

也許,對“初出茅廬”的即夢來說也是如此,它還有一個又一個里程碑要去觸達、超越。“即夢目前的產(chǎn)品功能、商業(yè)模式聚焦于服務(wù)UGC(用戶生成內(nèi)容),與抖音的生態(tài)融合將是未來的發(fā)展重點。”陳晨表示,“或許在時長、幀率、畫面細節(jié)等技術(shù)參數(shù)上的直接對標并不是即夢現(xiàn)階段最需要關(guān)注的,關(guān)鍵還是在于應(yīng)用落地和生態(tài)整合能力。”

每日經(jīng)濟新聞

贊助本站

人工智能實驗室
相關(guān)內(nèi)容
AiLab云推薦
推薦內(nèi)容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實驗室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務(wù) | 公司動態(tài) | 免責聲明 | 隱私條款 | 工作機會 | 展會港