Runway ML將AI工具放在各地創(chuàng)作者的手中

機(jī)器學(xué)習(xí)對(duì)于創(chuàng)作者來(lái)說(shuō)可能是一個(gè)很棒的工具，但是將AI集成到您的工作流程中對(duì)于那些無(wú)法編碼的人來(lái)說(shuō)是一項(xiàng)挑戰(zhàn)。一個(gè)名為Runway ML的新計(jì)劃旨在通過(guò)為藝術(shù)家，設(shè)計(jì)師，電影制作人和其他人提供機(jī)器學(xué)習(xí)應(yīng)用程序的“應(yīng)用程序商店”，只需點(diǎn)擊幾下即可激活這一過(guò)程。

假設(shè)您是預(yù)算的動(dòng)畫(huà)師，想要將人類(lèi)演員的視頻轉(zhuǎn)換為3D模型。您可以使用Runway將一個(gè)名為“PosetNet”的神經(jīng)網(wǎng)絡(luò)應(yīng)用于您的鏡頭，而不是雇用昂貴的動(dòng)作捕捉設(shè)備，創(chuàng)建演員的線框模型，然后可以將其導(dǎo)出為動(dòng)畫(huà)。

一種簡(jiǎn)單的實(shí)驗(yàn)機(jī)器學(xué)習(xí)方法

或者說(shuō)你需要在高預(yù)算的幻想電視劇中刪除一個(gè)意外留下的咖啡杯。你可以用傳統(tǒng)方式編輯它，手工繪制杯子，或者你可以通過(guò)機(jī)器學(xué)習(xí)分割模型運(yùn)行你的鏡頭，它會(huì)自動(dòng)突出顯示每個(gè)框架中的不同對(duì)象，使你的工作更輕松。

像這樣的例子只是Runway的冰山一角，聯(lián)合創(chuàng)始人CristóbalValenzuela將其描述為極端平等主義的工具。“機(jī)器學(xué)習(xí)是一種非常獨(dú)特的技術(shù)，”Valenzuela告訴The Verge。“但我想讓事情更具包容性;讓不同背景的人圍坐在桌子旁并使用這些模型。“

Runway開(kāi)始作為巴倫蘇埃拉在紐約大學(xué)Tisch藝術(shù)學(xué)院的論文項(xiàng)目。在獲得AI藝術(shù)界的熱烈反饋后，他決定將該計(jì)劃納入主流，要求兩位學(xué)校的朋友作為聯(lián)合創(chuàng)始人加入，并從紐約和硅谷支持者那里收集種子資金。該公司于去年12月成立，并在今年1月之后推出測(cè)試版。

巴倫蘇埃拉橫跨藝術(shù)和代碼領(lǐng)域，并表示他希望將這兩個(gè)世界聯(lián)系起來(lái)，使非編碼人員能夠使用機(jī)器學(xué)習(xí)模型，從而將研究人員與直接受益于他們工作的人聯(lián)系起來(lái)。

在Valenzuela去年五月寫(xiě)的博客文章中，他將當(dāng)前的人工智能藝術(shù)場(chǎng)景與16和17世紀(jì)的繪畫(huà)進(jìn)行了比較。當(dāng)時(shí)，簡(jiǎn)單地存儲(chǔ)和使用油漆的行為是一種手工藝秘密，畫(huà)家依賴于涉及豬的膀胱和繩子的深?yuàn)W技術(shù)??。但隨著1841年漆管的發(fā)明，該工藝變得更加容易。在戶外進(jìn)行也更容易，從而產(chǎn)生新的風(fēng)格和動(dòng)作。

為AI做什么油漆管做肖像畫(huà)

19世紀(jì)的畫(huà)家皮埃爾 - 奧古斯特·雷諾阿告訴他的兒子：“沒(méi)有顏色的管子，就沒(méi)有塞尚，沒(méi)有莫奈，沒(méi)有希思黎或畢沙羅，沒(méi)有什么記者被稱(chēng)為印象派。”換句話說(shuō)：無(wú)障礙創(chuàng)造力。

但現(xiàn)代藝術(shù)家的“油漆管”是什么?Valenzuela提出了一個(gè)令人信服的論據(jù)，它可能是Runway - 或者至少是一個(gè)看起來(lái)很像它的程序。

在這種情況下，豬的膀胱阻礙了進(jìn)步，這是目前使用機(jī)器學(xué)習(xí)模型所需的技能。這意味著學(xué)習(xí)使用像TensorFlow或PyTorch這樣的軟件;這可能意味著購(gòu)買(mǎi)一些昂貴的GPU(因?yàn)槟?dāng)前的計(jì)算機(jī)不會(huì)運(yùn)行這些系統(tǒng))，或者改為連接到AWS實(shí)例。這些任務(wù)都不是非編碼人員所能達(dá)到的，但他們肯定需要時(shí)間并為用戶制造瓶頸。相比之下，Runway的模型是完美的油漆管：只需點(diǎn)擊即可。

該公司當(dāng)然不是第一個(gè)讓AI模型更易于使用的公司。但早期的例子 - 比如Lobe，它允許用戶在被微軟收購(gòu)之前使用可視化界面訓(xùn)練AI系統(tǒng) - 專(zhuān)注于商業(yè)用例，而不是創(chuàng)造性用例。

當(dāng)您加載其商店前端時(shí)，Runway的目標(biāo)市場(chǎng)是顯而易見(jiàn)的，這使您可以瀏覽從文本生成到運(yùn)動(dòng)跟蹤的各種模型。

單擊以查看每個(gè)模型的詳細(xì)信息，單擊以將其添加到工作區(qū)，設(shè)置輸入和輸出，然后啟動(dòng)系統(tǒng)運(yùn)行。有一些鉤子可以將這些輸出連接到其他應(yīng)用程序(例如，您可以將ML處理的圖像發(fā)送到Photoshop)，用戶只需幾行代碼就可以直接從GitHub導(dǎo)入新模型。

后一點(diǎn)是Runway最重要的一點(diǎn)。很難低估當(dāng)前人工智能藝術(shù)場(chǎng)景的快節(jié)奏和協(xié)作能力，以及有多少人從彼此的工作和專(zhuān)業(yè)研究中獲益。新型號(hào)一經(jīng)發(fā)布，就會(huì)被各種意想不到的群眾大肆宣傳。

采用名為GPT-2的AI文本生成系統(tǒng)，由研究實(shí)驗(yàn)室OpenAI于2月份推出。自推出以來(lái)的幾個(gè)月里，GPT-2已經(jīng)變成了可訪問(wèn)的網(wǎng)絡(luò)應(yīng)用程序，它被用來(lái)幫助寫(xiě)一本小說(shuō)，有人甚至創(chuàng)建了一個(gè)完全由聊天機(jī)器人填充的subreddit，模仿使用它的其他subreddits。

簡(jiǎn)而言之：這是一個(gè)充滿活力和充滿活力的場(chǎng)景，而Runway希望盡可能地與它保持聯(lián)系。Valenzuela表示，他的團(tuán)隊(duì)不斷響應(yīng)用戶的反饋，為該計(jì)劃添加新模型，并每月更新軟件界面。

正是這種與社區(qū)的聯(lián)系和更新的速度，他說(shuō)這也將阻止跑道被行業(yè)的老牌玩家所侵占。“我們團(tuán)隊(duì)中只有四個(gè)人，”他說(shuō)。“我們喜歡快速發(fā)貨，讓人們興奮并讓他們使用東西。”雖然像Adobe這樣的企業(yè)巨頭肯定對(duì)類(lèi)似的AI應(yīng)用程序很感興趣，但將它們集成到產(chǎn)品中的速度必然會(huì)慢一些。

該@runwayml測(cè)試是最神奇的工具，我在一個(gè)while--能夠旋轉(zhuǎn)起來(lái)，并與模特一起玩打了一個(gè)無(wú)需編寫(xiě)一行代碼將改變這么多pic.twitter.com/IGAoIPbDRL

- Manidis(@WillManidis)將于2019年6月5日

到目前為止，接待跑道已經(jīng)接受了巴倫蘇埃拉的評(píng)論。

“我個(gè)人認(rèn)為快速嘗試一些模型很有用，”最近在蘇富比拍賣(mài)他的作品的人工智能藝術(shù)家Mario Klingemann說(shuō)。他說(shuō)，該計(jì)劃對(duì)研討會(huì)和課程特別有用，因?yàn)樗试S教師在幾分鐘內(nèi)啟動(dòng)并運(yùn)行新的機(jī)器學(xué)習(xí)模型。

Klingemann也有保留。他告訴The Verge，該軟件對(duì)于制作自己的藝術(shù)“太有限”，因?yàn)樗惶峁╊A(yù)訓(xùn)練模型。這意味著如果有人想要定制生成器系統(tǒng)的輸出，比如生成對(duì)抗網(wǎng)絡(luò)(GAN)，他們就無(wú)法在自己的數(shù)據(jù)上訓(xùn)練它。Valenzuela表示，該功能將很快添加到程序中，同時(shí)能夠?qū)⒁粋€(gè)模型的輸出用作另一個(gè)模型的輸入。

羅比·巴拉特，另一個(gè)AI的藝術(shù)家是誰(shuí)見(jiàn)著他與甘斯的工作，也稱(chēng)贊該方案，挑出其潛在的民主化AI藝術(shù)場(chǎng)景特別積極。

“如果跑道可以降低進(jìn)入的障礙......我全力以赴。”

“現(xiàn)在，對(duì)于在谷歌工作的富有科技兄弟來(lái)說(shuō)，這是最容易的，去了一個(gè)花哨的計(jì)算機(jī)科學(xué)學(xué)校，并且可以在工作中使用巨大的GPU集群來(lái)制作帶有神經(jīng)網(wǎng)絡(luò)的藝術(shù)品，”Barrat告訴The Verge。“如果Runway可以降低進(jìn)入的門(mén)檻，讓更多樣化的人群輕松地用人工智能創(chuàng)造藝術(shù)，我就是全力以赴。”

但巴拉特同意該計(jì)劃的簡(jiǎn)單性是一個(gè)限制因素。他說(shuō)，想要使用人工智能做的不僅僅是簡(jiǎn)化他們流程中現(xiàn)有步驟的人需要比跑道更強(qiáng)大的程序。“無(wú)論它作為一種工具有多好，代碼的人仍然能夠制作更大范圍的東西，并最終能夠更好地控制他們的產(chǎn)品。”

Barrat和Klingemann還表示，在跑道上訓(xùn)練ML模型時(shí)，價(jià)格是一個(gè)潛在的問(wèn)題。該軟件可免費(fèi)下載，并附帶10美元的云信用額，這足以讓人了解其潛力。但在那之后，每分鐘計(jì)算費(fèi)用為5美分。對(duì)于像Klingemann和Barrat這樣需要培訓(xùn)他們自己的模型的藝術(shù)家來(lái)說(shuō)，購(gòu)買(mǎi)他們自己的GPU或連接到云服務(wù)可能更便宜。“我不確定它在經(jīng)濟(jì)上對(duì)我有意義，”克林格曼說(shuō)。

但是說(shuō)Runway并不適合所有用戶，這幾乎不是一個(gè)巨大的批評(píng)。當(dāng)他們的瑞士軍刀不能用來(lái)挖溝時(shí)，沒(méi)有人會(huì)感到驚訝。對(duì)于Valenzuela來(lái)說(shuō)，主要任務(wù)不是迎合專(zhuān)業(yè)人士;它正在擴(kuò)大人工智能世界的邊界。

“這些技術(shù)將徹底改變我們創(chuàng)建內(nèi)容的方式，因?yàn)樗惴ㄒ耘c我們相同的方式理解文本，視頻和聲音，”他說(shuō)。“如果我們把這些工具交給那些以前從未訪問(wèn)過(guò)這些工具的人，他們就會(huì)開(kāi)始考慮使用它們的新方法。”