日前，紐約時報的一篇報道稱，人工智能公司 OpenAI為收集高質(zhì)量訓(xùn)練數(shù)據(jù)而開發(fā)了一個語音轉(zhuǎn)錄模型Whisper。該模型主要用于轉(zhuǎn)錄 OpenAI 獲取的超過 100 萬小時的 YouTube 視頻，也就是將 YouTube 視頻中的音頻內(nèi)容轉(zhuǎn)錄文字，然后再拿去訓(xùn)練 GPT-4。這個項目得到OpenAI 總裁 Greg Brockman的支持，甚至于Greg Brockman還親自參與了視頻的收集工作。
雖然OpenAI 認為這是對數(shù)據(jù)的合理利用，但谷歌顯然并不這么認為，并公開稱：谷歌會采取技術(shù)和法律措施來防止此類未經(jīng)授權(quán)的使用。
在人工智能領(lǐng)域，數(shù)據(jù)是構(gòu)建智能模型的基石。沒有高質(zhì)量的數(shù)據(jù)，AI的發(fā)展就會受到嚴重限制。怎么合法獲取高質(zhì)量數(shù)據(jù)？可能有望在OpenAI和谷歌的紛爭中給業(yè)界指明一條更為明確的道路。
AI公司為了提升模型的性能，往往需要大量的數(shù)據(jù)作為訓(xùn)練材料。然而，這些數(shù)據(jù)往往受到版權(quán)法的保護，未經(jīng)授權(quán)的使用可能會觸犯法律。這不僅對AI公司構(gòu)成挑戰(zhàn)，也對內(nèi)容創(chuàng)作者的權(quán)利保護提出了問題。
目前OpenAI的訓(xùn)練數(shù)據(jù)獲取大多是來自以下幾方面：
一是互聯(lián)網(wǎng)內(nèi)容。OpenAI從互聯(lián)網(wǎng)上抓取大量的網(wǎng)頁內(nèi)容，包括文本、圖片、視頻等多種形式的數(shù)據(jù)。這些數(shù)據(jù)不僅用于訓(xùn)練自然語言處理模型，如GPT系列，還可能用于圖像識別、多模態(tài)模型等其他類型的AI模型。
二是圖書資料。OpenAI還利用大量的圖書資料作為訓(xùn)練數(shù)據(jù)。這些書籍內(nèi)容涵蓋了各種領(lǐng)域和主題，有助于模型更好地理解長篇、結(jié)構(gòu)化和正式英語。
三是學(xué)術(shù)論文。為了提升模型在科學(xué)和技術(shù)領(lǐng)域的理解能力，OpenAI還收集了大量的學(xué)術(shù)論文作為訓(xùn)練數(shù)據(jù)。
四是社交媒體數(shù)據(jù)。隨著社交媒體的發(fā)展，OpenAI也開始與各大社交媒體合作，探索利用社交媒體上的公共信息來訓(xùn)練模型。這些數(shù)據(jù)包括用戶發(fā)布的文本、圖片、視頻等，有助于模型更好地理解人類的語言和行為。
五是特定領(lǐng)域數(shù)據(jù)。針對特定任務(wù)或領(lǐng)域，OpenAI還可能收集特定領(lǐng)域的數(shù)據(jù)進行訓(xùn)練。例如，對于醫(yī)療領(lǐng)域的模型，可能需要收集醫(yī)學(xué)文獻、病例報告等數(shù)據(jù)；對于金融領(lǐng)域的模型，可能需要收集市場數(shù)據(jù)、財務(wù)報告等。
這些內(nèi)容不僅OpenAI在用，其他無數(shù)AI公司也在用這些內(nèi)容進行人工智能的訓(xùn)練，要保證OpenAI的領(lǐng)先性，就必須為其AI模型加入更加豐富的高質(zhì)量訓(xùn)練數(shù)據(jù)。這是OpenAI轉(zhuǎn)錄YouTube視頻進行訓(xùn)練的關(guān)鍵所在。
2020年初，約翰霍普金斯大學(xué)的理論物理學(xué)家（現(xiàn)Anthropic首席科學(xué)官）Jared Kaplan發(fā)布了一篇論文，明確表示訓(xùn)練大語言模型用的數(shù)據(jù)越多，表現(xiàn)就會越好。自那以后，“規(guī)模就是一切”成為了人工智能行業(yè)的信條。
研究機構(gòu)Epoch直白地表示，現(xiàn)在科技公司使用數(shù)據(jù)的速度已經(jīng)超過數(shù)據(jù)生產(chǎn)的速度，這些公司最快會在2026年就耗盡互聯(lián)網(wǎng)上的高質(zhì)量數(shù)據(jù)。
高質(zhì)量數(shù)據(jù)已經(jīng)成為AI公司發(fā)展壯大的“石油”，在競爭的壓力下，讓它們對石油的獲取變得更為無所顧忌。對YouTube視頻的轉(zhuǎn)錄存在法律爭議，OpenAI是知道的，但對數(shù)據(jù)的貪婪還是讓他們義無反顧的堅信這是對數(shù)據(jù)的合理使用。
AI公司要發(fā)展，獲取訓(xùn)練數(shù)據(jù)要合法合規(guī)。 一方面，可以通過與內(nèi)容提供商建立合作關(guān)系，獲取合法授權(quán)的數(shù)據(jù)。另一方面，AI公司也可以考慮自行生成合成數(shù)據(jù)，以滿足訓(xùn)練需求。這不僅能夠避免法律風(fēng)險，還能夠確保數(shù)據(jù)的多樣性和質(zhì)量。
AI的發(fā)展不僅僅是技術(shù)問題，更是社會問題。AI技術(shù)的應(yīng)用需要在尊重版權(quán)、保護隱私的前提下進行。只有這樣，AI技術(shù)才能夠得到健康、可持續(xù)的發(fā)展。
AI的盡頭是內(nèi)容，但內(nèi)容的獲取必須建立在合法合規(guī)的基礎(chǔ)之上。AI公司、內(nèi)容創(chuàng)作者、法律機構(gòu)等各方需要共同努力，找到平衡技術(shù)發(fā)展與法律倫理的解決方案，以確保AI技術(shù)能夠造福人類社會，而不是成為爭議的焦點。
免責(zé)聲明：此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章，所有文字和圖片版權(quán)歸作者所有，且僅代表作者個人觀點，與極客網(wǎng)無關(guān)。文章僅供讀者參考，并請自行核實相關(guān)內(nèi)容。投訴郵箱：editor@fromgeek.com。
- 騰訊視頻重組“最強大腦”：變陣不變?nèi)耍M取不守成
- 夸克發(fā)布首個高考志愿大模型，讓每個考生都有一個AI顧問
- 夸克發(fā)布首個高考志愿大模型，為考生提供個性化志愿決策服務(wù)
- 首款鴻蒙AI智能手表HUAWEI WATCH 5發(fā)布，重繪智慧未來新圖景
- 華為Pura 80系列及全場景新品發(fā)布會盛大舉行，多款新品重磅亮相
- AI學(xué)習(xí)機，比的是什么？
- 星巴克殺入新茶飲賽道
- 智能穿戴開年翻盤，華為、小米崛起，中國市場成全球“發(fā)動機”
- 前方性能平板怪獸出沒！紅魔電競平板3 Pro重新定義電競平板新標(biāo)桿
- 618調(diào)研：吃喝仍是大促頂流 健康需求新升級 京東超市多品類銷售占比第一
免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。
