想必大家都知道chatGPT了,可能部分人還沒玩過,我從去年11月份就開始玩了,既然玩了這么久,那就帶大家一起看看這家公司的發(fā)展史,再扒一扒背后這位創(chuàng)始人神秘大佬(據(jù)說是個(gè)gay)的成長史 。
一、公司發(fā)展
2015年,有這么一群有錢人,埃隆·馬斯克、山姆·奧特曼、彼得·泰爾等科技領(lǐng)袖,他們出于對強(qiáng)人工智能潛在風(fēng)險(xiǎn)的擔(dān)憂,創(chuàng)辦了OpenAI 。
《教父》里有這樣一句臺詞“離自己的朋友要近,離自己的敵人要更近”,他們作為引領(lǐng)世界科技的創(chuàng)業(yè)者,自然知道AI未來會發(fā)展成什么樣,既然無法阻擋洪流,索性加入他們 。

文章插圖
公司成立之初,主要資金來源于馬斯克、奧特曼和貝寶的聯(lián)合創(chuàng)始人彼得 · 泰爾等私人投資者,10 億美元 。起初OpenAI是一個(gè)非贏利組織,向公眾開放專利和研究成果 。
在這些機(jī)構(gòu)向人類關(guān)上大門的時(shí)候,OpenAI 將會是敞開的 。這個(gè)可能說百度的競價(jià)排名可能更能讓人深有體會 。
直到2017年,當(dāng)研究小組研究這一領(lǐng)域的趨勢時(shí),他們意識到在財(cái)務(wù)上保持非營利組織屬性是站不住腳的 。該領(lǐng)域內(nèi)其他組織用于取得突破性成果的計(jì)算資源大概每 3.4 個(gè)月翻一番 ?!盀榱吮3窒嚓P(guān)性”,他們顯然需要足夠的資本來匹配或超過這種指數(shù)級增長 。
有時(shí)不得不向世俗妥協(xié)的時(shí)候,既要被包養(yǎng),也要保持獨(dú)立的人格 。最終在公司發(fā)展上,馬斯克與公司產(chǎn)生分歧,選擇退出,而阿爾特曼辭去Y孵化器總裁,出任OpenAI 的CEO 。
在2019年成立OpenAI LP子公司,目的為營利所用,各項(xiàng)研究成果也也不對外開源了 。這是一個(gè)艱難的選擇,也是一個(gè)艱難的時(shí)刻 , 公司的理念的轉(zhuǎn)變受到公司員工及其他關(guān)注該公司的人員的不理解 。沒有任何一個(gè)人的路是好走的 , 即使是世界最聰明最有錢的一群人 。

文章插圖
任何對OpenAI LP投資的利潤都將轉(zhuǎn)移到一個(gè)大的非盈利公司上,回報(bào)達(dá)到投資的100倍之后才會分配利潤,這個(gè)時(shí)候微軟像一個(gè)土豪,就怕你不要錢,帶上了10億美元注資OpenAI 。接下來,就是加速增長了,如下圖 。
參數(shù)量
預(yù)訓(xùn)練數(shù)據(jù)量
GPT
2018年6月
1.17億
5GB
GPT-2
2019年2月
15億
40GB
GPT-3
2020年5月
1750億
45TB
據(jù)國盛證券報(bào)告《ChatGPT需要多少算力》估算,GPT-3訓(xùn)練一次的成本約為140萬美元,對于一些更大的LLM(大型語言模型),訓(xùn)練成本介于200萬美元至1200萬美元之間 。
【關(guān)于ChatGPT的相關(guān)報(bào)道 揭秘爆紅chatgpt之父】以ChatGPT在1月的獨(dú)立訪客平均數(shù)1300萬計(jì)算,其對應(yīng)芯片需求為3萬多片英偉達(dá)A100 GPU,初始投入成本約為8億美元,每日電費(fèi)在5萬美元左右 。
這讓我想到國內(nèi)的大語言模型,也許錢是可以搞定的事 , 但是A100已經(jīng)被美國禁售了,這個(gè)就很難辦了,要在本就落后的基礎(chǔ)上,算力還不如別人,如何追趕上?

文章插圖
說回正題,openAI的一群大佬一看3的效果 , 發(fā)現(xiàn)還是有問題 , 有時(shí)候給的答案很好,有時(shí)候又很無厘頭 , 這就是缺少教育,教育是什么,是反饋,并不是單單是訓(xùn)練,你狂做題目,沒人告訴你答案正確與否,是行不通 , 只會走火入魔是吧 。
這之后就開啟了人工標(biāo)注工作,也就是監(jiān)督微調(diào)(SFT)模型,模型開發(fā)的第一步就是需要雇用 40 名承包商來創(chuàng)建一個(gè)“有監(jiān)督訓(xùn)練數(shù)據(jù)集”對 GPT-3 模型進(jìn)行微調(diào),里面的輸入均有已知的輸出,用來給模型學(xué)習(xí) 。
然后再用這個(gè)新的監(jiān)督數(shù)據(jù)集對 GPT-3 模型進(jìn)行微調(diào),從而建立起 GPT-3.5,這也就是我們2022年11月份一經(jīng)發(fā)布,就風(fēng)靡全球,成為全球最快到一億用戶的產(chǎn)品 。
一、創(chuàng)始人山姆-奧特曼
Sam Altman是出生于1985年,在很小的時(shí)候就擁有了一臺蘋果筆記本電腦,從此就迷上了編程 , 在2003年的時(shí)候被斯坦福大學(xué)錄??,但是謿g亮肆僥昃完⊙Я?。
他輟學(xué)的原因和很多大佬一樣,看著互聯(lián)網(wǎng)的風(fēng)口到來,他卻只能在學(xué)校讀書,不能當(dāng)風(fēng)口的豬 。他輟學(xué)后和兩名同學(xué)開發(fā)了一款和朋友分享定位的軟件loopt,這款軟件深受喬布斯喜歡 , 所以在喬布斯發(fā)布蘋果手機(jī)時(shí)候,第一批進(jìn)入應(yīng)用商店的產(chǎn)品 。

文章插圖
但是到2012年,他將loopt以1200萬美元賣掉了 。為什么了?因?yàn)樗懈蟮膲粝?nbsp;, 要改變世界 。與其花時(shí)間在loopt,不如拿到錢,尋找能改變世界的項(xiàng)目,于是他轉(zhuǎn)頭將錢投入到Y(jié)C孵化器,也就是天使投資公司,主要投資初創(chuàng)公司,幫助從0到1的項(xiàng)目更快成長 。
什么叫大神 , 干啥都會發(fā)光,去了YC僅僅兩年,就被YC創(chuàng)始人看中 , 讓奧特曼當(dāng)了YC總裁 。當(dāng)然他也沒辜負(fù)希望,幾年時(shí)間,讓YC成為全美最牛的風(fēng)投之一,市值達(dá)到1500億美元 。
也就在YC當(dāng)總裁這段期間,創(chuàng)辦了OpenAI,直到2019年辭去YC總裁 。因?yàn)樗贠pen AI看到了改變世界的希望,這不就是他用來改變世界的工具嘛——AGI 。
但是自2015年創(chuàng)立一直都沒在行業(yè)中有什么,奧特曼說過,公司長期以來對于推出新產(chǎn)品,都不太興奮,只會說我們試試吧 。試試有什么用,不夠堅(jiān)定,沒有目標(biāo),做到一丁點(diǎn) , 遇到困難就放棄 。

文章插圖
2019年后,公司在奧特曼的帶領(lǐng)下,開始聚焦chatGPT,最終一舉成名推出chatGPT3.5 。你以為奧特曼說改變世界是跟我們一樣在老師面前說說玩嘛,人家可是定了三部曲 。
- 第一部曲:大力發(fā)展通用人工智能AGI,讓全球生產(chǎn)力大大提升 。
- 第二部曲:可控性核聚變,AGI的大范圍使用,會消耗很多能量,而可控性核聚變研發(fā)成功,就不會為資源而斗爭 , 智能和資源的成本會趨近于0,從而可以讓AGI投入到人類生活的方方面面 。所以投資了全球第一家可控核聚變研發(fā)公司helion 。
- 第三部曲:實(shí)現(xiàn)UBI計(jì)劃,即無條件的給普通大眾提供基本物質(zhì)生活 , 包括全世界的公民 , 不論男女老少 。未來大量的AGI使用,會導(dǎo)致大量的人失業(yè),至少不用人類去工作了 。那你會問這個(gè)錢從哪來了,由于大公司的使用了廉價(jià)的能源,AGI,就需要支付這筆錢,最終這些錢再發(fā)給所有普通民眾,而且對于基本生活的物質(zhì)條件,在大量AGI使用下,已經(jīng)可以擁有無限的物質(zhì) 。

文章插圖
看到這里,你是不是覺得這不就是我們要的終極社會嘛 , 而且好像還有點(diǎn)靠譜 。有時(shí)候我們不得不佩服這些擁有夢想的人,并且能夠?yàn)榱诉@些看不到,摸不著的東西奮斗著,致敬這些長期主義者 。
對比國內(nèi),我們把時(shí)間線撥回openAI成立的2015年,彼時(shí)國內(nèi)阿里巴巴剛上市一年,美團(tuán)餓了么大戰(zhàn)正酣,快手正在三四線攻城略地,拼多多、電動三傻剛剛成立,還有很多當(dāng)今耳熟能詳?shù)钠髽I(yè)很多才剛剛起步 。
當(dāng)然他們伴隨著移動互聯(lián)網(wǎng)的到來,再疊加國內(nèi)14億人口的紅利面前,迅速發(fā)展壯大 。但是他們到今天已經(jīng)失去增長的潛力,openAI卻引領(lǐng)了一個(gè)新的時(shí)代 。

文章插圖
慢慢發(fā)現(xiàn)社會的推動就是這些人和公司在背后推動,為了也想做個(gè)長期主義者,我決定后面會更新出所有推動社會進(jìn)步的公司,包括貝爾電話、通用汽車、仙童、蘋果、特斯拉等所有公司及這些創(chuàng)始人的專欄 。歡迎關(guān)注,一起探索這些偉大的公司及其背后的故事 。
以上關(guān)于本文的內(nèi)容,僅作參考!溫馨提示:如遇健康、疾病相關(guān)的問題,請您及時(shí)就醫(yī)或請專業(yè)人士給予相關(guān)指導(dǎo)!
「愛刨根生活網(wǎng)」www.malaban59.cn小編還為您精選了以下內(nèi)容,希望對您有所幫助:- Excel自動填充學(xué)號的便捷方法
- 解決OBS直播沒有聲音的問題
- 手把手教你做超好吃的甲魚湯 甲魚湯怎么做好喝又營養(yǎng)
- 制作金箔文字和邊框效果的Word封面
- 如何打造一個(gè)整潔有序的電腦桌面
- 不是錢的事 淄博燒烤店停業(yè)三天 老板:保命要緊
- 如何在WORD文檔中插入多行多列的表格
- 手機(jī)內(nèi)屏與外屏的區(qū)別
- 水煮肉片的做法 水煮肉片的家常做法
- 新解決Windows 10中javac未識別為內(nèi)部或外部命令的方法
