文章插圖
訓(xùn)練場(chǎng)準(zhǔn)備好了，現(xiàn)在就是讓GT Sophy真正成為一名會(huì)轉(zhuǎn)彎、會(huì)思考的賽車手 。
行為者- 評(píng)價(jià)者機(jī)制
索尼使用了一種新的深度學(xué)習(xí)算法，也叫做量化回歸的行為者-評(píng)價(jià)者（QR-SAC）方法 。
AI智能體會(huì)被扔到一個(gè)沒(méi)有指令的環(huán)境中，并根據(jù)評(píng)價(jià)者（也就是價(jià)值函數(shù)）的評(píng)估來(lái)選擇行動(dòng)，并根據(jù)完成目標(biāo)的結(jié)果而獲得獎(jiǎng)勵(lì)或懲罰 。
比如，智能體會(huì)因?yàn)楸３指咚偾斑M(jìn)而獲獎(jiǎng)勵(lì)，也會(huì)因?yàn)槌鼋?、撞墻或失去牽引力受到懲罰 。
這種獎(jiǎng)懲機(jī)制使智能體迅速得到積極的反饋，慢慢開始熟悉在賽道上的行為 。
事實(shí)上，GT Sophy只用了幾個(gè)小時(shí)就學(xué)會(huì)了在賽道上行駛，并很快就在Maggiore賽道上超越了17700名玩家：
但這種單純的速度，或者說(shuō)賽道完成進(jìn)度上的獎(jiǎng)勵(lì)并不足以激勵(lì)智能體贏得比賽 。
因?yàn)槿绻麑?duì)手速度足夠快，智能體就完全可以通過(guò)跟隨并學(xué)習(xí)對(duì)手的“偷懶”的方式積累大量獎(jiǎng)勵(lì)，最終也能完成目標(biāo) 。
于是，研究者們?cè)黾恿恕俺嚜?jiǎng)勵(lì)”，并且，相對(duì)于對(duì)手的距離的改變也會(huì)與獎(jiǎng)勵(lì)積分成比例 。
同時(shí)，賽車的碰撞上也有獎(jiǎng)懲機(jī)制，研究人員設(shè)置了一種較為保守的獎(jiǎng)勵(lì)：
在確保智能體能以足夠強(qiáng)悍的駕駛風(fēng)格贏得勝利的同時(shí)，也不至于會(huì)粗暴地將其他賽車趕出道路，而遭受真正的賽車規(guī)則的懲罰 。
最終，GT Sophy在GT賽車比賽中勝過(guò)了2021年TGR GT杯冠軍、2020年國(guó)家杯世界冠軍和2021年亞軍、2018年國(guó)家杯亞洲/大洋洲冠軍等多位世界頂級(jí)賽車手 。
在比賽中，GT Sophy在三條賽道上都取得了第一名 。
而在比賽中，它能夠執(zhí)行幾種類型的轉(zhuǎn)彎，有效地利用漂移，擾亂后面車輛，攔截對(duì)手并執(zhí)行其他緊急操縱 。
不過(guò)，研究者也提到，GT Sophy在戰(zhàn)略決策方面還存在著一些改進(jìn)的空間：有時(shí)會(huì)在同一條跑道上留出足夠的空間，讓對(duì)手有機(jī)可乘 。
索尼要用它開發(fā)自動(dòng)駕駛
看到這里，你覺(jué)得GT Sophy能力如何？
反正幾位世界級(jí)選手們是服氣了 。
在GT賽車世界級(jí)賽事上斬獲三冠的宮園拓真（Takuma Miyazono）表示：
“Sophy的速度非?？?，單圈時(shí)間勝過(guò)了此前對(duì)最佳車手的預(yù)期 ?！?br /> ——在其中一場(chǎng)比賽中，GT Sophy Rouge以5.8秒的優(yōu)勢(shì)戰(zhàn)勝了第二名山中智明（2021年TGR GT杯冠軍），最快圈速為1：54.373，比山中快了2秒多 。
而GT Sophy的能力顯然不僅僅能在游戲中大殺四方 。
斯坦福汽車研究中心聯(lián)合主任Chris Gerdes教授就指出，GT Sophy背后的AI技術(shù)，可以幫助開發(fā)自動(dòng)駕駛汽車：
GT Sophy在賽道上的成功表明，有朝一日，神經(jīng)網(wǎng)絡(luò)在自動(dòng)駕駛汽車軟件中的作用可能比現(xiàn)在更大 。
目前，神經(jīng)網(wǎng)絡(luò)算法在自動(dòng)駕駛汽車軟件中主要負(fù)責(zé)跟蹤道路標(biāo)記、感知障礙，控制軟件則仍依賴于人為設(shè)定的規(guī)則 。
豐田研究所高級(jí)經(jīng)理Avinash Balachandran也表示，“在賽車中應(yīng)用機(jī)器學(xué)習(xí)和自主控制令人興奮” 。
還有不少網(wǎng)友認(rèn)為，這一AI或許與索尼新成立的電動(dòng)汽車公司有關(guān)，或許再過(guò)幾年，這個(gè)AI就能在其自動(dòng)駕駛技術(shù)中看到了 。
當(dāng)然對(duì)于索尼玩家來(lái)說(shuō)，最期待的是：下個(gè)月上市的GT7能否加入這個(gè)最強(qiáng)AI？
好消息是GT7仍會(huì)登陸上一代游戲機(jī)PS4，沒(méi)買到PS5的玩家也能嘗嘗鮮了 。
- THE END -
原文鏈接： 責(zé)任編輯：祥云

以上關(guān)于本文的內(nèi)容，僅作參考！溫馨提示：如遇健康、疾病相關(guān)的問(wèn)題，請(qǐng)您及時(shí)就醫(yī)或請(qǐng)專業(yè)人士給予相關(guān)指導(dǎo)!

「愛(ài)刨根生活網(wǎng)」www.malaban59.cn小編還為您精選了以下內(nèi)容，希望對(duì)您有所幫助：

• 索尼數(shù)碼相機(jī)使用說(shuō)明及測(cè)評(píng) 索尼數(shù)碼相機(jī)怎么用
• 錄取查詢?nèi)肟?怎么查詢自己被哪個(gè)大學(xué)錄取了？
• 一年中有7個(gè)大月5個(gè)小月對(duì)不對(duì) 一年有7個(gè)大月5個(gè)小月對(duì)不對(duì)
• 復(fù)印紙的尺寸和規(guī)格 a5和b5的本子哪個(gè)大
• 索尼單反相機(jī)介紹 索尼相機(jī)哪款好
• 索尼dv機(jī)怎么使用,索尼有超遠(yuǎn)攝像DV機(jī)嗎？
• 火雞面的熱量和方便面的熱量哪個(gè)大 火雞面的熱量
• 車?yán)遄訋讉€(gè)J和xl 車?yán)遄觴ld和雙J哪個(gè)大
• 最受玩家期待的游戲改編電影 索尼發(fā)《神秘海域》中文預(yù)告：百億卡司
• 無(wú)奈增產(chǎn)百萬(wàn)臺(tái)PS4！索尼PS5面臨缺芯“難產(chǎn)”