隨著自動(dòng)駕駛、車載娛樂和實(shí)時(shí)導(dǎo)航等應(yīng)用的普及,車輛對(duì)計(jì)算資源的需求呈現(xiàn)爆發(fā)式增長(zhǎng)。傳統(tǒng)的云計(jì)算架構(gòu)由于其高延遲和帶寬限制,已難以滿足車載網(wǎng)絡(luò)的實(shí)時(shí)性要求。車載霧計(jì)算應(yīng)運(yùn)而生,通過將計(jì)算任務(wù)下沉到靠近數(shù)據(jù)源的車輛或路側(cè)單元(RSU)等霧節(jié)點(diǎn),顯著降低了通信延遲并提升了系統(tǒng)響應(yīng)速度。在VFC中,車輛不僅作為服務(wù)需求方,還可以作為計(jì)算資源提供者,扮演霧節(jié)點(diǎn)的角色,為其他車輛提供計(jì)算服務(wù)。
然而,車載霧計(jì)算的動(dòng)態(tài)性帶來了諸多挑戰(zhàn)。首先,車輛的高速移動(dòng)性和網(wǎng)絡(luò)拓?fù)涞目焖僮兓瘜?dǎo)致任務(wù)卸載決策需要實(shí)時(shí)調(diào)整。其次,私家車作為霧節(jié)點(diǎn)的個(gè)性化服務(wù)需求和卸載意圖增加了任務(wù)分配的復(fù)雜性。此外,如何在動(dòng)態(tài)環(huán)境中實(shí)現(xiàn)多對(duì)多任務(wù)卸載,即多個(gè)任務(wù)需求方與多個(gè)計(jì)算提供者之間的協(xié)作優(yōu)化,成為一個(gè)亟待解決的技術(shù)難題。傳統(tǒng)的方法往往依賴靜態(tài)分配策略或集中式調(diào)度,難以適應(yīng)車載環(huán)境的動(dòng)態(tài)性和分布式特性。
針對(duì)這些挑戰(zhàn),微云全息(NASDAQ:HOLO)提出了一種基于V2V交易范式的分布式動(dòng)態(tài)多對(duì)多任務(wù)卸載框架,并結(jié)合多智能體深度強(qiáng)化學(xué)習(xí)方法,成功實(shí)現(xiàn)了高效的任務(wù)卸載優(yōu)化。同時(shí),該框架進(jìn)一步提升了系統(tǒng)對(duì)駕駛員狀態(tài)的感知能力,從而優(yōu)化了任務(wù)卸載決策的智能化水平。
車對(duì)車(V2V)通信技術(shù)是車聯(lián)網(wǎng)的重要組成部分,允許車輛之間直接交換信息,而無需依賴中心化的基站或云服務(wù)器;赩2V交易范式的分布式任務(wù)卸載框架充分利用了這一特性,將任務(wù)卸載過程建模為車輛之間的動(dòng)態(tài)交易過程。在這一框架中,任務(wù)需求方(需要卸載計(jì)算任務(wù)的車輛)與計(jì)算提供者(具有空閑計(jì)算資源的車輛)通過V2V通信協(xié)商任務(wù)分配和資源調(diào)度。
具體而言,該框架將任務(wù)卸載視為一個(gè)市場(chǎng)化交易過程。需求方車輛根據(jù)任務(wù)的計(jì)算需求(如計(jì)算量、時(shí)延要求)和自身資源限制(如電池電量、通信帶寬)發(fā)布任務(wù)請(qǐng)求,而提供者車輛則根據(jù)自身的計(jì)算能力、位置和移動(dòng)軌跡等因素,決定是否接受任務(wù)并提供報(bào)價(jià)。這種分布式交易機(jī)制避免了傳統(tǒng)集中式調(diào)度的單點(diǎn)故障問題,并通過車輛間的自主協(xié)商提高了系統(tǒng)的魯棒性和靈活性。
為確保交易過程的公平性和高效性,微云全息引入了基于區(qū)塊鏈的智能合約技術(shù),用于記錄任務(wù)分配協(xié)議和資源交易信息。智能合約通過去中心化的方式,確保了交易的透明性和可追溯性,同時(shí)降低了惡意行為的風(fēng)險(xiǎn)。這一機(jī)制不僅提升了任務(wù)卸載的信任度,還為車輛間的資源共享提供了可靠的保障。
在動(dòng)態(tài)多對(duì)多任務(wù)卸載場(chǎng)景中,車輛的決策過程受到多種因素的共同影響,包括任務(wù)優(yōu)先級(jí)、通信質(zhì)量、車輛移動(dòng)性以及資源可用性等。為應(yīng)對(duì)這一復(fù)雜性,微云全息研究團(tuán)隊(duì)將任務(wù)卸載問題建模為部分可觀測(cè)馬爾可夫決策過程(POMDP)。POMDP能夠有效處理動(dòng)態(tài)環(huán)境中信息的不完全性和不確定性,使車輛能夠根據(jù)局部觀測(cè)信息(如鄰近車輛的狀態(tài)、信道條件)進(jìn)行決策。

為了實(shí)現(xiàn)高效的分布式優(yōu)化,微云全息設(shè)計(jì)了一種多智能體門控參與者注意力評(píng)價(jià)(Multi-Agent Gated Actor-Attention-Critic, MGAAC)方法。這一方法結(jié)合了深度強(qiáng)化學(xué)習(xí)的Actor-Critic框架和注意力機(jī)制,旨在提升多智能體協(xié)作的效率。以下是該方法的核心組成部分:
Actor網(wǎng)絡(luò):每個(gè)車輛作為一個(gè)智能體,擁有獨(dú)立的Actor網(wǎng)絡(luò),用于生成任務(wù)卸載策略。Actor網(wǎng)絡(luò)根據(jù)車輛的本地觀測(cè)(如任務(wù)需求、資源狀態(tài)、鄰居車輛信息)輸出連續(xù)的動(dòng)作空間,包括任務(wù)分配比例、計(jì)算資源調(diào)度和通信帶寬分配等。
Attention機(jī)制:考慮到車輛間的動(dòng)態(tài)交互,傳統(tǒng)的多智能體強(qiáng)化學(xué)習(xí)方法可能因信息過載而效率低下。MGAAC方法引入了注意力機(jī)制,通過門控單元?jiǎng)討B(tài)選擇與當(dāng)前決策最相關(guān)的鄰居車輛信息,從而降低計(jì)算復(fù)雜性并提高決策的針對(duì)性。
Critic網(wǎng)絡(luò):Critic網(wǎng)絡(luò)用于評(píng)估Actor網(wǎng)絡(luò)生成的策略的長(zhǎng)期回報(bào)。不同于傳統(tǒng)的集中式Critic,MGAAC采用分布式Critic結(jié)構(gòu),每個(gè)車輛根據(jù)自身的觀測(cè)和鄰居的共享信息,獨(dú)立計(jì)算價(jià)值函數(shù)。這種設(shè)計(jì)不僅減少了通信開銷,還增強(qiáng)了系統(tǒng)的可擴(kuò)展性。
通過多智能體協(xié)作和注意力機(jī)制的結(jié)合,微云全息(NASDAQ:HOLO)MGAAC方法能夠在動(dòng)態(tài)環(huán)境中快速適應(yīng)網(wǎng)絡(luò)拓?fù)渥兓,并?shí)現(xiàn)任務(wù)卸載的高效優(yōu)化。實(shí)驗(yàn)結(jié)果表明,該方法在任務(wù)完成率、資源利用率和系統(tǒng)時(shí)延方面均顯著優(yōu)于傳統(tǒng)的單智能體強(qiáng)化學(xué)習(xí)和啟發(fā)式算法。
微云全息這項(xiàng)技術(shù)的推出,為智能交通系統(tǒng)和車載霧計(jì)算領(lǐng)域帶來了深遠(yuǎn)的影響。首先,它為自動(dòng)駕駛和車聯(lián)網(wǎng)應(yīng)用提供了高效的計(jì)算資源管理方案,能夠在動(dòng)態(tài)環(huán)境中實(shí)現(xiàn)低時(shí)延、高可靠的任務(wù)處理。其次,基于V2V交易的分布式框架為車輛間的資源共享和協(xié)作提供了新的范式,有望推動(dòng)車聯(lián)網(wǎng)生態(tài)系統(tǒng)的進(jìn)一步發(fā)展。
基于V2V交易范式、多智能體深度強(qiáng)化學(xué)習(xí)融合分析的車載霧計(jì)算動(dòng)態(tài)任務(wù)卸載技術(shù),代表了智能交通領(lǐng)域的一次重大突破。通過將分布式計(jì)算和人工智能相結(jié)合,該框架不僅解決了動(dòng)態(tài)環(huán)境下的任務(wù)卸載難題,還為駕駛員狀態(tài)感知和系統(tǒng)優(yōu)化提供了全新的視角。隨著技術(shù)的進(jìn)一步成熟和應(yīng)用推廣,這項(xiàng)創(chuàng)新有望成為未來智能交通系統(tǒng)的核心驅(qū)動(dòng)力,為構(gòu)建更安全、高效和智能化的車聯(lián)網(wǎng)生態(tài)奠定堅(jiān)實(shí)基礎(chǔ)。
【免責(zé)聲明:該文章系我網(wǎng)轉(zhuǎn)載,旨在為讀者提供更多信息資訊。所涉內(nèi)容不構(gòu)成投資、消費(fèi)建議,僅供讀者參考!
(新媒體責(zé)編:wa123)
聲明:
1、凡本網(wǎng)注明“人民交通雜志”/人民交通網(wǎng),所有自采新聞(含圖片),如需授權(quán)轉(zhuǎn)載應(yīng)在授權(quán)范圍內(nèi)使用,并注明來源。
2、部分內(nèi)容轉(zhuǎn)自其他媒體,轉(zhuǎn)載目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)。
3、如因作品內(nèi)容、版權(quán)和其他問題需要同本網(wǎng)聯(lián)系的,請(qǐng)?jiān)?0日內(nèi)進(jìn)行。電話:010-67683008
人民交通24小時(shí)值班手機(jī):17801261553 商務(wù)合作:010-67683008轉(zhuǎn)602
Copyright 人民交通雜志 All Rights Reserved 版權(quán)所有 復(fù)制必究 百度統(tǒng)計(jì) 地址:北京市豐臺(tái)區(qū)南三環(huán)東路6號(hào)A座四層
增值電信業(yè)務(wù)經(jīng)營(yíng)許可證號(hào):京B2-20201704 本刊法律顧問:北京京師(蘭州)律師事務(wù)所 李大偉
京公網(wǎng)安備 11010602130064號(hào) 京ICP備18014261號(hào)-2 廣播電視節(jié)目制作經(jīng)營(yíng)許可證:(京)字第16597號(hào)