一種深度強化學(xué)習(xí)模型 允許AI代理跟蹤氣味羽流
長期以來,科學(xué)家和工程師從動物的驚人能力中汲取靈感,并試圖在機器人和人工智能(AI)代理中對這些能力進行逆向工程或復(fù)制。其中一種行為是氣味羽流跟蹤,這是一些動物,特別是昆蟲,通常遠距離尋找感興趣的特定氣味(例如食物或配偶)來源的能力。
華盛頓大學(xué)和內(nèi)華達大學(xué)里諾分校的研究人員進行的一項新研究采用了一種使用人工神經(jīng)網(wǎng)絡(luò)(ANN)的創(chuàng)新方法來理解飛行昆蟲的這種非凡能力。他們的工作最近發(fā)表在《自然機器智能》上,舉例說明了人工智能如何推動突破性的新科學(xué)見解。
“我們有動力研究一種復(fù)雜的生物學(xué)行為,氣味羽流跟蹤,飛行昆蟲(和其他動物)用來尋找食物或配偶,”該研究的第一作者Satpreet H. Singh告訴Tech Xplore。“生物學(xué)家已經(jīng)通過實驗詳細研究了昆蟲羽流跟蹤的許多方面,因為它是昆蟲生存和繁殖的關(guān)鍵行為。
雖然羽流跟蹤是一種至關(guān)重要的生物學(xué)能力,但它也是生物智能的一個顯著例子,因為它需要整合對當前和以前經(jīng)歷的氣味的記憶,以及處理間歇性或不可靠的嗅覺線索和風(fēng)感信號,使昆蟲能夠快速適應(yīng)它們的飛行軌跡。
“他們這樣做時沒有他們飛行的環(huán)境的全球地圖,”辛格補充道。
如果在機器人或人工代理中可靠地復(fù)制,氣味羽流跟蹤可以讓研究人員制造出更好的機器人,可以檢測和跟蹤有害氣體泄漏、野火和其他環(huán)境威脅。
“我們沒有進行傳統(tǒng)的實驗室風(fēng)洞實驗,而是使用人工神經(jīng)網(wǎng)絡(luò)的互補'計算機'方法,”Singh解釋說。“這有助于我們在多個層面上對羽流跟蹤形成綜合理解,包括緊急行為、神經(jīng)表征和神經(jīng)動力學(xué)。
許多神經(jīng)科學(xué)家已經(jīng)開始使用在標記數(shù)據(jù)上訓(xùn)練的人工神經(jīng)網(wǎng)絡(luò)(ANN)來研究和人工復(fù)制生物過程。在他們的研究中,Singh和他的同事使用了深度強化學(xué)習(xí)(DRL),這是一種算法工具包,才剛剛開始在神經(jīng)科學(xué)中獲得牽引力,它使用模擬而不是標記數(shù)據(jù)來訓(xùn)練人工神經(jīng)網(wǎng)絡(luò)。
“DRL最近在神經(jīng)科學(xué)之外的一些非常成功的應(yīng)用包括DeepMind著名的圍棋游戲AI,或者OpenAI最近的一些GPT語言模型,”Singh說。“就像在動物訓(xùn)練中一樣,DRL使用模擬的'獎勵'和'懲罰'來訓(xùn)練可以自主完成任務(wù)的ANN代理。
為了使用DRL訓(xùn)練他們的羽流跟蹤劑,研究人員首先模擬了位于總面積約為120米的多風(fēng)競技場內(nèi)散發(fā)的氣味。2.當他們的代理人確定氣味來源的位置時,他們得到了獎勵。相反,如果他們忘記了氣味羽流并離開了競技場,他們就會受到“懲罰”。
“經(jīng)過培訓(xùn)后,我們利用模擬器的靈活性來生成具有各種氣味濃度和風(fēng)力模式的羽流,以查看代理在不同條件下的精確行為,”辛格說。“在真實的風(fēng)洞中重現(xiàn)對羽流配置的這種細粒度控制將是一項相當費力的工作。
Singh和他的同事們還能夠觀察他們的人工神經(jīng)網(wǎng)絡(luò)的各個單位(即人工神經(jīng)元)的活動,因為它跟蹤了氣味羽流。在追蹤過程中,這種個體神經(jīng)元記錄尚未在昆蟲自由形態(tài)飛行期間收集到,因為它們是使用現(xiàn)有技術(shù)無法實現(xiàn)的。
“在我們訓(xùn)練有素的人工代理中出現(xiàn)的行為與生物學(xué)家之前在進行羽流跟蹤的飛行昆蟲中觀察到的行為模塊非常相似,”辛格說。
研究人員收集的記錄表明,他們的模型可能會復(fù)制支持動物氣味羽流追蹤的生物學(xué)過程。隨后,Singh和他的同事模擬了可以在未來的風(fēng)洞真實世界實驗中重現(xiàn)的羽流配置。
這些模擬使他們能夠生成不同的假設(shè),說明人工代理在不斷變化的風(fēng)力條件下跟蹤羽流時的行為。他們專門研究了風(fēng)向經(jīng)常變化的情況。
“利用來自ANN代理的同時行為和神經(jīng)觀察,我們對支持羽流跟蹤的算法和神經(jīng)計算產(chǎn)生了直覺和洞察力,”Singh解釋說。“例如,我們看到神經(jīng)活動編碼變量,例如自最后一次氣味相遇以來的時間,這些變量以前被假設(shè)對羽流跟蹤很重要。先前的實驗和計算結(jié)果之間的這些相似性表明,這些數(shù)量對于成功的羽流跟蹤至關(guān)重要。
除了實現(xiàn)關(guān)鍵技術(shù)進步外,還可以對ANN試劑進行逆向工程,以更好地了解它們的工作原理,這反過來又可能為神經(jīng)科學(xué)研究提供信息。因此,Singh和他的同事創(chuàng)建的模型也可能被神經(jīng)科學(xué)家用于研究氣味羽流跟蹤背后的生物學(xué)過程。
在未來,研究人員希望他們的模型能夠激發(fā)機器人代理的創(chuàng)建,這些機器人代理可以在搜救任務(wù),環(huán)境監(jiān)測工作和其他應(yīng)用中跟蹤氣味。在接下來的研究中,他們計劃通過提高模擬和代理的物理和生物保真度來進一步發(fā)展他們的模型,以便它們更好地代表現(xiàn)實世界的氣味羽流。此外,他們希望人工再現(xiàn)飛行昆蟲的其他生理特征和能力。
“還需要更多的理論工作來理解我們的人工神經(jīng)網(wǎng)絡(luò),進一步了解產(chǎn)生緊急行為的計算,”辛格補充道。“最后,我們的代理執(zhí)行一項任務(wù),即羽毛跟蹤,而飛行昆蟲的行為要豐富得多。開發(fā)可以重現(xiàn)如此豐富的生物復(fù)雜性的模擬和代理訓(xùn)練范式是一項艱巨的工程挑戰(zhàn),應(yīng)該激發(fā)未來的工作。
免責(zé)聲明:本文由用戶上傳,與本網(wǎng)站立場無關(guān)。財經(jīng)信息僅供讀者參考,并不構(gòu)成投資建議。投資者據(jù)此操作,風(fēng)險自擔。 如有侵權(quán)請聯(lián)系刪除!
-
奔馳GLE作為豪華SUV市場中的佼佼者,憑借其卓越的性能、豪華的內(nèi)飾以及寬敞的空間,吸引了眾多消費者的關(guān)注。...瀏覽全文>>
-
在2025年,安徽阜陽地區(qū)的帕薩特新能源汽車市場表現(xiàn)非?;钴S。作為一款備受關(guān)注的新能源車型,帕薩特新能源憑...瀏覽全文>>
-
近日,滁州地區(qū)的大眾汽車經(jīng)銷商傳來好消息:備受矚目的2025款T-ROC探歌正式上市,并且以極具競爭力的價格吸引...瀏覽全文>>
-
在選擇一款新能源汽車時,了解其價格和配置是非常重要的一步。安徽淮南地區(qū)的長安啟源E07作為2024款的新車型,...瀏覽全文>>
-
阜陽長安啟源A05作為長安汽車旗下的全新車型,自推出以來便憑借其獨特的設(shè)計風(fēng)格和豐富的配置吸引了眾多消費者...瀏覽全文>>
-
阜陽長安啟源A07作為一款備受矚目的新能源車型,以其豪華配置和親民的價格在市場上引起了廣泛關(guān)注。這款車型不...瀏覽全文>>
-
安徽淮南威然2024款價格及配置詳解隨著汽車市場的不斷更新?lián)Q代,上汽大眾旗下的MPV車型——威然(Viloran)憑...瀏覽全文>>
-
QQ多米新車報價2025款,買車省錢秘籍隨著汽車市場的不斷發(fā)展,消費者在選購車輛時不僅關(guān)注車型的性能和配置,...瀏覽全文>>
-
滁州途觀X 2024款最新價格及買車省錢秘籍隨著汽車市場的不斷發(fā)展,大眾途觀X作為一款兼具時尚與性能的中型SUV...瀏覽全文>>
-
隨著汽車市場的不斷發(fā)展,大眾蔚攬以其優(yōu)雅的設(shè)計和卓越的性能贏得了眾多消費者的青睞。作為一款兼具實用性和...瀏覽全文>>
- Alienware 在 2025 年 CES 上展示了一些超凡脫俗的技術(shù)
- Wickes 任命首席零售和分銷官
- 分析師稱GTA 6或?qū)淞⑿袠I(yè)新標準
- 索尼和本田在拉斯維加斯推出售價 89,900 美元的 Afeela 1
- 日本 11 月游客人數(shù)創(chuàng)月度新高
- 神經(jīng)認知測試在 3 歲兒童白血病治療期間可行
- 牛津郡小學(xué)支持圣誕毛衣日
- S?strene Grene 投資歐洲物流中心
- 有人已經(jīng)在電視上直播 BNMC 打造的 1967 年福特野馬 Restomod
- 潛在的分子療法可以逆轉(zhuǎn)小鼠的胎盤發(fā)育問題
- Nvidia DLSS 4 有望將游戲性能提高 8 倍
- 人工智能在預(yù)測自身免疫性疾病進展方面顯示出良好的前景
- 心理物理實驗揭示皮膚水分感知是如何改變的
- 科茨沃爾德公司慶祝圣誕節(jié)圓滿成功
- 南法納姆學(xué)校被評為薩里郡表現(xiàn)最好的小學(xué)
- 約克區(qū)九所小學(xué)將削減招生人數(shù)
- 松下新款電動汽車電池為 Lucid Gravity 帶來 450 英里續(xù)航里程
- 泰國旅游呈現(xiàn)新趨勢
- 研究人員找到在細胞水平上餓死前列腺癌腫瘤的新方法
- 領(lǐng)先的人工智能聊天機器人在測試中表現(xiàn)出類似癡呆癥的認知能力下降
- 龐大的 Project Zomboid build 42 終于可以玩了
- Steam Replay 回歸向您展示 2024 年您玩得最多的 PC 游戲
- Jollyes 推出強化的人才支持和招聘措施
- Karen Millen 與 Simon Harrison 共同推出全新高級珠寶系列
- 奇瑞風(fēng)云A8L電動轎車刷新續(xù)航里程世界紀錄
- 虛擬藝術(shù)家將別克 Cascada 帶回 2026 款車型
- OnePlus 宣布推出新計劃解決綠線問題
- OnePlus Watch 3 將擁有更大的電池和更薄的機身
- 研究人員發(fā)現(xiàn)可變剪接與自身免疫性疾病遺傳之間的細胞類型特異性聯(lián)系
- 科學(xué)家確定腦細胞類型是排尿的主要控制者