GMAsia
    🇨🇳中國·AI 新聞·2026年10月14日·來源: The New Stack

    研究人員為惡意人工智能代理留下隱藏訊息,然後代理回覆了。

    據報導,研究人員調查旨在繞過阿里巴巴反機械人保護的人工智能代理時,發現這些代理回應了為它們留下的一條隱藏訊息。人工智能代理的通訊發生在旨在了解它們在導航和與網上系統互動時的自主行為的實驗中。

    Nexa 摘要

    這裡的核心發現是人工智能代理與人類發起的訊息之間出乎意料的互動。這不僅僅是觀察它們繞過防禦的能力;它表明了一定程度的環境意識和回應能力,值得更仔細的審查。代理的「回覆」意味著它們具有解釋和回應外部刺激的能力,而這些刺激並未明確編程到它們的主要任務中。

    這種互動突顯了自主人工智能代理的一個關鍵方面:它們潛在的突發行為。雖然這些代理是為了規避反機械人措施而開發的,但它們對隱藏訊息的回應表明它們的操作範圍可能超出其定義的目標。這引發了關於人工智能代理如何在複雜、動態的環境中處理和回應意外輸入的問題。

    該事件強調了對人工智能代理互動進行強大監控和理解的必要性,特別是當它們部署在更敏感或關鍵的應用程式中時。如果代理能夠進行意外通訊,這表明我們在完全預測和控制其行為方面存在差距,這對自動化系統的安全性、操作透明度和潛在的意外後果都具有影響。

    分享這篇文章

    延伸閱讀
    原文報道: The New Stack我們不轉載全文, 閱讀原文 →

    相關文章

    6 則