AI Agent如何顛覆傳統自動化？_風聞

去年 11 月， OpenAI 發佈 AI Agent 初級形態產品 GPTs，讓人看到智能體的應用前景。谷歌、亞馬遜在該領域也有所涉獵。比爾・蓋茨更是認為 AI Agent 是 AI 的未來，並預言不久的將來，所有人都將擁有專屬 AI 助理。

為了更好地理解智能體的落地前景，全球領先的風險投資和私募股權公司Insight Partners進行了多個行業的調研，併發布一篇深入的分析報告，旨在探索 AI Agent 與傳統自動化平台的差異，以及AI Agent當下落地情況。

核心觀點指出，AI Agent 和大型語言模型（LLM）的融合正在推動自動化向更智能、更高效的方向發展。報告強調了人機交互在部署生成性 AI 解決方案中的重要性，並提出了自動化部署應採取漸進式策略，從簡單任務開始，逐步過渡到複雜工作流程。

以下是原文翻譯。

/ 01 / 自動化領域發展的趨勢預測

1.從消費者到知識工作者,每個人都將擁有自己的 AI 助手。這將重新定義垂直應用、自動化平台和 IT 服務之間的傳統邊界,為企業家創造變革性的市場機會。AI 助手將以不同形式出現,從現有平台的輔助工具,到內嵌 AI 的應用,再到各種形態的 AI 智能體 (AI Agent)。

2.人機協作是部署生成式 AI 解決方案的核心。目前大多數應用場景都處於實驗或早期生產階段,側重於建議和輔助型工作流程。LLMs 還不具備可靠的規劃和推理能力,記憶和上下文理解等領域仍在研究中。在自動化平台上,確定性執行至關重要,LLMs 被用於"設計期"的特定任務,而非"運行期"。

3.自動化是一個被低估的難題。從業者正將 AI 加入他們的解決方案和專業經驗,以提升平台效率和用户體驗。頂尖的 LLM 提供商正在加入智能體建模、協作和工具訪問功能,讓用户能快速構建 AI 智能體 (如 GPT 系列)。有望突破的新興企業需要利用獨特的數據集和簡潔的用户體驗,提供差異化的客户價值,重塑工作流程。

4.內置 AI 的自動化部署將採取"從簡單到複雜"的漸進方式,從簡單任務開始,逐步過渡到複雜工作流。關鍵是持續嘗試智能體,瞭解 AI 功能在哪些地方真正創造價值,並確保在數據、工具和運行時等方面搭建合適的"腳手架",使其成為自動化架構的一部分。隨着 AI 模型能力的增強,可以逐步擴大 AI 功能的應用範圍。

5.代碼生成已成為開發基於生成式 AI (GenAI) 應用和 Agent 自動化平台的關鍵要素。代碼兼具文本形式和明確性能指標兩大特性,是 LLM 的理想功能。編程輔助工具的初版已經廣泛部署,我們看到更成熟的 AI 驅動開發平台正在湧現。代碼生成型 LLMs 將在智能體架構中扮演關鍵角色。

/ 02 / 自動化平台的演變

自動化是人類不斷努力的事業。每個知識工作者都熟悉這個不起眼的“宏”——一組重複命令的快捷方式，可以額外提高生產力。

早期的自動化工作主要集中在報價到現金、薪資等工作流程上，工程師編寫定製代碼，將這些受靜態規則和定義控制的工作流程拼接在一起。這些脆弱的早期方法推動了第一代自動化平台的開發，例如：

機器人流程自動化 (RPA) 平台在自動化重複性手動任務方面提供了最大價值。它們結合了預定義工作流程庫和低代碼/無代碼平台，幫助用户構建自己的劇本。RPA 平台已逐步納入 AI/ML 模型以擴展其功能。

像 Workato這樣的iPaaS 平台首先創建一箇中間件層來集成數據、應用程序源和 API 以連接不同的資源。該數據層是自動化引擎的關鍵輸入，創建乾淨的界面是自動化之旅的第一步。

低代碼任務自動化平台通過簡單的 UI 提供一組預定義的集成，以自動執行知識工作者和中小型企業的重複任務。

各種垂直自動化 方法專注於供應鏈、IT 運營和開發人員生態系統等領域的特定工作流程，以及面向客户的用例（如幫助台和客户服務團隊）的聊天機器人。

雖然這些平台顯著減少了重複性工作，但通過預定義工作流程或諮詢部署來實現自動化價值所需的引導仍然很複雜。實施對於企業運營環境的變化也很脆弱。

GenAI 有潛力加速這一自動化進程，因為現有企業將引人注目的功能融入到他們的平台中，構建者嘗試新架構，研究人員努力實現自主人工智能 (AGI) 的最終目標。

/ 03 / 自動化中的AI：不同的參與者，差異的方法論

企業中的自動化通常是一項複雜的任務，一些從業者甚至將其稱為執行工作流的多個元素的複雜編排。隨着 genAI 的出現，現有企業和初創企業/規模化企業正在從不同的角度抓住這一機會。

RPA 和任務自動化平台帶來了顯著的現有優勢，擁有豐富的自動化工作流程庫以及與企業處理複雜工作流程的經驗。GenAI 提供了一個通過簡化的用户體驗來解決脆弱性和引導問題的機會。

Microsoft 365 和 Notion 等應用程序平台將 AI 直接嵌入到平台和用户工作流程中，以幫助完成任務、提供建議並生成內容以協助用户的工作流程。

原生 AI 方法從應用或工作流出發,以第一性原理重新思考自動化。在應用方面，Swimm 和Writer等新一代生產力工具令人驚豔地展示了生成式 AI 對工作模式的革新。同樣，來自銷售、營銷、法律和財務的許多垂直應用程序都使用 genAI 功能來簡化複雜的工作流程。

LLM 提供商和創業公司在自動化領域開闢新路徑,利用智能體駕馭生成式 AI 能力執行簡單任務。另一些方法將 LLMs 與必要的"腳手架"相結合,應對複雜工作流和應用。。Agent 自動化是目前不斷創新和研究的焦點,開發者正在模型、架構和工具方面進行廣泛實驗。

RPA 和任務自動化平台

當前幾代自動化平台已積極採用更新的機器學習和人工智能模型作為其平台的一部分。下面討論了這些平台當前狀態的簡要概述：

用户界面連接到低代碼工作室，用户可以在其中構建、部署和驗證自動化。該界面還用於監控性能、跟蹤每個策略的使用情況，甚至衡量他們創建的自動化的投資回報率。

iPaaS作為中間件發揮着關鍵作用，它將來自應用程序、數據存儲和事件流的數據彙集在一起，以創建到自動化層的高效接口。

自動化層使用工作室中的模板從預構建的劇本、預測機器學習模型和工具庫中進行選擇，或者執行新的工作流程。一些常見的用例包括：

**·**從圖像或電子郵件等非結構化來源中提取數據並填寫表格。

**·**觀察人類（例如閲讀屏幕、跟蹤擊鍵）以產生可重複的工作流程或建議潛在的新自動化。

**·**從庫存系統中提取數據並使用 ML 模型創建預測。

現有企業正在使用 genAI 來簡化用户參與並提供新的工作流程，例如：

**·**輸入諸如“銷售勘探”之類的任務，副駕駛會翻譯意圖並搜索自動化庫，為用户提供任務的起點。

**·**創建一個表單並根據預先訓練的模板使用適當的字段更新它。填寫從各種非結構化來源提取的數據。

**·**生成“低”代碼以基於 NL 描述以及測試用例創建自動化，以驗證輸出和工作流程的描述。

人工智能工具通過幫助用户加快實現價值的時間，幫助這些平台建立其現有優勢（客户和手冊）。更好的 UI/UX 有助於減少用户在複雜部署中開始時通常需要的諮詢引導。隨着 LLM 能力的發展，我們可以預期 RPA 和任務自動化的能力也會增長。

“未來,人類與數字世界的一切交互都將通過 AI 智能體實現。"– 楊立昆 (Yann LeCun)

/ 04 / 代理自動化框架：Copilots/GPT 和Agent

定義市場上常用於指代 genAI 用例的術語可能會有所幫助。

·Copilots是基於 genAI 的現有應用程序和平台界面，為用户提供了發現和增強現有功能的簡化方法。

·智能體 (Agent) 將大語言模型的功能與代碼、數據源和用户界面相結合以執行工作流程。構建者正在研究以下幾種方法：

**·**圍繞 LLM 或針對特定任務（代碼生成）訓練的 LLM 構建簡單的封裝器。

**·**具有“腳手架”的專家混合架構，可將特定於任務的代理、預定義的代碼/工作流程和外部工具結合起來，以重新構想應用程序或自動執行復雜的任務。

·通用智能體旨在通過簡單地描述來自動化任何任務。對於需要持續人工智能進步的研究人員來説，這仍然是一個長期目標——在下面的“參考文獻和進一步閲讀”中瞭解更多信息。

無代碼代理/GPT

AI Agents 最初只是實驗，中島洋平 (Yohei Nakajima) 等構建者發佈了 Baby AGI 等項目，該項目基於本地 LLM 功能構建，可以運行簡單的自動化。LLM 提供商現在提供引人注目的無代碼平台，其中包含外部資源插件庫，以構建 LLM 的自定義版本。對於許多簡單的任務或一次性自動化，這可能是一種快速的開始方式。

在這種方法中，無代碼控制枱允許用户提供任務的詳細描述或使用少量提示來引導大模型構建智能體。LLM 提供商現在提供與數據源和應用程序的集成，使代理能夠利用外部數據作為其工作流程的一部分。該代理還可以使用專有數據，使用檢索增強生成 (RAG) 等技術來提高準確性。API 引入了搜索等外部工具。

如上所示，高級代理可以使用粘合代碼圍繞大模型的功能構建，將這些不同的元素組合成一個統一的智能體。LLM提供商預計將繼續推出新功能，例如Agent建模、協作、更多工具訪問和預構建功能、反射、安全護欄等，使其成為構建Agent的強大平台。

混合專家代理架構

Bardeen、Imbue 和 MultiOn 等構建商正在利用專家混合 (MoE) 代理框架來解決為複雜工作流提供確定性結果的問題。其想法是將工作流程分割為分配給特定代理或功能的任務，併為代理提供所需的“腳手架”，包括數據、豐富的工具集和接口。架構概覽如下:

用户界面

面向用户的大模型使用户能夠描述任務並利用上下文窗口來提供相關上下文，例如少量示例。新的UI 方法結合了用户上下文和交互性，允許用户引導智能體並改進其方法。該設計使“人在環”能夠驗證最終輸出。該設計實現了更流暢的“人機交互”界面，以提供輸入並驗證最終輸出。

任務代理

工作流程可以分解為由 LLM 代理執行的不同任務，其中一些任務將在下面詳細介紹。這優化了當前的 LLM 功能，並能夠靈活地使用任務代理來實現特定功能，並提供乾淨的抽象和未來升級或重構它們的選項。

**·**如今的規劃智能體可提出計劃,將用户意圖分解為任務清單,經人工審批後再進行調度執行。這仍是一個活躍的研究領域。

**·**路由任務負責將任務映射到合適的 AI/ML 智能體或預定義工作流程。

**·**功能智能體接受針對特定任務的訓練 (生成式 AI 或預測性 ML 模型)。

**·**代碼生成智能體將任務轉換為特定任務所需的代碼,如 SQL 查詢。

**·**反思型 LLM 通過迭代輸出來評估質量並優化最終結果。Devin 等平台已證實這一技術在提高輸出準確性方面的有效性。

確定性運行時間

為了提供始終正確的最終輸出，在確定性運行時組合不同任務的不同輸出已被證明是良好的實踐。例如，對於金融用例，代碼生成 LLM 生成在運行時執行的 SQL 查詢，以實現精確的數據提取。

MoE 架構的核心設計原則是僅在需要時使用 AI/ML 模型並利用預定義的工作流程/劇本。LLM 在設計時使用，並在確定性運行時進行綜合。

智能體與人類的人工智能接口

正如前文所述，人機交互界面是當今架構的一個關鍵點。開發者正通過多種方式將智能體植根於用户上下文,從在上下文窗口中輸入,到將智能體設計為瀏覽器插件以觀察用户行為並捕獲上下文。

LLM 插件引入外部數據或工具，是賦予智能體更多技能的關鍵。最後，代理可以使用 API 與電子郵件、生產力和通信工具等用户平台進行通信，模擬人類的工作流程。

智能體間交互界面是一個活躍的研究和開發領域。在 MoE 模型中,具有不同能力的任務智能體需要如前所述進行交互。久而久之,我們可以設想智能體之間通過交互來完成任務——類似於如今連接應用的 API,延伸出支持 AI 的版本。

企業部署自動化的注意事項

1.大多數企業已經使用一系列自動化平台，從用於特定任務的經典 RPA 和任務自動化平台到自主開發的解決方案。人工智能帶來的生產力仍然是炒作而非現實。基於 genAI 的自動化的候選者需要進行清晰的成本/效益分析，因為它們將遵循與以前的方法類似的成熟曲線。

2.智能體的性能與其訓練數據的質量和相關性直接相關。對於許多企業來説，構建乾淨且集中的數據集和數據管道來訓練模型，是最優先的工作。

3.隨着 GPT5/Llama3 即將發佈，LLM 格局正在迅速發展，這將刷新SOTA的標準。與此同時，多種具有 GPT4 級別性能的型號現提供已以極具吸引力的成本。企業現在擁有不同來源、不同性價比水平的模型，可以根據用例和功能需求進行選擇。

4.在平台層面，市場有多種選擇。現有企業正在嵌入人工智能或提供輔助工具，以加快用户實現價值的時間。初創公司/規模擴大公司和大模型提供商正在採用人工智能原生方法來重新發明垂直用例或創建新平台來改變成本、性能和用户體驗。工作流程和性能基準應該推動選擇。

5.如今的大模型對提示非常敏感，輕微的變化可能會導致模型輸出出現偏差。在用例級別（相對於模型級別）建立明確的性能衡量標準是關鍵。治理和數據安全也是如此。人機交互是當今所有人工智能部署的基本特徵。

自動化建設者的注意事項

1.建築商可以在自動化平台中使用 genAI 採取“爬行、行走、奔跑”的方法。深入瞭解用户、用例、其性能基準，並利用 LLM 作為將其功能與任務相匹配的工具，對於構建差異化解決方案至關重要。

2.大模型主要是系統 1 思維者(基於訓練數據做出直覺反應)。開發者需要差異化功能和預定義函數/劇本、可能的情況下使用 ML 模型。有重點和有針對性的數據集對於模型的基礎至關重要。

3.對於複雜的用例 - 不斷的實驗和正確的“腳手架”來合併用户上下文、訪問外部工具和數據集、反射機制等，是“專家組合”智能體架構的基礎方面。

4.簡單的基於文本的 UI 是良好的第一步。構建者通過添加實時交互性 和 多模式 UI進行創新 ，為用户創建更積極的參與，以跟蹤大模型任務列表、評估輸出並提供主動反饋來引導輸出。

5.通過正確的治理引入差異化的數據集，並考慮 安全權衡、安全護欄和性能，對於避免最終用户環境中部署時的監管和合規性問題非常重要。

/ 05 / 生成式 AI 代理用例

在我們與企業的對話中，代理自動化方面正在進行各種努力。下面詳細介紹了一些用例：

**·**F100 電信公司的首席數據官：“我們正在構建智能體工作流，將表格和數據庫鏈接在一起，整合多個數據源，然後根據數據採取行動或提出建議。”

**·**一家全球諮詢公司的數據和人工智能副總裁正在構建智能體工作流，以使數據分析師能夠從不同的電子表格中獲取見解。

**·**一家 F500 建築和房地產公司的數據和人工智能高級副總裁正在構建一個集合Palantir、OpenAI 和內部輔助的智能體程序，以從數千份提交的 RFP 投標中選擇獲勝的 RFP 投標。

**·**一家大型銀行的高級副總裁，“我看到 GenAI 的兩個活躍用例。第一，向我們所有工程師推出的編碼輔助工具，我們看到高級工程師的生產力提高了約 20% 以上。我們期待這裏的新功能。第二，與大模型討論文檔，RAG 顯著改進了在模型落地的同時保護隱私的方式。聊天機器人一直是實驗性的推出，我們仍在完善這個用例，以考慮安全性和合規性。”

**·**一家大型銀行的首席數字官，“自動化將在我們的行業中採取多種形式。我們擁有大量的 RPA、ITSM 垂直自動化平台等，並在大模型上構建了智能體。我們正在積極嘗試代理自動化架構並不斷學習。一些現有供應商在整合人工智能方面表現出了極大的敏捷性。”

/ 06 / AI自動化市場地圖

人工智能的創新步伐只會不斷加快。需要注意的是，這裏討論的許多方法都處於實驗和早期生產階段。

隨着代理和自動化世界的發展，我們致力於積極跟蹤和更新該領域的發展狀況。同時，我們歡迎有機會與創始人合作構建代理自動化、重新構想垂直應用程序和差異化基礎設施平台，並期待與社區的反饋和對話。