今天小編分享的互聯網經驗:你說,PC做!實在智能推出行業首個基于大模型的TARS-RPA-Agent產品,歡迎閱讀。
2023 年初,火遍全球的 ChatGPT 揭開 AIGC 元年大幕,國内外各家科技公司紛紛發布大模型,一時間 " 百模大戰 " 風起雲湧。6 月下旬,AI 行業準獨角獸實在智能(Intelligence Indeed)開啟自研垂直大語言模型 " 塔斯(TARS)" 内測。
在此之前,早在 2022 年 12 月,實在智能曾首創基于計算機視覺大模型的 " 智能螢幕語義理解 " 技術(ISSUT),并發布 " 實在 IPA" 模式,将 RPA 從傳統 " 拖拉拽 " 的專家模式進階到輕松 " 點選用 " 的小白模式,實現 RPA 的人人可用。
時針再撥到 2023 年下半年," 大模型如何在真實商業場景快速、有效落地 " 成為科技屆與產業界最關注的首要問題。8 月 16 日,實在智能召開第七次新品發布會,對這個問題交出實實在在的答卷。
會上,實在智能正式發布 " 塔斯(TARS)" 大模型,并震撼推出行業首個基于大模型的 TARS-RPA-Agent 產品,将數字員工應用門檻進一步大幅降低,實現 " 所說即所得,你說,PC 做!"
下面,小編帶您一同進入 TARS 的世界,回顧幹貨滿滿、精彩紛呈的科技盛宴:
大模型開啟 RPA 新境界:對話式生成數字員工,自主完成工作
實在智能創始人兼 CEO 孫林君(阿寶)在開場致辭中提到,在大模型時代,數字員工的終極形态已變得越來越清晰—— " 大模型與 RPA 緊密結合,大幅降低使用門檻,突破接口能力邊界。數字員工将具備自主完成任務的能力,成為每個人的智能數字助理,讓工作生活更輕松 "。本次發布會推出的 "TARS-RPA-Agent" 是業界首款計算機視覺與大語言模型結合的智能體產品,相信會對 RPA 行業的發展具有裡程碑的意義。
他同時回顧了五年來的技術迭代和產品創新," 實在智能已擁有 50 餘項發明專利,300 餘項知識產權,這是我們踏踏實實做好技術、做好產品的力證 ",作為一家平台型的科技公司,實在智能致力于不斷迭代產品技術,通過标準化產品和解決方案為千行百業客戶和生态合作夥伴賦能,同時構建客戶最優感知的交付和服務體系。
實在智能全新技術底:TARS 大模型
内測開啟 45 天之後,實在智能合夥人、核心算法部負責人歐陽小剛(新一)與算法專家汪東瑤(奎托斯)共同揭開了 " 塔斯(TARS)" 大模型的神秘面紗。
在 AIGC 時代到來之際,實在智能通過 "TARS 大語言模型(通用基礎模型、各個垂直行業模型)+ISSUT(智能螢幕語義理解)機器視覺大模型 " 重構了技術底座,并在這二者之上,對超自動化產品矩陣更新改造,持續發布創新應用。
發布會上,TARS 大模型展現了優異的文本生成、語言理解、知識問答、邏輯推理等主流能力 :
其中,與湘财證券共建的 " 自研、有效、安全、可信任、可落地 " 的财經行業大模型 TARS-Finance-7B,既保留了生成類大模型的通用技能,更在金融财經領網域得到了顯著的加強和提升,在多個中英文的通用基準測評集和财經領網域基準測評集上均取得良好成績:
在财經領網域,與同為 60-70 億參數的 Baseline 模型相比,TARS-Finance-7B 模型平均任務得分領先 1%~20%;
在通用領網域,TARS-Finance-7B 相較基座模型和其他同尺寸 Baseline 模型,旗鼓相當并在部分領網域領先。
優異測評成績的背後,是歷時 4 個月實實在在的工作:
基于充分細致的語料收集和清洗、數據處理及标注,超千億 Tokens 的預訓練語料和超百萬條指令微調數據,實在智能獨立完整復現大模型構建的預訓練、指令微調和人類反饋強化學習(RLHF)三階段,使大模型具備完整能力
自主研發用于中文不當言論判别和生成終止的 Detoxify 系統,提升模型的安全性和無害性,讓大模型 " 既懂事,又懂法 "
輕便落地的大模型,才是更好的大模型。" 成本可控、效果可用、定制化訓練、私有化部署 " 是 TARS 大模型在真實場景商用落地的關鍵特性。
在解決大模型的輕便性和易用性方面,實在智能也做了很多創新,如通過模型量化降低推理階段的硬體資源消耗、通過推理加速工具和技術優化問答互動產品體驗等。此外,TARS 大模型支持無縫對接實在 Chatbot 產品,可以将大模型的能力通過 " ⼀鍵配置 " 便捷投放到網頁、App、小程式等各個終端,同時支持私有化部署,模型更可控、數據更安全!
讓大模型 " 看得見 動起來 ":行業首發 TARS-RPA-Agent
實在智能進入超自動化賽道以來,不斷将 AI 技術與 RPA 產品進行深度融合,持續推動創新應用。曾在業内首創 " 融合拾取 " 技術,支持頂層拾取與 CV 拾取無縫融合,使得傳統 RPA" 拖拉拽 " 專家模式穩定絲滑;進而首創 " 智能螢幕語義理解 " 技術(ISSUT),支持對電腦、手機、平板等螢幕的理解,通過實在 IPA 開創 " 點選用 " 的小白模式。
大模型時代開啟後,實在智能一直在思考如何将大模型與 RPA 產品相結合,通過文本指令或對話聊天的方式直接生成數字員工,操作 PC 電腦自主完成工作任務。從而在實在 IPA" 小白模式 " 基礎上,将 RPA 使用門檻再進一步降低,直接進入到 " 所說即所得,你說,PC 做 " 的 " 傻瓜模式 "。
經過不斷探索和嘗試,實在智能在業界首發基于大模型的 Agent 產品,即 TARS-RPA-Agent ——這是一個基于 "TARS+ISSUT" 雙模引擎,有 " 大腦 ",更有 " 眼睛和手腳 " 的超自動化智能體。同時,也是能夠自主拆解任務、感知當前環境、執行并且反饋、記憶歷史經驗的 RPA 全新模式。
發布會上,歐陽小剛(新一)詳細介紹了 TARS-RPA-Agent 在設計過程中的解決的關鍵問題和創新特性:
①自主拆解任務:復雜問題,分而治之
在實際場景中,人類的復雜指令往往蘊含在非常簡潔的語句當中,并不是通過大模型生成一段 Python 代碼,或簡單調用 3-5 個 RPA 組件就能實現。
TARS-RPA-Agent 支持将表述簡單但含義復雜的指令,進行 Chain-Of-Thought 式的自主拆解和細化,之後将拆解出的子任務和具體步驟與實在 RPA 的流程塊和組件進行映射,最終完成一體化、高可控的復雜流程生成。
例如," 我要買一台筆記型電腦,幫我推薦下 ",TARS-RPA-Agent 可将其拆解成 " 登錄購物網站,查詢筆記型電腦品牌、配置、價格等信息,完成產品推薦 " 等多個步驟并加以自動實現。
②感知當前環境:人類視角,理解螢幕
" 如何在理解指令含義的基礎上,精準找到所要操作的螢幕畫面上哪裡是輸入框、登錄按鈕或者聊天視窗?如果不僅僅是基于浏覽器的軟體而是成千上萬種不同 CS 架構的客戶端軟體怎麼辦…… "
" 你是我的眼 ",基于計算機視覺大模型的 " 智能螢幕語義理解 " 技術(ISSUT)為 TARS-RPA-Agent 裝上了感知世界的眼睛,帶來真正基于人類視覺的電腦螢幕和操作對象理解。
ISSUT 使得 TARS-RPA-Agent 可以 " 秒懂 " 螢幕畫面,第一時間完成自動解析,無需人工介入參與。在無法解析網頁源代碼或者客戶端軟體不開放 API 接口的大量真實場景中,ISSUT 的價值倍加凸顯。
例如,理解指令并自動操作并不開放 API 接口的企業微信:
③執行并且反饋:環環相扣,單步尋優
PDCA(計劃、執行、檢查、處理)是人類優秀的工作習慣,在執行過程中不斷反饋和修正是客觀世界的一般規律。真實場景的意圖理解和任務執行非常復雜,TARS-RPA-Agent 同樣需要保證每一步操作的正确性,避免因為理解偏差,或者操作失誤,導致最終無法完成任務。
因此,TARS-RPA-Agent 巧妙地設計了 " 基于強化學習的單步尋優策略和每步執行的反饋 " 相關機制,不斷提高決策和執行過程的正确性、可控性。
例如,基于之前動作的啟發式尋優:
④記憶歷史經驗:擴展檢索、長時記憶
" 聖鬥士不會被同樣的招數打敗兩次 ",作為一個智能體,TARS-RPA-Agent 也需要提升自主學習和迭代能力,從而能夠學習歷史經驗,并通過歷史案例不斷提升下次遇到類似任務時的自主決策能力,持續提升人機協同效率。
大模型的上下文保留和決策優化等長時記憶能力,通常通過内存管理等手段實現。TARS-RPA-Agent 也結合上下文擴展、向量檢索等技術,配備了長時記憶能力,支持将過往任務的執行情況、用戶修正、執行結果等保存到數據庫,并作為後續分析和優化的基礎。
"TARS+" 開啟無限可能
發布會上,實在智能合夥人、產品創新部負責人周春照(索隆),實在智能合夥人、創新研發中心負責人趙明(鳴人),以及產品專家張譯颢(拓海)、張鑫燕(虞姬)等,分别接連上新體驗感拉滿、智能感十足的 TARS 大模型與超自動化產品矩陣的深度融合產品,以及全面支持國產信創的 IPA 數字員工。
TARS+RPA=ChatRPA
TARS+IDP=ChatIDP
TARS+Platform=ChatPlatform
TARS+ 國產信創 IPA 數字員工
實在智能始終秉持 "AI 賦能商業 " 初心,堅定相信人機協同及超自動化時代的美好未來,在過往三年裡連續舉辦新品發布會,不斷帶快行業創新節奏:
2022.12.7 " 蝶變 · 新番 ",無需拖拉拽、只需點選用的實在 IPA 模式讓 RPA 真正人人可用
2022.3.31 "AI 你所愛,新益求新 ",一直創新,永遠 AI
2021.10.18 創新領先的融合拾取技術帶來 " 拾全拾美 · 無邊無界 "
2021.5.25 " 新 · 動 · 智 · 燃 ",實實在在的創新突破
2021.1.8 快速迭代進化的實在 RPA 讓 " 重復的歸我,創造的歸你 "
2020.7.15 實在的第一聲問候:" 智驅未來丨 Hello,數字員工 "!
本次發布會,TARS+ISSUT 大模型雙底座為超自動化帶來嶄新視野,TARS-RPA-Agent 開創人機協同 " 你說,PC 做!" 的更高境界。
後續,在對模型性能、安全性等方面進行充分評估和修正後,實在智能将對社區開源 TARS-Finance-7B 财經大模型,以促進生成式大模型方向的學術研究和應用發展。也将繼續擴大 TARS 垂直大模型的參數規模,迎接更多的能力湧現。
實在智能将繼續與國内外學界、產業界同仁一起努力,奔向擁有無限可能的彼岸。
按照慣例,我們不說再見,下一次實在智能產品發布會,與您在更高峰相見!