你說PC做!實在智能推出行業首個基於大模型的TARS-RPA-Agent產品

2023年初,火遍全球的ChatGPT揭開AIGC元年大幕,國內外各家科技公司紛紛發佈大模型,一時間“百模大戰”風起雲湧。6月下旬,AI行業準獨角獸實在智能(Intelligence Indeed)開啟自研垂直大語言模型“塔斯(TARS)”內測。


在此之前,早在2022年12月,實在智能曾首創基於計算機視覺大模型的“智能屏幕語義理解”技術(ISSUT),併發布“實在IPA”模式,將RPA從傳統“拖拉拽”的專家模式進階到輕鬆“點選用”的小白模式,實現RPA的人人可用。

時針再撥到2023年下半年,“大模型如何在真實商業場景快速、有效落地”成為科技界與產業界最關注的首要問題。8月16日,實在智能召開第七次新品發佈會,對這個問題交出實實在在的答卷。

會上,實在智能正式發佈“塔斯(TARS)”大模型,並震撼推出行業首個基於大模型的TARS-RPA-Agent產品,將數字員工應用門檻進一步大幅降低,實現“所說即所得,你說,PC做!”

下面,小編帶您一同進入TARS的世界,回顧乾貨滿滿、精彩紛呈的科技盛宴:

大模型開啟RPA新境界對話式生成數字員工,自主完成工作

實在智能創始人兼CEO孫林君(阿寶)在開場致辭中提到,在大模型時代,數字員工的終極形態已變得越來越清晰——“大模型與RPA緊密結合,大幅降低使用門檻,突破接口能力邊界。數字員工將具備自主完成任務的能力,成為每個人的智能數字助理,讓工作生活更輕鬆”。本次發佈會推出的“TARS-RPA-Agent”是業界首款計算機視覺與大語言模型結合的智能體產品,相信會對RPA行業的發展具有里程碑的意義。

他同時回顧了五年來的技術迭代和產品創新,“實在智能已擁有50餘項發明專利,300餘項知識產權,這是我們踏踏實實做好技術、做好產品的力證”,作為一家平臺型的科技公司,實在智能致力於不斷迭代產品技術,通過標準化產品和解決方案為千行百業客戶和生態合作伙伴賦能,同時構建客戶最優感知的交付和服務體系。

實在智能全新技術底TARS大模型

內測開啟45天之後,實在智能合夥人、核心算法部負責人歐陽小剛(新一)與算法專家汪東瑤(奎託斯)共同揭開了“塔斯(TARS)”大模型的神祕面紗。

在AIGC時代到來之際,實在智能通過“TARS大語言模型(通用基礎模型、各個垂直行業模型)+ISSUT(智能屏幕語義理解)機器視覺大模型”重構了技術底座,並在這二者之上,對超自動化產品矩陣升級改造,持續發佈創新應用。

發佈會上,TARS大模型展現了優異的文本生成、語言理解、知識問答、邏輯推理等主流能力:

03:10

其中,與湘財證券共建的“自研、有效、安全、可信任、可落地”的財經行業大模型TARS-Finance-7B,既保留了生成類大模型的通用技能,更在金融財經領域得到了顯著的加強和提升,在多箇中英文的通用基準測評集和財經領域基準測評集上均取得良好成績:

在財經領域,與同為60-70億參數的Baseline模型相比,TARS-Finance-7B模型平均任務得分領先1%~20%;

在通用領域,TARS-Finance-7B相較基座模型和其他同尺寸Baseline模型,旗鼓相當並在部分領域領先。

01:46

優異測評成績的背後,是歷時4個月實實在在的工作:

基於充分細緻的語料收集和清洗、數據處理及標註,超千億Tokens的預訓練語料和超百萬條指令微調數據,實在智能獨立完整復現大模型構建的預訓練、指令微調和人類反饋強化學習(RLHF)三階段,使大模型具備完整能力

自主研發用於中文不當言論判別和生成終止的Detoxify系統,提升模型的安全性和無害性,讓大模型“既懂事,又懂法”

01:14

輕便落地的大模型,才是更好的大模型。“成本可控、效果可用、定製化訓練、私有化部署”是TARS大模型在真實場景商用落地的關鍵特性。

在解決大模型的輕便性和易用性方面,實在智能也做了很多創新,如通過模型量化降低推理階段的硬件資源消耗、通過推理加速工具和技術優化問答交互產品體驗等。此外,TARS大模型支持無縫對接實在Chatbot產品,可以將大模型的能力通過“⼀鍵配置”便捷投放到網頁、App、小程序等各個終端,同時支持私有化部署,模型更可控、數據更安全!

00:43

讓大模型“看得見 動起來”:行業首發TARS-RPA-Agent

實在智能進入超自動化賽道以來,不斷將AI技術與RPA產品進行深度融合,持續推動創新應用。曾在業內首創“融合拾取”技術,支持頂層拾取與CV拾取無縫融合,使得傳統RPA“拖拉拽”專家模式穩定絲滑;進而首創“智能屏幕語義理解”技術(ISSUT),支持對電腦、手機、平板等屏幕的理解,通過實在IPA開創“點選用”的小白模式。

大模型時代開啟後,實在智能一直在思考如何將大模型與RPA產品相結合,通過文本指令或對話聊天的方式直接生成數字員工,操作PC電腦自主完成工作任務。從而在實在IPA“小白模式”基礎上,將RPA使用門檻再進一步降低,直接進入到“所說即所得,你說,PC做”的“傻瓜模式”。

經過不斷探索和嘗試,實在智能在業界首發基於大模型的Agent產品,即TARS-RPA-Agent——這是一個基於“TARS+ISSUT”雙模引擎,有“大腦”,更有“眼睛和手腳”的超自動化智能體。同時,也是能夠自主拆解任務、感知當前環境、執行並且反饋、記憶歷史經驗的RPA全新模式。
發佈會上,歐陽小剛(新一)詳細介紹了TARS-RPA-Agent在設計過程中的解決的關鍵問題和創新特性:

①自主拆解任務:複雜問題,分而治之

在實際場景中,人類的複雜指令往往蘊含在非常簡潔的語句當中,並不是通過大模型生成一段Python代碼,或簡單調用3-5個RPA組件就能實現。

TARS-RPA-Agent支持將表述簡單但含義複雜的指令,進行Chain-Of-Thought式的自主拆解和細化,之後將拆解出的子任務和具體步驟與實在RPA的流程塊和組件進行映射,最終完成一體化、高可控的複雜流程生成。

例如,“我要買一臺筆記本電腦,幫我推薦下”,TARS-RPA-Agent可將其拆解成“登錄購物網站,查詢筆記本電腦品牌、配置、價格等信息,完成產品推薦”等多個步驟並加以自動實現。

00:26

②感知當前環境:人類視角,理解屏幕

“如何在理解指令含義的基礎上,精準找到所要操作的屏幕畫面上哪裡是輸入框、登錄按鈕或者聊天窗口?如果不僅僅是基於瀏覽器的軟件而是成千上萬種不同CS架構的客戶端軟件怎麼辦……”

“你是我的眼”,基於計算機視覺大模型的“智能屏幕語義理解”技術(ISSUT)為TARS-RPA-Agent裝上了感知世界的眼睛,帶來真正基於人類視覺的電腦屏幕和操作對象理解。

ISSUT使得TARS-RPA-Agent可以“秒懂”屏幕畫面,第一時間完成自動解析,無需人工介入參與。在無法解析網頁源代碼或者客戶端軟件不開放API接口的大量真實場景中,ISSUT的價值倍加凸顯。

例如,理解指令並自動操作並不開放API接口的企業微信:

01:51

③執行並且反饋:環環相扣,單步尋優

PDCA(計劃、執行、檢查、處理)是人類優秀的工作習慣,在執行過程中不斷反饋和修正是客觀世界的一般規律。真實場景的意圖理解和任務執行非常複雜,TARS-RPA-Agent同樣需要保證每一步操作的正確性,避免因為理解偏差,或者操作失誤,導致最終無法完成任務。

因此,TARS-RPA-Agent巧妙地設計了“基於強化學習的單步尋優策略和每步執行的反饋”相關機制,不斷提高決策和執行過程的正確性、可控性。

例如,基於之前動作的啟發式尋優:

01:03

④記憶歷史經驗:擴展檢索、長時記憶

“聖鬥士不會被同樣的招數打敗兩次”,作為一個智能體,TARS-RPA-Agent也需要提升自主學習和迭代能力,從而能夠學習歷史經驗,並通過歷史案例不斷提升下次遇到類似任務時的自主決策能力,持續提升人機協同效率。

大模型的上下文保留和決策優化等長時記憶能力,通常通過內存管理等手段實現。TARS-RPA-Agent也結合上下文擴展、向量檢索等技術,配備了長時記憶能力,支持將過往任務的執行情況、用戶修正、執行結果等保存到數據庫,並作為後續分析和優化的基礎。

“TARS+”開啟無限可能

發佈會上,實在智能合夥人、產品創新部負責人周春照(索隆),實在智能合夥人、創新研發中心負責人趙明(鳴人),以及產品專家張譯顥(拓海)、張鑫燕(虞姬)等,分別接連上新體驗感拉滿、智能感十足的TARS大模型與超自動化產品矩陣的深度融合產品,以及全面支持國產信創的IPA數字員工。

TARS+RPA=ChatRPA

05:38
04:51

TARS+IDP=ChatIDP

04:06

TARS+Platform=ChatPlatform

TARS+國產信創IPA數字員工

實在智能始終秉持“AI賦能商業”初心,堅定相信人機協同及超自動化時代的美好未來,在過往三年裡連續舉辦新品發佈會,不斷帶快行業創新節奏:

2022.12.7 “蝶變·新番”,無需拖拉拽、只需點選用的實在IPA模式讓RPA真正人人可用

2022.3.31 “AI你所愛,新益求新”,一直創新,永遠AI

2021.10.18 創新領先的融合拾取技術帶來“拾全拾美·無邊無界”

2021.5.25 “新·動·智·燃”,實實在在的創新突破

2021.1.8 快速迭代進化的實在RPA讓“重複的歸我,創造的歸你”

2020.7.15 實在的第一聲問候:“智驅未來丨Hello,數字員工”!

本次發佈會,TARS+ISSUT大模型雙底座為超自動化帶來嶄新視野,TARS-RPA-Agent開創人機協同“你說,PC做!”的更高境界。

後續,在對模型性能、安全性等方面進行充分評估和修正後,實在智能將對社區開源TARS-Finance-7B財經大模型,以促進生成式大模型方向的學術研究和應用發展。也將繼續擴大TARS垂直大模型的參數規模,迎接更多的能力湧現。

實在智能將繼續與國內外學界、產業界同仁一起努力,奔向擁有無限可能的彼岸。

按照慣例,我們不說再見,下一次實在智能產品發佈會,與您在更高峰相見!

影視

相柳:海里37年生活也算是凡人夫妻的一輩子

2023-8-17 13:57:06

影視

盤點9部國漫新番,還是比較不錯的

2023-8-22 10:16:44

搜索