近日,16周年慶活動現(xiàn)場,愛數(shù)正式開源了認(rèn)知智能開發(fā)框架KWeaver。KWeaver脫胎于愛數(shù)認(rèn)知智能框架AnyDATA Framework 2,具有快速的開發(fā)能力、全面的開放性、高性能等特性,以成熟的數(shù)據(jù)知識化方法論和系列認(rèn)知智能應(yīng)用組件賦能數(shù)據(jù)科學(xué)家和應(yīng)用開發(fā)者,以此降低領(lǐng)域認(rèn)知智能應(yīng)用開發(fā)的復(fù)雜度與人才門檻。開源后,KWeaver將作為普惠技術(shù)進一步賦能產(chǎn)業(yè),人人都可以在 GitHub 上獲取。
GitHub 項目地址:https://github.com/AISHU-Technology/kweaver
愛數(shù)在數(shù)據(jù)產(chǎn)業(yè)的布局與創(chuàng)新
2021年,愛數(shù)推出新愿景——以數(shù)據(jù)重塑生產(chǎn)力,共創(chuàng)智能世界。“數(shù)據(jù)”和“智能”作為愛數(shù)成長的兩個關(guān)鍵詞,很好地呼應(yīng)了愛數(shù)的業(yè)務(wù)定位 Data+AI,即AI驅(qū)動,數(shù)據(jù)賦能。這個愿景背后,也蘊涵著愛數(shù)更高層次的追求:不僅要成長為一個典范企業(yè),還應(yīng)肩負(fù)起社會責(zé)任,讓技術(shù)驅(qū)動社會進步,用數(shù)據(jù)賦能人類生產(chǎn)力的提升。
在“Data”層面,愛數(shù)很早就開始了數(shù)據(jù)產(chǎn)業(yè)的布局,實現(xiàn)數(shù)據(jù)產(chǎn)業(yè)從0到1的創(chuàng)新。2019年愛數(shù)發(fā)布大數(shù)據(jù)基礎(chǔ)設(shè)施戰(zhàn)略,加速布局?jǐn)?shù)據(jù)產(chǎn)業(yè);2021年～2022年愛數(shù)基于領(lǐng)域認(rèn)知智能技術(shù)成立北方大數(shù)據(jù)交易中心,搭建全國數(shù)據(jù)交易網(wǎng)絡(luò)體系;2022年愛數(shù)宣布以開源賦能產(chǎn)業(yè),減低總體社會成本,實現(xiàn)客戶、伙伴等多方的可信協(xié)作。
在“AI”層面,愛數(shù)認(rèn)知智能技術(shù)在近兩年也取得了較快的進展。2021年,愛數(shù)發(fā)布以領(lǐng)域知識網(wǎng)絡(luò)為核心技術(shù)的AnyDATA ONE,并與復(fù)旦大學(xué)成立聯(lián)合實驗室開展認(rèn)知智能的研究。之后,又和天津大學(xué)成立聯(lián)合實驗室開展數(shù)據(jù)智能技術(shù)的研究。目前,愛數(shù)正在全球范圍招募人工智能博士,在長沙籌建人工智能研究院,以此推動領(lǐng)域認(rèn)知智能技術(shù)的發(fā)展。
在此背景下,愛數(shù)一方面希望通過KWeaver的開源,整合全球智慧,將各行各業(yè)、各個領(lǐng)域不同的解題思路和方法模型融入愛數(shù)的認(rèn)知智能框架,激發(fā)更多的創(chuàng)新與應(yīng)用;另一方面也希望通過開源,讓愛數(shù)積累的技術(shù)成果走出愛數(shù),面向更多的數(shù)據(jù)科學(xué)家、應(yīng)用開發(fā)者和領(lǐng)域?qū)＜?為行業(yè)擁抱AI提供更多的可能。
領(lǐng)域認(rèn)知驅(qū)動需要開源
經(jīng)過幾十年的發(fā)展,人工智能從計算智能發(fā)展到感知智能,又從感知智能發(fā)展到認(rèn)知智能。作為第三代人工智能,認(rèn)知智能非常重要的特點之一,就是需要通過領(lǐng)域認(rèn)知進行驅(qū)動。
“第三代人工智能的目標(biāo)是要真正模擬人類的智能行為,我們必須充分地利用知識、數(shù)據(jù)、算法和算力,把四個因素充分利用起來,這樣才能夠解決不完全信息、不確定性環(huán)境和動態(tài)變化環(huán)境下面的問題,才能達到真正的人工智能。—— 張鈸院士”
在此背景下,領(lǐng)域認(rèn)知智能成為新的解題思路,這也是愛數(shù)自2021年推出認(rèn)知智能戰(zhàn)略后,聯(lián)合復(fù)旦大學(xué)、天津大學(xué)等高等院校專家不斷實踐摸索出的技術(shù)成果。領(lǐng)域認(rèn)知智能,面向某一領(lǐng)域內(nèi)具體的業(yè)務(wù)問題,通過獲取領(lǐng)域內(nèi)的數(shù)據(jù)實現(xiàn)數(shù)據(jù)知識化形成領(lǐng)域知識網(wǎng)絡(luò),再基于領(lǐng)域智商評估領(lǐng)域知識的質(zhì)量,在此基礎(chǔ)上利用知識進行理解、推理和決策,從而開發(fā)出滿足用戶場景需求的領(lǐng)域認(rèn)知智能應(yīng)用,輔助人們解決特定的問題,提升生產(chǎn)力。
“認(rèn)知智能的核心能力是“理解 ”和“解釋 ”,體現(xiàn)在機器能夠理解數(shù)據(jù)、理解語言進而理解現(xiàn)實世界的能力,體現(xiàn)在機器能夠解釋數(shù)據(jù)、解釋過程進而解釋現(xiàn)象的能力,體現(xiàn)在推理、規(guī)劃等等一系列人類所獨有的認(rèn)知能力上。
——《知識圖譜與認(rèn)知智能》,肖仰華,復(fù)旦大學(xué)教授,復(fù)旦愛數(shù)聯(lián)合研究研究中心主任”
然而,各行各業(yè)領(lǐng)域的眾多、專業(yè)領(lǐng)域之間的高壁壘,唯有通過開源,才能更加容易地讓不同行業(yè)、不同領(lǐng)域的開發(fā)者開發(fā)領(lǐng)域認(rèn)知智能,從而也讓 KWeaver 不斷提升領(lǐng)域認(rèn)知能力。對于愛數(shù)而言,一方面需要借助開源整合全球智慧;另一方面也可以通過開源開放自身的技術(shù)成果與積累,實現(xiàn)AI普惠全球。
愛數(shù) KWeaver 項目:開源的認(rèn)知智能開發(fā)框架
KWeaver 是開源的認(rèn)知智能開發(fā)框架,為數(shù)據(jù)科學(xué)家、應(yīng)用開發(fā)者和領(lǐng)域?qū)＜姨峁┚哂锌焖俚拈_發(fā)能力、全面的開放性和高性能的知識網(wǎng)絡(luò)生成及認(rèn)知智能應(yīng)用開發(fā)的工具與平臺。 KWeaver名稱中,K代表的是Knowledge知識,Weaver代表編織者,意為將所有領(lǐng)域知識編織在一起,從而實現(xiàn)領(lǐng)域認(rèn)知智能。
KWeaver面向數(shù)據(jù)科學(xué)家、應(yīng)用開發(fā)者、領(lǐng)域?qū)＜胰愑脩籼峁┤N能力。
快速的開發(fā)能力 :KWeaver提供可視化的知識網(wǎng)絡(luò)工作臺,可視化的認(rèn)知智能應(yīng)用開發(fā)調(diào)試工具,豐富的數(shù)據(jù)加工及模型訓(xùn)練工具,以及所見即所得的API文檔;
全面的開放性 : KWeaver源代碼是開源且技術(shù)透明的,這意味著參與項目的用戶可以查看全部技術(shù)細(xì)節(jié),同時還支持多元異構(gòu)數(shù)據(jù)源對接,提供SDK兼容更多的第三方知識抽取模型,提供 API 和 Web 組件的整合方式;
高性能: 得益于愛數(shù)多年在云原生領(lǐng)域的積累,KWeaver的開發(fā)基于云原生技術(shù),提供橫向擴展能力,采用分布式的計算引擎實現(xiàn)海量數(shù)據(jù)接入的處理能力。
通過KWeaver實現(xiàn)領(lǐng)域認(rèn)知驅(qū)動涉及到兩個關(guān)鍵步驟。
第一是領(lǐng)域知識獲取。 首先建立領(lǐng)域認(rèn)知模型,基于模型進行數(shù)據(jù)加工抽取知識,對于不同來源的數(shù)據(jù),加工的方式也會有很大不同,部分?jǐn)?shù)據(jù)可以直接抽取,部分?jǐn)?shù)據(jù)則需要通過深度學(xué)習(xí)模型,例如文本知識。加工完成后生成領(lǐng)域知識網(wǎng)絡(luò)。
第二是領(lǐng)域知識利用 。 基于知識網(wǎng)絡(luò)進行認(rèn)知智能應(yīng)用的開發(fā),利用數(shù)據(jù)科學(xué)的方法開發(fā)模型,并將模型應(yīng)用到推理、理解等具體場景。顯然,在數(shù)據(jù)領(lǐng)域認(rèn)知智能并非替代原有的深度學(xué)習(xí)或機器學(xué)習(xí),而是將兩者結(jié)合發(fā)揮更大的作用。 KWeaver 也會內(nèi)置很多基于深度學(xué)習(xí)的知識抽取模型。
本次正式開源前, KWeaver 已經(jīng)伴隨愛數(shù) AnyDATA 經(jīng)歷了近 3年的孵化和打磨 ,結(jié)合 AnyShare 、 AnyRobot 、 AnyFabric 等產(chǎn)品的能力實現(xiàn)諸多創(chuàng)新。 如結(jié)合AnyShare在知識管理方面形成行業(yè)知識卡片、行業(yè)標(biāo)簽、知識搜索等應(yīng)用;結(jié)合AnyRobot在智能運維方面實現(xiàn)可持續(xù)進化的運維知識庫,以及運維中小概率事件的故障定位和根因分析;結(jié)合AnyFabric幫助用戶更好地編織數(shù)據(jù),以資產(chǎn)圖譜的形式讓用戶更直觀全面的觀察和分析業(yè)務(wù)能力、數(shù)據(jù)質(zhì)量等等。
16年專注,16年探索。從備份一體機到大數(shù)據(jù)基礎(chǔ)設(shè)施,從人工智能到領(lǐng)域認(rèn)知智能,從傳統(tǒng)商業(yè)模式到KWeaver的正式開源,愛數(shù)始終在朝著“以數(shù)據(jù)重塑生產(chǎn)力,共創(chuàng)智能世界”的愿景不斷成長。未來,愛數(shù)將以更開放、包容的心態(tài),通過更多的開源計劃實現(xiàn)技術(shù)共享,為數(shù)據(jù)產(chǎn)業(yè)的繁榮發(fā)展貢獻自己應(yīng)盡的力量。
申請創(chuàng)業(yè)報道，分享創(chuàng)業(yè)好點子。點擊此處，共同探討創(chuàng)業(yè)新機遇！
