云上還應(yīng)該有一層大數(shù)據(jù)PaaS
- 來源:中國信息化周報 smarty:if $article.tag?>
- 關(guān)鍵字: smarty:/if?>
- 發(fā)布時間:2017-09-21 10:22
開源的技術(shù)加上商業(yè)化的運營模式,這是今天很多在云計算、大數(shù)據(jù)領(lǐng)域創(chuàng)業(yè)的中國公司通常會采用的模式。在開源領(lǐng)域,中國廠商不是只會跟隨跑,而是有智慧、有能力做一些開創(chuàng)性的工作,甚至可以讓整個開源生態(tài)圈都為之一震,Apache Kylin就是一個典型代表。
Apache Kylin是PB級規(guī)模的開源分布式大數(shù)據(jù)分析引擎,為Apache Hadoop等大型分布式數(shù)據(jù)平臺之上的超大規(guī)模數(shù)據(jù)集提供標準SQL查詢及多維分析(OLAP)能力,具有亞秒級交互式分析能力。2014年11月,Kylin被接受為Apache的孵化器項目,不到一年時間,Kylin便正式成為Apache的頂級項目之一。
既然有了如此完美的開端,接下來的事情你一定會猜得到,Apache Kylin的核心開發(fā)團隊于2016年3月創(chuàng)立了現(xiàn)在的Kyligence(上海跬智信息技術(shù)有限公司),韓卿成為公司的聯(lián)合創(chuàng)始人兼CEO。
公司一成立便獲得了紅點創(chuàng)投和思科的天使投資,一年后完成由寬帶資本、順為資本領(lǐng)投,紅點中國跟投的A輪融資,同時企業(yè)級的Kylin解決方案在推出后不斷迭代。
今天的Kyligence發(fā)展得如何?在它耀眼的光環(huán)背后還有多少故事?
開源技術(shù)+商業(yè)化運作
最近,Kyligence可謂雙喜臨門:第一喜,從上千家團隊中脫穎而出的Kyligence,成為微軟加速器·上海黃埔一期校友企業(yè),并于近日正式畢業(yè);第二喜,在業(yè)內(nèi)著名的Strata大數(shù)據(jù)峰會上,Kyligence發(fā)布了最新版的旗艦產(chǎn)品KAP(Kyligence Analystics Platform)2.4。現(xiàn)在的Kyligence可謂技術(shù)創(chuàng)新、商業(yè)拓展齊頭并進。
如今,Kyligence的客戶已遍及海內(nèi)外。除了服務(wù)大量互聯(lián)網(wǎng)公司以外,Kyligenc的技術(shù)也在銀行、保險、電信、制造、零售等行業(yè)廣泛應(yīng)用,OPPO、國泰君安、華泰證券、聯(lián)想等是其中具有代表性的客戶。
韓卿認為,在基礎(chǔ)技術(shù)領(lǐng)域,只有開源的技術(shù)才有長久生命力。在云計算、大數(shù)據(jù)等熱門技術(shù)領(lǐng)域,我們看到OpenStack、Docker、Hadoop、Spark等這樣的“明星”。開源的技術(shù)生態(tài)與廠商獨特的商業(yè)化運作模式相結(jié)合,讓我們看到了紅帽等開源軟件廠商的迅速崛起,以及中國越來越多圍繞開源技術(shù)進行創(chuàng)新的初創(chuàng)企業(yè)。
“開源的技術(shù)平臺只是一個基礎(chǔ),在此之上,我們又增加了符合企業(yè)級客戶需求的穩(wěn)定性、安全性、可靠性等。”韓卿表示,“為了滿足商業(yè)化的應(yīng)用需要,我們要開發(fā)一些非開源的企業(yè)級應(yīng)用特性,提供更多可替換的組件,讓企業(yè)版的大數(shù)據(jù)智能分析產(chǎn)品具有更高的性能、可視化能力及良好的用戶體驗。”開源的技術(shù)內(nèi)核加上企業(yè)級的產(chǎn)品特性,這才是符合商業(yè)化運作規(guī)律的開源軟件廠商的成功之路。紅帽是這樣做的,現(xiàn)在Kyligence也是這樣做的。
從技術(shù)角度,我們很容易理解為什么開源今天能成為主流,這是因為它的開放性、快速迭代以及匯聚了所有聰明人的智慧。但從企業(yè)用戶角度,他們?yōu)槭裁茨苡羞@么大的勇氣和魄力轉(zhuǎn)向開源?開源的項目多如牛毛,但是能夠真正成為商業(yè)應(yīng)用軟件的鳳毛麟角。開源的技術(shù)轉(zhuǎn)變?yōu)榭纱笠?guī)模部署的商業(yè)化軟件,這中間已經(jīng)經(jīng)歷了嚴格的篩選和大浪淘沙。另外,隨著云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)、人工智能等諸多新應(yīng)用的興起,一些傳統(tǒng)的閉源商業(yè)軟件確實不能滿足企業(yè)級用戶實時處理和分析海量數(shù)據(jù)的需求,無論是性能,還是擴展性都捉襟見肘,這才給了開源技術(shù)顯露崢嶸的機會。
通常,互聯(lián)網(wǎng)公司都是開源技術(shù)的嘗鮮者,無論是在云計算領(lǐng)域還是大數(shù)據(jù)領(lǐng)域幾乎都是如此。Kyligence的發(fā)展脈絡(luò)也是如此,率先贏得了許多知名互聯(lián)網(wǎng)公司的信賴和肯定。但Kyligence最終目標還是想將其獨特的大數(shù)據(jù)智能分析平臺引入企業(yè)級市場,在金融、電信等更多行業(yè)進行部署。在這一背景下,KAP應(yīng)運而生。
平均每半年,KAP就有一次大的版本更新。KAP在某種程度上可替代傳統(tǒng)數(shù)據(jù)倉庫。Kyligence希望在不斷完善產(chǎn)品功能的基礎(chǔ)上,降低大數(shù)據(jù)產(chǎn)品的應(yīng)用門檻,讓所有分析師都擁有一款趁手的工具。
全分析平臺KAP
企業(yè)級大數(shù)據(jù)智能分析產(chǎn)品KAP是Kyligence專門為企業(yè)級客戶設(shè)計的,提供了更快的性能、更好的設(shè)計工具和更多的企業(yè)級特性。從2016年8月正式發(fā)布到現(xiàn)在剛好一年時間,KAP已快速演進到2.4版本,產(chǎn)品整體框架更加成熟。更重要的是,KAP已從一個OLAP引擎逐漸成長為一個大數(shù)據(jù)的數(shù)據(jù)倉庫標準產(chǎn)品。Kyligence又成功地闖過一關(guān)。
韓卿介紹說,KAP可在PB級數(shù)據(jù)集上提供亞秒級標準SQL查詢響應(yīng),支持互聯(lián)網(wǎng)級的高并發(fā)訪問,并賦能分析師以行業(yè)標準的數(shù)據(jù)倉庫和商業(yè)智能方法論架構(gòu)DW on Hadoop解決方案。KAP為商業(yè)用戶、分析師和工程師提供了統(tǒng)一的分析平臺,支持自助式建模,無需編程,可與主流BI工具實現(xiàn)無縫集成。KAP在實施效率、安全控制、性能優(yōu)化、自助式敏捷BI、系統(tǒng)監(jiān)控和管理等方面進行了全面創(chuàng)新和增強。
最新的KAP 2.4有哪些特色?首先,KAP 2.4推出了KyStudio建模中心,以交互式、直觀、可拖拽式的建模體驗,為用戶提供零門檻上手的大數(shù)據(jù)建模體驗,幫助分析師對業(yè)務(wù)的認知無偏差地轉(zhuǎn)化為數(shù)據(jù)模型。
其次,KAP 2.4拓寬了用戶分析場景。在大數(shù)據(jù)分析方面,用戶的個性化需求明顯。KAP2.4在持續(xù)提升預(yù)計算建模場景超高性能查詢體驗的前提下,通過無縫集成Spark等開源大數(shù)據(jù)引擎,通過查詢下壓,在完全支持各種SQL on Hadoop的同時,充分利用Kylin的預(yù)計算能力,提升了性能和效率,縮短了從源表導入到自助查詢的時間間隔,全面支持分析師自主地探索數(shù)據(jù)的業(yè)務(wù)價值,無論是要求高并發(fā)查詢性能的生產(chǎn)場景,還是業(yè)務(wù)探索場景,均能從容應(yīng)對。
最后,KAP 2.4還可通過全面增強智能建模功能提升企業(yè)建模效率。韓卿歸納說,KAP2.4全面提升了建模的智能性:為用戶提供更豐富的語義層,賦予用戶預(yù)定義復雜業(yè)務(wù)邏輯的能力;內(nèi)置一鍵優(yōu)化工具,協(xié)助用戶設(shè)計出最優(yōu)性價比的數(shù)據(jù)模型,降低建模的學習曲線;根據(jù)查詢所需維度數(shù),精確減少立方體構(gòu)建計算量,有效縮短構(gòu)建時間等。
“KAP 2.4具有高性能和易用性,并與最新版本的Apache Kylin完全兼容,與各大主流Hadoop發(fā)行版也完成了認證測試。”韓卿表示,KAP是公司重要的發(fā)力點。
KAP的強大能力在客戶中得到了驗證。以今日頭條為例,Kyligence為其提供的海量大數(shù)據(jù)的交互式分析能力,可為今日頭條3萬億超大規(guī)模的數(shù)據(jù)集提供亞秒級的查詢服務(wù)。
據(jù)韓卿透露,Kyligence也在做一些人工智能方面的基礎(chǔ)性研究工作,其產(chǎn)品中的自動化推薦功能就與機器學習密切相關(guān)。
站在大數(shù)據(jù)的浪尖上
談到中國大數(shù)據(jù)應(yīng)用的現(xiàn)狀,韓卿表示,大數(shù)據(jù)在中國市場已經(jīng)渡過了最初的炒作階段,用戶逐漸明確了大數(shù)據(jù)的需求,了解了大數(shù)據(jù)的價值所在。大數(shù)據(jù)應(yīng)用正慢慢走向成熟,更多地解決實際的業(yè)務(wù)問題。相比國外,中國用戶的數(shù)據(jù)量大、應(yīng)用場景相對復雜,并且有很多特殊的需求。Kyligence在解決了中國用戶的問題后,也會把總結(jié)的經(jīng)驗和成果向國際社區(qū)反饋。
Kyligence正積極地向云“移動”。今年8月,Kyligence的產(chǎn)品成了微軟Azure HDInsight默認應(yīng)用之一。此外,Kyligence與許多公有云服務(wù)商正在洽談進一步合作的可能。“未來,整個云就是IaaS,而我們要做云上的大數(shù)據(jù)PaaS層,提供云上的大數(shù)據(jù)分析能力。”韓卿表示。
談到未來發(fā)展,韓卿總結(jié)了三方面:第一,深入拓展金融、電信、制造等重點行業(yè),樹立核心標桿客戶;第二,通過渠道合作伙伴有效覆蓋中型客戶;第三,實現(xiàn)國際化發(fā)展,Kyligence美國分公司現(xiàn)已成立,將大數(shù)據(jù)智能分析產(chǎn)品推向美國和全球市場,這將是Kyligence下一個輝煌。
郭濤
