2023年11月17日，由StarRocks社區(qū)發(fā)起、鏡舟科技主辦的StarRocks 年度大型技術(shù)交流峰會(huì)StarRocks Summit 2023在上海成功舉行。
本次峰會(huì)以“極速進(jìn)化，融合"新"生”為主題，40余場(chǎng)分享演講在全天密集開展，來(lái)自平安銀行、華潤(rùn)、騰訊游戲、阿里云、伊利、美的、京東等頭部企業(yè)的大數(shù)據(jù)專家圍繞數(shù)據(jù)進(jìn)化、需求進(jìn)化、技術(shù)進(jìn)化，細(xì)致講解大數(shù)據(jù)分析的最新技術(shù)和最佳實(shí)踐，為大數(shù)據(jù)分析行業(yè)呈現(xiàn)了一場(chǎng)精彩的技術(shù)盛宴。
峰會(huì)吸引了數(shù)百名企業(yè)用戶代表和開發(fā)者到場(chǎng)聆聽交流，另有數(shù)萬(wàn)名數(shù)據(jù)分析愛好者、從業(yè)者線上參會(huì)，通過(guò)多種渠道觀看了峰會(huì)直播。
新面孔：StarRocks大用戶陣容不斷壯大
這是StarRocks第三次舉行年度技術(shù)交流峰會(huì)，峰會(huì)延續(xù)了以前的高規(guī)格，亮相的企業(yè)用戶代表堪稱全明星陣容，全都是所在行業(yè)頭部，并且具有廣泛的社會(huì)知名度和影響力。
其中，既有騰訊、阿里、京東等在去年峰會(huì)上分享過(guò)經(jīng)驗(yàn)的互聯(lián)網(wǎng)“老面孔”，也有不少來(lái)自金融、制造、零售等行業(yè)的新面孔，比如伊利、平安銀行、芒果TV等企業(yè)就是首次派代表到場(chǎng)演講。
作為一款技術(shù)領(lǐng)先的開源OLAP數(shù)據(jù)庫(kù)產(chǎn)品，StarRocks一直備受大用戶青睞，隨著StarRocks加速向各行各業(yè)滲透，大用戶陣容也在不斷擴(kuò)大，截至目前，已有超過(guò)300家市值10億美金的企業(yè)使用StarRocks。
在大用戶的示范和帶動(dòng)下，中小企業(yè)用戶規(guī)模同樣在迅速壯大，StarRocks社區(qū)用戶已突破1萬(wàn)，并依然保持著高速增長(zhǎng)態(tài)勢(shì)。
另外，根據(jù)峰會(huì)演講嘉賓透露的使用情況，用戶對(duì)StarRocks的部署規(guī)模也在快速增長(zhǎng)。
其中，騰訊游戲公共數(shù)據(jù)平臺(tái)部總監(jiān)崔玉明介紹，騰訊游戲已上線近100個(gè)StarRocks集群，共有1470個(gè)BE節(jié)點(diǎn)，1300個(gè)CN節(jié)點(diǎn)，湖數(shù)據(jù)量達(dá)4.99P。
從應(yīng)用場(chǎng)景來(lái)看，嘉賓們分享的場(chǎng)景包括金融營(yíng)銷、用戶畫像、自助分析、報(bào)表體驗(yàn)升級(jí)等，基本涵蓋了當(dāng)前實(shí)時(shí)數(shù)倉(cāng)技術(shù)的所有經(jīng)典應(yīng)用場(chǎng)景。
鏡舟科技CEO孫文現(xiàn)表示，StarRocks開源社區(qū)為制勝場(chǎng)景的誕生提供了肥沃的土壤，各行各業(yè)、各種需求在社區(qū)中碰撞、交融，產(chǎn)生出StarRocks的制勝場(chǎng)景。
據(jù)孫文現(xiàn)介紹，鏡舟科技基于StarRocks打造的企業(yè)級(jí)產(chǎn)品全年經(jīng)歷了近百次POC，成功率達(dá)到90%以上。
StarRocks產(chǎn)品能力有多硬核，由此可見一斑，這也可解釋為什么會(huì)有越來(lái)越多的用戶選擇StarRocks。
新范式：StarRocks引領(lǐng)湖倉(cāng)一體趨勢(shì)
本次峰會(huì)共設(shè)置了一個(gè)主論壇、四個(gè)分論壇，除了企業(yè)用戶代表基于實(shí)踐的經(jīng)驗(yàn)分享，開發(fā)者代表進(jìn)行的功能詮釋同樣精彩。
過(guò)去一年，StarRocks先后發(fā)布了2.5、3.0、3.1三個(gè)重磅版本，其中3.0版本推出的存算分離架構(gòu)為開源業(yè)界首創(chuàng)，曾在行業(yè)內(nèi)引起巨大反響。
StarRocks TSC Member、鏡舟科技CTO張友東介紹，升級(jí)到存算分離架構(gòu)后，用戶的存儲(chǔ)成本能下降80%，而計(jì)算節(jié)點(diǎn)則因?yàn)闊o(wú)狀態(tài)，可以通過(guò)快速?gòu)椥�、跨可用區(qū)部署等方式來(lái)提高計(jì)算的可用性，并且計(jì)算資源能夠進(jìn)行物理隔離，按需獨(dú)立彈性伸縮。
到3.1版本，開啟Local cache的情況下，存算分離架構(gòu)下的性能表現(xiàn)已接近本地存儲(chǔ)的水平。
與此同時(shí)，現(xiàn)在StarRocks的湖倉(cāng)分析能力已非常完備，不僅支持internal、Data lake、JDBC、ES等catalog，還支持跨數(shù)據(jù)源的聯(lián)幫分析。
另外，主鍵模型的能力在過(guò)去一年也得到持續(xù)提升，已經(jīng)同時(shí)支持全內(nèi)存和持久化的索引，并支持了partial update、conditional update的能力，在性能方面，針對(duì)批量更新的場(chǎng)景，引入了按列更新的模式，性能相比按行更新提升10倍以上。
張友東表示，未來(lái)數(shù)據(jù)演進(jìn)的趨勢(shì)是湖倉(cāng)一體，用戶無(wú)需關(guān)注是建湖還是建倉(cāng)，不管是構(gòu)建數(shù)據(jù)湖還是構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)，企業(yè)最終的目標(biāo)是低成本、高效的解決數(shù)據(jù)分析問題。StarRocks在具備存算分離、湖倉(cāng)分析、物化視圖等一系列重量級(jí)特性后，實(shí)現(xiàn)了往Lakehouse引擎的升級(jí)，借助StarRocks可兼具數(shù)據(jù)湖和數(shù)據(jù)庫(kù)倉(cāng)庫(kù)的優(yōu)勢(shì)。
目前已有數(shù)十家企業(yè)在基于StarRocks實(shí)踐湖倉(cāng)新范式，并取得非常好的業(yè)務(wù)效果。
其中，芒果TV采用StarRocks存算分離作為統(tǒng)一的Lakehouse，所有數(shù)據(jù)導(dǎo)入到StarRocks進(jìn)行統(tǒng)一管理；微信近實(shí)時(shí)的數(shù)據(jù)寫入到lceberg，通過(guò) Iceberg直接分析；攜程數(shù)據(jù)統(tǒng)一存儲(chǔ)在Hive，采用StarRocks直接查詢加速報(bào)等等。
新未來(lái)：StarRocks的進(jìn)化故事還在繼續(xù)
據(jù)張友東介紹，未來(lái)StarRocks還會(huì)朝著云原生方向繼續(xù)邁進(jìn)，推動(dòng)實(shí)時(shí)分析鏈路進(jìn)一步精簡(jiǎn)，通過(guò)ETL on lakehouse，all in one的作業(yè)模式，幫助企業(yè)低成本、高效率地發(fā)掘數(shù)據(jù)價(jià)值。
值得一提的是，StarRocks社區(qū)是由鏡舟科技與阿里云、騰訊、小紅書、滴滴等互聯(lián)網(wǎng)公司共同建設(shè)，包括全局字典函數(shù)、同步物化視圖增強(qiáng)、Paimon Catalog等在內(nèi)的許多feature都由互聯(lián)網(wǎng)大廠貢獻(xiàn)，以后注定也還會(huì)從大廠生產(chǎn)環(huán)境中持續(xù)吸收靈感和助力，給業(yè)界帶來(lái)更多驚喜。
與此同時(shí)，圍繞StarRocks形成的商業(yè)生態(tài)也越來(lái)越完善，以鏡舟科技為代表的商業(yè)團(tuán)隊(duì)不斷提升著產(chǎn)品的易用性、穩(wěn)定性，將產(chǎn)品能力落地到復(fù)雜的需求環(huán)境中，創(chuàng)造更大價(jià)值。
隨著此次峰會(huì)精彩內(nèi)容的傳播，相信會(huì)有越來(lái)越多的企業(yè)受到啟發(fā)，利用OLAP領(lǐng)域的最前沿技術(shù)，完成自身業(yè)務(wù)場(chǎng)景的升級(jí)和進(jìn)化。
