站長資訊網
        最全最豐富的資訊網站

        星環科技通關TPC-DS!中國數據庫領域首破紀錄誕生!

          “不服跑個分?”是一個老梗了。雖然,我們不能盲目崇信跑分,但跑分的確是一種比較直觀反映軟硬件性能的方式。不過,相比手機跑個分,數據庫性能測試卻要復雜的多……

          最近,一家小公司顛覆了我們的認知!它完整的通過數據庫界最難的一個測試標準TPC-DS,說是登頂了數據庫領域的最高峰,并不為過,因為,此前的12年里,全球還沒有任何一家公司成功過。

          5月3日,這家公司還在自家的用戶大會上發布了一系列創新產品:人工智能平臺智子;一站式大數據平臺產品:TDH6.0,分布式圖數據庫StellarDB,分布式閃存數據庫ArgoDB;大數據云平臺產品Data Cloud。

          這家公司叫“星環科技”,創始人團隊均出自Intel,或許Intel都不曾想到,五年前被砍掉的一個項目,居然成就了今天這個估值超過20億,年營收超過2個億,騰訊都搶著投錢下注的公司。

        星環科技通關TPC-DS!中國數據庫領域首破紀錄誕生!

          TPC測試委員會主席Raghu

          我們首先回顧下事情的經過,5月3日,全球知名的數據管理系統評測基準標準化組織TPC宣布,星環TDH平臺成為全球首個經過TPC官方審核的TPC-DS基準測試的數據平臺,打破了該領域十二年來沒有公司通過該項測試的局面,在世界范圍內填補了該項技術的空白。

          該基準測試使用思科UCS集成基礎架構用于大數據和分析以及Transwarp Data Hub v5.1。

          也許很多人不清楚TPC是個什么組織,TPC-DS是個什么測試,我們先行腦補。

          眾所周知,用戶在選用平臺時,面對的是一個繽紛繁雜的世界。用戶希望有一種度量標準,能夠量化計算機系統的性能,以此作為選型的依據。因此,誕生了眾多標準化組織,而TPC就是其中之一。

          TPC (事務性能管理委員會)是目前全球最知名的數據管理系統評測基準標準化組織。它的功能是制定商務應用基準程序(Benchmark)的標準規范、性能和價格度量,并管理測試結果的發布。

          在過去二十多年間,該機構發布了多項數據庫評測基準,如TPC-A、TPC-D、TPC-H和TPC-DS,在業界得到了廣泛應用,相對而言,TPC在學術界和工業界擁有更強的影響力。

          TPC-DS最早是用來衡量數據庫分析性能的基準測試。它是2006年在第32屆VLDB數據庫會議上提出,有99個測試。但基準測試不僅僅涉及這些查詢。測試過程和指標包括以下六個步驟(更多詳細信息,請參閱TPC-DS規范):

          數據負載測試(LD)。

          功耗測試(PT),在一個流中運行99個查詢。

          吞吐量測試1(TT1),它在多個流中運行99個查詢。

          維護測試1(DM1),它使用刷新功能更新數據庫。

          吞吐量測試2(TT2),在多個流中重新運行99個查詢。

          維護測試(DM2),使用刷新功能重新更新數據庫。

          這99個查詢被定義為模板。每個查詢都有幾個參數,這些參數由dsqgen和SEED確定,具體為“被選為用格式mmddhhmmsss”表示的數據庫加載時間結束時間(加載結束時間)的時間戳。這個時間戳“保證查詢替換參數值在運行之前是未知的”。除參數外,不同流的查詢順序也不相同。圖1顯示了執行順序。

        星環科技通關TPC-DS!中國數據庫領域首破紀錄誕生!

          TPC-DS的性能結果取決于每個步驟的時間(生成SQL的時間不是結果的一部分)。根據TPC-DS測試流程,SQL語法和事務支持,優化,穩定性和可伸縮性被確定為DBMS的關鍵因素。

          自從這個標準提出到今天,12年來,一直沒有一個產品能通過。因此,被視為數據庫界最難的一個測試標準,每隔一兩年都會在數據庫頂級會議上被討論,但遺憾的是一直沒有人能通過。

          而TPC-DS測試模擬場景的數據量都比較大,一般10TB起步,傳統數據庫廠商多年都未通過,如IBM、Oracle、Teradata都曾做過嘗試,但并沒有成功。而大數據庫廠商出現以后,為了衡量SQL和Hadoop誰更好,從 2014年開始,主流Hadoop廠商(如Cloudera, Hortonworks,Databricks)也開始試圖攻破這一難題,每年都會去測上一次,也依然沒有取得什么實質進展。

          星環科技創始人、董事長孫元浩在接受筆者采訪時表示:“我們參與測試的目的,并不是為了測試而測試,最初,我們的目的只是為了衡量我們的產品處于什么樣的水平階段,同時看看能不能通過測試。”

          孫元浩說:“實際上,我們在2014年底就通過了第一階段測試,而后面的步驟花了三年多的時間,去年7月,我們把測試結果提交給TPC組織,他們花了五個月的時間去審計結果。審計完以后再把所有測試結果和過程的全部公開在網上,接受質疑,所以它的難度是非常高的。”

          目前,國外廠商對TPC-DS的攻關還處在第一階段,孫元浩補充道。

          由于SQL或事務支持限制,大多數基于Hadoop的廠商無法運行完整的TPC-DS基準測試。由于架構和優化限制,傳統數據庫廠商難以通過測試或無法取得良好結果,尤其是在大數據環境下,比如傳統數據庫由于架構限制,當有大量數據交換時,會導致單個節點瓶頸。為了降低影響,一些廠商會引入了特殊設備來處理數據交換,這使得系統的成本很高。

          而星環能通過完整測試,毫無疑問的證明,在某些領域星環已經超越國外廠商了,技術的差距總體來說已經很小了,甚至在某些方面已經超過了國外廠商。

        特別提醒:本網內容轉載自其他媒體,目的在于傳遞更多信息,并不代表本網贊同其觀點。其原創性以及文中陳述文字和內容未經本站證實,對本文以及其中全部或者部分內容、文字的真實性、完整性、及時性本站不作任何保證或承諾,并請自行核實相關內容。本站不承擔此類作品侵權行為的直接責任及連帶責任。如若本網有任何內容侵犯您的權益,請及時聯系我們,本站將會在24小時內處理完畢。

        贊(0)
        分享到: 更多 (0)
        網站地圖   滬ICP備18035694號-2    滬公網安備31011702889846號
        主站蜘蛛池模板: 国产综合成人色产三级高清在线精品发布| 亚洲精品无码久久不卡| 四虎成人精品| 91精品国产91热久久久久福利| 亚洲国产精品成人精品无码区在线| 国产精品日韩欧美久久综合| 潮喷大喷水系列无码久久精品| 亚洲精品乱码久久久久久久久久久久| 久久国产精品波多野结衣AV| 国产成人精品一区在线| 久久这里只有精品久久| 99精品一区二区三区无码吞精| 四虎成人精品永久免费AV| 久久无码精品一区二区三区| 国产久爱免费精品视频| 99精品国产福利在线观看| 日韩麻豆国产精品欧美| 华人亚洲欧美精品国产| 国产成人亚洲合集青青草原精品 | 亚洲国产精品人人做人人爽| 精品亚洲成α人无码成α在线观看| 丰满人妻熟妇乱又伦精品劲| 无码精品一区二区三区免费视频| 精品久久一区二区| 精品一区二区久久久久久久网站| 99re这里只有精品国产精品| 岛国精品一区免费视频在线观看| 国产成人精品一区二区秒拍| 国产精品国产三级国产AV主播 | 日韩人妻精品无码一区二区三区 | 亚洲2022国产成人精品无码区 | 国产精品v欧美精品v日本精| 99久久精品国产综合一区 | 国产成人精品久久免费动漫| 99精品视频免费| 久久最新精品国产| 国产精品乱码一区二区三区| 久久精品一区二区影院 | 精品无码国产污污污免费网站国产 | 大伊香蕉精品一区视频在线 | 国内精品久久久久久中文字幕|