杭州都市網

2003年一場SARS，讓電商風起，普通消費者融入電商。

2020年新冠肺炎疫情，讓更多的企業家走進直播，視野被打開，更多傳統產業不得不加速數字化。

一個更為廣闊的產業互聯網時代已經來臨，數字化轉型已經真正的深入到每一個傳統產業和傳統企業當中。

在這個令人激動的數字時代時代，大數據技術正在與云計算、5G、AI等新技術融合，落地速度前所未有的加快。

2020年5月15日，星環科技全面升級了大數據、云計算、AI為主的三條產品線，并發布了一代搜索產品Transwarp New Search、知識圖譜全棧解決方案、基于邊緣計算的云邊一體AIoT解決方案、基于人工智能和復雜網絡的實時反欺詐解決方案等，展現了中國大數據基礎軟件與平臺企業創新成果，讓中國用戶更好的利用日益增加的數據，發現數據中的價值。

1.用戶呼喚多模型的數據處理平臺

星環科技的創始人孫元浩介紹說，2008年開始，大數據平臺就是一組技術或者工具的組合。

在2013年創業時，星環科技認為光靠工具的組合不足以解決大數據的問題，必須用產品來解決大數據的4個V——數據量大、數據種類多、數據實時性高、要從數據中發掘價值。因此，星環推出Inceptor、Hyperbase、Slipstream、Discover等產品，分別解決大數據的面臨的4V挑戰。

到了2020年，對于一些單一的典型場景，市場上出現不同的產品，有了知名的解決方案，解決數據的多樣性。例如：結構化數據使用Hive;動態列模型使用Bigtable、Hbase;文檔處理使用MogoDB;圖數據使用Neo4j;搜索引擎ElasticSearch，等等。

但是這些產品都是孤立的，每一個或者類只能解決一類問題，不得不采用不同種類的數據庫，并把它混在一起，需要將數據復制很多份，成本高，效率低。

今天，客戶對這種架構越來越難容忍，希望能用一套大數據平臺，解決各種復雜的數據結構問題。具體而言，客戶希望用一個統一的數據平臺，處理多種數據模型，并能夠提供統一的編程語言、統一的計算引擎，使用統一的存儲管理系統、統一的資源調度系統，支持多種不同的數據模型。

目前，大數據行業一個明顯的發展趨勢就是推出一個統一的大數據平臺，能夠處理多種數據模型，能夠提供統一的編程語言、統一的計算引擎，使用統一的存儲管理系統、統一的資源調度系統，能夠支持多種不同的數據模型。

孫元浩說：“我們把這個統一的大數據平臺，稱為多模型異構的數據處理平臺。”

2.一站式大數據平臺解決大數據4V

Transwarp Data Hub(TDH)是星環科技推出的企業級大數據平臺，經過7年的快速演進，不斷發展成熟，在郵政、交通、金融、政府等行業獲得了大量的部署實施經驗，同時向新生的大數據技術領域進行的拓展和探索。

5月15日，星環科技全面升級了大數據、云計算、AI為主的三條產品線，發布了Transwarp Data Hub7.0。

作為星環科技一站式大數據平臺TDH的最新版本——7.0版本，其一站式多模異構數據處理性能亮眼，打破了行業內普遍存在的不同數據庫產品切換的不便利，徹底解決大數據發展的一大瓶頸。

星環科技研發總監呂程在回答中國軟件網記者提問時認為，作為一個多模型的數據處理平臺，TDH7.0可以提供統一的數據操作/查詢語言SQL、統一的數據計算引擎、統一的分布式存儲管理系統、統一的資源管理框架，滿足利用一個多模異構平臺，處理多種數據的需求。

據介紹，TDH從上而下劃分為五個層次：

最上層是SQL層，開發了統一的SQL引擎，兼容各種不同的SQL方言;

計算層，開發了統一的計算引擎，進行統一的計算任務優化和分發;

其下的存儲模型層，TDH一個平臺支持七種不同的存儲模型，適用于不同的應用場景，包括：圖存儲Graph Storage、文檔存儲Document Storage、全文檢索Full-text Search、鍵值存儲Key-Value Storage、行列混合存儲Row-Columnar Storage、時空地理存儲Sequential Geospatial Storage、非結構化對象存儲Unstructured Object Storage。

存儲管理層，開發了統一的存儲管理引擎，提供數據塊分布管理、數據多副本一致性管理、文件服務管理等功能;

最底層資源調度層，開發了統一的資源調度框架，通過容器化編排，統一調度計算、存儲、網絡資源。

星環科技通過自主研發，用TDH一站式平臺解決方案，解決了大數據應用的四個V的問題：

大量化(volume)，采用分布式計算和分布式存儲框架，充分利用計算機集群的整體計算和存儲能力，解決了數據大量化問題。

速度化(velocity)：采用實時流處理引擎，解決了用戶對數據處理時效性的需求。

多樣化(variety)：處理的數據類型不再局限于結構化數據，能同時處理文本數據、圖數據等非結構化數據。

價值提升(value)：充分利用數據，用于多種數據模型的分析，提升數據價值。

3.統一的數據處理平臺幾大的優勢

多模型的數據處理平臺的核心是對外提供統一的SQL編程接口、統一的計算引擎，以及統一的綜合式的存儲管理系統和統一的銷售框架。因此，星環TDH 7.0的優勢優勢體現在這幾大特性的統一和融合上。

Transwarp Data Hub 7.0統一的數據處理平臺支持超過7種不同的數據模型，支持結構化的數據和非結構化數據，支持KeyValue介質存儲、全行搜索、排索引、圖存儲、圖數據庫、存儲文檔，也能夠存儲時空數據。這是TDH 7.0的第一大優勢。

星環科技第一家提供了一個能夠橫跨多種數據模型的統一的計算引擎。雖然有不少公司也在嘗試提供一個標準的數據接口，但是由于底層是不同的數據庫，沒用統一的計算引擎，雖然有統一的SQL接口，但是很難把不同的接口靜態的路由到功能數據庫上面去。因此，需要一個動態的計算引擎來動態地進行接口的調度，進行執行計劃的統一的管理。

同時在星環科技的Transwarp Data Hub 7.0中也提出了一個統一的分布式管理系統，是實現數據分布管理以及數據一致性的數據管理系統，比過往使用HTVS效率更高、一致性更強。

在同一個平臺上可以將一份數據存儲成多種模型，用戶在應用發生變化時能夠自行地采用最佳的倉儲模型來響應查詢需求，運行效率會更高。同時因為一個平臺處理多種數據模型，整運維成本、管理成本都會降低。

孫元浩說，未來的數據平臺都應該是多模型的，但是用戶使用起來更應該是像使用一個數據庫一樣使用。

從2013年開始，星環科技逐漸實現了從基于開源改造的產品組件到自主研發轉變。

到2020年5月的Transwarp Data Hub 7.0問世時，星環科技已經實現了絕大部分組件自主研發，包括分析型數據庫、流處理引擎、圖數據庫等。今年新推出的搜索引擎中采用了新的復本的一次性算法，對外提供標準的SQL接口。預計到2021年，會完成NoSQL數據庫全系列改造，并融入分布式的存儲管理系統。

孫元浩說，到2021年，星環科技的全系列產品都將實現自主研發。