元朝弓兵

面向大數據的實時分析平臺解決方案

我們已經進入大數據實時分析時代。隨著互聯網、移動互聯網、物聯網和各種智能終端的大發展,各種數據無時不刻地生成,新數據的產生成大爆炸趨勢

現狀分析

大數據的到來,給目前傳統的分析系統帶來了巨大挑戰:

數據越來越多,超越了 I/O 極限。
眾所周知,I/O 能力一直都是傳統數據倉庫系統的瓶頸。大數據的到來,更加重了 I/O 瓶頸問題。
分析查詢性能低下。
查詢時間以數小時甚至數天計,有的分析算法甚至根本無法運行。
傳統分析系統采用的批處理方式進行加載和匯總,無法滿足時效性要求。
需要分析的數據量越來越多,要匯總的業務也越來越多,留給數據批量加載和匯總的處理時間窗口越來越短,甚至根本無法完成。同時,批量加載方式使得數據的時效性得不到保障,重要的商業機會稍縱即逝。
傳統分析系統面臨巨大挑戰,究其根源,在于傳統分析系統的架構過于陳舊,大多都是基于行式的數據庫和共享磁盤的縱向擴展架構,這種架構已經從根本上無法滿足大數據實時分析的要求。

方案概述

基于以上背景,面向大數據實時分析的分析平臺—— PetaBase-V應運而生,它采用了全新的無共享大規模并行架構(MPP)和真正列式數據庫技術,完美解決了傳統數據庫和分析系統在高性能實時分析查詢和高擴展性等方面的問題。

使用HP Vertica的分析平臺降低成本、提高性能
PetaBase-V 具有強大的功能,可迅速、可靠地管理大量數據,為您提供實時的業務智能以進行先進的大數據分析,從而將您的所有數據轉變為效益。PetaBase-V 在執行查詢方面,速度比傳統數據庫快 50 到 1000 倍,同時消耗的成本和占用的硬件僅有原來的幾分之一。PetaBase-V 內置高級分析和機器學習算法,可高效地支持數據庫內的用戶行為分析、關聯分析和預測分析。和并非專門為分析和當今復雜分析工作負載設計的傳統 RDBMS 數據庫不同,PetaBase-V 的設計和構建一開始就立足于提供速度和數據處理量,幫用戶實現數據變現。
作為全新架構的實時分析平臺,PetaBase-V 有很多的創新,最為突出特點包括:
  • 列式存儲和計算

    通過列式計算和強大的主動數據壓縮,大幅降低成本高昂的磁盤 I/O(主要是傳統的以行為存儲單位的 SQL 數據庫使用),執行查詢的速度可提升 50 到 1000 倍,存儲成本最高削減 90%。

  • 無共享大規模并行處理 (MPP)

    基于無共享的 MPP 架構,支持在線添加數量不限的 X86 工業標準服務器,可根據需求任意擴展解決方案。

  • 實時分析

    通過內存與磁盤混合存儲架構,以及原生支持 kafka 消息系統的連接,支持數據實時裝載和分析。

  • 完整的關系數據庫功能和 SQL 標準支持

    PetaBase-V 支持關系數據庫事務處理和 ACID 規范,支持 SQL-92/SQL-99/SQL-2003 標準,提供 ODBC、JDBC、ADO.NET 接口規范驅動,完全兼容傳統關系數據庫的開發、使用和管理習慣,可以輕松與現有的 ETL 和報表工具集成,保護客戶已有的投資。

  • 自動優化和性能管理

    通過強大的 API 集合來監控系統的資源、后臺進程、工作負載及性能,通過工作負載分析和數據庫設計器自動優化數據庫,簡化系統管理。

  • 自動實現高可用性

    不間斷運行,并具有數據復制、故障轉移和恢復功能;PetaBase-V 進行了性能優化,并且對業務和運營團隊完全透明。

應用場景

  • 可擴展,
    符合SQL的時間序列數據庫

    現如今大部分數據都是時間序列數據,無論是在查看物聯網數據,金融服務數據還是來自IT基礎架構的數據,都可能會定期創建數據。PetaBase-V具有一整套內置分析功能,包括時間序列,地理空間,模式匹配等。這些功能可以幫助實現不同類型的數據分析。
  • 數據倉庫現代化

    現在企業數據大多分散在各個CRM、ERP系統中,數據量級、數據性能和效率的要求越來越高,PetaBase-V為我們提供了處理大數據的靈活性,以WxabyteScale管理大量數據,提供更快更高效的數據分析,并可與億信BI、ETL工具無縫集成。
  • 溝通和網絡分析

    隨著越來越多的人和設備進入運營商網絡并上線,世界正在進入一個超連接的新時代,連通性和數據的巨大增長為管理這些復雜網絡的組織帶來了新的挑戰和機遇,溝通和網絡分析可以幫助企業優化網絡性能和容量規劃。
  • 欺詐監控和風險管理

    全球金融市場和金融服務公司每天生成和存儲數PB的數據。PetaBase-V使金融服務生態系統能夠使用基于SQL的蒙特卡羅技術,與統計建模工具集成,內置機器學習算法以及無與倫比的效率,性能和可擴展性,近乎實時地分析和做出明智的決策。
  • 客戶行為分析

    客戶行為分析正成為每個行業中每個企業理解,吸引和留住客戶的使命。PetaBase-V大數據平臺使各個行業的數據驅動型組織能夠管理和分析大量不同的客戶數據來源:從網絡日志和點擊流到CRM和客戶呼叫詳細記錄、360度全方位的客戶互動視圖等。借助該平臺更深入的高級分析洞察力可以最終改善客戶Web體驗,測試和迭代產品和服務,提高營銷和活動效率,降低購置成本并減少客戶流失。
  • 物聯網(IoT)分析

    幾年內,“物聯網”預計將包括數百萬甚至數十億的連接設備,從而產生不可思議的傳感器數據量。為了充分利用這一新興的大趨勢,物聯網企業必須做的不僅僅是在Hadoop中收集大量的傳感器數據,要在這些新業務模式中取得的成功取決于是否能夠利用經過驗證且可大規模擴展的大數據SQL分析平臺,而該平臺能夠以極大的規模存儲和分析大量傳感器數據。

應用價值

  • 性價比高,
    支持大規模擴展

    支持全平臺部署:x86服務器/私有云/公有云/Hadoop;支持大規模節點擴展,性價比高于傳統數據庫如Oracle及其他開源技術

  • 高處理性能

    能夠處理TB級大數據量,支撐大規模批量計算/高并發查詢/極端復雜的自主分析和查詢

  • 高頻數據加載
    和實時分析

    支持秒級數據實時加載和秒級甚至亞秒級的數據查詢響應能力

  • 開放性和集成能力

    可與Kafka/Hadoop Hive/HDFS/Spark等無縫集成,支持各類BI產品和ETL工具,可與億信BI無縫集成對接,達到億級數據秒級響應

量身定制專屬解決方案

針對企業個性化需求及行業特點定制專屬系統
專業團隊、單獨開發、全新分析
量身定制、迅速交付、全程跟蹤
億信華辰愿與您一起打造最優的解決方案

? 2019 ESENSOFT 北京億信華辰軟件有限責任公司| 版權所有:京ICP備07017321號 京公網安備11010802016281號|免責聲明

聯系
電話

您好,商務咨詢請聯系

咨詢熱線:400-0011-866轉0

技術
支持

您好,技術支持請聯系

QQ:400-0011-866

(工作日9:00-18:00)

元朝弓兵