<center id="qkqgy"><optgroup id="qkqgy"></optgroup></center>
  • <menu id="qkqgy"></menu>
    <nav id="qkqgy"></nav>
    <xmp id="qkqgy"><nav id="qkqgy"></nav>
  • <xmp id="qkqgy"><menu id="qkqgy"></menu>
    <menu id="qkqgy"><menu id="qkqgy"></menu></menu>
    <tt id="qkqgy"><tt id="qkqgy"></tt></tt>

  • 1、DataSophon是誰開源的?

    國內某大廠

    2、DataSophon想干嘛?

    致力于快速實現部署、管理、監控以及自動化運維大數據服務組件和節點的能力,幫助您快速構建起穩定,高效的大數據集群服務。

    3、DataSophon是什么?

    DataSophon是致力于自動化監控、運維、管理大數據基礎組件和節點的,幫助您快速構建起穩定,高效的大數據集群服務。

    4、DataSophon都有哪些特性?

    *
    極易部署,1小時可完成300節點的大數據集群部署

    *
    國產化兼容,兼容arm服務器和常用國產化操作系統

    *
    監控指標全面豐富,基于生產實踐展示用戶最關心的監控指標

    *
    靈活便捷的告警服務,可實現用戶自定義告警組和告警指標

    *
    可擴展性強,用戶可通過配置的方式集成或升級大數據組件

    5、DataSophon架構圖

    6、DataSophon架構翻譯一下?

    *
    集群分為三大部分:管理節點、工作節點、監控

    *
    管理節點負責管理工作節點、工作節點上部署組件、負責任務執行

    *

    運維監控體系是獨立的,通過prometheus+exporter采集組件狀態參數,grafana負責運維可視化,通過alertmanager進行告警,這一套是現在主流的采集、存儲、可視化、告警的,每一步都是單獨的

    *
    管理員和運維人員通過管理節點實現節點上下線、擴容等

    *
    集群部署維護節點的元數據存儲在mysql中,所以兼容jdbc協議,也可以用其他數據庫替換mysql

    7、DataSophon可以集成哪些組件?

    序號名稱版本描述
    1HDFS3.3.3分布式大數據存儲
    2YARN3.3.3分布式資源調度與管理平臺
    3ZooKeeper3.5.10分布式協調系統
    4FLINK1.15.2實時計算引擎
    5Spark3.1.3分布式計算系統
    6Hive3.1.0離線數據倉庫
    7Kafka2.4.1高吞吐量分布式發布訂閱消息系統
    8Trino367分布式Sql交互式查詢引擎
    9StarRocks2.2.2新一代極速全場景MPP數據庫
    10Hbase2.0.2分布式列式存儲數據庫
    11Ranger2.1.0權限控制框架
    12ElasticSearch7.16.2高性能搜索引擎
    13Prometheus2.17.2高性能監控指標采集與告警系統
    14Grafana9.1.6監控分析與數據可視化套件
    15AlertManager0.23.0告警通知管理系統
    8、搭建和環境依賴?

    首先DataSophon是一套自動化運維搭建平臺,集成服務是jar包形式,目前目錄中列出的組件,提供好了對應的jar包,相當于jar包倉庫,按照要求放在對應的目錄中,搭建分布式服務時通過jar包分發的形式進行,然后調用os,進行解壓,修改配置等操作。

    基于上述,在服務集成上相對于cdn,hdp很方便。

    9、rpc技術選型?

    管理端與工作端通信選擇akka框架。選型依據如下:

    (1)Actor并發模型,支持協程,比線程小很多,高并發性能高。

    (2)非常輕量的事件驅動處理機制(1GB內存可容納約270萬個Actor)。

    (3)可以以jar包形式集成到現有框架,簡潔易用,無其他依賴。

    (4)具備容錯機制,允許在Actor出錯時進行一些恢復或者重置操作。

    (5)消息傳遞支持exactly once。

    (6)相對于netty,學習成本,使用成本更低。

    10、當前版本能做的事?

    支持多集群管理。

    支持配置集群管理員,集群管理員具備集群操作管理權限,普通用戶只有查看權限。

    支持HDFS ,YARN,Hive , Kafka , ZooKeeper,Flink , Spark 等常用大數據組件。

    支持集群總覽監控。

    支持各服務組件總覽監控。

    支持服務啟動,停止,重啟等操作。

    支持服務角色啟動,停止,重啟,刪除等操作。

    支持Yarn公平調取器管理。

    支持主機管理,支持實時監控主機Cpu使用率,內存使用率,磁盤使用率等常用指標。

    支持告警管理,支持自定義告警指標。

    支持服務配置文件修改。

    支持配置文件修改后集群服務自動檢測需要重啟生效的依賴服務提示。

    支持各大數據服務Web UIs便捷訪問。

    支持在線查看服務角色日志。

    技術
    下載桌面版
    GitHub
    百度網盤(提取碼:draw)
    Gitee
    云服務器優惠
    阿里云優惠券
    騰訊云優惠券
    華為云優惠券
    站點信息
    問題反饋
    郵箱:ixiaoyang8@qq.com
    QQ群:766591547
    關注微信
    巨胸美乳无码人妻视频