云数科技-云库CloudyBi
云数科技 技术

云数科技 > CloudyBI - 实时稳定云通讯


  在云网络中,各服务器间通讯系统是最基础的核心模块,在云网络中,特别是处理超大数据信息时,通迅的持续长连接稳定性与高频低占用率将成为重中之重,云上通迅的稳定与健壮直接关系整个系统的工作稳定性。实时稳定的云通讯应包括以下基本能力:

  - 实时大数据不间断传输、互通;
  - 实时海量小数据不间断传输;(多机、多进程、多线程、负载均稳)
  - 具备周期性自检、上报能力;
  - 实时更新并通知各节点在线服务器数量;
  - 实时更新并通知云上各服务器负载(CPU/IO、内存、磁盘使用情况)情况表;
  - 实时更新并通知云上各服务器最新的配置及控制调控设置并应用;
  - 各服务器间工作进程监控与各进程工作线程实时反馈接收与管理;
  - 各服务器、节点工作任务(如数据提取工作)实时工作情况(如提取队列)监控;
  - 各服务器、节点工作模块监控;

  除了基本能力外,在大数据领域还应该具备:

  - 在大数据处理过程中(高IO占用/高CPU占用/高内存占用/高网络占用)保持通迅不间断与实时处理;
  - 应具备离线保护与再连线后的自动恢复、自动修补的能力以保证数据的完整性;
  - 对非系统致命错误应具备云服务器、节点之间的重唤醒与修复的能力;
  - 在超大数据占用网络使用(通常到达百亿级,仅数据提取模块将不间断地占用网络能力)的情况下尽可能保持通迅不中断与中断后立刻自动恢复;

云库云通讯模块: