开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

项目简介

集监控点监控、日志监控、数据可视化及监控告警为一体的分布式开源监控系统。
通过插件方式支持常用监控需求,插件可自由选择且支持一键部署、移除、启用、禁用等操作。
提供丰富的图表和多种数据类型,满足对数据可视化的需要。
在线演示版地址:http://open.xrkmonitor.com

相比其它开源监控系统优势

  1. 支持插件功能, 监控插件无需开发,自由选择监控插件,控制台安装即可使用
  2. 集成告警功能, 支持多种告警方式
  3. 集成分布式日志系统功能, 无需任何开发即可打造高性能分布式日志系统
  4. 支持多种部署方式
    a.集中部署(全部服务部署在一台机器,适合个人或者小团队开发者)
    b.分布式部署(分布式部署在多台机器,适合小中型企业大规模监控需求)
  5. 支持自动化配置(机器部署 agent 后自动注册到监控系统无需在控制台配置、视图根据上报自动绑定相关上报机器)
  6. 支持多用户访问(子账号由管理员账号在控制台添加)
  7. 同时面向开发者和运维产品人员,开发者可以使用 API 开发接口很方便的定制自己的监控需求,运维和产品人员可以直接部署使用现有插件完成监控需求

特色功能推荐

  1. IP 地址库: 支持通过 IP 地址上报时将 IP 地址转为物理地址,相同物理地址归并展示,一个监控 API 即可轻松生成监控数据的物理地址分布图,插件示例:
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  2. 监控插件市场: 让监控成为可以复用的组件,无需开发一键安装即可使用,更多监控插件持续开发中
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  3. 分布式日志系统: 支持大规模系统日志上报,日志上报支持频率限制、日志染色、自定义字段等高级功能,控制台日志查看支持按关键字、排除关键字、上报时间、上报机器等方式过滤日志,从茫茫日志中轻松找到您需要的日志
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  4. 视图机制: 监控图表支持视图定制模式,视图可按上报服务器、监控点随意组合,轻松定制您需要的监控视图,并可在监控图表上直接设置告警值
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  5. 告警集成: 集成告警功能, 支持邮件、短信、微信、PC 客户端等告警方式,告警功能无需开发直接可用
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  6. 内网部署: 监控系统可以部署在内网隔离环境,插件仍可以从云端下载部署,agent 支持 udp 代理功能,可通过 agent 的代理使用云端提供的服务,如监控告警服务。

  7. 插件实时表格,主要用于实时展示监控指标在分布式机群不同机器间的对比排序
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

docker 方式部署

以下假设宿主机的 IP 地址为:192.168.128.210, 以最新版本 latest 作为示例说明 docker 部署方法

  1. 拉取 docker 镜像: docker pull registry.cn-hangzhou.aliyuncs.com/xrkmonitor/release:latest
  2. 通过镜像启动容器:docker images 查看镜像 ID,假设为:93297f01d06b
    启动容器:
    docker run -idt -p27000:27000/udp -p38080:38080/udp -p28080:28080/udp -p80:80 –env xrk_http_port=80 -v /data/xrkmonitor/docker_mysql:/var/lib/mysql -v /data/xrkmonitor/docker_slog:/home/mtreport/slog –env xrk_host_ip=192.168.128.210 93297f01d06b
    参数说明:
    -p27000:27000/udp -p38080:38080/udp -p28080:28080/udp -p80:80 日志、监控点、接入服务等的端口映射
    –env xrk_http_port=80 web 控制台的映射端口(可以使用非 80 端口映射容器 80 端口,相关问题可以查看在线文档的 docker 部署部分)
    -v /data/xrkmonitor/docker_mysql:/var/lib/mysql, 挂载宿主机目录作为 mysql 数据库文件目录
    -v /data/xrkmonitor/docker_slog:/home/mtreport/slog,挂载日志目录
    –env xrk_host_ip=192.168.128.210 宿主机的 ip 地址, 根据实际情况传递
  3. docker attach 进入容器,进入目录 /home/mtreport, 执行 ./start_docker.sh 启动监控系统服务
  4. 在浏览器端使用宿主机 IP 访问控制台:http://192.168.128.210,控制台默认账号密码为:sadmin/sadmin
  5. 如需停止服务可执行 : /home/mtreport/stop_docker.sh 脚本

可以使用 ps -elf |grep slog 命令查看运行的进程,使用 ps -elf |grep xrk_ 查看运行的内置插件

特别注意:由于当前暂不支持增量更新,如之前使用过 docker 方式部署,升级版本时注意更换宿主机的 mysql 映射目录或者清除映射目录下旧版本的 mysql 文件,否则 db 仍会使用旧版本 db 库,这在新版本更改了 mysql 库表结构的情况下服务运行会出错。

agent 部署说明:

容器中 /home/mtreport/slog_mtreport_client.tar.gz 为 agent 部署包,可以将其拷贝到需要部署的机器上,解压后部署 SERVER_MASTER 配置改为宿主机的 IP 地址, 如果需要在宿主机上部署 agent,需要指定:AGENT_CLIENT_IP 为容器网卡的 IP,关于 agent 的详细说明可以参考开源版在线文档, 不建议在容器中部署插件(在宿主机需要部署时会发生冲突).

docker 使用过程中如有问题可以加入我们的 QQ 群:859052272 获取帮助。

使用 docker 镜像编译源码

使用 docker 镜像编译源码方法如下:

  1. 拉取镜像:docker pull registry.cn-hangzhou.aliyuncs.com/xrkmonitor/compile:latest
  2. 执行镜像容器:docker run -idt [镜像 id] (docker images 获取)
  3. 进入容器:docker attach [容器 id] (docker ps -a 获取)
  4. 进入容器目录:/home/xrkmonitor/open, 执行 make 即可编译项目全部源码
  5. 编译成功后生成集中部署包,进入 tools_sh 目录,执行:./make_all.sh 即可生成完整的集中部署包

关于集中部署请参考文档:源码编译-集中部署

docker 编译镜像安装了 vim/gcc/git 等工具,如需更新源码,进入目录:/home/xrkmonitor/open 执行 git pull 即可
如您想使用镜像进行二次开发,建议您挂载宿主机目录,将源码下载到挂载的目录进行修改, 不要使用容器中的/home/xrkmonitor/open 目录,以免工作成果丢失。

在线部署

安装脚本: install.sh
从以下链接下载后, 按提示执行即可, 需要系统支持 bash
(wget http://xrkmonitor.com/monitor/download/install.sh; chmod +x install.sh; ./install.sh )
示例(如您安装失败可在评论区留言系统版本或者加入 Q 群咨询)

开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

在线安装示例

在线部署说明:

安装脚本会先检查当前系统是否支持在线安装, 如不支持您可以下载源码后在系统上编译安装
在线部署目前只支持集中部署方式, 即所有服务部署在一台机器上, 该机器上需要安装 mysql/apache
安装脚本使用中文 utf8 编码, 安装过程请将您的终端设置为 utf8, 以免出现乱码
安装脚本同时支持 root 账号和普通账号操作, 使用普通账号执行安装部署要求如下:

  1. 在线部署使用动态链接库, 需要在指定目录下执行安装脚本, 目录为: /home/mtreport
  2. 普通账号某些目录可能无权操作, 需要授权才能正常安装

卸载脚本: uninstall_xrkmonitor.sh
在线部署过程中会下载该脚本, 如需卸载可执行该脚本
在线部署详细说明文档:在线部署

我们强烈建议您先在本地虚拟机上执行在线安装, 熟悉安装流程后在实际部署到您的服务器上。

离线部署(自行编译源码)

如果在线安装失败或者需要二次开发, 可以使用源码编译方式安装

操作步骤:

  1. git clone https://gitee.com/xrkmonitorcom/open.git 下载源码
  2. 进入源码目录,执行 make 完成源码编译
  3. 进入 tools_sh 目录,执行 make_all.sh 生成部署包
  4. 在安装目录解压部署包,执行 local_install.sh 完成安装

(如遇编译环境问题,可以尝试使用 docker 镜像编译)
监控系统卸载脚本: uninstall_xrkmonitor.sh,移除彻底不留丝毫痕迹

安装环境变量同在线安装一样, 具体可以查看说明文档: 源码编译-集中部署
控制台默认账号密码: sadmin/sadmin

使用的技术方案

  1. apache + mysql(监控点数据、配置信息使用 mysql 存储, 支持分布式部署)
  2. 前端 web 控制台采用 dwz 开源框架
  3. 前端监控图表采用开源 echarts 绘制
  4. 后台 cgi 使用开源的 cgi 模板引擎 – clearsilver, 所有 cgi 支持以 fastcgi 方式部署
  5. 后台服务使用了开源的 socket 开发框架 – C++ Sockets

当前监控上报 API 支持的语言如下(更多语言支持在开发中)

  1. [c/c++ 开发接口]
  2. [php 开发接口]
  3. [linux shell 开发接口]
  4. [javascript 开发接口]

精品插件截图

  1. linux_base ,linux 系统基础资源监控,包括 cpu、内存、网络、磁盘等基础的监控指标,可在视图或者服务器模式的图表上直接针对指标设置告警

    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  2. monitor_apache_log,基于 apache 日志组件实现的 apache 网站服务端监控,可监控网站流量、访客地域分布等指标
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  3. monitor_website,使用 javascript 脚本语言编写的,网站前端监控开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  4. open_source_star,开源项目粉丝增长监控,可聚合了 gitee 和 github 两个平台的粉丝
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

  5. common_log,通用日志文件监控,可监控日志文件,轻松打造高性能分布式日志系统
    开源集监控点、日志监控、数据可视化及监控告警为一体监控系统!

文档 http://xrkmonitor.com/monitor/dmt_open_doc.html

地址:https://gitee.com/xrkmonitorcom/

© 版权声明

☆ END ☆
喜欢就点个赞吧
点赞0 分享
图片正在生成中,请稍后...