Grafana+Influxdb可视化监控爬虫

AaronYuan 发布于2019-07-31 10:28 / 1057人阅读

摘要：可视化监控爬虫最近接到新的需求做可视化监控爬虫，搞了个小时终于成了。。。该端口不应该需要额外的权限。即可启动，默认登录名和密码代码借用崔庆才老师的代码链接最后结果意外发现的可视化界面也呈现出了监控结果。

可视化监控爬虫

最近接到新的需求做可视化监控爬虫，搞了3个小时终于成了。。。

环境搭建
我是在windows下搭建的环境，在这里只说windows
InfluxDb，是目前比较流行的时间序列数据库；
下载地址：https://dl.influxdata.com/influxdb/releases/influxdb-1.7.6_windows_amd64.zip
安装：解压安装即可，目前的配置文件去掉了admin可视化配置。
可视化配置：要使用web管理需要下载Chronograf，https://portal.influxdata.com...，下载完直接解压，双击exe程序，在浏览器输入http://localhost:8888/，一开始登录要账户密码，我都用admin就进去了
Grafana，一个可视化面板（Dashboard），有着非常漂亮的图表和布局展示，功能齐全的度量仪表盘和图形编辑器，支持Graphite、zabbix、 InfluxDB、Prometheus和OpenTSDB作为数据源
下载地址：Download the zip file
安装：该zip文件包含一个包含当前Grafana版本的文件夹。将此文件夹解压缩到您希望Grafana运行的任何位置。进入conf目录并复制sample.ini到custom.ini。你应该编辑custom.ini，永远不要defaults.ini。默认的Grafana端口是3000，此端口需要Windows上的额外权限。编辑custom.ini和取消注释http_port配置选项（;是ini文件中的注释字符）并将其更改为类似8080或类似的内容。该端口不应该需要额外的Windows权限。http://127.0.0.1:3000即可启动，默认登录名和密码admin/admin
influxdb（pip install influxdb)
Python 3.6
代码：(借用崔庆才老师的代码：链接：https://cuiqingcai.com/6217.html)

最后结果;

意外发现
influxdb的可视化界面chronograf也呈现出了监控结果。

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/43880.html

还在问用什么来做接口测试？万能Jmeter打造性能测试数据平台。jmeter 【 yyds】

摘要：况且，即便使用了插件，也不能实现历史数据追溯，数据持久化保存等功能。先来说下这套解决方案的原理，在运行过程中，将产生的性能数据写入到数据库里，然后定时从数据库中读取性能数据，并分类展示到页面上。而提供了将性能数据写入到的组件。前言在服务端性能测试工具中，Jmeter毫无疑问是其中的王...

notebin 2021-09-03 10:28 评论0 收藏0
FastD 最佳实践四: 构建系统可视化监控

摘要：的展示非常炫酷，绝对是运维提升逼格的一大利器。另外的可视化功能比强得多，而且以上版本将集成报警功能。它由写成，着力于高性能地查询与存储时序型数据。被广泛应用于存储系统的监控数据，行业的实时数据等场景。原有监控系统 showImg(https://segmentfault.com/img/remote/1460000011082384); 整个系统以 Graphite (carbon ...

khlbat 2019-06-28 13:42 评论0 收藏0
Docker容器可视化监控中心搭建

showImg(https://segmentfault.com/img/remote/1460000014421849); 概述一个宿主机上可以运行多个容器化应用，容器化应用运行于宿主机上，我们需要知道该容器的运行情况，包括 CPU使用率、内存占用、网络状况以及磁盘空间等等一系列信息，而且这些信息随时间变化，我们称其为时序数据，本文将实操如何搭建一个可视化的监控中心来收集这些承载着具体应...

yunhao 2019-06-28 16:23 评论0 收藏0
Docker 容器监控系统初探

摘要：是一个时序数据库，专门用于存储时序相关数据，很适合存储的数据。容器监控数据存储配置和运行是一个开源的分布式时序数据库，使用语言开发。的特色功能作为时序数据库，相比传统数据库它有很多特色功能，比如独有的一些特色函数和连续查询功能。本文已获得原作者__七把刀__授权。随着线上服务的全面 docker 化，对 docker 容器的监控就很重要了。SA 的监控系统是物理机的监控，在一个物理...

aboutU 2019-06-28 16:32 评论0 收藏0
Docker 容器监控系统初探

摘要：是一个时序数据库，专门用于存储时序相关数据，很适合存储的数据。容器监控数据存储配置和运行是一个开源的分布式时序数据库，使用语言开发。的特色功能作为时序数据库，相比传统数据库它有很多特色功能，比如独有的一些特色函数和连续查询功能。本文已获得原作者__七把刀__授权。随着线上服务的全面 docker 化，对 docker 容器的监控就很重要了。SA 的监控系统是物理机的监控，在一个物理...

cyixlq 2019-05-28 17:09 评论0 收藏0