Grafana+Influxdb可視化監(jiān)控爬蟲(chóng)

AaronYuan 發(fā)布于2019-07-31 10:28 / 1089人閱讀

摘要：可視化監(jiān)控爬蟲(chóng)最近接到新的需求做可視化監(jiān)控爬蟲(chóng)，搞了個(gè)小時(shí)終于成了。。。該端口不應(yīng)該需要額外的權(quán)限。即可啟動(dòng)，默認(rèn)登錄名和密碼代碼借用崔慶才老師的代碼鏈接最后結(jié)果意外發(fā)現(xiàn)的可視化界面也呈現(xiàn)出了監(jiān)控結(jié)果。

可視化監(jiān)控爬蟲(chóng)

最近接到新的需求做可視化監(jiān)控爬蟲(chóng)，搞了3個(gè)小時(shí)終于成了。。。

環(huán)境搭建
我是在windows下搭建的環(huán)境，在這里只說(shuō)windows
InfluxDb，是目前比較流行的時(shí)間序列數(shù)據(jù)庫(kù)；
下載地址：https://dl.influxdata.com/influxdb/releases/influxdb-1.7.6_windows_amd64.zip
安裝：解壓安裝即可，目前的配置文件去掉了admin可視化配置。
可視化配置：要使用web管理需要下載Chronograf，https://portal.influxdata.com...，下載完直接解壓，雙擊exe程序，在瀏覽器輸入http://localhost:8888/，一開(kāi)始登錄要賬戶密碼，我都用admin就進(jìn)去了
Grafana，一個(gè)可視化面板（Dashboard），有著非常漂亮的圖表和布局展示，功能齊全的度量?jī)x表盤和圖形編輯器，支持Graphite、zabbix、 InfluxDB、Prometheus和OpenTSDB作為數(shù)據(jù)源
下載地址：Download the zip file
安裝：該zip文件包含一個(gè)包含當(dāng)前Grafana版本的文件夾。將此文件夾解壓縮到您希望Grafana運(yùn)行的任何位置。進(jìn)入conf目錄并復(fù)制sample.ini到custom.ini。你應(yīng)該編輯custom.ini，永遠(yuǎn)不要defaults.ini。默認(rèn)的Grafana端口是3000，此端口需要Windows上的額外權(quán)限。編輯custom.ini和取消注釋http_port配置選項(xiàng)（;是ini文件中的注釋字符）并將其更改為類似8080或類似的內(nèi)容。該端口不應(yīng)該需要額外的Windows權(quán)限。http://127.0.0.1:3000即可啟動(dòng)，默認(rèn)登錄名和密碼admin/admin
influxdb（pip install influxdb)
Python 3.6
代碼：(借用崔慶才老師的代碼：鏈接：https://cuiqingcai.com/6217.html)

最后結(jié)果;

意外發(fā)現(xiàn)
influxdb的可視化界面chronograf也呈現(xiàn)出了監(jiān)控結(jié)果。

GPU云服務(wù)器云服務(wù)器 grafana監(jiān)控 grafana 數(shù)據(jù)可視化 influxdb 爬蟲(chóng)監(jiān)控

文章版權(quán)歸作者所有，未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請(qǐng)注明本文地址：http://systransis.cn/yun/43880.html

相關(guān)文章

還在問(wèn)用什么來(lái)做接口測(cè)試？萬(wàn)能Jmeter打造性能測(cè)試數(shù)據(jù)平臺(tái)。jmeter 【 yyds】

摘要：況且，即便使用了插件，也不能實(shí)現(xiàn)歷史數(shù)據(jù)追溯，數(shù)據(jù)持久化保存等功能。先來(lái)說(shuō)下這套解決方案的原理，在運(yùn)行過(guò)程中，將產(chǎn)生的性能數(shù)據(jù)寫入到數(shù)據(jù)庫(kù)里，然后定時(shí)從數(shù)據(jù)庫(kù)中讀取性能數(shù)據(jù)，并分類展示到頁(yè)面上。而提供了將性能數(shù)據(jù)寫入到的組件。前言在服務(wù)端性能測(cè)試工具中，Jmeter毫無(wú)疑問(wèn)是其中的王...

notebin 2021-09-03 10:28 評(píng)論0 收藏0
FastD 最佳實(shí)踐四: 構(gòu)建系統(tǒng)可視化監(jiān)控

摘要：的展示非常炫酷，絕對(duì)是運(yùn)維提升逼格的一大利器。另外的可視化功能比強(qiáng)得多，而且以上版本將集成報(bào)警功能。它由寫成，著力于高性能地查詢與存儲(chǔ)時(shí)序型數(shù)據(jù)。被廣泛應(yīng)用于存儲(chǔ)系統(tǒng)的監(jiān)控?cái)?shù)據(jù)，行業(yè)的實(shí)時(shí)數(shù)據(jù)等場(chǎng)景。原有監(jiān)控系統(tǒng) showImg(https://segmentfault.com/img/remote/1460000011082384); 整個(gè)系統(tǒng)以 Graphite (carbon ...

khlbat 2019-06-28 13:42 評(píng)論0 收藏0
Docker容器可視化監(jiān)控中心搭建

showImg(https://segmentfault.com/img/remote/1460000014421849); 概述一個(gè)宿主機(jī)上可以運(yùn)行多個(gè)容器化應(yīng)用，容器化應(yīng)用運(yùn)行于宿主機(jī)上，我們需要知道該容器的運(yùn)行情況，包括 CPU使用率、內(nèi)存占用、網(wǎng)絡(luò)狀況以及磁盤空間等等一系列信息，而且這些信息隨時(shí)間變化，我們稱其為時(shí)序數(shù)據(jù)，本文將實(shí)操如何搭建一個(gè)可視化的監(jiān)控中心來(lái)收集這些承載著具體應(yīng)...

yunhao 2019-06-28 16:23 評(píng)論0 收藏0
Docker 容器監(jiān)控系統(tǒng)初探

摘要：是一個(gè)時(shí)序數(shù)據(jù)庫(kù)，專門用于存儲(chǔ)時(shí)序相關(guān)數(shù)據(jù)，很適合存儲(chǔ)的數(shù)據(jù)。容器監(jiān)控?cái)?shù)據(jù)存儲(chǔ)配置和運(yùn)行是一個(gè)開(kāi)源的分布式時(shí)序數(shù)據(jù)庫(kù)，使用語(yǔ)言開(kāi)發(fā)。的特色功能作為時(shí)序數(shù)據(jù)庫(kù)，相比傳統(tǒng)數(shù)據(jù)庫(kù)它有很多特色功能，比如獨(dú)有的一些特色函數(shù)和連續(xù)查詢功能。本文已獲得原作者_(dá)_七把刀__授權(quán)。隨著線上服務(wù)的全面 docker 化，對(duì) docker 容器的監(jiān)控就很重要了。SA 的監(jiān)控系統(tǒng)是物理機(jī)的監(jiān)控，在一個(gè)物理...

aboutU 2019-06-28 16:32 評(píng)論0 收藏0
Docker 容器監(jiān)控系統(tǒng)初探

摘要：是一個(gè)時(shí)序數(shù)據(jù)庫(kù)，專門用于存儲(chǔ)時(shí)序相關(guān)數(shù)據(jù)，很適合存儲(chǔ)的數(shù)據(jù)。容器監(jiān)控?cái)?shù)據(jù)存儲(chǔ)配置和運(yùn)行是一個(gè)開(kāi)源的分布式時(shí)序數(shù)據(jù)庫(kù)，使用語(yǔ)言開(kāi)發(fā)。的特色功能作為時(shí)序數(shù)據(jù)庫(kù)，相比傳統(tǒng)數(shù)據(jù)庫(kù)它有很多特色功能，比如獨(dú)有的一些特色函數(shù)和連續(xù)查詢功能。本文已獲得原作者_(dá)_七把刀__授權(quán)。隨著線上服務(wù)的全面 docker 化，對(duì) docker 容器的監(jiān)控就很重要了。SA 的監(jiān)控系統(tǒng)是物理機(jī)的監(jiān)控，在一個(gè)物理...

cyixlq 2019-05-28 17:09 評(píng)論0 收藏0