工具研發者介紹
賀春旸,凡普金科愛錢進DBA團隊負責人,《MySQL管理之道:性能調優、高可用與監控》第一、二版作者,曾任職于中國移動飛信、安卓機鋒網。緻力于MariaDB、MongoDB等開源技術的研究,主要負責資料庫性能調優、監控和架構設計。
工具下載下傳:
https://github.com/hcymysql/mongo_monitor
簡介
一款面向研發人員檢視的MongoDB圖形可視化監控工具,借鑒了Percona PMM Grafana以及官方自帶的mongostat工具輸出的監控名額項,去掉了一些不必要、看不懂的監控項。目前采集了資料庫連接配接數、QPS/TPS、記憶體使用率統計,副本集replset狀态資訊和同步複制延遲時長。
采用遠端連接配接方式進去擷取資料,是以不需要在資料庫伺服器端部署相關agent或計劃任務,可實作微信和郵件報警。
注:監控環境為MongoDB 3.2以上版本,2.X版本未測試。
![](https://img.laitimes.com/img/_0nNw4CM6IyYiwiM6ICdiwiI0gTMx81dsQWZ4lmZf1GLlpXazVmcvwFciV2dsQXYtJ3bm9CX9s2RkBnVHFmb1clWvB3MaVnRtp1XlBXe0xCMy81dvRWYoNHLwEzX5xCMx8FesU2cfdGLwMzX0xiRGZkRGZ0Xy9GbvNGLpZTY1EmMZVDUSFTU4VFRR9Fd4VGdsYTMfVmepNHLrJXYtJXZ0F2dvwVZnFWbp1zczV2YvJHctM3cv1Ce-cmbw5SMwMDNzIDN2YTYkNWZ0IGOyYzX1IzNwcTMzIzLcVDMyIDMy8CXn9Gbi9CXzV2Zh1WavwVbvNmLvR3YxUjLyM3Lc9CX6MHc0RHaiojIsJye.png)
Mongo狀态監控,點選圖表,可以檢視曆史曲線圖:
1、連接配接數
2、QPS圖表
環境搭建
1、php-mysql驅動安裝:
shell> yum install -y php-pear php-devel php gcc openssl openssl-devel cyrus-sasl cyrus-sasl-devel httpd mysql php-mysql
2、php-mongo驅動安裝:
shell> pecl install mongo
把extension=mongo.so加入到/etc/php.ini最後一行
重新開機httpd服務,service httpd restart
注:如果通過pecl安裝報錯,請參考以下連結,進行源碼安裝。PHP 5.4版本對應的驅動版本是mongodb-1.3.4.tgz
參考連結:https://www.runoob.com/mongodb/mongodb-install-php-driver.html
3、建立MongoDB超級使用者權限(監控采集資料時使用):
首先我們在被監控的資料庫端建立授權帳号,允許采集器伺服器能連接配接到MongoDB資料庫。由于需要執行指令db.runCommand({serverStatus:1,repl:1}).repl和db.adminCommand( { replSetGetStatus: 1 } ).members,是以需要授予root角色,授權方式如下所示:
> use admin
>db.createUser({user:"admin",pwd:"123456",roles:[{role:"root",db:"admin"}]})
mongo_monitor部署
把https://github.com/hcymysql/mongo_monitor/archive/master.zip安裝包解壓縮到 /var/www/html/目錄下:
cd /var/www/html/mongo_monitor/
chmod 755 ./mail/sendEmail
chmod 755 ./weixin/wechat.py
注:郵件和微信報警調用的第三方工具,是以這裡要賦予可執行權限755。
1、導入Mongo Monitor監控工具表結構(mongo_monitor庫):
cd /var/www/html/mongo_monitor/
mysql -uroot -p123456 < mongo_monitor_schema.sql
2、錄入被監控主機的資訊:
INSERT INTO `mongo_status_info`
(ip,tag,USER,pwd,PORT,authdb,send_mail_to_list,send_weixin_to_list,threshold_alarm_connection,threshold_alarm_repl)
VALUES('10.10.159.31','MongoDB測試機1','admin','hechunyang','27017','admin','hechunyang','[email protected]',1000,60);
注,以下字段可以按照需求變更:
- ip字段含義:輸入被監控Mongo的IP位址
- tag字段含義:輸入被監控Mongo的業務名字
- user字段含義:輸入被監控Mongo的使用者名(ROOT權限)
- pwd字段含義:輸入被監控Mongo的密碼
- port字段含義:輸入被監控MySQL的端口号
- authdb字段含義:輸入被監控Mongo的資料庫登入權限認證庫名
- monitor字段含義:0為關閉監控(也不采集資料,直接跳過);1為開啟監控(采集資料)
- send_mail字段含義:0為關閉郵件報警;1為開啟郵件報警
- send_mail_to_list字段含義:郵件人清單
- send_weixin字段含義:0為關閉微信報警;1為開啟微信報警
- send_weixin_to_list字段含義:微信公衆号
- threshold_alarm_connection字段含義:設定連接配接數閥值(機關個)
- threshold_alarm_repl字段含義:設定主從複制延遲閥值(機關秒)
3、修改conn.php配置檔案:
vim /var/www/html/mongo_monitor/conn.php
$con = mysqli_connect("127.0.0.1","admin","hechunyang","mongo_monitor","3306") or die("資料庫連結錯誤".mysql_error());
改成你的Mongo Monitor監控工具表結構(mongo_monitor庫)連接配接資訊。
4、修改郵件報警資訊:
cd /var/www/html/mongo_monitor/mail/
vim mail.php
system("./mail/sendEmail -f [email protected] -t '{$this->send_mail_to_list}' -s smtp.139.com:25 -u '{$this->alarm_subject}' -o message-charset=utf8 -o message-content-type=html -m '報警資訊:
{$this->alarm_info}' -xu [email protected] -xp '123456' -o tls=no");
改成你的發件人位址、賬号密碼,裡面的變量不用修改。
5、修改微信報警資訊:
cd /var/www/html/mongo_monitor/weixin/
vim wechat.py
微信企業号設定移步https://github.com/X-Mars/Zabbix-Alert-WeChat/blob/master/README.md看此教程配置。
6、定時任務每分鐘抓取一次:
crontab -l
*/1 * * * * cd /var/www/html/mongo_monitor; /usr/bin/php /var/www/html/mongo_monitor/check_mongo_status.php > /dev/null 2 >&1
*/1 * * * * cd /var/www/html/mongo_monitor; /usr/bin/php /var/www/html/mongo_monitor/check_mongo_repl.php > /dev/null 2 >&1
check_mongo_status.php(用來采集被監控端Mongo狀态資訊和觸發報警)
check_mongo_repl.php(用來采集被監控端Mongo主從複制資訊和觸發報警)
7、更改頁面自動重新整理頻率:
vim mongo_replset_monitor.php
http-equiv="refresh" content="600"
預設頁面每600秒自動重新整理一次。
8、頁面通路:
http://yourIP/mongo_monitor/mongo_replset_monitor.php
加一個超連結,可友善地接入你們的自動化運維平台裡。
下載下傳方式
此工具現通過dbaplus社群免費為大家提供下載下傳使用。若使用過程中有任何問題或建議,可随時與我們聯系,歡迎大家試用。
登入以下連結即可下載下傳:
https://github.com/hcymysql/mongo_monitor
更多開源工具&腳本
詳情及下載下傳:http://dbaplus.cn/list-142-1.html
- 《All in Cloud 時代,下一代雲原生資料庫技術與趨勢》阿裡巴巴集團副總裁/達摩院首席資料庫科學家 李飛飛(飛刀)
- 《AI和雲原生時代的資料庫進化之路》騰訊資料庫産品中心總經理 林曉斌(丁奇)
- 《ICBC的MySQL探索之路》工商銀行軟體開發中心 魏亞東
- 《民生銀行在SQL稽核方面的探索和實踐》民生銀行 資深資料庫專家 李甯甯
- 《OceanBase分布式資料庫在西安銀行的落地和實踐》螞蟻金服P9資深專家/OceanBase核心負責人 蔣志勇
- 《金融行業MySQL高可用實踐》愛可生技術總監 明溪源