學習筆記: 12月 2018

2018年12月22日星期六

在 CentOS 7 上更新 Kernel

因為安全性，或者某些套件需要更高的Kernel版本時，需要將Kernel升級

1. 將目前系統所有套件升級

yum update -y

2. 透過ELRepo下載最新穩定的 Kernel 版本

rpm --import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org
rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-3.el7.elrepo.noarch.rpm
下載後再執行一次將所以套件升級
yum update -y
備註：最新的Kernel可以到這個網址查看
http://elrepo.org/tiki/tiki-index.php

5. 安裝Kernel

yum --enablerepo=elrepo-kernel install kernel-ml

6. 將最新安裝Kernel的啟動順序設為預設後重新開機

grub2-set-default 0
reboot

7. 將GRUB中的第一個Kernel作為默認的Kernel

vi /etc/default/grub
第一行新增內容
GRUB_DEFAULT=0
存檔

8. 重新配置 Kernel

grub2-mkconfig -o /boot/grub2/grub.cfg

9. 查看Kernel的啟動順序

awk -F\' '$1=="menuentry " {print $2}' /etc/grub2.cfg

10. 重新開機後驗證最新的Kernel作為預設的Kernel

reboot
uname -sr

參考文件：

CentOS7 更换内核

2018年12月20日星期四

LibreNMS - 效能篇 - MySQLTuner

MySQLTuner是一個用Perl編寫的腳本，允許快速查看MySQL安裝並進行調整以提高性能和穩定性。檢索當前配置變量和狀態數據，並以簡短格式顯示，並提供一些基本性能建議。

除了MySQL外，也支援了MariaDB、Percona各版本的資料庫，詳細的資源列表可參閱該專案中的說明。

下載MySQLTuner

cd /opt
wget http://mysqltuner.pl/ -O mysqltuner.pl
wget https://raw.githubusercontent.com/major/MySQLTuner-perl/master/basic_passwords.txt -O basic_passwords.txt
wget https://raw.githubusercontent.com/major/MySQLTuner-perl/master/vulnerabilities.csv -O vulnerabilities.csv

執行MySQLTuner

perl mysqltuner.pl

也可以將mysqltuner變成執行檔

chmod +x mysqltuner.pl

下次就能直接執行下列指令

./mysqltuner.pl

執行完後會給一份建議，再根據建議做調整

啟動performance schema

performance schema預設是關閉的，所以要透過修改my.cnf開啟

vi /etc/my.cnf

[mysqld]
performance_schema = on

安裝sysschema

MariaDB 10.x預設並沒有安裝sysschema，可透過下列指令安裝

curl "https://codeload.github.com/good-dba/mariadb-sys/zip/master" > mariadb-sys.zip

unzip -l mariadb-sys.zip

unzip mariadb-sys.zip

cd mariadb-sys-master/

mysql -u root -p < ./mariadb_sys_install.sql

systemctl restart mariadb

驗證

執行 perl mysqltuner.pl後，可以看到Performance schema的內容已經從

變成

禁用innodb_stats_on_metadata

因為Metadata的統計訊息更新有可能會嚴重影響資料庫伺服器及MySQLTuner的效能，所以需關閉innodb_stats_on_metadata
登入MySQL並執行下列命令關閉
mysql
set global innodb_stats_on_metadata = 0;
備註：有些文件說，my.cnf文件中也要設定，如果因不明原因變慢時，再到my.cnf文件中加入，這裡先依照MySQLTuner文件中的說明，不先加入下列敘述
[mysqld]
innodb_stats_on_metadata = 0

另外可以在my.cnf中再設置下列敘述，如果將條件設定為2會在I/O上有顯著的差異，但如果MySQL崩潰或是伺服器發生故障時，MySQL上的數據會丟失一秒鐘

[mysqld]
innodb_flush_log_at_trx_commit = 2

參考網址：

https://github.com/major/MySQLTuner-perl

LibreNMS - 效能篇 - RRDCache

根據LibreNMS官方網站的說明，使用RRDCache可以增強I/O的效能，Ops/sec 可以減少約30-40%

軟體需求：RRDTool 1.5.5以上（RRDTool 1.7安裝請參考這裡）

編輯/etc/librenms/config.php，新增下列內容

$config['rrdtool_version'] = '1.5.5';

建立/etc/systemd/system/rrdcached.service檔案並新增下列內容

備註：因為是自行編譯的RRDTool，所以路徑PIDFile=/run/rrdcached.pid改為PIDFile=/opt/rrdtool-1.7.0/var/run/rrdcached.pid

[Unit]
Description=Data caching daemon for rrdtool
After=network.service

[Service]
Type=forking
PIDFile=/opt/rrdtool-1.7.0/var/run/rrdcached.pid
ExecStart=/usr/bin/rrdcached -w 1800 -z 1800 -f 3600 -s librenms -U librenms -G librenms -B -R -j /var/tmp -l unix:/run/rrdcached.sock -t 4 -F -b /opt/librenms/rrd/

[Install]
WantedBy=default.target
啟動rrdcached

systemctl enable --now rrdcached.service

編輯/opt/librenms/config.php將下列一行的#移除

#$config['rrdcached'] = "unix:/var/run/rrdcached.sock";

在 CentOS 7 上安裝 RRDTool 1.7.2

RRDTool在2019.05.27將版本更新到1.7.2，所以這篇文章又小幅修正了一次（2019/05/29）

這次1.7.2的版本修正了7個Bug，有興趣的可以到這裡查看

很久沒更新的RRDTool在2019.02將版本更新到了1.7.1，所以這篇文章也要跟著修改（2019/03/15）

RRDTool 1.7.1多了下列幾個功能：

多行的標題（Multiline Titles）
法語支援（French translation）
增加了--allow-shrink以及--rigid flag的支援（Add support for --allow-shrink with --rigid flag）
為rrd_cached增加了SUSPEND/RESUME/SUSPENDALL/RESUMEALL 的指令（Added SUSPEND/RESUME/SUSPENDALL/RESUMEALL commands for rrd_cached）
在錯誤訊息中包含了daemon名稱（include the daemon name in the error message）

安裝完 CentOS 7後，如果沒有做其他變更，透過yum指令安裝的RRDTool版本會是1.4.8，1.4.8這版本已經是2012年五月的事情了，而RRDTool官方網站顯示，最新的版本是1.7，雖然1.7這版本是2016年五月出品，距今已經兩年多沒更新，但既然還有各種網路監控軟體會需要用到RRDTool，就把它更新到最後一版吧，至少效能方面應該會比1.4.8版要好。（2018/12/20）

安裝編譯前需要的套件

yum install glibc glibc-devel cairo-devel libxml2-devel pango-devel pango libpng-devel freetype freetype-devel libart_lgpl-devel perl-devel gcc wget

下載RRDTool

cd /opt

wget https://oss.oetiker.ch/rrdtool/pub/rrdtool-1.7.2.tar.gz

編譯RRDTool

tar xvfz rrdtool-1.7.2.tar.gz

cd rrdtool-1.7.2

./configure

make

make install

建立檔案鏈結

cd /usr/bin
ln -s /opt/rrdtool-1.7.2/bin/rrdcached rrdcached
ln -s /opt/rrdtool-1.7.2/bin/rrdtool rrdtool
ln -s /opt/rrdtool-1.7.2/bin/rrdcreate rrdcreate
ln -s /opt/rrdtool-1.7.2/bin/rrdupdate rrdupdate
ln -s /opt/rrdtool-1.7.2/bin/rrdcgi rrdcgi

驗證

rrdtool

2018年12月19日星期三

在 CentOS 7 上安裝 MariaDB 10

安裝完 CentOS 7後，如果沒有做其他變更，透過yum指令安裝的MariaDB版本會是5.5.60，而MariaDB官方網站顯示，最新的版本已經到10.3.11（2018/12/20）

備註：MariaDB 10開始與MySQL分道揚鑣，所以如果有其他考量，建議還是使用MariaDB 5.5

建立MariaDB的Repository

vi /etc/yum.repos.d/MariaDB.repo

輸入下列內容

[mariadb]
name = MariaDB
baseurl = http://yum.mariadb.org/10.3/centos7-amd64
gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-MariaDB
gpgcheck=1

存檔後執行

yum update

安裝MariaDB

yum install mariadb mariadb-server

啟動MariaDB

systemctl start mariadb

systemctl enable mariadb

驗證MariaDB安裝版本

mysql -V

2018年12月18日星期二

在 CentOS 7 上開啟 BBR 功能

作業系統：CentOS 7
Linux Kernel版本：4.9以上
備註：如果Linux Kernel版本不是4.9以上，請先參考這篇做升級動作

開啟BBR功能

echo 'net.core.default_qdisc=fq' | sudo tee -a /etc/sysctl.conf

echo 'net.ipv4.tcp_congestion_control=bbr' | sudo tee -a /etc/sysctl.conf sudo

sysctl -p

確認BBR功能是否已開啟

lsmod | grep bbr

如果BBR功能已開啟，會看到類似下列訊息

tcp_bbr 20480 2

在 CentOS 7 上安裝 LiberNMS - 使用 Nginx

LibreNMS 1.49已規定PHP最小的版本為7.1.3，下列文章做部分修改（2019/03/15）

作業系統：CentOS 7
PHP版本：PHP 7.1.3以上

安裝需要的套件

yum install epel-release
rpm -Uvh https://mirror.webtatic.com/yum/el7/webtatic-release.rpm
yum install composer cronie fping git ImageMagick jwhois mtr nginx MySQL-python net-snmp net-snmp-utils nmap python-memcached unzip php72w php72w-cli php72w-common php72w-curl php72w-fpm php72w-gd php72w-mbstring php72w-mysqlnd php72w-process php72w-snmp php72w-xml php72w-zip php72w-ldap rrdtool mariadb mariadb-server
備註：如要用最新的MariaDB及RRDTool版本取代原有Repository提供的舊版本，可以參考這裡（MariaDB）及這裡（RRDTool）
備註：如果已經手動安裝RRDTool及MariaDB，可以把上述套件從安裝的套件中移除（橘色部分）不要安裝
備註：不要將PHP 7.2升級到PHP 7.3，因為現有composer套件需要PHP 7.2

新增LiberNMS使用者帳戶

useradd librenms -d /opt/librenms -M -r
usermod -a -G librenms nginx

下載LiberNMS

cd /opt
composer create-project --no-dev --keep-vcs librenms/librenms librenms dev-master
備註：因為是使用root帳號，所以在安裝過程中會遇到警告不要使用root帳號的訊息，但不影響後續安裝

設定MySQL

systemctl start mariadb
mysql -u root
執行SQL指令建立使用者帳號及密碼
CREATE DATABASE librenms CHARACTER SET utf8 COLLATE utf8_unicode_ci;
CREATE USER 'librenms'@'localhost' IDENTIFIED BY '設定密碼';
GRANT ALL PRIVILEGES ON librenms.* TO 'librenms'@'localhost'; FLUSH PRIVILEGES;
exit
編輯MySQL設定檔
vi /etc/my.cnf
備註：MariaDB 10.x版本是編輯 /etc/my.cnf.d/server.cnf
在[mysqld]區塊中新增
innodb_file_per_table=1
lower_case_table_names=0
重新啟動MySQL
systemctl enable mariadb
systemctl restart mariadb

設定並啟動PHP-FPM

修改時區
vi /etc/php.ini
找到[Date]新增
date.timezone = Asia/Taipei
設定網頁設定檔
vi /etc/php-fpm.d/www.conf
變更內容為
;user = apache
user = nginx
group = apache ; keep group as apache
;listen = 127.0.0.1:9000
listen = /var/run/php-fpm/php7.2-fpm.sock
listen.owner = nginx
listen.group = nginx
listen.mode = 0660
重新啟動php-fpm服務
systemctl enable php-fpm
systemctl restart php-fpm

設定NGINX

新增設定檔librenms.conf
vi /etc/nginx/conf.d/librenms.conf
新增內容
server {
listen      80;
server_name <輸入伺服器名稱>;
root        /opt/librenms/html;
index       index.php;
charset utf-8;
gzip on;
gzip_types text/css application/javascript text/javascript application/x-javascript image/svg+xml text/plain text/xsd text/xsl text/xml image/x-icon;
location / {
   try_files $uri $uri/ /index.php?$query_string;
}
location /api/v0 {
   try_files $uri $uri/ /api_v0.php?$query_string;
}
location ~ \.php {
   include fastcgi.conf;
   fastcgi_split_path_info ^(.+\.php)(/.+)$;
   fastcgi_pass unix:/var/run/php-fpm/php7.2-fpm.sock;
}
location ~ /\.ht {
   deny all;
}
}
重新啟動NGINX服務
systemctl enable nginx
systemctl restart nginx

設定SELinux

安裝SELinux的Policy Tool
yum install policycoreutils-python

執行下列指令配置LibreNMS需要的內容
semanage fcontext -a -t httpd_sys_content_t '/opt/librenms/logs(/.*)?'
semanage fcontext -a -t httpd_sys_rw_content_t '/opt/librenms/logs(/.*)?'
restorecon -RFvv /opt/librenms/logs/
semanage fcontext -a -t httpd_sys_content_t '/opt/librenms/rrd(/.*)?'
semanage fcontext -a -t httpd_sys_rw_content_t '/opt/librenms/rrd(/.*)?'
restorecon -RFvv /opt/librenms/rrd/
semanage fcontext -a -t httpd_sys_content_t '/opt/librenms/storage(/.*)?'
semanage fcontext -a -t httpd_sys_rw_content_t '/opt/librenms/storage(/.*)?'
restorecon -RFvv /opt/librenms/storage/
semanage fcontext -a -t httpd_sys_content_t '/opt/librenms/bootstrap/cache(/.*)?'
semanage fcontext -a -t httpd_sys_rw_content_t '/opt/librenms/bootstrap/cache(/.*)?'
restorecon -RFvv /opt/librenms/bootstrap/cache/
setsebool -P httpd_can_sendmail=1
setsebool -P httpd_execmem 1

新增fping模組

在任何一個路徑的資料夾下新增http_fping.tt檔案，並新增下列內容
module http_fping 1.0;
require {
type httpd_t;
class capability net_raw;
class rawip_socket { getopt create setopt write read };
}
#============= httpd_t ==============
allow httpd_t self:capability net_raw;
allow httpd_t self:rawip_socket { getopt create setopt write read };
產生檔案後執行下列指令
checkmodule -M -m -o http_fping.mod http_fping.tt
semodule_package -o http_fping.pp -m http_fping.mod
semodule -i http_fping.pp

設定防火牆規則

firewall-cmd --zone public --add-service http
firewall-cmd --permanent --zone public --add-service http
firewall-cmd --zone public --add-service https
firewall-cmd --permanent --zone public --add-service https

設定SNMP

將librenms的snmp範例取代原有的snmp設定檔
cp /opt/librenms/snmpd.conf.example /etc/snmp/snmpd.conf
編輯snmpd.conf，並將RANDOMSTRINGGOESHERE改為自己的community string
vi /etc/snmp/snmpd.conf
下載librenms-agent，並重新啟動snmpd
curl -o /usr/bin/distro https://raw.githubusercontent.com/librenms/librenms-agent/master/snmp/distro
chmod +x /usr/bin/distro
systemctl enable snmpd
systemctl restart snmpd

複製建立Cron job

cp /opt/librenms/librenms.nonroot.cron /etc/cron.d/librenms

設置logrotate

LibreNMS會將log保存在/opt/librenms/logs中，隨著時間推移，不必要的log會一直佔據磁碟空間，所以需要設定logrotate清除過期不再需要的log
複製logrotate設定檔

cp /opt/librenms/misc/librenms.logrotate /etc/logrotate.d/librenms

設定資料夾權限

chown -R librenms:librenms /opt/librenms
setfacl -d -m g::rwx /opt/librenms/rrd /opt/librenms/logs /opt/librenms/bootstrap/cache/ /opt/librenms/storage/
setfacl -R -m g::rwx /opt/librenms/rrd /opt/librenms/logs /opt/librenms/bootstrap/cache/ /opt/librenms/storage/
chgrp apache /var/lib/php/session/

將電腦名稱及IP加入到/etc/hosts
透過瀏覽器安裝LibreNMS

http://<librenms.example.com>/install.php

Pre-Install Checks如果沒問題就點選Next Stage

DB Pass處輸入之前設定的MySQL密碼

如果沒任何錯誤訊息就點選Goto Add User

建立LibreNMS的管理者帳號、密碼及Email

點選Generate Config

這裡出現一個錯誤，因為沒有權限在/opt/librenms/下建立config.php檔案，所以要請我們複製下方內容，並手動建立config.php檔案
（備註：每個人的config.php有可能不同，請依照當下LibreNMS的建議將內文複製貼上)
（備註：測試過，config.php檔案不能先建立，並新增檔案的權限，不然會跳過LibreNMS的安裝步驟）
vi /opt/librenms/config.php
檔案建立後執行下列指令新增檔案的權限
chown librenms:librenms /opt/librenms/config.php
完畢後點選Finish

安裝結束後，點選”validate your install and fix any issues.”

輸入剛才在安裝步驟中建立的管理者帳號及密碼登入

登入LibreNMS管理頁面後，可能會有需要修正的錯誤，或是警告訊息，只要依照LibreNMS的步驟做修正就行了

全部錯誤修正完之後，就可以把系統或設備加入到LibreNMS中