静怡家园

#!/bin/bash PATH=/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:~/bin export PATH # Check if user is root if [ $(id -u) != "0" ]; then     echo "Error: You must be root to run this script!"     exit 1 fi clear echo "+----------------------------------------------------------+" echo "|Author:jingyihome                                         |" echo "+----------------------------------------------------------+" echo "|E-mail:webmaster@zhanghaijun.com                          |" echo "+----------------------------------------------------------+" echo "|Website:http://www.zhanghaijun.com                        |" echo "+----------------------------------------------------------+" echo "|Usage: ./proftpd.sh or ./proftpd.sh install|uninstall     |" echo "+----------------------------------------------------------+" cur_dir=$(pwd) Proftpd_Ver='proftpd-1.3.6rc2' installdir="/usr/local/proftpd" Install_Proftpd() {     echo -e "\033[32m Installing dependent packages... \033[0m"       yum -y install make gcc gcc-c++ gcc-g77 openssl openssl-devel wget     echo -e "\033[32m Download files... \033[0m"     cd ${cur_dir}/     wget --no-check-certificate https://soft.loveyan.com/ftp/proftpd/${Proftpd_Ver}.tar.gz ${cur_dir}/${Proftpd_Ver}.tar.gz     if [ $? -eq 0 ]; then         echo "Download ${Proftpd_Ver}.tar.gz successfully!"     else         wget ftp://ftp.proftpd.org/distrib/source/${Proftpd_Ver}.tar.gz ${cur_dir}/${Proftpd_Ver}.tar.gz     fi     echo -e "\033[32m Installing proftpd... \033[0m"     tar xzvf ${Proftpd_Ver}.tar.gz ${Proftpd_Ver}     cd ${Proftpd_Ver}     ./configure --prefix=${installdir}     make && make install     cd ${cur_dir}/     echo -e "\033[32m Create configure files... \033[0m"     mv ${installdir}/etc/proftpd.conf ${installdir}/etc/bak_proftpd.conf     wget --no-check-certificate https://soft.loveyan.com/ftp/proftpd/proftpd.conf     if [ $? -eq 0 ]; then          sed -i "s#/usr/local/ftp/proftpd#${installdir}#g" ${cur_dir}/proftpd.conf          mv ${cur_dir}/proftpd.conf ${installdir}/etc/     else         echo -e "\033[31m Download proftpd.conf failed! \033[0m"         exit 1     fi     if [ -L /etc/init.d/proftpd ]; then         rm -f /etc/init.d/proftpd     fi     wget --no-check-certificate https://soft.loveyan.com/ftp/proftpd/proftpdinit     if [ $? -eq 0 ]; then          sed -i "s#/usr/local/ftp/proftpd#${installdir}#g" ${cur_dir}/proftpdinit          mv ${cur_dir}/proftpdinit /etc/init.d/proftpd          chmod +x /etc/init.d/proftpd          touch ${installdir}/etc/ftpd.passwd          chmod 600 ${installdir}/etc/ftpd.passwd     else         echo -e "\033[31m Download proftpdinit failed! \033[0m"         exit 1     fi     rm -rf ${cur_dir}/${Proftpd_Ver}     if [ -s /sbin/iptables ]; then        /sbin/iptables -I INPUT -p tcp --dport 21 -j ACCEPT        /sbin/iptables -I INPUT -p tcp --dport 50000:53000 -j ACCEPT     else        echo -e "\033[32m iptables was not installed! \033[0m"     fi     service iptables save     if [[ -s ${installdir}/sbin/proftpd && -s ${installdir}/etc/proftpd.conf && -s /etc/init.d/proftpd ]]; then         echo "Starting proftpd..."         /etc/init.d/proftpd start         ln -s ${installdir}/bin/ftpasswd /bin/ftpasswd         echo "+----------------------------------------------------------------------------------------------------------------------------+"         echo "| Install ProFTPd completed,enjoy it!"         echo "| =>use:ftpasswd --passwd --file=${installdir}/etc/ftpd.passwd --name=X --uid=X --gid=X --home=dir --shell=/bin/false"         echo "+----------------------------------------------------------------------------------------------------------------------------+"         echo "| For more information please visit http://www.zhanghaijun.com/post/975/"         echo "+----------------------------------------------------------------------------------------------------------------------------+"     else         echo -e "\033[31m Proftpd install failed! \033[0m"     fi } Uninstall_Proftpd() {     if [ ! -f $installdir/sbin/proftpd ]; then         echo -e "\033[31m Proftpd was not installed! \033[0m"         exit 1     fi     echo "Stop proftpd..."     /etc/init.d/proftpd stop     echo "Remove service..."     rm -f /etc/init.d/proftpd     echo "Delete files..."     rm -rf ${installdir}     rm -rf /bin/ftpasswd     /sbin/iptables -D INPUT -p tcp --dport 21 -j ACCEPT     /sbin/iptables -D INPUT -p tcp --dport 50000:53000 -j ACCEPT     service iptables save     echo "Proftpd uninstall completed." } action=$1 [ -z $1 ] && action=install case "$action" in install)     Install_Proftpd 2>&1 | tee /root/proftpd-install.log     ;; uninstall)     Uninstall_Proftpd     ;; *)     echo -e "\033[31m error! [${action}] \033[0m"     echo -e "\033[32m Usage: `basename $0` {install|uninstall} \033[0m"     ;; esac

#!/bin/bash # # chkconfig: 2345 85 15 # description: ProFTPd is an FTP server # processname: proftpd # Author:   jingyihome # E-mail:   webmaster@zhanghaijun.com # Website:  https://www.zhanghaijun.com # ProFTPd Settings PROFTPD="/usr/local/ftp/proftpd/sbin/proftpd" PROCONF="/usr/local/ftp/proftpd/etc/proftpd.conf" PROPID="/usr/local/ftp/proftpd/var/proftpd.pid" RETVAL=0 prog="ProFTPd" start() {     echo -n $"Starting $prog... "     $PROFTPD -c $PROCONF     if [ "$?" = 0 ] ; then         echo " done"     else         echo " failed"     fi } stop() {     echo -n $"Stopping $prog...  "     if [ ! -e $PROPID ]; then         echo -n $"$prog is not running."         exit 1     fi     kill `cat $PROPID`     if [ "$?" = 0 ] ; then         echo " done"     else         echo " failed"     fi } restart(){     echo $"Restarting $prog..."     $0 stop     sleep 2     $0 start } status(){     if [ -e $PROPID ]; then         echo $"$prog is running."     else         echo $"$prog is not running."     fi } case "$1" in     start)         start         ;;     stop)         stop         ;;     restart)         restart         ;;     status)         status         ;;   *)         echo $"Usage: $0 {start|stop|restart|status}" esac

【注】官方已经更新了依赖的第三方包的版本，最新获取的文件编译安装会遇到之前没有遇到的问题，下面是用全新最小化安装的CentOS 6.7 来编译安装的，更新系统后是CentOS 6.8了。

CentOS 6 全新最小化安装的操作系统：


#更新系统
yum update

#相关依赖的包
yum install -y readline readline-devel libstdc++-static glibc-static perl-Module-Install.noarch

一：获取源码：
git clone --recursive https://github.com/tencent-wechat/phxsql.git （--recursive参数可以同时获得所依赖的第三方库colib,glog,leveldb,protobuf源码，和依赖库phxpaxos,phxrpc）

1.1：升级相关依赖的库及工具。
1.1.1：autoconf
下载地址：http://ftp.gnu.org/gnu/autoconf/autoconf-2.69.tar.gz

1.1.2：automake
下载地址：http://ftp.gnu.org/gnu/automake/automake-1.14.tar.gz

1.1.3：cmake
下载地址：https://cmake.org/files/v3.6/cmake-3.6.1.tar.gz

1.1.4：python
下载地址：https://www.python.org/ftp/python/2.7.12/Python-2.7.12.tgz

1.1.5：gcc
下载地址：http://ftp.gnu.org/gnu/gcc/gcc-6.2.0/gcc-6.2.0.tar.gz

二、编译相关依赖
2.1：colib
cd /home/phxsql/third_party/colib
make

2.2：glog
cd /home/phxsql/third_party/glog
./configure CXXFLAGS=-fPIC --prefix=/home/phxsql/third_party/glog
make
make install

2.3：leveldb
/home/phxsql/third_party/leveldb
make
mkdir lib
cp libleveldb.* ./lib

2.4：protobuf
cd /home/phxsql/third_party/protobuf
./autogen.sh
./configure CXXFLAGS=-fPIC --prefix=/home/phxsql/third_party/protobuf
make
make install

#执行autogen.sh的时候curl报超时的问题：
autogen.sh 文件的第34行gmock的下载地址是https://googlemock.googlecode.com/files/gmock-1.7.0.zip，这个地址在国内正常是访问不了的，所以在执行./autogen.sh的时候会报curl超时，翻出墙外之后这个地址也不能下载，404，应该不会是忘了上传了吧。

解决办法1：
修改autogen.sh文件第34行的下载地址，把https://googlemock.googlecode.com/files/gmock-1.7.0.zip 改为wget http://www.zhanghaijun.com/soft/gmock-1.7.0.zip，这个我已经把两个包都下载了，打包好了。

解决办法2：
项目地址：https://github.com/google/googlemock
项目地址：https://github.com/google/googletest
wget https://github.com/google/googlemock/archive/release-1.7.0.zip
unzip -q release-1.7.0.zip
rm release-1.7.0.zip
mv googlemock-release-1.7.0 gmock

wget https://github.com/google/googletest/archive/release-1.7.0.zip
unzip -q release-1.7.0.zip
rm release-1.7.0.zip
mv googletest-release-1.7.0 gmock/gtest

解决办法三：
wget http://www.zhanghaijun.com/soft/gmock-1.7.0.zip
unzip gmock-1.7.0.zip
mv gmock-1.7.0 gmock


2.5：phxrpc
cd /home/phxsql/third_party/phxrpc
mv third_party/protobuf third_party/bak_protobuf
ln -sf /home/phxsql/third_party/protobuf /home/phxsql/third_party/phxrpc/third_party/protobuf
make

2.6：phxpaxos

三、编译安装PHXSQL

3.1：生成安装包
[root@localhost phxsql]# make package
creating package phxsql-0.8.0.tar.gz...

生成的压缩包名称为：phxsql-0.8.0.tar.gz，把它拷贝到其他机器上就可以部署了。


四、部署测试
把安装包拷贝到其他测试的机器上，解压，本文目录为/home/phxsql
创建mysql用户
useradd -d /home/datacenter -s /sbin/nologin mysql
mkdir /home/phxsql/etc
cd /home/phxsql/tools
把director_operator.py文件第26行中的chown user:mysql 修改为chown mysql:mysql

#因为前面测试的时候已经用三台虚拟机搭过一个集群了，这次就把这台机器加入到之前部署的集群中
[root@localhost sbin]# ./phxbinlogsvr_tools_phxrpc -f AddMember -h192.168.1.241 -p17000 -m 192.168.1.243
get master 192.168.1.241 expire time 1473413135
AddMember 192.168.1.243 done

#初始化PhxSQL
mkdir /home/datacenter
/usr/local/python27/bin/python2.7 install.py -i"192.168.1.243" -p 54321 -g 6000 -y 11111 -P 17000 -a 8001 -f /home/datacenter/

#备份集群中其他机器的percona数据
/home/phxsql/percona.src/bin/mysqldump --set-gtid-purged=off -h 192.168.1.186 -P11111 -u root --all-databases >/home/all.sql

#kill掉新加入机器的phxbinlogsvr进程
ps axf|grep phxbinlogsvr|grep -v grep|awk '{print $1}'|xargs kill

#通过本地端口登录新加机器的percona
/home/phxsql/percona.src/bin/mysql -h 127.0.0.1 -P11111 -u root

#登录之后执行以下操作
set GLOBAL super_read_only = 0; set GLOBAL read_only = 0;

#导入其他机器备份出的percona数据
/home/phxsql/percona.src/bin/mysql -h 127.0.0.1 -P11111 -u root < /home/all.sql

#启动phxbinlogsvr
nohup /home/phxsql/sbin/phxbinlogsvr_phxrpc &

之前的测试的集群由3台变成4台了
[root@localhost sbin]# ./phxbinlogsvr_tools_phxrpc -f GetMemberList -h"192.168.1.186" -p 17000
get master 192.168.1.241 expire time 1473416759
ip 192.168.1.186 port 17000
ip 192.168.1.180 port 17000
ip 192.168.1.241 port 17000
ip 192.168.1.243 port 17000

#查看复制状态，如果都是YES就可以测试了。
/home/phxsql/percona.src/bin/mysql -h 127.0.0.1 -P11111 -u root -e "show slave status\G;"
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

#测试
./test_phxsql.sh 54321 192.168.1.186 192.168.1.180 192.168.1.241 192.168.1.243


【附】：已编译版本下载：http://pan.baidu.com/s/1c1PgDQK 提取密码: dhxm，MD5:ffcebea7eebf51b2b9bcd52696bd2b1f

官方更新了第三方库的版本之后，编译方法和可能遇到的错误和本文部分内容不一样了，全新安装的朋友请看【CentOS下PhxSQL编译安装第2版】

注：仅测试在CentOS release 6.7 和 CentOS Linux release 7.2.1511下编译通过，本文以用户使用较多的CentOS 6 操作系统为例，centos 7 的差别是不需要升级autoconf、automake、gcc和python的版本，其他操作系统的用户请参考官方提供的中文详细编译手册：https://github.com/tencent-wechat/phxsql/wiki/%E4%B8%AD%E6%96%87%E8%AF%A6%E7%BB%86%E7%BC%96%E8%AF%91%E6%89%8B%E5%86%8C

一、准备工作
1.1：相关项目地址：
https://github.com/tencent-wechat/phxsql
https://github.com/google/glog
https://github.com/google/googlemock
https://github.com/google/leveldb
https://github.com/tencent-wechat/phxpaxos
https://github.com/tencent-wechat/phxrpc
https://github.com/tencent-wechat/libco
https://github.com/google/protobuf

1.2：获取源码：
git clone --recursive https://github.com/tencent-wechat/phxsql.git （--recursive参数可以同时获得所依赖的第三方库colib,glog,leveldb,protobuf源码，和依赖库phxpaxos,phxrpc）

1.3：编译前的准备工作,由于centos自带或者使用yum安装的工具软件版本都比较低，所以要升级相关依赖的库及工具。
1.3.1：
yum install readline readline-devel libstdc++-static glibc-static perl-Module-Install.noarch -y

1.3.2：autoconf
下载地址：http://ftp.gnu.org/gnu/autoconf/autoconf-2.69.tar.gz


1.3.3：automake
下载地址：http://ftp.gnu.org/gnu/automake/automake-1.14.tar.gz


1.3.4：cmake
下载地址：https://cmake.org/files/v3.6/cmake-3.6.1.tar.gz


1.3.5：python
下载地址：https://www.python.org/ftp/python/2.7.12/Python-2.7.12.tgz


1.3.6：gcc
下载地址：http://ftp.gnu.org/gnu/gcc/gcc-4.9.4/gcc-4.9.4.tar.gz


####################################################################
1.3.7：boost   (此步可忽略)
官网：http://www.boost.org/
下载地址：https://sourceforge.net/projects/boost/files/boost/1.61.0/
tar xzvf boost_1_61_0.tar.gz
cd boost_1_61_0
./bootstrap.sh --prefix=/usr/local/boost
./b2
./b2 install

echo /usr/local/boost/lib >/etc/ld.so.conf.d/boost.conf
ldconfig
####################################################################

二、编译相关依赖


三、编译安装PHXSQL


四、部署测试
把安装包拷贝到其他测试的机器上，解压，本文目录全部为/home/phxsql
创建mysql用户
useradd -d /home/datacenter -s /sbin/nologin mysql
mkdir /home/phxsql/etc
cd /home/phxsql/tools
把director_operator.py文件第26行中的chown user:mysql 修改为chown mysql:mysql
把binary_installer.py文件第35行中的 cd %s/percona.src; ./scripts/mysql_install_db --defaults-file=%s/etc/my.cnf 修改为：cd %spercona.src; ./scripts/mysql_install_db --defaults-file=%setc/my.cnf

测试部署是用的三台虚拟机：
python install.py -i"192.168.1.186" -p 54321 -g 6000 -y 11111 -P 17000 -a 8001 -f /home/datacenter/
python install.py -i"192.168.1.180" -p 54321 -g 6000 -y 11111 -P 17000 -a 8001 -f /home/datacenter/
/usr/local/python27/bin/python2.7 install.py -i"192.168.1.241" -p 54321 -g 6000 -y 11111 -P 17000 -a 8001 -f /home/datacenter/

在任意一台机器上执行
cd /home/phxsql/sbin/
./phxbinlogsvr_tools_phxrpc -f InitBinlogSvrMaster -h"192.168.1.186,192.168.1.180,192.168.1.241" -p 17000 (集群初始化完成之后就可以使用了。)


./phxbinlogsvr_tools_phxrpc -f GetMemberList -h"192.168.1.186" -p 17000
get master 192.168.1.241 expire time 1473313474
ip 192.168.1.186 port 17000
ip 192.168.1.180 port 17000
ip 192.168.1.241 port 17000

登录数据库：
/home/phxsql/percona.src/bin/mysql -uroot -h"192.168.1.186" -P54321

#获取master信息：
./phxbinlogsvr_tools_phxrpc -f GetMasterInfoFromGlobal -h 192.168.1.186 -p 17000
get master 192.168.1.241 expire time 1473314016

修改管理帐号及密码：
./phxbinlogsvr_tools_phxrpc -f SetMySqlAdminInfo -h 192.168.1.180 -p 17000 -u root -d "" -U zhj -D zhj2016  
get master 192.168.1.241 expire time 1473313844
SetMySqlAdminInfo admin username root -> new admin username zhj

用官方提供的测试工具测试：
cd /home/phxsql/tools/
chmod +x test_phxsql.sh
./test_phxsql.sh 54321 192.168.1.186 192.168.1.180 192.168.1.241


sysbench 简单测试：

错误发生在内部测试使用的ESXI主机上的虚拟机，因为之前的ESXI主机raid卡和温度传感器报错，机器不能正常启动，所以就把磁盘换到另一台配置一样的机器上，启动之后ubuntu、freebsd、debian8、solaris、centos7虚拟机都连接正常，唯独两台CentOS 6.8系统的虚拟机不能连接，于是使用VMware vSphere Client连接ESXI打开控制台登录系统，执行ifconfig发现只剩下：


执行 /etc/init.d/network restart

执行 ifconfig -a 发现没有eth0，却有一个eth1，原来是mac地址变化了，知道是什么问题就好办了，不重启机器你可以把eth1的mac地址记下，cp /etc/sysconfig/network-scripts/ifcfg-eth0 /etc/sysconfig/network-scripts/ifcfg-eth1 然后把里面的eth0改为eth1，HWADDR改为eth1的mac地址，然后service network restart或ifup eth1 就可以了。

如果你的机器可以重启，可以使用以下方法：
vi /etc/sysconfig/network-scripts/ifcfg-eth0 把里面的HWADDR改为eth1的mac地址之后保存。
vi /etc/udev/rules.d/70-persistent-net.rules 你会发现有两行配置，把eth0的那一行删除，把eth1改为eth0之后保存，类似于下面这样：


使用第二种方法的可以把/etc/sysconfig/network-scripts/ifcfg-eth1删了，或者设置为开机不启动，然后执行init 6 或者reboot重新启动虚拟机，虚拟机重新启动之后网络正常了。