phxpaxos 项目的演示和实验 | ubuntu18.04_seayuns的博客-程序员秘密

技术标签： C/C++   

在这里插入代码片
linux环境配置
[email protected]:~/Downloads/automake-1.14$ uname -a
Linux Vostro 5.3.0-40-generic #32~18.04.1-Ubuntu SMP Mon Feb 3 14:05:59 UTC 2020 x86_64 x86_64 x86_64 GNU/Linux
[email protected]:~$ cat /etc/lsb-release 
DISTRIB_ID=Ubuntu
DISTRIB_RELEASE=18.04
DISTRIB_CODENAME=bionic
DISTRIB_DESCRIPTION="Ubuntu 18.04.4 LTS"
下载 phpaxos 源码
git clone https://github.com/Tencent/phxpaxos.git  --recursive

下载过程中, 可能会报这样的错, 在运行git clone命令时很容易出现这个错误，这是下载的包太大，网速慢超时报错。

git clone https://github.com/Tencent/phxpaxos.git  --recursive
...
git clone error RPC failed:curl 56 GnuTLS recv error (-54):Error in the pull function
fatar: The remote end hung up unexpectedly
fatal : early EOF
fatal : index-pack failed
...

可通过更改设置解决, git config -l查看配置

- httpBuffer加大    
git config --global http.postBuffer 524288000

- 压缩配置
git config --global core.compression -1    

- 修改配置文件.bashrc
export GIT_TRACE_PACKET=1
export GIT_TRACE=1
export GIT_CURL_VERBOSE=1
环境编译
依赖关系

看一下各目录的依赖关系。如下：

目录 编译对象 内部依赖 第三方库依赖
根目录 libphxpaxos.a 无 protobuf,leveldb
plugin libphxpaxos_plugin.a libphxpaxos.a glog
sample/phxelection 可执行程序 libphxpaxos.a,libphxpaxos_plugin.a 无
sample/phxecho 可执行程序 libphxpaxos.a,libphxpaxos_plugin.a 无
sample/phxkv 可执行程序 libphxpaxos.a,libphxpaxos_plugin.a grpc
src/ut 单元测试 无 gtest,gmock

注意: 如仅需使用libphxpaxos.a进行开发，只需要编译leveldb和protobuf。而如果希望使用我们的glog打日志插件模块，或者想尝试编译sample目录，或用于phxsql使用，则还需要编译libphxpaxos_plugin.a, 这个静态库依赖了glog。

编译 leveldb
进入third_party/leveldb目录。
下载 leveldb1.18版  https://github.com/google/leveldb/releases
make，编译完成后会在当前目录生成libleveldb.a文件。
mkdir lib建立一个lib目录，然后cd lib;ln -s ../libleveldb.a libleveldb.a建立一个软链，PhxPaxos通过lib这个目录来寻址静态库。
编译 protobuf
进入third_party/protobuf目录。
./autogen.sh

出错

[email protected]:~/Workspace/gopath/src/github.com/bingo/phxpaxos/third_party/protobuf$ ./autogen.sh 
Google Mock not present.  Fetching gmock-1.7.0 from the web...
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
  0     0    0     0    0     0      0      0 --:--:--  0:02:12 --:--:--     0curl: (7) Failed to connect to googlemock.googlecode.com port 443: Connection timed out

​ 下载[gmoock](git clone https://github.com/paulsapps/gmock-1.7.0 ]) 到当前目录,或将third_party/目录下gmock文件夹，直接拷贝到third_party/protobuf文件夹下,再次执行 ./autogen.sh

出错

>>> configure.ac:93: error: possibly undefined macro: AC_PROG_LIBTOOL
      If this token and others are legitimate, please use m4_pattern_allow.
      See the Autoconf documentation.
>>> autoreconf: /usr/bin/autoconf failed with exit status: 1

下载 libtool libsysfs-dev

sudo  apt  install  libtool libsysfs-dev

再次执行 ./autogen.sh

如果还是报错

libtoolize --copy --force

报错

[email protected]:~/Workspace/gopath/src/github.com/bingo/phxpaxos/third_party/protobuf$ ./autogen.sh 
+ mkdir -p third_party/googletest/m4
+ autoreconf -f -i -Wall,no-obsolete
libtoolize: putting auxiliary files in '.'.
libtoolize: copying file './ltmain.sh'
libtoolize: putting macros in AC_CONFIG_MACRO_DIRS, 'm4'.
libtoolize: copying file 'm4/libtool.m4'
libtoolize: copying file 'm4/ltoptions.m4'
libtoolize: copying file 'm4/ltsugar.m4'
libtoolize: copying file 'm4/ltversion.m4'
libtoolize: copying file 'm4/lt~obsolete.m4'
Unescaped left brace in regex is illegal here in regex; marked by <-- HERE in m/\${ <-- HERE ([^ \t=:+{}]+)}/ at /usr/local/bin/automake line 3930.
autoreconf: automake failed with exit status: 255

原因是Perl不支持以前的写法。

解决方法

编辑提示的文件xxx的行号xxx
例如 /usr/bin/automake 第 3930 行
将 - $text =~ s/\${([^ \t=:+{}]+)}/substitute_ac_subst_variables_worker ($1)/ge;
修改为 - $text =~ s/\$[{]([^ \t=:+{}]+)}/substitute_ac_subst_variables_worker ($1)/ge;

出现exit 0 即可

继续编译

./configure CXXFLAGS=-fPIC --prefix=[当前目录绝对路径], 这一步CXXFLAGS和--prefix都必须设置对。  可直接使用./configure CXXFLAGS=-fPIC --prefix=`pwd`
make && make install
编译完成后检查是否在当前目录成功生成bin,include,lib三个子目录。
编译 glog
进入third_party/glog目录。
./configure CXXFLAGS=-fPIC -prefix=[当前目录绝对路径], 这一步CXXFLAGS和-prefix都必须设置对。
sudo  make && sudo make install
编译完成检查是否在当前目录成功生成lib子目录，并检查在lib目录是否成功生成静态库libglog.a.

出错

>>> cd . && automake-1.14 --gnu
/bin/sh:line 4: automake-1.14: command not found
make: *** [Makefile.in] error 1
[[email protected] glog]# make && make install
 cd . && automake-1.14 --gnu
/bin/sh:line 4: automake-1.14: command not found
make: *** [Makefile.in] error 1

安装依赖

[email protected]:~/Downdown wget http://ftp.gnu.org/gnu/automake/automake-1.14.tar.gz
[email protected]:~/Downdown wget http://ftp.gnu.org/gnu/autoconf/autoconf-2.69.tar.gz
tar xvzf autoconf-2.69.tar.gz
cd autoconf-2.69
yum -y install libtool libsysfs-dev 
./configure
make && make install

tar xvzf automake-1.14.tar.gz
cd automake-1.14
./configure
make && make install

automake --version
>>> automake (GNU automake) 1.14

​ Makefile:372: recipe for target ‘aclocal.m4’ failed

出错

 sudo make && sudo  make  install 
 cd . && automake-1.14 --gnu
parallel-tests: error: required file './test-driver' not found
parallel-tests:   'automake --add-missing' can install 'test-driver'
Makefile:928: recipe for target 'Makefile.in' failed
make: *** [Makefile.in] Error 1

根据提示操作

sudo automake --add-missing
sudo  aclocal-1.14
sudo  make && sudo  make install
编译 PhxPaxos
进入PhxPaxos根目录。
./autoinstall.sh
make && make install (默认使用-O2编译优化参数，如需编译debug版本，则命令为make debug=y)
编译完成后检查是否在当前目录成功生成lib子目录，并检查在lib目录是否成功生成静态库libphxpaxos.a.
编译 PhxPaxos Plugin静态库
cd PhxPaxos/plugin
make && make install
至此，PhxPaxos Plugin静态库编译成功，检查上层lib目录下是否成功生成静态库libphxpaxos_plugin.a.
编译 gflags

源码已经跟随第一步下载到third_party/文件夹下，官网手册里没有编译它的步骤实乃大坑。因为不编译它，会在编译sample/phxecho中报错：

g++: error: /home/helloworld/Workspace/gopath/src/github.com/bingo/phxpaxos/third_party/leveldb/lib/libleveldb.a: No such file or directory
Makefile:36: recipe for target 'phxecho' failed
make: *** [phxecho] Error 1>>> g++: error：/root/git/phxpaxos/third_party/gflags/lib/libgflags.a：No such file or directory

编译

camke .
sudo make && sudo make install
三个sample 运行
phxelection

介绍: This is very simple sample to use phxpaxos to election.
Check the code in election.cpp, that is really simple.

了解选举过程

$ sudo  make
$ ./phxelection 127.0.0.1:11111 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113
$ ./phxelection 127.0.0.1:11112 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113
$ ./phxelection 127.0.0.1:11113 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Dq4MpmEr-1582103028967)(https://github.com/Wxiaote/cloudimg/blob/master/2020/02/20200219033841.png?raw=true)]

phxecho
[email protected]:~/Workspace/gopath/src/github.com/bingoaxos/sample/phxkv$ sudo  make
[email protected]:~/Workspace/gopath/src/github.com/bingoaxos/sample/phxkv$ mkdir log
#运行
$ ./phxecho  127.0.0.1:11111 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113
$ ./phxecho  127.0.0.1:11112 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113
$ ./phxecho  127.0.0.1:11113 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113
phxkv

直接make发现出错

--grpc_out: protoc-gen-grpc: Plugin failed with status code 1.
/home/helloworld/Workspace/gopath/src/github.com/bingo/phxpaxos/makefile.mk:58: recipe for target 'phxkv.grpc.pb.cc' failed
make: *** [phxkv.grpc.pb.cc] Error 1

原因: 缺少第三方依赖 grpc

编译 grpc

源码 grpc源码 

git clone --recursive https://github.com/grpc/grpc.git
cd grpc
git submodule update --init

编译

make

出错

  • zlib 没有自动编译

    检查是否第三方软件下载完全

    $ git submodule update --init  发现无错误
#重新下载编译
$ cd third_party/
$ git clone https://github.com/madler/zlib.git
$ cd zlib
$ mdkir .build
$ cd .build
$ cmake ..
$ make

  • protobuf 出错

    configure.ac:30: error: possibly undefined macro: AC_PROG_LIBTOOL       
If this token and others are legitimate, please use m4_pattern_allow.       
See the Autoconf documentation.

    google出来的答案都是说, 安装下列软件,可是自己早下载过了,没有找到原因

    sudo apt install  libtool libgflags-dev libgtest-dev

    最后使用了之前编译好的 protobuf, 神奇的坑…

最后回到phxkv,运行例子

$ make 
$ sh prepare.sh
$ #sample
#./phxkv_grpcserver 127.0.0.1:21111 127.0.0.1:11111 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113 ./storage/kvdb_0 ./storage/paxoslog_0
#./phxkv_grpcserver 127.0.0.1:21112 127.0.0.1:11112 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113 ./storage/kvdb_1 ./storage/paxoslog_1
#./phxkv_grpcserver 127.0.0.1:21113 127.0.0.1:11113 127.0.0.1:11111,127.0.0.1:11112,127.0.0.1:11113 ./storage/kvdb_2 ./storage/paxoslog_2

#client 测试
#./phxkv_client_tools 127.0.0.1:21112 put key_hello value_paxos 0
#./phxkv_client_tools 127.0.0.1:21112 getlocal key_hello
#./phxkv_client_tools 127.0.0.1:21112 getglobal key_hello
#./phxkv_client_tools 127.0.0.1:21112 delete key_hello 0

#./phxkv_client_tools 127.0.0.1:21111 put key_hello value_paxos 0
#./phxkv_client_tools 127.0.0.1:21111 getlocal key_hello
#./phxkv_client_tools 127.0.0.1:21111 getglobal key_hello
#./phxkv_client_tools 127.0.0.1:21111 delete key_hello 0

#./phxkv_client_tools 127.0.0.1:21113 put key_hello value_paxos 0
#./phxkv_client_tools 127.0.0.1:21113 getlocal key_hello
#./phxkv_client_tools 127.0.0.1:21113 getglobal key_hello
#./phxkv_client_tools 127.0.0.1:21113 delete key_hello 0

[注意]可能会遇到文件权限的原因,加上sudo就ok了

image-20200219005222689

image-20200219021235326

[参考链接]

phxpaxos: https://github.com/Tencent/phxpaxos

中文详细编译手册: https://github.com/Tencent/phxpaxos/wiki/中文详细编译手册
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/w_xiaote/article/details/104396353

智能推荐

php循环a-z字母表_weixin_30437337的博客-程序员秘密

ord — 返回字符的 ASCII 码值说明int ord ( string $string )返回字符串 string 第一个字符的 ASCII 码值。该函数是 chr() 的互补函数。chr — 返回指定的字符说明string chr ( int $ascii )返回相对应于 ascii 所指定的单个字符。&lt;?php for($...

SpringBoot整合Kafka_springboot集成kafka 3.0_intomylife的博客-程序员秘密

前言 kafka 也作为消息中间件的一员，与其他消息中间件相比，它的优点在于拥有极高的吞吐量，ms 级的延迟，是一个高性能，分布式的系统。源码 GitHub地址：https://github.com/intomylife/SpringBoot环境JDK 1.8.0 + Maven 3.0 + SpringBoot 2.0.3 ZooKeeper-3.4.5 kafk...

Blender：可以随机颜色的材质_blender随机颜色_开发游戏的老王的博客-程序员秘密

Blender 2.8x

get（）_leafinsnowfield的博客-程序员秘密

#include using namespace std;int main(){ char ch; cout<<"输入一行字符："<<endl; ch=cin.get(); while(ch!='\n') { cout.put(ch); ch=cin.get(); } cout<<endl; system("PAUSE"); return 0;}

shell学习第七天----基础正则表达式(BRE)_见证大牛成长之路的博客-程序员秘密

查找文本用到的关键字grep,最简单的用法就是使用固定字符串比如使用who命令查找当前多少人登陆系统who |grep syx,就可以查看名字叫syx的用户登录于何处.grep的语法:grep [options pattern-spec [files...] 用途:显示匹配一个或者多个模式的文本行.时常为作为管道的第一步,以便对匹配的数据进一步处理.主要选项-i

Ubuntu16.04安装g2o_Kair94的博客-程序员秘密

##安装g2ohttps://github.com/RainerKuemmerle/g2o/1.依赖项:sudo apt-get install cmake libeigen3-dev libsuitesparse-dev qtdeclarative5-dev qt5-qmake libqglviewer-dev2.下载g2o并安装git clone https://github.com...

随便推点

cocos creator 数组_Cocos Creator 如何实现自定义渲染合批？_weixin_39561004的博客-程序员秘密

// renderData.vDatas用来存储pos、uv、color数据// renderData.iDatas用来存储顶点索引数据this._renderData = new RenderData;this._renderData.init(this);this.initData;this.initLocal;}get verticesFloats {// 当前节点的所有顶点数据总大小ret...

什么是RFID_rfid是什么_夜流冰的博客-程序员秘密

简单介绍RFID是radio-frequency identification的缩写，表示射频识别技术。把数字信息编码到RFID标签中，阅读器通过无线电波读取到这些信息。RFID在没有光线的情况下也能使用。RFID属于自动识别（AIDC：Automatic Identification and Data Capture）技术中的一种。简单的说，RFID系统包含三个部分：RFID标签、阅读器和天线。电子标签又称为射频标签、应答器、数据载体；阅读器又称为读出装置，扫描器、通讯

java privatekey输出字符串,从本地Java中的私钥字符串派生EC公钥以获取曲线secp256k1..._阡陌渊虹的博客-程序员秘密

I need to derive an EC Public Key from an EC private key string without the "help" of any third party library.The Private key is externally produced and provided and I need to get the Public Key to ge...

市场调研—2021-2027全球与中国肿瘤栓塞市场现状及未来发展趋势_QYR调研的博客-程序员秘密

【报告篇幅】：105【报告图表数】：151【报告出版时间】：2021年1月报告摘要本文研究全球及中国市场肿瘤栓塞现状及未来发展趋势，侧重分析全球及中国市场的主要企业，同时对比北美、欧洲、日本、中国、东南亚、印度等地区的现状及未来发展趋势。2019年全球肿瘤栓塞市场规模达到了xx亿元，预计2026年将达到xx亿元，年复合增长率(CAGR)为xx%。本文重点分析在全球及中国有重要角色的企业，分析这些企业肿瘤栓塞产品的市场规模、市场份额、市场定位、产品类型以及发展规划等。主要企业包括： ..

ShaderForge - 纹理逐步消失_AnYuanLzh的博客-程序员秘密

shaderforge图：shaderforge 代码：// Shader created with Shader Forge v1.38 // Shader Forge (c) Freya Holmer - http://www.acegikmo.com/shaderforge/// Note: Manually altering this data may prevent you fr...

淘宝大型数据仓库的治理(2)- 数据质量不可靠_豹先生_MR-BAO的博客-程序员秘密

2013-08-26 阿里技术嘉年华文/通贯【导读】数据仓库治理系列文章，本文是第二篇，你可以回复数据仓库(当然需要先关注微信号alibabatech)查看整个系列。作者从实际经验中，总结出了一些大型数据仓库治理中，可能会遇到的问题。本文谈到了“数据质量不可靠”的问题，大数据时代，你值得关注。     对于程序员来说，最头疼的就是听到：“大兄弟，你这个程序有B

推荐文章

热门文章

相关标签