用thrift 或 gRPC 之类的框架做 app 和服务器的通信合适吗

Python011

用thrift 或 gRPC 之类的框架做 app 和服务器的通信合适吗,第1张

完全可以的。

thrift是Facebook开源出来的项目,现在交给了Apache来管理。thrift是用来针对不同语言系统之间数据调用的。thrift支持c,c++,Erlang,java,python,ruby,php等语言。thrift允许定义一个简单的定义文件中的数据类型和服务接口,这个文件就是IDL(Interface Definition Language),以作为输入文件,编译器生成代码。简单的说就是thrift定义了统一的文件(对象或者结构体,服务接口),使用thrift的编译器能够生成对应语言的代码文件。thrft之所以是跨语言的原意就是他通过语言无关的自定义语言来生成语言相关的代码。

Google就是Google,就算是推白菜出来,也一样能让人侧目。其实protocol buffers也不是什么新鲜的概念,且不说传统的ASN.1, ICE这些有点类似的东西,facebook一年前就推出了thrift,应该说定位是非常的接近的。也有谣传说是先有了protocol buffers在google内部流行,然后google的人跳槽到facebook,就出了thrift这个东西……呵呵,停止八卦,言归正传。 观察法看到的优缺点 Thrift: 支持的语言更广泛一些c++, java, python,ruby, csharp, haskell, ocmal, erlang, cocoa, php, squeak(真够变态的) protobuf 目前还是只支持c++, java, python, 其他语言有待开发. Thrift提供的功能更丰富一些: Thrift提供了简单的RPC构架(其实不简单了, block, nonblock的都有了…..) protobuf好像一心一意做好自己的事情,只提供了序列化和反序列化的功能。 Thrift支持多种协议格式. Thrift的代码实现,有专门的TProtocol和TTransport抽象,相互配合,可以实现多种协议,方便集成各种传输方式。至少目前Thrift就能使用json作为序列化协议。 protobuf好像只安心一种协议,并下决心把这个格式做好。输入输出也是标准的stream. 认真的说也不完全这样,protobuf为了调试方便,也提供了Text_Fromat功能,这个也算一个nonbinary格式支持,这样看来完全新协议还是有可能的。 Thrift还提供了不少语言的C module(性能啊,都是性能啊) protobuf全部pure language实现, 反正现在已经都5到10倍速度了,不在乎了….. thrift目前不支持Windows平台,至少c++语言的runtime library和generated code是不不能在windows平台上使用的。(这真有点让人难以接受啊,现代科技这么发达,还有怪兽boost,支持windows有这么难吗?) protobuf没有这个问题,提供了visual studio的项目文件,可以很顺利的在windows平台下编译。(题外话: 如果不知道googletest怎么在windows平台上使用,可以参考protobuf的测试用例)。 The Thrift C++ runtime library does not currently work on Windows. This means that you’ll be able to compile ThriftIDL files to C++/Java/Python/etc., but you won’t be able to compile and run the generated C++ code under Windows. thrift wiki protobuf侧重点是语言表达,同时在存储效率上也下了不少功夫。用protobuf来直接读写数据结构相当的方便。 thrift侧重点是构建夸语言的可伸缩的服务,特点就是支持的语言多,同时提供了完整的rpc service framework,可以很方便的直接构建服务,不需要做太多其他的工作。 数据类型相对固定的情况下,不论是thrift还是protobuf都会比直接处理xml要方便很多。不管是dom还是类sax,总没有直接出数据结构访问来的方便啊

1. 必须安装boost。最新的稳定版是1.48.0。

1.1.先下载:sourceforge.net/projects/boost/files/boost/1.48.0/

选择tar.gz包,

下载后我解压到了/usr/local/boost_1_48下:tar zxvf boost1.48.0 -C /usr/local/boost_1_48

1.2.安装过程和以前的老版本有些不同,看自带软件包里的index.html就可以了:

主要内容涉及到安装的就2步,很简单,进入一级目录:

$ ./bootstrap.sh //默认安装到/usr/local/include/boost 和/usr/local/lib下

$ ./b2 install

1.3接下来设置环境变量自动导入:

先用vim创建文件:/etc/profile.d/boost.sh,(若不能执行的话使用chmod a+x boost.sh设置执行权限),

内容为:

#!/bin/sh

#boost settings

BOOST_ROOT=/opt/boost_1_48

BOOST_INCLUDE=/usr/local/include/boost

BOOST_LIB=/usr/local/lib

export BOOST_ROOT BOOST_INCLUDE BOOST_LIB

注意:

linux程序运行时加载共享库出现的错误:

"error while loading shared libraries: xxxx: cannot open shared object file: No such file or directory"

解决步骤:

1、使用find命令查找缺失的xxxx共享库文件所在位置。参考:#find 目录 -name "xxxx*"

2、将找到的目录位置写入 /etc/ld.so.conf 配置文件,这个文件记录了编译时使用的动态链接库的路径。

3、然后使用ldconfig命令,使配置生效。

2. 安装libevent(选择noblokingserver必须安装libevent,如果出现noblokingserver相关的错误就是没有安装libevent)。

我安装的版本是最新的libevent1.4.13:

wget http://monkey.org/~provos/libevent-1.4.13-stable.tar.gz

tar xvzf libevent-1.4.13-stable.tar.gz

cd libevent-1.4.13-stable

./configure &&make

make install

3. 接下来就是安装thrift,我下载的是最新的thrift0.8.0版本,进入thrift0.8.0目录:

因为我只需要编译cpp,用以下命令:(编译选项可以参考http://www.coder4.com/archives/2110):

./configure --with-cpp --with-boost --without-python --without-csharp --without-java --without-erlang --without-perl --without-php --without-php_extension --without-ruby --without-haskell --without-go

#make

make

#install

make install

如果还需要编译java或者别的语言,还需要提前安装别的包,具体参考http://wiki.apache.org/thrift/ThriftRequirements:

C++

Boost 1.33.1+

libevent (optional, to build the nonblocking server)

zlib (optional)

Java

Java 1.5+

Apache Ant

Apache Ivy (recommended)

Apache Commons Lang (recommended)

SLF4J

C#: Mono 1.2.4+ (and pkg-config to detect it) or Visual Studio 2005+

Python 2.4+ (including header files for extension modules)

PHP 5.0+ (optionally including header files for extension modules)

Ruby 1.8+ (including header files for extension modules)

Erlang R12 (R11 works but not recommended)

Perl 5

Bit::Vector

Class::Accessor

安装完thrift先试验一下。进入thrift下的tutorial,编译给出的例子:

thrift -r --gen cpp tutorial.thrift,

会在gen-cpp目录下生成一些文件。然后进入CPP目录,进行编译:

make

有可能遇到错误,提示: hton* declarations will not be visible to the compiler。这是thrift的一个bug,可能有的版本没有该错误,但是我安装的这个版本有。解决的办法是:

使用g++编译时加入 -DHAVE_NETINET_IN_H

这样可以使预处理器include进 netinet/in.h in thrift/protocol/TPrototol.h, 这样 hton* declarations will be visible to the compiler.

下面是一个老外对这个bug的说明:

TProtocol.h has the following lines which cause the compiler error when HAVE_NETINET_IN_H is not defined.

#ifdef HAVE_NETINET_IN_H

#include <netinet/in.h>

#endif

This might be a bug in the Thrift configure script which somehow skips the define.

针对上面的那个例子,修改CPP文件夹里的Makefile,在编译行加入相应的参数:

g++ -DHAVE_NETINET_IN_H -o CppServer -I${THRIFT_DIR} -I${BOOST_DIR} -I../gen-cpp -L${LIB_DIR} -lthrift CppServer.cpp ${GEN_SRC}

再进行make,得到两个可执行文件,先执行CppServer,再启动CppClient。

到此,thrift安装完毕。