基于淘宝开源Tair分布式KV存储引擎的整合部署

一、前言

　　Tair支撑了淘宝几乎所有系统的缓存信息（Tair = Taobao Pair，Pair即Key-Value键值对），内置了三个存储引擎：mdb（默认，类似于Memcache）、rdb（类似于Redis）、ldb（高性能KV存储），其中前2者定位于cache缓存，ldb则定位于持久化存储。Tair属于分布式系统，由一个中心控制节点（Config Server）和一系列的服务节点（Data Server）组成，Config Server负责管理维护所有的Data Server状态信息。Data Server对外提供各种数据服务，并以心跳（Heartbeat）的形式将自身状况汇报给Config Server。Config Server是一个轻量级的控制点，可以采用Master-Slaver的形式来保证其可靠性，所有的Data Server地位都是等价的。持久化的数据存放于磁盘中，为了解决磁盘损坏导致的数据丢失, Tair可以配置数据的备份数目, 自动将一份数据的不同备份放到不同的主机上。

　　本文记录了详细的部署操作步骤（基于trunk版本），引用一张官方结构图，更多关于Tair的介绍请参照官方wiki（http://code.taobao.org/p/tair/wiki/intro/）。

[2014-12-19 19:28:42.336703] ERROR handlePacket (heartbeat_thread.cpp:141) [140335215126272] ControlPacket, cmd:3
[2014-12-19 19:28:43.341952] ERROR handlePacket (heartbeat_thread.cpp:141) [140335215126272] ControlPacket, cmd:2
[2014-12-19 19:28:43.341982] ERROR handlePacket (heartbeat_thread.cpp:141) [140335215126272] ControlPacket, cmd:3
[2014-12-19 19:28:44.345308] WARN  update_server_table (tair_manager.cpp:1397) [140334767929088] updateServerTable, size: 2046
[2014-12-19 19:28:44.345312] WARN  handlePacket (heartbeat_thread.cpp:212) [140335215126272] config server HOST UP: 10.0.2.15:5198
[2014-12-19 19:28:44.345350] WARN  handlePacket (heartbeat_thread.cpp:212) [140335215126272] config server HOST UP: 10.0.2.15:5200

View Code
　　　　

　　　　命令： “ ./tair.sh start_ds ”

　　　　


　　3、分别通过终端进入2台Config Server目录，通过执行 tair.sh 脚本来启动服务器

　　　　命令： “ ./tair.sh start_cs ”

　　4、至此4台服务器启动完毕，过程不会一帆风顺，请耐心仔细，查阅log文件

五、客户端连接Tair Server

　　1、连接Tair服务器目前有3种方式：命令行、C++版本TairClient、Java版本TairClient（从依赖包可以看出使用的Mina通信框架），

　　　　底层使用socket通信，所以理论上只要支持socket操作的程序语言都可以直接实现Tair客户端

　　2、通过终端进入任意一个Server程序目录的 sbin 文件夹，执行 tairclient 命令连接Tair服务器，-c参数表示连接configserver，-s参数表示连接dataserver，

　　　　参照下图命令连接，“group_1” 是group.conf配置文件中的默认值。

　　　　连接到 tair configserver 后可以通过 put命令 新增一个键值对，例如：put key1 hellowold，然后通过get命令取值，如下图：

　　　


　　　　也可以连接到tair dataserver后可以查看单独某个ds上的数据，下图可以看出当连接到Port=5191的DataServer可以取到key1的值，5192的DS上则不能取到值。

　　　　Tair ConfigServer负载均衡采用一致性哈希算法进行数据分配，更多相关内容请查阅wiki。

　　　　

六、更多

　　至此Tair服务器安装部署完毕，更多关于学习、整合、测试相关的内容请期待后续博文，同时也欢迎有兴趣的人交流沟通。

七、向开源工作者和组织致敬，@tair team，感谢对开源事业作出的任何贡献