Leaf 最早期需求是各个业务线的订单ID生成需求。在美团早期,有的业务直接通过DB自增的方式生成ID,有的业务通过redis缓存来生成ID,也有的业务直接用UUID这种方式来生成ID。以上的方式各自有各自的问题,因此我们决定实现一套分布式ID生成服务来满足需求。
项目地址:https://github.com/Meituan-Dianping/Leaf
具体 Leaf 设计文档见: leaf 美团分布式ID生成服务
目前 Leaf 覆盖了美团点评公司内部金融、餐饮、外卖、酒店旅游、猫眼电影等众多业务线。在 4C8G VM 基础上,通过公司 RPC 方式调用,QPS 压测结果近 5w/s,TP999 1ms。
我们提供了一个基于 spring boot 的 HTTP 服务来获取 ID
Leaf 提供两种生成的ID的方式(号段模式和 snowflake 模式),你可以同时开启两种方式,也可以指定开启某种方式(默认两种方式为关闭状态)。
Leaf Server的配置都在 leaf-server/src/main/resources/leaf.properties 中
配置项 | 含义 | 默认值 |
---|---|---|
leaf.name | leaf 服务名 | |
leaf.segment.enable | 是否开启号段模式 | false |
leaf.jdbc.url | mysql 库地址 | |
leaf.jdbc.username | mysql 用户名 | |
leaf.jdbc.password | mysql 密码 | |
leaf.snowflake.enable | 是否开启snowflake模式 | false |
leaf.snowflake.zk.address | snowflake模式下的zk地址 | |
leaf.snowflake.port | snowflake模式下的服务注册端口 |
如果使用号段模式,需要建立 DB 表,并配置 leaf.jdbc.url、leaf.jdbc.username、leaf.jdbc.password
如果不想使用该模式配置 leaf.segment.enable=false 即可。
- CREATE DATABASE leaf
- CREATE TABLE `leaf_alloc` (
- `biz_tag` varchar(128) NOT NULL DEFAULT '',
- `max_id` bigint(20) NOT NULL DEFAULT '1',
- `step` int(11) NOT NULL,
- `description` varchar(256) DEFAULT NULL,
- `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
- PRIMARY KEY (`biz_tag`)
- ) ENGINE=InnoDB;
-
- insert into leaf_alloc(biz_tag, max_id, step, description) values('leaf-segment-test', 1, 2000, 'Test leaf Segment Mode Get Id')
在leaf.properties中配置leaf.jdbc.url, leaf.jdbc.username, leaf.jdbc.password参数
算法取自twitter开源的snowflake算法。
如果不想使用该模式配置leaf.snowflake.enable=false即可。
在leaf.properties中配置leaf.snowflake.zk.address,配置leaf 服务监听的端口leaf.snowflake.port。
- git clone git@github.com:Meituan-Dianping/Leaf.git
- //按照上面的号段模式在工程里面配置好
- cd leaf
- mvn clean install -DskipTests
- cd leaf-server
注意:首先得先配置好数据库表或者zk地址
- mvn spring-boot:run
- sh deploy/run.sh
- #segment
- curl http://localhost:8080/api/segment/get/leaf-segment-test
- #snowflake
- curl http://localhost:8080/api/snowflake/get/test
号段模式:http://localhost:8080/cache
当然,为了追求更高的性能,需要通过RPC Server来部署Leaf 服务,那仅需要引入leaf-core的包,把生成ID的API封装到指定的RPC框架中即可。
注意现在 leaf 使用 snowflake 模式的情况下,其获取 ip 的逻辑直接取首个网卡 ip【特别对于会更换 ip 的服务要注意】避免浪费 workId。