weekly 2024/12/13

[wangshao1]

1 Pika core(master & slave)

• Pika 主从复制一些经验教训 #2408 Pika 主从复制一些经验教训

Item	Priority	Issue/Pr	Owner	Description
feature: redis hash field timeout	P1	#2883	lidongxu	11/8 需要加tcl测试
Separate the fast and slow commands in the second phase, dynamically adjust the fast and slow command settings according to the access time, and dynamically adjust the number of coroutines and pika threads		#2566	wuqilong	10/11 暂时搁置
数据一致性开发			chejinge	主从节点功能开发完成，下周开始测试
pika-migare工具同步数据提供参数选择覆盖目标还是忽略目标已存在key		#2958		欢迎同学认领
RPOPLPUSH命令 src 和dest相同的时候没有没有修改list		#2953	chenjunhua&wuxianrong	在cache模式下，禁用rpoplpush

• 1 存算分离 https://mp.weixin.qq.com/s/dV3A1_OFDXkMpDr-Vs71DQ

2 cluster

Item	Priority	Issue/Pr	Owner	Description
big key 熔断，借鉴 xcache		https://github.com/OpenAtomFoundation/pika/issues/1691，https://github.com/OpenAtomFoundation/pika/issues/2228	xuhaoliang, cjg 指导	#2783 09/07 先搁置
在 codis 中添加 auto spliting	P1	#2564	bearwang	cjg 给 xiaoxiong 发送资料 10/11 先搁置

• 1 大 key 检测；
• 2 auto split
• 3 codis 熔断 Add: big key & top key #1691 大 key 熔断
• 4 codis 限流

3 可观测性

Item	Priority	Issue/Pr	Owner	Description
染色日志

4 工具集

Item	Priority	Issue/Pr	Owner	Description
		Pika 集群数据同步迁移工具	李浩	Bifrost 面向生产环境的 MySQL,MariaDB,kafka 同步到 Redis,MongoDB,ClickHouse,StarRocks,Doris,Kafka 等服务的异构中间件

5 云原生

Item	Priority	Issue/Pr	Owner	Description
	马鑫外部推进，集群注册成功，rebalance 还没做，和珊珊交流做一做看 ，车金鸽、吴显荣内部推进	pika-operator on kubeblocks 现状总结及后续任务、思路	马鑫haoliang	缩容部分已经完成，验证也通过，内部继续推进，但是也欢迎社区同学参与
	Pika支持滚动升级	pika-operator on kubeblocks 现状总结及后续任务、思路	马鑫haoliang	Kubeblocks 0.8 已经发布：官方支持 component 多副本，在这个版本支持 pika 缩容

todo:

• 1 原地扩容磁盘可能有问题
• 2 总的 任务 pika-operator on kubeblocks 现状总结及后续任务、思路 #1906

6 high quality(CI/CD) and high usability

Item	Priority	Issue/Pr	Owner	Description
		WIKI 配置信息能否补充大部分场景下的最优配置

7 Pika doc

• 问题：中文文档少，英文文档没有；
• 网站建设：wiki or https://alexstocks.github.io/html/pika.html 最新文档 搬到了 website https://github.com/pikiwidb/website，整理好；
• 用 GPT 看能否把网站翻译为英文；
• WIKI 配置信息能否补充大部分场景下的最优配置 #2008

Item	Priority	Issue/Pr	Owner	Description
		build a pika website	ningjie	08/09 迁移工作基本完成，待确认社区文档建设的问题

8 summer code

Item	Priority	Issue/Pr	Owner	Description
pika binlog 重构		https://summer-ospp.ac.cn/org/prodetail/247e50197?list=org&navpage=org	chenjunhua	1 Pika 不 check binlog 是否落盘成功 2 master 与 slave 之间同步 binlog，可以确保有序，无法证明有没有丢某个 item 3 RocksDB WAL 是开着的 09/07 继续跟进
Pika-Operator		https://summer-ospp.ac.cn/org/prodetail/247e50199?list=org&navpage=org	xuhaoliang	1 近期把 kubeblcoks 升级到 0.9.0； 2 添加缩容； 3 长期工作是把工作流从 Kubeblocks 迁移到 codis【向 Kubeblocks 下达启动组件的命令】，Kubeblocks 只做资源管理【Kubeblocks 只启动相关组件即可】； 08/09 PR 已经提交，需要内部帮忙测试 08/30.要主从切换逻辑
Pika Vector		https://summer-ospp.ac.cn/org/prodetail/247e50200?list=org&navpage=org	guoweijian（郭伟建）&zhuhaiyong	1 编译遇到问题：提交 issue，在 issue 里面讨论 07/26 熟悉存储的思路，正在开发中 08/07.方案已经确定，预计下周提交 PR
Pika Transfer Proxy		https://summer-ospp.ac.cn/org/prodetail/247e50201?list=org&navpage=org	lihao	1 这个工作比 dump&restore 更有价值； 2 librdkafka 08/09 已经提交一个框架 PR，待补充说明文档
PikiwiDB Redis Cache		https://summer-ospp.ac.cn/org/prodetail/247e50203?list=org&navpage=org	沈梦菊
PikiwiDB Cluster		https://summer-ospp.ac.cn/org/prodetail/247e50205?list=org&navpage=org		jraft
Codis Proxy(C++)		https://summer-ospp.ac.cn/org/prodetail/247e50206?list=org&navpage=org	黄恺一
Improve Pika		https://summer-ospp.ac.cn/org/prodetail/247e50207?list=org&navpage=org	吴起龙	https://github.com/MalikHou/pika/pull/2； https://github.com/OpenAtomFoundation/pika/issues/2566；RTC；使用 RocksDB mget 优化 Pika 的 mget 和 hmget

欢迎加入我们的社区：