From d93dd59cea60390a8f8321d3dd0b109a03fffa87 Mon Sep 17 00:00:00 2001 From: liuqinfei Date: Wed, 2 Aug 2023 16:32:38 +0800 Subject: [PATCH] update the minites Signed-off-by: liuqinfei --- ...32\350\256\256\347\272\252\350\246\201.md" | 249 ++++++++++++++++++ 1 file changed, 249 insertions(+) diff --git "a/minutes/2023\345\217\214\345\221\250\344\276\213\344\274\232\344\274\232\350\256\256\347\272\252\350\246\201.md" "b/minutes/2023\345\217\214\345\221\250\344\276\213\344\274\232\344\274\232\350\256\256\347\272\252\350\246\201.md" index 0276a4b..cf5696f 100644 --- "a/minutes/2023\345\217\214\345\221\250\344\276\213\344\274\232\344\274\232\350\256\256\347\272\252\350\246\201.md" +++ "b/minutes/2023\345\217\214\345\221\250\344\276\213\344\274\232\344\274\232\350\256\256\347\272\252\350\246\201.md" @@ -1,3 +1,252 @@ +### 2023年8月1日 双周例会议纪要 +本次主持人：刘秦飞 -> 池信泽 -> 刘志强 -> 罗日新 +与会者（gitee id）: +网易-吴汉卿, 中科院软件所-laokz, 麒麟-徐赫, 麒麟-滕磊, 麒麟-杨昭, 统信-杨晓亮, 微众银行-杨耿丹, 华为-王玺源, 华为-罗日新, 华为-孙榕棋, 华为-游理通, 华为-朱超，华为-孙榕棋, 林永乐, 顾文壮, changfu.wu, 龙, rob，jason, swf, 华为-刘秦飞(liuqinfei) +**会议纲要** +1. 社区需求进展(all) +- crimson特性评估和使能(罗日新) + - 正在开展时延分解 +- 推动ceph原生社区发布openEuler版本的rpm包（王玺源） + - 1)社区层面，Ceph已经合入支持openEuler的PR + - 2)官方master已经支持在openEuler构建Ceph + - 3)下一步计划，Ceph官方社区发布openEuler的RPM包 + - 官方对Arm的支持还需推动 + - 构建出包的资源 +- 引入分布式存储组件LizardFS进展（林永乐） + - https://note.youdao.com/s/TNy2PqU2 + - libselinux版本依赖问题导致lizardfs在openEuler master构件失败，待OS中libselinux组件修复 + - 正在创建openEuler22.03-LTS-NEXT分支为发布22.03-LTS-SP3版本做准备 + - 关于lizardfs的需求可以在技术群中讨论 +- curve适配openEuler （吴宏松） + - 已上线适配的任务，已有学生承接该任务，主要为打包工作 +- 引入分布式存储组件lustre进展（刘新良） +- DBS分布块存储开源项目引入openEuler(马海清) +2，curve架构介绍以及适配openeuler的进展（吴汉卿 网易资深分布式存储开发工程师） +3，openEuler Ceph对多种处理器架构支持的策略讨论 （罗日新） + - 方案1： 保留cmake/modules/CheckCxxAtomic.cmake的修改，不进行回退（此方案需要将patch 8 中CheckCxxAtomic.cmake部分独立出来，此部分不会退，其他部分回退） + - 方案2： 新增riscv对cmake/modules/CheckCxxAtomic.cmake修改补丁，调整patch顺序，在patch8和patch13 之前应用，需要修改patch8和patch13中 CheckCxxAtomic.cmake部分（需要修改已有patch，不好操作） + - 讨论决定，按照方案一执行 +5, 讨论“ceph-14.*版本依赖python2无法直接在openeuler-22.03-LTS版本上直接安装使用”的解决方案 （刘志强） + - 讨论有“向openEuler22.03引入python2共同维护”和“将ceph14适配python3”两种解决策略 + - 待召集需求方讨论实施方案 + +### 2023年7月18日 双周例会议纪要 +本次主持人：罗日新 +下次主持人：刘秦飞 +**会议纲要** +1. 社区需求进展(all) +- crimson特性评估和使能(罗日新) + - crimson在openeuler上编译使能，主要存在gcc版本不匹配，python编译选项不对，fmt版本，yaml-cpp pkg-config搜索不到，xfsprogs-devel包中重定义宏fallthrough导致错误 +- 推动ceph原生社区发布openEuler版本的rpm包（王玺源） +- ceph dashboard汉化支持 (朱超) + - 中文版本：https://www.openeuler.org/zh/sig/sig-detail/?name=sig-SDS + - 英文版本：https://www.openeuler.org/en/sig/sig-detail/?name=sig-SDS +- 引入分布式存储组件lustre进展（刘新良） + - e2fsprogs dnf update 失败修复 + - Arm CI 2.15 LTS版本识别出失败, crash/stuck tests + - Arm CI切换到22.03 SP2进行中, 依赖包已编译好 http://213.146.155.72:8080/ + - openZFS在openEuler master 6.4内核编译失败 https://gitee.com/src-openeuler/zfs/issues/I7LQML +- 引入分布式存储组件LizardFS进展（林永乐） +- DBS分布块存储开源项目引入openEuler(马海清) + - 包引入流程：https://gitee.com/openeuler/release-management/blob/master/Guidebook/%E8%BD%AF%E4%BB%B6%E5%8C%85%E5%BC%95%E5%85%A5%E6%B5%81%E7%A8%8B.md +- curve适配openEuler （吴宏松） +2，ZettaStor DBS技术分享- 鹏云网络分布式系统脑裂问题解决方案（马海清） + + +### 2023年7月4日 双周例会议纪要 +本次主持人：刘志强 +下次主持人：罗日新 +与会者（gitee id）: +研祥韩峰哲，王盼，吴长福，文江罗，微众银行杨耿丹，华为-朱超，华为-孙榕棋，华为-刘秦飞(liuqinfei)，sean10,Iphone，hongsong，777，XSKY-池信泽 +**会议纲要** +1. 社区需求进展(all) +- crimson特性评估和使能(罗日新) + - crimson 不用rocksdb，对索引重构，目前性能待优化 + - oe2203上编译使能，有依赖问题和工具链问题，后续提issue跟踪。后续关注原生社区发布版本后同步在oe上升级到对应版本来使能。 +- 推动ceph原生社区发布openEuler版本的rpm包（王玺源） + - teuthology 失败的原因基本是因为环境原因 + - 原生社区比较认可，会上意见：pr后续会评审合入。遗留问题：是否可以向ceph原生社区提供鲲鹏服务器以例行运行ceph openeuler版本用例。 +- ceph dashboard汉化支持 (朱超) + - 中文版本：https://www.openeuler.org/zh/sig/sig-detail/?name=sig-SDS + - 英文版本：https://www.openeuler.org/en/sig/sig-detail/?name=sig-SDS +- 引入分布式存储组件lustre进展（刘新良） + - 继续分析安装e2fsprogs lustre包报错问题；继续处理lustre失败用例。 +- 引入分布式存储组件LizardFS进展（林永乐） +- DBS分布块存储开源项目引入openEuler(马海清) + - 企业CLA问题待推动签署 +2. curve适配openEuler （吴宏松） +- curve开发者会议 https://github.com/opencurve/curve/issues/2603 +- 会议纪要：尽快完成针对openeuler的适配，赶curve线上会议（7月份）讨论； + +### 2023年6月20日 双周例会议纪要 +本次主持人：池信泽 +下次主持人：刘志强 +与会者（gitee id）: +研祥韩峰哲，王盼，吴长福，文江罗，微众银行杨耿丹，华为-朱超，华为-孙榕棋，华为-刘秦飞(liuqinfei)，sean10,Iphone，hongsong，777，XSKY-池信泽 +**会议纲要** +1. 社区需求进展(all) +- crimson特性评估和使能(罗日新) + - crimson 不用rocksdb，对索引重构，目前性能还不是特别让人满意 + - crimson 在arm平台的验证，目前在做性能优化 +- 推动ceph原生社区发布openEuler版本的rpm包（王玺源） + - teuthology 失败的原因基本是因为环境原因 + - 目前还在等待CDM 会议 +- ceph dashboard汉化支持 (朱超) + - 中文版本：https://www.openeuler.org/zh/sig/sig-detail/?name=sig-SDS + - 英文版本：https://www.openeuler.org/en/sig/sig-detail/?name=sig-SDS +- 引入分布式存储组件lustre进展（刘新良） + - lustre：client 测试完毕，正在写测试报告。 +- 引入分布式存储组件LizardFS进展（林永乐） + +2，DBS分布块存储开源项目引入openEuler，DBS产品介绍(马海清) + +### 2023年6月6日 双周例会议纪要 +本次主持人：刘秦飞 +下次主持人：池信泽 +与会者（gitee id）: +麒麟-江新宇，麒麟-杨昭（Zhao Yang），统信-杨晓亮，Linaro-刘新良，华为-罗日新，华为-孙榕棋，华为-刘秦飞(liuqinfei)，龙，matt，Sean10 +**会议纲要** +1. 社区需求进展(all) +- crimson特性评估和使能(罗日新) + - crush hook功能支持（已经合入） + - ceph-volume重构（进行中） + - OSD df状态bug修复中 +- 推动ceph原生社区发布openEuler版本的rpm包（王玺源） + - http://119.3.219.112:23002/ + - https://pulpito.ceph.com/ + - 预计上6月7日CDM会议 + - https://tracker.ceph.com/projects/ceph/wiki/Planning +- ceph dashboard汉化支持 (朱超) + - 当前pr需要拆分成构建相关部分和语言支持部分，已经合入master，待推动上游社区合入 + - https://github.com/ceph/ceph/pull/50776 +- 引入分布式存储组件lustre进展（刘新良） + - Lustre介绍白皮书，完成初稿 + - Lustre openEuler-22.03-LTS-SP2分支（client端） + - 完成round 2(Beta)多机集群sanity测试 https://gitee.com/src-openeuler/lustre/issues/I7ABEY + - 发现几个跟client端测试集相关的failed tests，已backport patch修复 + - kmod-lustre-client-tests包单独依赖问题，已修复，并向社区发patch https://review.whamcloud.com/c/fs/lustre-release/+/51191 + - server端相关的failed tests已经提单跟踪 https://linaro.atlassian.net/browse/STOR-209 + - v2.15 LTS server端在22.03起不来问题，已有workround patch，需要从master backport fixed patch 待分析 https://jira.whamcloud.com/browse/LU-15726 + - Round 3 test准备测试 +- 引入分布式存储组件LizardFS进展（林永乐） + +2，SDS 主页创建及文档整理（朱超） + - https://www.openeuler.org/zh/blog/20230506-EasyEditor/20230506-EasyEditor.html + - ceph的部署调优扩容指南 + - https://www.hikunpeng.com/zh/developer/boostkit/sds + +### 2023年5月23日 双周例会议纪要 +本次主持人：罗日新 +下次主持人：池信泽 +与会者（gitee id）: +麒麟-江新宇，麒麟-滕磊， 统信-杨晓亮，Linaro-刘新良，华为-罗日新，华为-孙榕棋，华为-朱超，华为-王玺源，华为-李仕林，华为-刘秦飞(liuqinfei)，微众银行-杨耿丹，yang，华为-刘志强，xsky-池信泽 +**会议纲要** +1. 社区需求进展(all) +- crimson特性评估和使能(罗日新) + - crush hook功能支持 + - ceph-volume重构 +- 推动ceph原生社区发布openEuler版本的rpm包（王玺源） + - http://119.3.219.112:23002/ + - https://pulpito.ceph.com/ + - 预计6月上CDM会议 +- ceph dashboard汉化支持 (朱超) + - 当前pr需要拆分成构建相关部分和语言支持部分 +- 引入分布式存储组件lustre进展（刘新良） + - e2fsprogs Multi-Version_ldiskfsprogs_master 分支已经可以构建，下一步搞22.03 Next分支 + - http://121.36.84.172/dailybuild/openEuler-Mainline/openEuler-Mainline/EPOL/multi_version/Multi-Version/ldiskfsprogs/ + - Lustre openEuler-22.03-LTS-SP2分支（client端）可以构建 + - 最终发布需要提供测试报告，测试策略PR已发: https://gitee.com/openeuler/QA/pulls/438 + - 后续server端Lustre rpm包构建需要放到e2fsprogs muli-version OBS工程，不然找不到e2fsprogs rpm包 +- 引入分布式存储组件LizardFS进展（林永乐） +2. 提议刘新良为committer，维护Lustre相关组件repo，主要贡献如下： +- 维护lustre，zfs, e2fsprogs Lustre相关分支 +- openEuler Lustre 上游社区支持 +- openEuler LTS 22.03 client 和 server 支持 + - https://jira.whamcloud.com/browse/LU-16322 + - https://jira.whamcloud.com/browse/LU-16481 + - https://jira.whamcloud.com/browse/LU-16824 （22.03 SP1 reviewing） +- 依赖组件上游编译支持 + - OpenZFS：https://github.com/openzfs/zfs/pulls?q=is%3Apr++is%3Aclosed+openeuler + - e2fsprogs：https://jira.whamcloud.com/browse/LU-16337 +- Arm64 CI切换到openEuler 22.03 OS（进行中） + - https://linaro.atlassian.net/jira/software/c/projects/STOR/issues/STOR-196 +- Lustre rpms引进openEuler +- OpenZFS: master构建ok + - https://gitee.com/src-openeuler/zfs/pulls/1 +- e2fsprogs：muli-version master构建ok + - https://gitee.com/src-openeuler/e2fsprogs/issues/I67I0B + - https://gitee.com/openeuler/community/pulls/4389 + - https://gitee.com/openeuler/release-management/pulls/823 + - https://gitee.com/src-openeuler/obs_meta/pulls/1644 + - https://gitee.com/openeuler/release-management/pulls/922 + - https://gitee.com/src-openeuler/e2fsprogs/pulls/147 +- lustre client: master, 22.03 next, 22.03 sp2构建ok + - https://gitee.com/src-openeuler/lustre/pulls/1 + - https://gitee.com/src-openeuler/lustre/pulls/3 + + **结论：同意** + +3. 提议杨晓亮为committer，维护ceph相关组件，主要贡献如下： +- PR 3个已合入： + - https://toscode.gitee.com/src-openeuler/ceph/pulls/187 + - https://toscode.gitee.com/src-openeuler/ceph/pulls/118 + - https://toscode.gitee.com/src-openeuler/ceph/pulls/117 +- wiki分享两篇 + - https://toscode.gitee.com/src-openeuler/ceph/wikis/3%20-%20%E5%88%86%E5%B8%83%E5%BC%8F%E5%AD%98%E5%82%A8%E7%BB%84%E4%BB%B6%E4%BD%BF%E8%83%BD/ceph%E5%A4%9A%E7%89%88%E6%9C%AC%E5%95%86%E4%B8%9A%E7%BB%B4%E4%BF%9D%E8%A7%A3%E5%86%B3%E6%96%B9%E6%A1%88 + - https://toscode.gitee.com/src-openeuler/ceph/wikis/3%20-%20%E5%88%86%E5%B8%83%E5%BC%8F%E5%AD%98%E5%82%A8%E7%BB%84%E4%BB%B6%E4%BD%BF%E8%83%BD/PR%E6%8F%90%E4%BA%A4%E5%BC%82%E5%B8%B8%E9%97%AE%E9%A2%98%E8%AE%B0%E5%BD%95%E5%8D%95 +- issue 3个： + - https://gitee.com/src-openeuler/ceph/issues/I5H9H5 + - https://gitee.com/src-openeuler/ceph/issues/I5D4PW + - https://gitee.com/ceph_yang/ceph_dev/issues/I5CQM3 + + **结论：同意** + +4. cephalocon议题分享 +- Enabling Near-Data Processing In Ceph(罗日新) + +### 2023年5月9日 sig-SDS 双周例会纪要 +本次主持人：刘秦飞 +下次主持人：罗日新 +与会者（gitee id）: +麒麟-江新宇, 麒麟-滕磊, 麒麟-杨昭, 统信-杨晓亮, 宏杉-王硕斌, Linaro-刘新良, 上交-张天阳, 电信数智-李治鹏, 华为-蒋健源, 华为-冯春松, 华为-孙榕棋, 华为-王玺源, 华为-朱超, 华为-刘秦飞(liuqinfei), 王磊, 王立志, 龙, 777, yang, swf + **会议纲要** +1. 社区需求进展 +- crimson特性评估和使能(罗日新) + - 解决内存占用的问题 +- 推动ceph原生社区对openEuler的原生支持（王玺源） + - https://github.com/openeuler-mirror/ceph-daily-build + - 在ARM已支持基于openEuler 22.03 LTS SP1的源码build、ut测试、rpm构建（待归档） + - 额外依赖： + - https://eur.openeuler.openatom.cn/coprs/wxy2933/ceph_dev/ + - 功能测试： + - 已完成平台环境部署（OS、依赖适配等内容），测试正在执行中，需要解决测试问题，等待结果。 +- ceph dashboard汉化支持 (朱超) + - 已经提PR，待合入 +- 引入分布式存储组件lustre进展（刘新良） + - 由于server依赖组件e2fsprogs构建还没搞定，先引入Client 端到22.03 LTS SP2，client端feature已被Release SIG接受， 22.03-next 分支已创建，可以构建RPM。 + - e2fsprogs 构建错误：“unresolvable: nothing provides compat-openssl11-libs”， spec没有依赖这个包，估计构建环境还有问题 + - 鉴于Lustre LTS版本跟不上OpenEuler master 分支LTS内核开发节奏，目前使用Lustre master tag来构建openEuler master分支， 22.03 LTS需要切换到Lustre LTS版本2.15 + - 因lustre2.12不兼容openEuler 5.10内核，因此选型2.15 +- 引入分布式存储组件LizardFS进展（林永乐） + - 新版dashboard已支持python3版本的支持 + - 验证arm/x86成功构建出包，待发布到openEuler + +- lustre在openEuler发版本需求介绍（张天阳） + - lusrte2.15客户端在openEuler上面仍然存在性能偏低的问题 + - 在openEuler20.03LTS-SP3引入lustre版本，待上release会 + +2，cephalocon议题分享 +- Ceph Messenger Situation and Optimization (冯春松) +- ceph crimson verification on AArch64 (孙榕棋) + +3，SDS meetup会议开始参会报名（北京） +- 日期：5月20日 +- 议题： + - 基于Ceph的几种自动化调优方案 -- 滕磊 + - 云原生场景下Ceph的使用 -- 杨晓亮 + - Ceph存储系统中常见问题和排查手段 -- 池信泽 + - aNOF：一种极致低时延方案 -- 刘秦飞 + ### 2023年4月4日 sig-SDS 双周例会纪要 与会者（gitee id）: XSKY-池信泽(chixinze), 麒麟-江新宇, Linaro-刘新良, 上交-张天阳, 华为-王玺源, 华为-朱超, 华为-刘秦飞(liuqinfei) -- Gitee