陈正华
- 作品数:24 被引量:9H指数:2
- 供职机构:中兴通讯股份有限公司更多>>
- 相关领域:自动化与计算机技术更多>>
- 写数据的方法及装置
- 本发明公开了一种写数据的装置,所述写数据的装置包括:第一获取模块,用于写时重定向快照过程中,在未获取到快照生成命令之前,当接收到对源卷的写操作命令时,获取所述写操作命令包含的写入数据的大小信息;写操作模块,用于根据所述写...
- 包俊高洪韩银俊郭斌陈正华
- 文献传递
- 服务变化消息的推送方法、装置及系统
- 本发明公开了一种服务变化消息的推送方法、装置及系统,其中,该方法包括:服务器节点确定该服务器节点上的服务提供者发生变化,其中,服务器节点为分布式协作服务系统中的节点;服务器节点向关注上述服务提供者提供的服务的服务消费者推...
- 张俊青卞志俊陈正华郭斌韩银俊高洪
- 文献传递
- 一种数据读写方法、终端及计算机可读存储介质
- 本发明实施例提供一种数据读写方法、终端及计算机可读存储介质,其中,所述方法包括:接收数据读取指令,所述数据读取指令包括待读取数据的特征信息;根据所述特征信息在内存中确定命中的数据索引;根据所述命中的数据索引在缓存中读取数...
- 李丙洋杨洪章郭斌韩银俊丁毅陈正华
- 文献传递
- FPGA设备的计算资源配置方法、装置及FPGA设备
- 本发明实施例提供了一种FPGA设备的计算资源配置方法、装置及FPGA设备。该方法包括:根据用户的查询请求生成异构的查询执行计划,其中,所述异构的查询计划中包括异构算子和非异构算子;基于处理与所述异构算子相邻的非异构算子的...
- 魏星屠要峰韩银俊陈正华董劲高洪
- 并发度调节方法、装置、计算机设备和存储介质
- 本发明涉及一种并发度调节方法、装置、计算机设备和存储介质。并发度调节方法包括:按照预设时间间隔获取系统负载状态;当所述系统负载状态为重负载状态时,按照预设幅度减小并发度;当所述系统负载状态为轻负载状态时,按照预设幅度增大...
- 陈洪锋高洪韩银俊郭斌陈正华陈典强包俊
- 文献传递
- ScaleFS:面向大语言模型的高性能可扩展元数据设计
- 2025年
- 近年来,以Chat GPT为代表的大语言模型(large language model,LLM)技术发展迅速.随着模型参数规模的持续增长,构建和应用大模型对数据存储规模和存储访问效率提出了更高要求,这对传统存储系统带来了严峻挑战.首先分析了大模型在数据准备、模型训练和推理阶段的存储访问特征,深入探讨了传统存储系统在大模型场景下面临的主要问题和瓶颈.针对这些挑战,提出并实现了一种高性能、可扩展的分布式元数据设计Scale FS.通过目录树元数据与属性元数据解耦的架构设计,并结合深度与广度均衡的目录树分层分区策略设计,Scale FS实现了高效的路径解析、负载均衡和系统扩展能力,能够高效管理千亿级文件.此外,Scale FS设计了细粒度元数据结构,优化了元数据访问模式,并构建了面向文件语义优化的元数据键值存储底座,显著提升了元数据访问效率并减少了磁盘I/O操作.实验结果表明,Scale FS的每秒操作次数(operations per second,OPS)是HDFS的1.04~7.12倍,而延迟仅为HDFS的12.67%~99.55%.在千亿级文件规模下,Scale FS的大部分操作性能优于HDFS在十亿级文件规模下的表现,展现出更高的扩展性和访问效率,能够更好地满足大模型场景对千亿级文件存储及高效访问的需求.
- 尚碧筠韩银俊肖蓉陈正华屠要峰董振江
- 关键词:元数据管理可扩展性
- 基于分布式块存储系统的服务质量研究与优化被引量:3
- 2018年
- 在云存储技术中,资源复用和共享是一把双刃剑,在为用户降低开销的同时,也导致了应用之间的相互干扰和竞争,特别是在资源需求量超出存储系统能力时,无法提供令人满意的服务质量。提出一种自适应的任务调度技术,解决了前后端任务的资源平衡问题。还提出一种多级热度的缓存替换技术,解决了前端任务间的资源平衡问题。在中兴分布式块存储系统中将上述两项技术进行了工程实现和商用测试,上述优化方案满足了用户对分布式块存储服务质量的期望。
- 屠要峰屠要峰杨洪章陈正华
- 关键词:分布式存储系统任务调度服务质量
- 节点访问方法、装置、及电子装置
- 本申请实施例提出了一种节点访问方法、装置、及电子装置,该方法包括:通过内核扩展技术扩展第一访问客户端,得到第二访问客户端,其中,所述第二访问客户端包括内核态程序,所述内核态程序用于确定所述第二访问客户端对应的多个第一虚拟...
- 金浩屠要峰韩银俊陈正华郭斌
- 数据读写方法及装置
- 本发明提供了一种数据读写方法及装置,其中,该方法包括:接收业务应用发送的用于请求读写虚拟存储卷中存储的数据的读写请求,其中,该业务应用通过至少两条路径连接至上述虚拟存储卷,该虚拟存储卷是分布式块上创建的逻辑存储卷,该路径...
- 郭斌韩银俊程宁高洪黄震江陈正华陈典强
- 文献传递
- 一种主节点选举方法、装置及存储系统
- 本发明提供了一种主节点选举方法、装置及存储系统,其中,该主节点选举方法包括:复制组中的第一节点与复制组中其他节点建立连接,第一节点判断其他节点中是否存在主节点,若不存在,则第一节点向其他节点发送选举请求消息,其他节点收到...
- 陈正华郭斌陈典强韩银俊
- 文献传递