搜索到1388篇“ 流式数据“的相关文章
流式数据的异常检测方法
本发明公开了一种流式数据的异常检测方法,属于数据分析领域。本发明中对多维度的流式数据每一维度数据进行单独的异常检测。将流式数据处理方式与机器学习算法结合,采用局部密度离群点检测算法LOF与自回归AR算法相结合的方式,一方...
丁良蔡富东李在学甘法刚张阳王承志朱岩
一种基于组件化的流式数据处理方法
本发明提供一种基于组件化的流式数据处理方法,属于数据处理技术领域,包括:通过数据源组件读取接收到的实时流式数据;通过算子组件对接收到的实时流式数据进行第一数据处理,确定第一流式数据;通过窗口操作组件对第一流式数据进行第二...
禚浩迟雪邱张华祁纲马春雨王佳慧张琳李健
一种流式数据异常检测方法、装置及集群
一种流式数据异常检测方法,可应用于检测装置,检测装置存储有流式数据数据特征,流式数据包括按时间顺序产生的数据点,该方法包括:获取流式数据的第一数据点;利用异常检测模型,检测第一数据点是否为异常数据,其中,异常检测模型是...
崔丁山谢建东黄飞腾
一种基于Flink SQL的流式数据质量监控方法
本发明涉及数据处理技术领域,尤其涉及一种基于Flink SQL的流式数据质量监控方法,包括,将预设的字段规则数据数据表的数据进行约束;通过Flink应用程序对所述数据库中的字段规则数据进行读取,解析;通过Flink S...
高经郡高海玲张天宇
一种流式数据防篡改识别方法、装置、设备及介质
本发明实施例提供了一种流式数据防篡改识别方法、装置、设备及介质,涉及边缘云计算网关技术领域。本方法包括:数据发布端在流式数据的多帧数据中加入防篡改标志;数据接收端在接收所述流式数据的过程中,基于接收的所述多帧数据中的当前...
张晓东
基于海量流式数据的电网实时数据弹性扩容系统
本发明公开了基于海量流式数据的电网实时数据弹性扩容系统,涉及电网实时数据存储技术领域,为了解决现有电网数据进行数据存储时没有采用更智能的弹性扩容存储,从而导致存储环境不安全的问题。本发明通过实时容量监控功能使得系统能够及...
李华吴争荣胡勇白维贵马金强
基于列存数据流式数据处理方法及系统
本发明提出一种基于列存数据流式数据处理方法及系统,包括:获取待处理的流式数据及其对应的处理任务,基于时间维度将该流式数据切分为批式数据块,该批式数据块中每条数据均包含各自所属窗口的时间戳;根据该时间戳的时间类型,压缩该...
程学旗郭嘉丰李冰邱强张志斌
一种基于Flink的流式数据处理方法、系统、设备及介质
本发明提供一种基于Flink的流式数据处理方法、系统、设备及介质,属于数据处理技术领域,所述方法步骤如下:从不同数据源接收数据流,根据数据源类型建立连接池,并对数据流中数据进行处理;基于事件时间将数据流划分为若干窗口进行...
方庆建齐光鹏商广勇冯向阳倪志荣
基于流式数据数据存储方法、装置、设备及存储介质
本公开提供了一种基于流式数据数据存储方法、装置、设备及存储介质,涉及计算机领域,尤其涉及对象存储和流式存储领域。具体实现方案为:获取待存储数据流,对所述待存储数据流进行切分处理,得到多个数据段;其中,所述多个数据段组成...
侯进超温东九陈哲思苗蕾曹彪梁明远
批量数据流式数据的集成处理方法、装置、设备及介质
本发明涉及数据处理技术领域和金融科技领域,公开了一种批量数据流式数据的集成处理方法,通过从数据源获取待处理数据,基于这些数据的元数据信息,配置适合的处理逻辑,并利用适配层将该处理逻辑应用于批处理引擎和流处理引擎。历史批...
杨志彪仲雪莲

相关作者

程学旗
作品数:682被引量:6,372H指数:29
供职机构:中国科学院计算技术研究所
研究主题:文本 抽取 大数据 社交网络 标签
汪璟玢
作品数:127被引量:92H指数:5
供职机构:福州大学
研究主题:三元组 全方 RDF数据 RDF 知识图谱
黄涛
作品数:210被引量:1,221H指数:17
供职机构:中国科学院
研究主题:中间件 WEB应用 WEB应用服务器 分布式 虚拟机
郭嘉丰
作品数:152被引量:1,078H指数:10
供职机构:中国科学院计算技术研究所
研究主题:抽取方法 文本 句子 标签 向量
张志斌
作品数:111被引量:88H指数:5
供职机构:中国科学院计算技术研究所
研究主题:统计学 计算引擎 计算机科学 流式数据 数据分析