20210609-04
当前位置: 首页 > 滚动 >

太极股份申请数据存储及处理专利,有效解决开发成本高的问题并提高数据处理效

来源: 证券之星   浏览量:15496次   
2023-12-20 15:28:18

,据国家知识产权局公告,太极计算机股份有限公司申请一项名为“一种基于异构技术的数据存储及处理方法“,公开号CN117251414A,申请日期为2023年11月。

太极股份申请数据存储及处理专利,有效解决开发成本高的问题并提高数据处理效

专利摘要显示,本发明提供了一种基于异构技术的数据存储及处理方法,涉及数据存储技术领域,包括:将以同步工具、分布采集工具以及Kafka消息队列构成数据采集模块采集到的目标数据写入数据湖Hudi后再利用Flink、Spark组件进行离线计算处理;将离线处理结果传输至数据仓库生成离线数据报表;利用计算引擎Flink读取并对Kafka消息队列中的数据以及Mysql同步数据实时计算;使用Apache Druid作为数据查询引擎,以供用户查询离线数据、实时数据处理结果。通过采用多数据模式的存储、Flink流批一体数仓计算架构以及Hudi异构技术栈完成所有离线和实时业务统计,有效解决开发成本够高的问题以及提高了数据处理效率;通过使用Apache Druid作为数据查询引擎实现更高效的数据查询以及分析,而改善数据查询效率。

本文源自:金融界

作者:情报员

声明:以上内容为本网站转自其它媒体,相关信息仅为传递更多企业信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性。投资有风险,需谨慎。

  • 精彩推荐
  • 东北虎豹等极度濒危物种在吉林实现种群恢复性增长东北虎豹等极度濒危物种在吉林实现种
  • 全球最大锂资源一体化利用项目开工 ​全球最大锂资源一体化利用项目开工
  • 华新环保:网上定价发行中签率为0.0285734496%华新环保:网上定价发行中签率为0.
  • 治水“下半场”:不鼓励各地追求过高的优良水体比例治水“下半场”:不鼓励各地追求过高
  • 清华大学施汉昌:水中微量污染物与生物传感技术的发展清华大学施汉昌:水中微量污染物与生
  • 福州:河湖长治久清 海绵全域铺开福州:河湖长治久清 海绵全域铺开
  • 要闻推荐
  • 图片新闻
  • 友情链接