7 月 20 日,IoTDB X RocketMQ 技术沙龙线上直播圆满结束。工业物联网时序数据库研发商天谋科技、云原生事件流平台 Apache RocketMQ 社区的四位技术专家,针对实时数据接入、多样数据处理与系统的高扩展、高可靠特性的数据流转处理平台实现难点,通过技术开发集成与落地实践分享,与线下和线上直播中上千人次的工业物联网从业者与关注者,共同探讨 IoTDB 与 RocketMQ 合作建立的时序数据高频采集、高压缩存储、高实时处理的完善流转链路可行方案。下面就让我们一起来回顾一下本次技术沙龙的精彩内容吧!
(完整直播回放可在 Apache IoTDB 视频号观看哦~)
01
IoTDB 如何赋能工业物联网数据管理
想要实现数据流转处理平台的数据接入、处理高性能,数据库基础软件的底层核心架构技术能否满足工业物联网数据的高通量写入、低质量数据管理等需求至关重要。在本次技术沙龙中,天谋科技高级开发工程师、Apache loTDB PMC 张金瑞分享了《IoTDB 如何赋能工业物联网数据管理》主题演讲,介绍了 IoTDB 作为一款物联网原生时序数据库,自研的核心架构、技术逻辑、性能优势、实践案例,与衍生的商业化公司天谋科技的基本情况。IoTDB 具有多协议兼容、超高压缩比、高通量读写、工业级稳定、极简运维等特点,并能与多个大数据系统进行深度集成,目前已在多个制造工业龙头企业实现落地应用,能够满足搭建数据流转处理平台时,数据写入与处理的多方需求。
02
IoTDB 如何快速高效的存储时序数据
数据流转处理平台作为承接数据写入与查询的“中转站”,如何高效存储海量时序数据,在存储过程中对时序数据进行预处理,并稳定保障“端边云”协同部署数据架构的灵活扩展属性,是数据流转处理平台效能的核心关注点。在本次技术沙龙中,天谋科技高级开发工程师、Apache loTDB PMC 侯昊男分享了《IoTDB 如何快速高效的存储时序数据》主题演讲,介绍了 IoTDB 的分布式版本架构,及自研的存储核心技术:列式存储文件 TsFile 与IoTLSM 顺乱序数据存储引擎,深度解析了 IoTDB 从存储性能角度,如何达到物联网高吞吐、多乱序数据的低成本存储与高可用管理。
作为全球性开源项目,截至目前,Apache IoTDB 已拥有 256 名贡献者、3.3K Stars、885 Forks、9362 Commits。我们为大家提供了参与指南,欢迎越来越多的小伙伴助力 Apache IoTDB 项目的不断发展与前进,迈出加入 Apache IoTDB 社区的第一步!