比Hadoop快至少10倍的物联网大数据平台,我把它开源了
钱再多,也难让人在历史上留下痕迹,但一幅好的作品却可以传承,让后人好好的品味。愿我领头开发的TDengine成为传世之作,Leave a dent in the world!
钱再多,也难让人在历史上留下痕迹,但一幅好的作品却可以传承,让后人好好的品味。愿我领头开发的TDengine成为传世之作,Leave a dent in the world!
TDengine是一款轻量级、高效且单机开源的面向物联网的数据处理引擎。作为一款专门为物联网设计并实现的数据引擎,TDengine在数据的写入、查询以及存储方面拥有其他数据库无法比拟的优势。本文主要探讨了TDengine在架构设计和存储方面的创新,以方便用户理解TDengine强大性能背后的逻辑。
监测系统可以采用的技术方案有很多,如果仅仅是做一个玩具,选择面是很大的。但若监测的数据量很大,对于写入尤其是分析性能要求很高的场景,不妨试试TDengine Database。使用TDengine, 不写一行代码,就可搭建一个高效的监测系统
TDengine Database提供的时序数据解决方案,单机情况下的平均写入速度在百万条/秒级别,单辆车的所有查询均能做到实时,多辆车的查询速度也非常快,是车联网乃至物联网的必备利器。
TDengine是一高效的时序空间大数据处理引擎,因为充分利用物联网、车联网、工业互联网等场景的数据特点并做了很多优化,因此性能上远胜通用的大数据平台。但TDengine的核心功能是时序数据库,而大数据处理平台往往还需要有消息队列、缓存、流式计算等功能,怎么能不要Redis, Kafak, Spark这些软件了呢?
TDengine专为物联网、车联网等时序空间大数据设计,其核心功能是时序数据库。但为减少大数据平台的研发和运维的复杂度,更进一步降低计算资源,TDengine还提供大数据处理所需要的消息队列、消息订阅、缓存、流式计算等功能。
物联网、车联网、工业互联网流行起来后,大家都想到的是用通用的大数据处理平台来处理它们的数据。现在市场上流行的物联网、车联网等大数据平台几乎无一例外是这类架构,这套方法证明完全工作。但这套通用方法效果如何?可以说有很多不足。
Gartner报告联网的设备在2019年已经超过142亿,预计2021年将达到250亿,这是一个巨大的数量,产生海量的数据。但与现在大家所熟悉的互联网相比,物联网数据有其显著不同特点,本文对其特点做一分析。
不同于其他的大数据处理系统,TDengine部署极其方便。这使得在搭建数控机床监控平台的过程中,用户可以花极少的时间在数据库系统的搭建上,大幅缩短工程周期。另外,TDengine的高性能、低资源消耗、实时响应以及高并发等特点,都使得它在一边写入数据的过程中,可以实时服务多个应用的请求。真正做到实时响应,实时监控。