时序数据库在桥梁监测领域中的应用

社区的小伙伴们是否关注了 2022 年 05 月 11 日,CCF-CnosDB 论坛里土木工程教授汇报了时序数据在桥梁监测的运用,本期我们就延续话题,继续和大家来聊聊时序数据库在桥梁监测领域中的应用。

本文仅代表个人观点,如有偏颇之处,还请海涵~

众所周知,桥梁结构健康监测的重要性不言而喻,中国是基建大国,为了提升人们的出行便利度,近年来,我们可以看到各种新建的高架桥、轻轨桥等。我们可以说,大型的桥梁建筑已经遍布于中国各个角落。我国现有公路桥 5000 余座,总长 130 万公里,1/3 以上的桥梁都存在结构性缺陷、不同程度的损伤和功能性失效的隐患。因此,为了人民群众的安全,对桥梁安全状况的了然于胸是非常必要的。在不同的气候、交通以及运营条件下,通过对变形(沉降、位移、倾斜)、应力、动力特性、温度、外观等数据的持续采集与测量,桥梁自身其实可以提供给我们很多信息,以此作为预警信号,这也是我们提供维修与保障的重要依据。同时,也便于我们及时采取措施达到防止桥梁坍塌、局部破坏,保障和延长桥梁的使用寿命的目的。

传统存储方案的问题

桥梁结构监测的数据存储传统上一直采用关系型数据库进行,其需要为监控、统计、分析、告警、管理等模块提供数据访问服务,不过关系型数据库在桥梁监测场景上也带来两大主要问题。第一,需要海量存储设备,存储成本节节攀升。要想精准地反映桥梁结构振动,采样频率一般要远高于 50 Hz。我们仅以使用频率为 50 Hz 的加速度传感器为例,每天有 432 万条数据,单索引的情况下占用存储约为 4 GB,存储 1 年则需要约 2TB 的磁盘空间。通过这个例子,我们不难发现,由于数据增长对磁盘空间的需求呈指数增长,普通的磁盘阵列的容量无法满足海量数据的存储需求。第二,数据检索查询效率不足,我们无法在秒级甚至毫秒级获取所需要的数据断面。传统关系型数据库采用分区、索引等方式增强检索效率,但随着存储容量指数级增长,其效率也会逐步下降。因此,针对高密度监测数据的实时访问需求愈发凸显。

时序数据库解决痛点

我们先来看下桥梁监控系统得总体架构情况,其主要由 4 部分构成:其一,是 ETL 工具,它为传感器数据提供实时监控服务,使用 ETL 处理实时数据,按照桥梁监测规范监测传感器数据。第二,为了将告警消息及时传给用户,使用分布式消息系统 Kafka 将告警数据传给在线用户。第三,就是我们所讲的时序数据库,ETL 可以重复在时序数据库中运行查询,然后在查询结果上分析数据,其会将分析结果发送给时序数据库进行存储。最后,就是传统得关系型数据库,比如 MySQL 还是由其来存储大量得一般业务数据,,架构图如下所示.

在此架构中时序数据库处于核心得位置,因为其能针对传感器数据中时间标签的唯一性,存储高频变化的海量数据,同时还能实现对海量数据的快速访问。本次得案例中,我们就是采用了 CnosDB 作为时序数据存储引擎,其内置 HTTP API,方便存储和检索,数据可以被标记,允许非常灵活的查询。数据应用服务主要包括实时数据服务、历史数据服务、故障诊断预警服务、设备管理服务、巡检管理服务、用户管理服务。其中,实时、历史数据由 CnosDB 提供数据支持,故障诊断预警服务通过 ETL 进行分析诊断,分布式消息系统 Kafka 负责数据消息分发。

时序数据库解决了一直以来传统存储方案下采集信息不全、采集频率低等问题,其可以大为改变依赖管理者和技术人员经验的模式,通过对桥梁状况的实时全面了解,从而抓住最佳的维修和养护时机。

质量安全永远是工程建设最重要的主题,桥梁工程也不例外。我们要确保桥梁能够长时间使用,就必须坚持“建养并重”,前期建设和后期养护工作二者缺一不可,同等重要。伴随着 TSDB 技术的兴起,相信越来越多的工程建设企业可以利用 TSDB 产品的性能优势来保障桥梁“高寿命”运营。

CnosDB简介

CnosDB是一款高性能、高易用性的开源分布式时序数据库,现已正式发布及全部开源。

欢迎关注我们的代码仓库,一键三连🙇🙇🙇:https://github.com/cnosdb/cnosdb

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,544评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,430评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,764评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,193评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,216评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,182评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,063评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,917评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,329评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,543评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,722评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,425评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,019评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,671评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,825评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,729评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,614评论 2 353

推荐阅读更多精彩内容