百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

物联网时代-ThingsBoard源码分析-项目结构说明

bigegpt 2024-08-01 11:54 4 浏览

完整项目:https://github.com/IoT-Technology/IOT-Technical-Guide

系列文章:

高质量的 IOT 技术教程,代码主要源于国外开源物联网平台ThingsBoard和对阿里云物联网平台的感悟


源码解析系列

a.『 准备篇 』

b.『设备连接协议篇 』

  • MQTT

协议 MQTT: http://mqtt.org/

技术框架 Netty:https://netty.io/



概述

本文主要分享开源物联网平台ThingsBoard的项目结构

希望通过本文能让朋友们对thingsboard的整体项目有个简单的了解。

在拉取thingsboard项目后,我们会发现拆分了很多Maven项目。是不是内心一紧,产生了恐惧感?不要方,我们就是继续怼。



代码统计

这里先分享一个小技巧。笔者在开始源码学习时,会首先了解项目的代码量。

第一种方式,使用IDEA Statistic 插件,统计整体代码量。

我们可以粗略的看到,总的代码量在85787行。这其中还包括单元测试,示例等等代码。所以,不慌。

第二种方式,是用Shell脚本命令逐个Maven模块统计。

一般情况下,笔者使用find . -name "*.java"|xargs cat|grep -v -e ^$ -e ^\s*\/\/.*$|wc -l 。这个命令只过滤了部分注释,所以相对IDEA Statistic会偏多

当然,考虑到准确性,朋友需要手动到 cd到每个Maven项目的 src/main/java 目录下,以达到排除单元测试的代码量。


架构设计

ThingsBoard旨在将工作负载分布在多个节点上,而不会出现单点故障。每个ThingsBoard节点都是相同的,可以处理来自设备和服务器端应用程序的请求。


高级概述


设备连接

ThingsBoard支持用于设备连接的MQTTCoAPHTTP 协议。可以插入不同协议的支持和定制现有实现。


规则引擎

ThingsBoard Rule Engine允许处理来自设备的消息并触发称为插件的可配置处理模块。


核心服务

ThingsBoard包含一组允许管理以下实体的核心服务:

  • 设备及其凭据
  • 规则链和规则节点
  • 租户和客户
  • 小部件和仪表盘
  • 警报和事件

规则能够调用此API的某个子集。例如,规则可以为某些设备创建警报。


服务器端API网关

每个ThingsBoard服务器都为注册用户提供REST API。System Telemetry服务允许使用websocket和REST API管理属性并获取时间序列数据。系统RPC服务提供REST API以自定义命令推送到设备。在此处了解有关ThingsBoard REST API的更多信息


Actor模型


只要服务端API调用,Actor模型就可以从设备高性能并发处理消息。ThingsBoard使用Akka作为具有以下actor层次结构的actor系统实现。


下面列出了每个actor功能的简要说明:

  • App Actor - 负责管理租户演员。此actor的示例始终存在于内存中。
  • 租户演员 - 负责管理租户设备和规则链演员。此actor的实例始终存在于内存中。
  • Device Actor - 维护设备的状态:活动回话,订阅,挂起的RPC命令等。出于性能原因,将当前设备属性缓存在内存中。处理来自设备的第一条消息时,将创建一个actor。当设备在一段时间内没有消息时,actor停止。
  • 规则链Actor - 处理传入的消息,将它们保存到队列中并将它们分派给规则节点actor。此actor的实例始终存在于内存中。
  • 规则节点Actor - 处理传入消息,并将结果报告给规则链actor。此actor的实例始终存在于内存中。
  • 设备会话管理器Actor - 负责管理设备会话actor。在具有相应会话ID的第一条消息上创建会话actor。关闭相应会话时关闭会话actor。
  • Session Actor - 表示设备和ThingsBoard服务器之间的通信会话。会话可以是同步的(HTTP,COAP)和异步的(MQTT,带有Observe选项的CoAP)。
  • RPC会话管理器Actor - 负责管理集群RPC会话actor。新服务器启动时创建会话actor。服务器关闭时关闭会话actor。
  • RPC Session Actor - 表示集群模式下2个ThingsBoard服务器之间的通信会话。使用基于gPRC的HTTP/2进行通信。

集群模式


服务发现


ThingsBoard使用Zookeeper进行服务发现。所有ThingsBoard节点都是相同的,并在Zookeeper中注册为短暂的。Apache Curator路径缓存接受用于跟踪所有可用的兄弟节点。

一致的哈希


ThingsBoard采用一致的散列来确保可扩展性和可用性。可以基于设备ID的散列将在特定节点上接收的来自设备A的消息转发到另一节点。虽然这会引入某些网络开销,但它允许使用确定的服务器上的相应设备actor处理来自特定设备的所有消息,这带来了以下优点:

  • 提高缓存命中率。设备属性和其他设备相关数据由特定服务器上的设备actor获取。
  • 避免竞争条件。特定设备的所有消息都在确定的服务器上处理。
  • 允许根据设备ID定位服务器端api调用。

下图演示了ThingsBoard如何处理对Device D1的RPC请求。在这种情况下,请求到达服务器A,但D1使用MQTT连接到服务器C.在最坏的情况下,D1 Device Actor将位于另一个显然与A或C不匹配的服务器B上。


安全


传输加密


作为系统管理员,您可以将ThingsBoard配置为使用HTTP和s和MQTT传输的安全套接字层。目前尚不支持DTLS for CoAP。

设备认证


ThingsBoard旨在支持多种类型的设备凭据。当前版本为所有协议提供基于令牌的凭证的 支持,并支持基于X.509证书的MQTT协议凭证。有关更多详细信息,请参阅MQTT over SSL指南。

第三方工具

ThingsBoard使用以下主要第三方项目:

  • Akka - 用于Actor系统实施
  • Zookeeper - 用于服务协调
  • gRPC - 用于高性能RPC
  • Cassandra - 作为可扩展且可靠的数据库


项目依赖图

ThingsBoard的Maven项目之间主要依赖如下图:


相关推荐

得物可观测平台架构升级:基于GreptimeDB的全新监控体系实践

一、摘要在前端可观测分析场景中,需要实时观测并处理多地、多环境的运行情况,以保障Web应用和移动端的可用性与性能。传统方案往往依赖代理Agent→消息队列→流计算引擎→OLAP存储...

warm-flow新春版:网关直连和流程图重构

本期主要解决了网关直连和流程图重构,可以自此之后可支持各种复杂的网关混合、多网关直连使用。-新增Ruoyi-Vue-Plus优秀开源集成案例更新日志[feat]导入、导出和保存等新增json格式支持...

扣子空间体验报告

在数字化时代,智能工具的应用正不断拓展到我们工作和生活的各个角落。从任务规划到项目执行,再到任务管理,作者深入探讨了这款工具在不同场景下的表现和潜力。通过具体的应用实例,文章展示了扣子空间如何帮助用户...

spider-flow:开源的可视化方式定义爬虫方案

spider-flow简介spider-flow是一个爬虫平台,以可视化推拽方式定义爬取流程,无需代码即可实现一个爬虫服务。spider-flow特性支持css选择器、正则提取支持JSON/XML格式...

solon-flow 你好世界!

solon-flow是一个基础级的流处理引擎(可用于业务规则、决策处理、计算编排、流程审批等......)。提供有“开放式”驱动定制支持,像jdbc有mysql或pgsql等驱动,可...

新一代开源爬虫平台:SpiderFlow

SpiderFlow:新一代爬虫平台,以图形化方式定义爬虫流程,不写代码即可完成爬虫。-精选真开源,释放新价值。概览Spider-Flow是一个开源的、面向所有用户的Web端爬虫构建平台,它使用Ja...

通过 SQL 训练机器学习模型的引擎

关注薪资待遇的同学应该知道,机器学习相关的岗位工资普遍偏高啊。同时随着各种通用机器学习框架的出现,机器学习的门槛也在逐渐降低,训练一个简单的机器学习模型变得不那么难。但是不得不承认对于一些数据相关的工...

鼠须管输入法rime for Mac

鼠须管输入法forMac是一款十分新颖的跨平台输入法软件,全名是中州韵输入法引擎,鼠须管输入法mac版不仅仅是一个输入法,而是一个输入法算法框架。Rime的基础架构十分精良,一套算法支持了拼音、...

Go语言 1.20 版本正式发布:新版详细介绍

Go1.20简介最新的Go版本1.20在Go1.19发布六个月后发布。它的大部分更改都在工具链、运行时和库的实现中。一如既往,该版本保持了Go1的兼容性承诺。我们期望几乎所...

iOS 10平台SpriteKit新特性之Tile Maps(上)

简介苹果公司在WWDC2016大会上向人们展示了一大批新的好东西。其中之一就是SpriteKitTileEditor。这款工具易于上手,而且看起来速度特别快。在本教程中,你将了解关于TileE...

程序员简历例句—范例Java、Python、C++模板

个人简介通用简介:有良好的代码风格,通过添加注释提高代码可读性,注重代码质量,研读过XXX,XXX等多个开源项目源码从而学习增强代码的健壮性与扩展性。具备良好的代码编程习惯及文档编写能力,参与多个高...

Telerik UI for iOS Q3 2015正式发布

近日,TelerikUIforiOS正式发布了Q32015。新版本新增对XCode7、Swift2.0和iOS9的支持,同时还新增了对数轴、不连续的日期时间轴等;改进TKDataPoin...

ios使用ijkplayer+nginx进行视频直播

上两节,我们讲到使用nginx和ngixn的rtmp模块搭建直播的服务器,接着我们讲解了在Android使用ijkplayer来作为我们的视频直播播放器,整个过程中,需要注意的就是ijlplayer编...

IOS技术分享|iOS快速生成开发文档(一)

前言对于开发人员而言,文档的作用不言而喻。文档不仅可以提高软件开发效率,还能便于以后的软件开发、使用和维护。本文主要讲述Objective-C快速生成开发文档工具appledoc。简介apple...

macOS下配置VS Code C++开发环境

本文介绍在苹果macOS操作系统下,配置VisualStudioCode的C/C++开发环境的过程,本环境使用Clang/LLVM编译器和调试器。一、前置条件本文默认前置条件是,您的开发设备已...