使用Node-RED实现和部署物联网入侵检测的机器学习管道

2024-08-23 09:20

本文主要是介绍使用Node-RED实现和部署物联网入侵检测的机器学习管道,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

整理自

《Implementing and Deploying an ML Pipeline for IoT Intrusion Detection with Node-RED》,由 Yimin Zhang 等人撰写,发表于 2023 年 CPS-IoT Week Workshops。以下是根据提供的 PDF 内容整理的论文的详细主要内容:

摘要 (Abstract)

  • 论文讨论了物联网(IoT)生态系统中边缘设备面临网络攻击的问题,以及如何在这些设备上使用机器学习(ML)技术进行本地入侵检测,以减少对云基础设施的依赖并增强数据隐私。

关键词 (Keywords)

  • 入侵检测、物联网、机器学习、嵌入式系统、边缘计算

引言 (Introduction)

  • 论文介绍了物联网设备因价格降低和种类增多而被广泛采用,但这也增加了受到网络攻击的风险。ML技术能够学习网络流量模式,帮助识别恶意流量。

机器学习管道 (Machine Learning Pipeline)

  • 论文描述了用于 IoT 生态系统中入侵检测的 ML 管道的实现,包括数据收集、预处理和预测阶段。使用了一种类机器学习模型,如单类支持向量机(OCSVM)等。

2b188090a2304697ab512f2309ef3517.png

所选编程框架 (Selected Programming Frameworks)

  • 论文评估了几种中间件解决方案,以确定它们对嵌入式设备中 ML 应用程序的支持程度,特别关注低代码和事件驱动方法。

3.1 Node-RED

  • Node-RED: 一个基于流的编程工具,最初由IBM开发,现在由OpenJS Foundation维护。Node-RED允许开发者通过拖放节点来构建应用程序,是一个低代码(low-code)平台。
  • Node-RED与机器学习: Node-RED社区包含了基于Python ML库(如SciKit-Learn和Tensorflow)的ML模块,尽管这些模块在过去5年中没有更新,存在一些问题。也有其他的第三方节点贡献者提供的节点,例如TensorFlow.js,这是一个可以在浏览器或Node.js中运行的JavaScript ML库。

3.2 GStreamer

  • GStreamer: 一个开源的、多平台的框架,适用于构建处理和转换数据流的应用程序。GStreamer应用程序由多个管道组成,每个管道都是数据转换工作流的表示。
  • GStreamer与机器学习: NVIDIA 提供了 GStreamer 工具包,即 DeepStream SDK,用于基于 AI 的多传感器处理,视频、音频和图像理解。

3.3 Arrowhead

  • Arrowhead: 提供了一种构建基于 IoT(主要是工业)自动化系统的架构,基于服务导向架构(SOA),具有本地云。
  • Arrowhead与机器学习: 有关Arrowhead和ML的已发布作品较少,但Arrowhead能够支持需要软实时模型的使用案例。

3.4 比较

  • 论文通过表格形式对比了 Node-RED、GStreamer 和 Arrowhead 三种框架的不同特性,包括:
    • 分布式与集中式架构
    • 开源情况
    • 低代码支持
    • 轻量级特性
    • 实时处理能力
    • 运行时环境
    • 支持的语言
    • 设备大小需求
    • 支持者和文档
    • 通信协议
    • 消息模式
    • 并行处理能力
    • 鲁棒性
    • 部署难易程度
    • 动态服务绑定

5dc591f7787049d9a47ae42e9631b19c.png

结果与选择

  • 尽管每个框架都有其优势,但Node-RED因其高度的模块化和低代码方法而被选为最适合本研究的框架。Arrowhead 由于需要多个核心服务与应用程序本身同时运行而被排除。GStreamer 虽然轻量且功能强大,但其API使用起来更为复杂,不如 Node-RED 易于集成和重新配置。

在 Node-RED 中部署管道 (Pipeline Deployment in Node-RED)

  • 论文报告了将 ML 管道转换为 Node-RED 实现时遇到的挑战,并展示了在 Node-RED Web 编辑器中的流程。

47653e8e90ca469cafe7f90f928e23cd.png

在嵌入式系统中的初始评估 (Initial Evaluation on Embedded System)

  • 论文描述了在嵌入式系统(由 ISP 提供的家用路由器)上部署 Node-RED 管道的性能评估,包括内存占用和响应时间。

结论 (Conclusion)

  • 论文总结了在 IoT 家庭生态系统的边缘实现入侵检测系统的实施过程,并讨论了未来工作的方向,包括进行不同框架和部署之间的定量比较,扩展管道以包含更多模型,并解决处理更大并行负载的可扩展性问题。

致谢 (Acknowledgments)

  • 论文感谢了葡萄牙科学技术基金会(FCT/MCTES)和葡萄牙国家创新机构(ANI)的部分支持。

参考文献 (References)

  • 论文列出了相关的参考文献,以支持研究和论文内容。

论文的核心贡献是展示了如何在 Node-RED 中实现和部署用于 IoT 入侵检测的 ML 管道,并在实际的边缘设备上进行了评估和测试。论文还讨论了实现过程中遇到的挑战和解决方案,并提供了对 Node-RED 作为低代码平台在嵌入式系统中的应用潜力的见解。

 

这篇关于使用Node-RED实现和部署物联网入侵检测的机器学习管道的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1098978

相关文章

Python并行处理实战之如何使用ProcessPoolExecutor加速计算

《Python并行处理实战之如何使用ProcessPoolExecutor加速计算》Python提供了多种并行处理的方式,其中concurrent.futures模块的ProcessPoolExecu... 目录简介完整代码示例代码解释1. 导入必要的模块2. 定义处理函数3. 主函数4. 生成数字列表5.

Python中help()和dir()函数的使用

《Python中help()和dir()函数的使用》我们经常需要查看某个对象(如模块、类、函数等)的属性和方法,Python提供了两个内置函数help()和dir(),它们可以帮助我们快速了解代... 目录1. 引言2. help() 函数2.1 作用2.2 使用方法2.3 示例(1) 查看内置函数的帮助(

Linux脚本(shell)的使用方式

《Linux脚本(shell)的使用方式》:本文主要介绍Linux脚本(shell)的使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录概述语法详解数学运算表达式Shell变量变量分类环境变量Shell内部变量自定义变量:定义、赋值自定义变量:引用、修改、删

Python实现精准提取 PDF中的文本,表格与图片

《Python实现精准提取PDF中的文本,表格与图片》在实际的系统开发中,处理PDF文件不仅限于读取整页文本,还有提取文档中的表格数据,图片或特定区域的内容,下面我们来看看如何使用Python实... 目录安装 python 库提取 PDF 文本内容:获取整页文本与指定区域内容获取页面上的所有文本内容获取

基于Python实现一个Windows Tree命令工具

《基于Python实现一个WindowsTree命令工具》今天想要在Windows平台的CMD命令终端窗口中使用像Linux下的tree命令,打印一下目录结构层级树,然而还真有tree命令,但是发现... 目录引言实现代码使用说明可用选项示例用法功能特点添加到环境变量方法一:创建批处理文件并添加到PATH1

Java使用HttpClient实现图片下载与本地保存功能

《Java使用HttpClient实现图片下载与本地保存功能》在当今数字化时代,网络资源的获取与处理已成为软件开发中的常见需求,其中,图片作为网络上最常见的资源之一,其下载与保存功能在许多应用场景中都... 目录引言一、Apache HttpClient简介二、技术栈与环境准备三、实现图片下载与保存功能1.

Python中使用uv创建环境及原理举例详解

《Python中使用uv创建环境及原理举例详解》uv是Astral团队开发的高性能Python工具,整合包管理、虚拟环境、Python版本控制等功能,:本文主要介绍Python中使用uv创建环境及... 目录一、uv工具简介核心特点:二、安装uv1. 通过pip安装2. 通过脚本安装验证安装:配置镜像源(可

LiteFlow轻量级工作流引擎使用示例详解

《LiteFlow轻量级工作流引擎使用示例详解》:本文主要介绍LiteFlow是一个灵活、简洁且轻量的工作流引擎,适合用于中小型项目和微服务架构中的流程编排,本文给大家介绍LiteFlow轻量级工... 目录1. LiteFlow 主要特点2. 工作流定义方式3. LiteFlow 流程示例4. LiteF

使用Python开发一个现代化屏幕取色器

《使用Python开发一个现代化屏幕取色器》在UI设计、网页开发等场景中,颜色拾取是高频需求,:本文主要介绍如何使用Python开发一个现代化屏幕取色器,有需要的小伙伴可以参考一下... 目录一、项目概述二、核心功能解析2.1 实时颜色追踪2.2 智能颜色显示三、效果展示四、实现步骤详解4.1 环境配置4.

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal