Nvidia/算能 +FPGA+AI大算力边缘计算盒子:AI智能监控 用于沙滩救援

news2024/11/16 6:51:59

以色列的一个团队在人工智能领域取得的成果引起了轰动。

今天他们取得的成果源于多年前的一个想法。Netanel Eliav 和 Adam Bismut 是校园时代的旧伙伴,当时他们想要解决一个可以改变世界的问题,由此引出这样一个想法:溺水的 Bismut 漂流到死海,却发现那里缺乏救生员技术支持,用着过时的双筒望远镜对死海进行搜索。

这两位有抱负的企业家最近从以色列南部的本-古里安大学 (Ben-Gurion University) 毕业,并取得工商管理硕士学位,他们认为这是他们要用人工智能解决的问题。

“我有两个女儿,作为一名父亲,我深知孩子在水边玩耍时父母的内心感受。”该公司的首席执行官 Eliav 说。

2018 年,他们和在本-古里安大学就读时的同学 Gadi Kovler 和 Minna Shezaf一起创建了 Sightbit,帮助救生员观察危险情况,防止溺水情况的发生。

他们母校的风险投资机构 Cactus Capital 为这家初创公司提供了种子基金。

Sightbit 目前正在帕尔马切姆海滩进行试点测试。帕尔马切姆海滩位于特拉维夫南部地中海沿岸的帕尔马切姆基布兹地区,是日光浴者和冲浪者的热门去处。这个沙丘林立的目的地,有着诱人而温暖的、海蓝宝石般的海水,在夏季每天都有成千上万的游客。

但这里也以致命的激流而闻名。

危险探测器

Sightbit 开发的图像检测技术可以帮助发现危险,从而协助救生员工作。这家位于贝尔舍巴的初创公司与以色列自然和公园管理局合作,在帕尔马西姆海滩的救生塔上安装了三个摄像头。采集到的数据会传输到一个单独的 NVIDIA Jetson AGX 上,NVIDIA Metropolis 则被部署作视频分析。

这种危险探测器系统可以标记出扫描范围内潜在的安全隐患,救生员只需持续监控电脑显示器就可以实现对整个沙滩的监控。

Sightbit 开发了基于卷积神经网络和图像检测的模型帮助救生员发现潜在危险。作为公司的首席技术官,Kovler 已经借助云端部署的 NVIDIA GPU 对数以万计的图像进行了训练。

公司首席营销官 Shezaf 补充解释,受海洋的阳光照射、天气状况、拥挤的人群以及在海中正常活动的人(部分身体没入海中)的影响,图像训练过程并不容易。

但 Sightbit 的深度学习和专有算法使它能够单独识别儿童和人群。这使得这一系统可以标记出那些落单的孩子。

激流识别

该系统还利用光流算法探测海洋中危险的激流,帮助救生员让游客远离这些区域。这些算法通过偏微分方程计算图像中每个立体像素的加速度矢量,由此识别图像中每个物体的速度。

救生员可以获得最新的海洋状况,这样当他们开始工作时,就能整体感知当天的潜在危险。

“我们同许多救生员交流过,他们正在努力避免下一次事故的发生。许多人由于游得太深被激流缠住,无法脱身。” Eliav 说。

救生塔上的摄像头运行在一台小型超级计算机 Jetson Xavier 上,访问 Metropolis 则能为警报、跟踪、统计和实时风险分析提供瞬时推理结果。

据 Sightbit 报道,以色列自然和公园管理局正计划在海滩上建一座建筑,以安装更多的自动安全摄像头。

    1. 产品概述

XM-AIBOX-32智能边缘分析一体机是一款高性能、低功耗边缘计算产品搭载BM1684X主芯片,INT8算力高达32TOPS,FP16/BF16算力高达16TFLOPS,FP32算力高达2TFLOPS可同时处理32路高清视频,支持32路1080P高清视频硬件解码与12路编码

本产品高度集成了基于计算机视觉、深度学习网络的高精度AI智能算法以及视频智能化综合管理平台;AI智能算法涵盖了如园区、社区、工地、校园等场景的多种算法,可按需组合、按场景配置;视频智能化综合管理平台支持前端设备管理、实时视频预览、告警推送、取证抓拍、算法在线加载及优化、数据态势分析大屏展示等,设备操作简单、即插即用,同时拥有丰富的北向API接口,可赋能上层业务应用大平台。

    1. 产品特点

超高性能计算与编解码能力

  • 支持高达32Tops的INT8峰值算力
  • 支持高达16TFLOPS的FP16/BF16精度算力
  • 支持2TFLOPS的FP32高精度算力
  • 支持高达32路H.264/H.265 1080P@25FPS视频硬件解码;
  • 支持高达12路H.264/H.265 1080P@25FPS视频硬件编码

内置丰富AI算法

  • 内置高达30种+AI算法,支持自由搭配,自定义组合

(支持人员结构化 / 人脸识别 / 车辆结构化 / 车牌识别 / 火焰检测 / 烟雾检测 / 抽烟检测 / 打电话检测 / 玩手机检测 / 未戴口罩检测 / 人员离岗检测/人员睡岗检测 / 人员摔倒检测 /人员静电消除 / 区域人数统计/区域人数不足/区域人数超员/区域人数异常 / 区域入侵检测 / 工服检测 /  安全帽检测 / 反光衣检测 / 电瓶车检测 / 规范停车(车辆违停) / 出入口客流统计 / 周界翻越入侵/人员越界检测/区域徘徊检测/ 消防车通道占用/消防逃生通道占用/垃圾未入桶检测 / 垃圾桶满溢检测 / 垃圾投放提示 /摄像头异常位移检测等算法)

  • 每路视频支持最多同时运行3个AI分析任务;
  • 支持高达32个视频AI分析任务同时运行,超出32个AI分析任务时可轮询分析。

接口丰富、部署灵活

  • 支持丰富接口:1000M以太网口、USB3.0/USB2.0、HDMI、RS-485、RS-232
  • 支持-20℃至+60℃宽温工作环境;
  • 支持IP30防护等级支持无风扇散热(以具体型号为准)
  • 适配支持SATA存储,支持2TB存储容量(以具体型号为准)
  • 选配支持LTE无线回传功能(以具体型号为准)
  • 北向接口:支持HTTP协议、MQTT协议、GB28281
  • 南向接口:支持GB28281、Onvif、RTSP

高可靠性加密保护

  • 高容量eMMC可开发支持主备分区
  • 支持异常类故障告警与保护处理机制
  • 持可编程加密芯片用于隐私信息保护。

易用工具链,开发灵活

  • 一站式深度学习开发工具包Sophon SDK;
  • 支持Caffe/DarkNet/TensorFlow/PyTorch/MXNet/ONNX/PaddlePaddle等主流深度学习框架
  • 支持分类、检测主流网络模型,支持自定义算子开发;

支持Docker容器化,算法应用快速部署。

    1. 技术指标

规格参数

XM-AIBOX-32

技术规格

芯片

SOC

BM1684X

CPU

8核A53@2.3GHz

AI算

INT8

32 TOPS

BT16/FP16

16 TFLOPS

FP32

2 TFLOPS

视频/图片编解码

视频解码能力

H.264/H.265: 1080P @800fps

视频解码分辨率

8K / 4K / 1080P / 720P / D1 / CIF

视频编码能力

H.264/H.265:1080P @300fps

视频编码分辨率

4K / 1080P / 720P / D1 / CIF

图片编/解码能力

600张/秒(JPEG)

图片解码最大分辨率

32768 * 32768

内存与存储

内存

16 GB

eMMC

64 GB

外部接口

网口

10/100/1000Mbps自适应 *2

USB

USB3.0 *2、USB2.0 *2

存储

MicroSD *1

显示

HDMI *1

串口

RS232 *1/RS485 *1

扩展存储

SSD硬盘(选配)

M.2 SSD硬盘

无线功能

4G/5G无线模块(选配)

Mini-PCIE 4G模块/M.2 5G模块

天线

SMA Female *1(LTE)

SMA Female *4(5G),需更换底板

SMA Female *2 (Wi-Fi)

SMA Female *1(BT)

SIM

标准SIM卡槽

Wi-Fi/BT

Wi-Fi支持 802.11a/b/g/n/ac

BT5.0

物理规格

尺寸

长*宽*高

210 mm * 130 mm * 44.5 mm

供电与功耗

供电

直流12V

典型功耗

20W

注:硬盘、4G/5G功能为可选功能,非产品标配,典型功耗不包括硬盘、无线模块功耗

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1812478.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

RV32M指令集

RV32M指令集 1、乘法运算2、除法运算1、乘法运算 MUL 指令(得到整数32位乘积(64位中的低32位)) MUL 指令用于执行两个带符号或无符号整数之间的乘法运算。其语法如下: mul rd, rs1, rs2 它将寄存器 rs1 和 rs2 中的值相乘,并将结果写入寄存器 rd 中。如果 rs1 和 rs2 都是有…

catia零件装配时预览零件的形状

这样的显示方式看不到 选择大或中图标就可预览零件形状

基于STM32的智能水产养殖系统(二)

TPS5433IDR TPS5433IDR 是一款由德州仪器 (Texas Instruments) 生产的高效降压转换器(Buck Converter)。它能够将较高的输入电压转换为较低的输出电压,适用于各种电源管理应用。 主要特性 输入电压范围: 5.5V 至 36V输出电压范围: 0.9V 至 …

惊艳的短视频:成都科成博通文化传媒公司

惊艳的短视频:瞬间之美,震撼心灵 在数字化时代,短视频以其短小精悍、内容丰富的特点,迅速占领了我们的屏幕和时间。而在这个浩如烟海的视频海洋中,总有一些短视频能够脱颖而出,以其惊艳的视觉效果、深刻的…

设计模式-代理模式(结构型)

代理模式 代理模式是一种结构型模式,它可以通过一个类代理另一个类的功能。代理类持有被代理类的引用地址,负责将请求转发给代理类,并且可以在转发前后做一些处理 图解 角色 抽象主题(Subject): 定义代理对象和被代理…

足球实况分析系统YOLO

① 足球运动员、裁判和球检测; ② 球员球队预测; ③ 足球地图上球员和球位置的估计; ④ 足球跟踪; 当你启动应用程序时,会自动加载两个演示视频以及推荐的设置和超参数. 1. 使用侧栏菜单“浏览文件”按钮上传视频…

什么是OCR转写服务?

OCR(Optical Character Recognition,光学字符识别)转写服务是一种技术,用于将图像或扫描文档中的文字转换为可编辑的文本格式。这项服务通过识别图像中的文字,并将其转换成计算机可读的文本形式,从而使得用…

力扣39. 组合总和

Problem: 39. 组合总和 文章目录 题目描述思路及解题方法复杂度Code 题目描述 思路及解题方法 1.创建一个 res 变量存储所有满足条件的组合结果,使用 track 变量记录当前的组合路径,使用 trackSum 变量记录当前路径中元素的和。 2.回溯方法 backtrack: 2.1.基本情况…

【技巧】让xorg和gnome不要使用GPU

转载请注明出处:小锋学长生活大爆炸[xfxuezhagn.cn] 如果本文帮助到了你,欢迎[点赞、收藏、关注]哦~ 默认xorg会使用GPU加速: 现在取消他对GPU的占用: sudo vim /etc/X11/xorg.conf修改或添加以下内容: Section &quo…

9个优秀的Text2Sql(Chat2Sql)开源项目、资源

过去,领导、决策者或业务人员想要统计个数据、做个报告,总是绕不开技术人员的支持。领导需要将想法告诉技术人员,技术人员再将领导的想法转成技术语言(例如:sql),然后对数据进行统计分析&#x…

electron基础使用

安装以及运行 当前node版本18,按照官网提供操作,npm init进行初始化操作,将index.js修改为main.js,执行npm install --save-dev electron。(这里我挂梯子下载成功了。),添加如下代码至package.…

政务云参考技术架构

行业优势 总体架构 政务云平台技术框架图,由机房环境、基础设施层、支撑软件层及业务应用层组成,在运维、安全和运营体系的保障下,为政务云使用单位提供统一服务支撑。 功能架构 标准双区隔离 参照国家电子政务规范,打造符合标准的…

TensorFlow图像识别项目

Hi~!这里是奋斗的小羊,很荣幸您能阅读我的文章,诚请评论指点,欢迎欢迎 ~~ 💥💥个人主页:奋斗的小羊 💥💥所属专栏:C语言 目录 今天我们将讨论如何部署Flask项…

星网络 StarNet: Rewrite the Stars

论文题目:Rewrite the Stars 论文链接:http://arxiv.org/abs/2403.19967 代码链接:https://github.com/ma-xu/Rewrite-the-Stars 一、摘要 揭示星操作将输入映射到高维、非线性特征空间的能力——类似于核技巧——而无需扩展网络。提出了S…

第7章 用户输入和 while 循环

第7章 用户输入和 while 循环 7.1 函数 input()的工作原理7.1.1 编写清晰的程序7.1.2 使用 int()来获取数值输入7.1.3 求模运算符 7.2 while 循环简介7.2.1 使用 while 循环7.2.2 让用户选择何时退出7.2.3 使用标志7.2.4 使用 break 退出循环7.2.5 在循环中使用 continue7.2.6 …

Django DetailView视图

Django的DetailView是一个用于显示单个对象详情的视图。下面是一个使用DetailView来显示单个书籍详情的例子。 1,添加视图 Test/app3/views.py from django.shortcuts import render# Create your views here. from django.views.generic import ListView from .m…

deepin V23 新进展!deepin 成功适配 MilkV Mars

内容来源:deepin(深度)社区 deepin-ports SIG(Special Interest Group,特别兴趣小组),deepin(深度)社区积极与各大厂商展开合作,参与对 RISC-V 架构和设备的适…

鸿蒙原生开发——轻内核A核源码分析系列三 物理内存(2)

3.1.2.3 函数OsVmPhysLargeAlloc 当执行到这个函数时,说明空闲链表上的单个内存页节点的大小已经不能满足要求,超过了第9个链表上的内存页节点的大小了。⑴处计算需要申请的内存大小。⑵从最大的链表上进行遍历每一个内存页节点。⑶根据每个内存页的开始…

10秒变鬼短视频:四川鑫悦里文化传媒有限公司

10秒变鬼短视频:创意与惊悚的完美融合 在短视频的世界里,创新与独特性 节奏、巧妙的剪辑和惊悚的氛围,成为了许多观众喜爱的对象。四川鑫悦里文化传媒有限公司将探讨“10秒变鬼”短视频的创作技巧、受众心理以及其对短视频行业的启示。 一…

人脸识别系统---多人脸提取

一、多人脸提取 1.导包、设置窗口、选择文件夹里图片的函数和单人脸提取一致,此处省略(详情看‘单人脸提取’) 2.对图像进行处理,在窗口画布上显示出来 2.1定义名为tq的函数,在函数内部声明了三个全局变量file_path…