米尔基于XCZU3EG/XCZU4EV/XCZU5EV核心板的无人机视觉跟踪系统解决方案
2023-05-09
3477
来源:米尔电子
近些年来,随着自动控制领域的发展,摄像镜头的工艺和视觉识别算法越来越完善,基于这一基础,无人机视觉跟踪技术成为炙手可热的研究领域。什么是无人机视觉跟踪技术呢?首先无人机通过摄像头进行视频采集,对采集的信息进行存储,并通过算法识别设定的跟踪目标,执行预设任务。目前无人机视觉跟踪技术已经广泛运用在农业生产,军事科研,物流运输等领域。
无人机应用于农业生产(图片来源网络)
在农业生产领域,无人机视觉追踪系统运用在识别农作物的生长情况中,进行高空灌溉、驱赶害虫等自动化农业管理;在民用领域,无人机通常使用视觉跟踪系统识别人体手势,让用户通过手势操控无人机的升降和摆动;在生物调研领域,该技术更多是为了追踪记录野生濒危动物的生活习惯,维护生态系统平衡。
无人机跟踪系统是如何组成的呢?首先,无人机通过高清摄像头模块,实时采集图像数据,系统通过信号检测模块和图像预处理模块将图片信息转变成数字信息,然后通过数据采集与处理模块进行采样、量化,并对各图片参数进行分析过滤;将分析结果与设定的跟踪目标比较,进行图像识别跟踪;跟踪的图像信息可以通过网络传输到手机和电脑实时显示。
无人机视觉跟踪流程图
基于米尔电子MYC-CZU4EV/5EV-V2核心板设计的无人机视觉跟踪系统,可以分为图像信号采集、数据处理、信息展示三部分;图像采集主要通过摄像头收集图像信息,再由FPGA芯片高速采集将图片信息传输到数据处理单元,数据处理单元由VCU和MCU组成,负责将采集的图像数据通过算法把设定好的跟踪目标进行标注处理;而信息展示部分,则通过无线传输系统把信息同步显示到无人机控制平台和APP上面,实现实时视频传输,掌握远程定位追踪功能。
MYC-CZU3EG/4EV/5EV-V2核心板,搭载功能全面的高规格Zynq UltraScale+ MPSoC芯片,其中芯片的PS端集成了APU ARM Cortex™-A53处理器,RPU Cortex-R5处理器,频率高达667MHz的Arm Mali-400 MP2(GPU)。需要注意的是,4EV/5EV芯片比3EG芯片多了一个视频编解码器单元 (VCU),支持H.264/H.265编解码。芯片搭载内部存储器,外部存储器接口(DDR)和外设接口。这些外设接口主要包括USB总线接口,以太网接口,SD/eMMC接口,I2C总线接口,CAN总线接口,UART接口,GPIO等。高速接口如 PCIE,SATA,Display Port。
机械参数
类型 | 分类 | 参数 |
工作温度 | 工业级 | -40℃~+85℃ |
商业级 | 0°C~+70°C | |
环境温度 | -50℃~100°C | |
工作湿度 | 非冷凝 | 20%~90% |
冷凝 | 不支持 | |
电源供电 | 核心板 | 3.3V/5A |
核心板接口 | PCB连接器 | 2个160 Pin 0.5mm间距双排高速高密度PCB连接器 |
PCB规格 | 核心板 | 12层盲埋孔,沉金工艺生产,独立的接地信号参考层,无铅 |
机械尺寸 | 核心板 | 60.0mmx52.0mm,板厚1.6mm,核心板模块整体厚度约为8.25mm |
序号 | 资源种类 | |||
PS 单元 | 1 | 1 路千兆以太网 | ||
2 | 1路USB3.0typeC接口 | |||
3 | 1路Display Port接口 | |||
4 | 1路PCIE 2.1x1接口 | |||
5 | 1路SATA 3.1接口 | |||
6 | 1路CAN接口 | |||
7 | 1路RS232串口 | |||
8 | 1路TF卡接口 | |||
9 | 1路I2C接口 | |||
10 | 1个复位按键,2个用户按键 | |||
11 | 1路JTAG | |||
12 | 内置实时时钟 | |||
序号 | 资源种类 | |||
PL 单元 | 1 | XADC接口 | ||
2 | 1路Xilinx标准LPFMC接口 | |||
3 | 1路HDMI接口,RGB 24bit,不支持音频 | |||
4 | 1路LCD DIP/LPC接口,RGB 24bit,与HDMI复用显示信号 | |||
5 | 电阻式电容式触摸屏接口,集成在LCD触摸屏接口 | |||
6 | 2路PMoD | |||
7 | 5个电源指示灯 | |||
8 | 4路SFP+模块接口(注:仅4EV/5EV使用) | |||
9 | 1路Arduino接口 |
2023-05-09
米尔基于XCZU3EG/XCZU4EV/XCZU5EV核心板的无人机视觉跟踪系统解决方案
近些年来,随着自动控制领域的发展,摄像镜头的工艺和视觉识别算法越来越完善,基于这一基础,无人机视觉跟踪技术成为炙手可热的研究领域。什么是无人机视觉跟踪技术呢?首先无人机通过摄像头进行视频采集,对采集的信息进行存储,并通过算法识别设定的跟踪目标,执行预设任务。目前无人机视觉跟踪技术已经广泛运用在农业生产,军事科研,物流运输等领域。
2023-04-13
米尔Zynq 7000系列单板的FPGA农业生产识别系统
随着农业生产模式和视觉技术的发展,农业采摘机器人的应用已逐渐成为了智慧农业的新趋势,通过机器视觉技术对农作物进行自动检测和识别已成为采摘机器人设计的关键技术之一,这决定了机器人的采摘效果和农场的经济效率。目前市面上最常见的是基于单片机开发的自动采摘机器人,但是随着人工智能的快速发展,通过建立神经网络基于大量图像数据训练的识别方法成为新一代智慧农业发展必不可缺的硬性条件。
2022-12-17
米尔基于MYC-YA157C-V3核心板水质监测方案
水质监测系统为防止下游水质污染迅速做出预警预报,实现集自动观测、远程控制和无线传输方式于一体,及时追踪污染源,从而为管理决策服务。
2022-12-17
米尔基于MYC-YT507H核心板的天然气检测系统解决方案
天然气检测系统实现了燃气管网泄露检测的自动化,相比人工巡检方式实时性强,可靠性高,完善和提升整个城市燃气管网泄漏的预警能力,降低了燃气泄漏事故造成的危害程度。
2022-12-17
米尔基于MYC-C8MMX-V2核心板火灾消防监控系统解决方案
消防设备是大型工业建筑、大体量民用建筑以及人员密集场所建筑中保障消防安全的主要设施,在建筑安全设计中不可或缺。为保障建筑物的消防安全,在建筑物中设置了大量消防设备:火灾自动报警系统、自动喷洒系统、防排烟系统、电气火灾监控系统、气体灭火系统、应急照明系统等。
2022-07-21
米尔MYC-YT507H核心板和MEasy HMI 2.0系统的自助取票方案
基于MYC-YT507H核心板和MEasy HMI 2.0系统的自助取票方案可将售票终端、后台管理、数据分析与报表输出等功能通过互联网集成起来,可实现线上订票线下取票、查询、打印等功能,可实时监控售票情况,利用后台收集的数据进行分析。
2022-05-09
米尔STM32MP1核心板在LoRa智能网关的应用
STM32MP1处理器是意法半导体推出的首款 MPU,以 Arm Cortex-A7 双核应用处理器与 Cortex®-M4 处理器的异构系统架构组合,可进行数据的实时数据,并具备高速的数据传输能力,在充分满足多种应用的灵活性需求的同时,又实现了最佳性能和低功耗特性。米尔基于STM32MP1的MYC-YA15XC-T 核心板可广泛运用于各种工业环境中,本文讲述了其在LoRa智能网关的应用。