HSBKITxM
概述
HSBKITxM（Holoscan Sensor Bridge）提供基于 FPGA 的接口，用于 GPU 上的低延迟传感器数据处理。 外设数据由 FPGA 采集，并通过 UDP 发送到主机系统，ConnectX 设备可将这些 UDP 数据直接写入 GPU 显存。 本软件包基于 NVIDIA 官方 HSB v2.2.1 软件包，并增加了对 SENSING HSB 摄像头和 Lattice Holoscan Sensor Bridge 设备 的支持。
主要特性与应用
特性:
• 支持 Nvidia Holoscan 传感器 Bridge（HSB） 平台
• 输出像素：最高 3840*2160
• 支持不同焦距镜头
• 输出格式: RAW/YUV422
• 支持定制
• 尺寸：L:185mm x W:77mm x H:41mm
• 兼容 AGX Thor 和 AGX Orin
应用:
• 工业
• 机器人
• 医疗
• 检测
快速入门
硬件概述
图 1：HSBKIT2M
推荐包
您可以选择以下产品型号
| 产品型号 | 部件 | 摄像头关键特性 | 产品图片 |
|---|---|---|---|
| SENSING-HSBKIT2M | Holoscan Sensor Bridge 套件 *1pcs SG8-IMX678C-MIPI-H80K *2pcs | 8MP_MIPI RAW 摄像头（滚动快门） | |
| SENSING-HSBKIT4M | Holoscan Sensor Bridge 套件 *1pcs SG8-IMX678C-MIPI-H80K *2pcs SG2-AR0234C-MIPI-H60F *2pcs | 8MP_MIPI RAW 摄像头（滚动快门） 2MP_MIPI RAW 摄像头（全局快门） |  |
| SENSING-HSBKIT6M | Holoscan Sensor Bridge 套件 *1pcs SG8-IMX678C-MIPI-H80K *2pcs SG2-AR0234C-MIPI-H60F *2pcs SG3-ISX031C-MIPI-H100F1 *2pcs | 8MP_MIPI RAW 摄像头（滚动快门） 2MP_MIPI RAW 摄像头（全局快门） 3MP_MIPI RAW 摄像头（滚动快门） |  |
硬件准备
物料清单（仅适用于 HSBKIT2M）
| 序号 | 产品型号 | 数量 | 备注 |
|---|---|---|---|
| 1 | Holoscan Sensor Bridge 套件 | 1 | 最多支持 2 路摄像头 |
| 2 | SG2A-HOLOSCAN-MIPI-A1 | 1 | 标准配置 |
| 3 | SG8-IMX678C-MIPI-H80K | 2 | 标准配置 |
| 4 | FPC_0.5mm_L-50mm | 2 | 标准配置 |
| 5 | M2.5*5 | 2 | 标准配置 |
| 6 | MPO 转 LC 10G 一分四光纤 | 1 | 标准配置 |
| 7 | QSFP-100G 多模光收发模块 | 1 | 标准配置 |
| 8 | 10 Gigabit 多模双纤光收发模块 | 2 | 标准配置 |
| 9 | 电源适配器 | 1 | 标准配置 |
| 10 | 类型-c data cable | 1 | 标准配置 |
| 11 | JETSON AGX THOR DK | 1 | 可选配置 |
| 参数 | 规格 |
|---|---|
| 传感器 | SONY 8.29MP IMX678 RGGB |
| ISP | - |
| 图像尺寸 | 1/1.8 inch CMOS |
| 输出像素 | 3840H*2160V |
| 帧率 | MAX 60fps |
| 像元尺寸 | 2.0μm × 2.0μm |
| HDR 支持 | 是 |
| 输出数据 | MIPI/RAW@10bit/12bit |
| 供电 | 3.3V |
| 电流 | < 300mA @3.3VDC |
| 摄像头 接口 | FPC |
| 连接器 | FH67-30S-0.5SV |
| 工作温度范围 | -30°~+85°C |
| 尺寸 | W: 20mm, L:35mm, H:25mm |
| EFL | 4.0mm |
| F/NO | 2.6 |
| 光学畸变参数 | 88% |
| 视场角 (FOV) | HFOV76°/VFOV42° |
| 镜头安装 | M12xP0.5（支持装配不同镜头） |
| 重量 | < 50g |
SG8-IMX678C-MIPI-H80K 规格
HSBKIT2M 套件内容
图 2：用于 AGX Thor 的 HSB 配件
安装步骤
- 将 HSB MIPI 摄像头连接到 Holoscan Sensor Bridge 板卡
- 将所有设备连接到 Jetson AGX Orin 开发套件 或 Jetson AGX Thor 开发套件
- 连接电源(DC 12V)
- 启动系统并拉起摄像头
软件准备
SDK 下载
请根据您的操作系统和 HSBKITxM 硬件版本选择合适的 SDK 包：
| 下载链接 | 下载工具 |
|---|---|
| SDK下载 | DownGit |
DownGit 可在不克隆整个仓库的情况下，从 GitHub 仓库下载指定文件夹或文件：
- 从“下载链接”列复制 GitHub 仓库 URL
- 在浏览器中打开 DownGit
- 将仓库 URL 粘贴到输入框
- 点击“下载”，获取包含 SDK 的 ZIP 文件
- 将 ZIP 文件解压到目标位置
当只需要 SDK 文件而不需要完整 Git 历史时，此方法尤其适用。
快速拉起
-
请先完成 详细用户指南 中描述的 “Host Setup”
-
将本软件包克隆到设备上
-
进入软件包路径，并执行命令
sh docker/build.sh -igpu构建 Holoscan Sensor Bridge 容器 -
在设备终端执行以下命令进入 demo 容器
xhost +
sh docker/demo.sh -
执行以下命令拉起 SENSING MIPI 摄像头
-
For sg2_ar0234c_mipi
python3 examples/linux_sg2_ar0234c_mipi_player.py -
对于 sg3_isx031c_mipi
注意：仅支持采集图像数据和保存图片，图片将保存到 captured_images 文件夹。
python3 examples/linux_sg3_isx031c_mipi_capture.py
- 对于 sg8_imx678c_mipi
python3 examples/linux_sg8_imx678c_mipi_player.py