欢迎来到Physical AI的最前沿！Seeed具身智能黑客松现邀请所有对 在机器人领域训练模仿学习策略，并实时进行推理部署 感兴趣的人，共同创造具有影响力的创新解决方案。在这里，你可以与志同道合的开发者一起实践前沿机器人技术，获取免费硬件支持和独家资源，并快速在真实机器人系统中验证你的想法！

这是一场专为开发者设计的机器人深度实践活动！我们将围绕 Hugging Face 的 LeRobot 开源平台以及 NVIDIA 的 AI 和机器人技术，助力开发者打造创新机器人应用。

活动亮点

  1. 模仿学习实战

  • 利用 SO-ARM100 开源机械臂套件和 LeRobot 框架，探索 ACT 和 Diffusion Policy 等前沿 AI 模型。

  • 学习如何收集数据、训练机器人策略，并将其部署到真实环境中。

  • 动手体验

  • 快速组装 6 自由度机械臂，并实现示教同步。

  • 完成end2end实验环境搭建。

  • 通过LeRobot框架完成数据采集，数据回放，并进行ACT/Diffusion Policy/Pi0端到端大模型训练。

  • 将策略部署到 Jetson Orin平台支持的边缘设备中，完成实时推理。

  • 技术支持和资源

  • 免费提供硬件套件：SO-ARM100、Jetson Orin NX 边缘计算机和深度相机。

  • 提供详尽的在线教程和技术文档。

  • 活动现场配备技术支持团队，为你提供一对一指导。

🎉🎉前三名将获得：

  • 冠军团队：两套 (SO-ARM100机械臂 + NVIDIA Orin Nano Super 开发套件)

  • 亚军团队：3台Orbbec Gemini相机 

  • 季军团队：5台 reCamera AI相机

  • 未获奖参赛者仍可获得主办方及赞助商周边纪念品

（最终评审标准以现场技术支持团队和主办方综合意见为准，并在现场公布结果）

体验 & 创新

通过完整的开发流程，你将掌握从数据采集到模型部署的全链路技能：

    • 数据采集

使用远程操作功能并以标准 LeRobot 数据集格式保存。

    • 策略训练

利用采集的数据，通过模仿学习方法训练机器人策略，并在仿真环境中进行评估和优化。

    • 部署验证

将优化后的策略部署到 NVIDIA Jetson 支持的真实机器人手臂中，进行实时推理和性能测试。

我们期待参赛者最终产出：

  1. 创意展示：完成LeRobot项目基本流程（掌握数据采集与策略训练）后，能够创建一段使用机械臂完成创新任务的演示视频

  2. 进阶任务（在最终评审阶段可加分）：

  • 结合NVIDIA Isaac Sim 完成自定义创新任务

  • 优化数据采集：结合Orbbec Gemini 深度相机，将3D深度信息整合到模仿学习的输入数据中，提升策略的感知能力

  • reCamera融合应用：使用reCamera结合机械臂，构建视觉AI加持的智能感知与控制系统

  • 机械臂结合reSpeaker构建语音控制系统

更多新技术的结合与运用，欢迎提案

时间及地点安排

  • 3月 8 日

    • 10:00：签到 & 开幕

    • 12:00-20:00：项目搭建

  • 3月 9 日

    • 8:00-18:00：持续优化与完善

    • 18:00：项目展示，总结，颁奖

地点: 深圳，南山，万科云城设计公社

本场黑客松主办方将提供硬件支持：

  • SO-ARM100 AI 机械臂套件

    • 6 自由度设计，支持模块化扩展。

    • 3D 打印组件 + 主从手臂操作系统。

  • reComputer J4012（Jetson Orin NX 16GB 支持）

    • 紧凑型高性能计算设备，用于 AI 推理和机器人控制。

  • Orbbec 深度相机

    • 高质量数据采集，为机器人感知赋能。

  • reSpeaker板载AI语音识别控制套件

    • 开源硬件兼容ESP32, Adafruit QT Py, 可通过USB与Raspberry Pi, NVIDIA Jetson等设备接入，为机器人提供多模态感知输入。

至此，你将学到：

  • 机器人硬件的组装与校准。

  • 使用远程操作和 NVIDIA 仿真平台进行数据收集。

  • 模仿学习策略的训练与部署流程。

  • 在 Jetson 平台上实现实时推理与验证。

 

常见问题Q&A

    • 我该如何找到团队加入？

最快捷的方式是提前与小伙伴组好团队。如果您是个人参赛者，也可以在活动现场与其他参赛者沟通组队，或者有主办方根据大家报名时填写的技术栈协助分组，或者选择以个人形式参与。无论哪种方式，我们都欢迎您的加入！

活动现场将有助教全程陪伴，随时为您解答问题。同时，我们会在 2 月 26 日左右组建技术交流微信群，方便大家互相沟通进展并及时同步信息

更多问题，请发送邮件至 edgeai@seeed.cc联系我们。

 

即刻报名

名额有限，即刻报名加入我们！

注册时间：即日起 – 02/26/2025

扫描下方海报中的二维码，我们期待与你共同探索 AI 和机器人技术的未来！