尧图精选

FlyBrainLab+Drosophila+Embodied AI

🕒 发布时间:2026/10/2 2:22:29 📁 来源:尧图网络
果蝇大脑LLM/VLM机器人Rovio的可研究方向Rovio 身体Raspberry Pi 5 神经系统接口 / 实时闭环控制器FlyBrain / FlyBrainLab 生物启发的“小脑”LLM/VLM 端侧语音大模型/视觉语言模型的 “大脑 ”环境 神经系统的一部分传感器 身体动力学 神经计算的一部分一、方向 1让机器人拥有一个“异种身体的果蝇脑”要让“果蝇大脑控制机器人”而是让机器人拥有一个“异种身体的果蝇脑”这里最重要的思想是不要试图把“果蝇动作”翻译成“Rovio动作”。例如果蝇的某些神经回路产生左侧视觉刺激 → 某组神经元活动 → 转向你不应该简单规定果蝇 turn-left Rovio.turn_left()而应该让它产生一个类似motor population: L 0.73 R 0.21 forward 0.58 arousal 0.81然后由Rovio 的身体动力学自己解释这个信号。也就是说神经系统发出的不是动作命令而是“身体倾向”。这是非常重要的区别。二、方向 2把 Raspberry Pi 5 变成“脊髓”而不是 CPUPi 5 不负责SLAM大模型复杂规划“理解世界”而负责高频闭环神经脉冲motor primitiveproprioceptionreflexbody-state estimation这样反而更接近生物系统。三、方向 3把 Rovio 本身当成一个“形态计算器”这是你问题里Morphological Computation形态计算真正可以落地的地方。传统机器人认为计算发生在 CPU。形态计算则认为身体本身就在进行计算。这时候Rovio 的机械误差不是 bug而是神经计算的一部分。甚至可以故意研究“换一组轮胎以后果蝇脑产生的行为是否发生变化”如果发生变化这本身就是一个很漂亮的 embodied intelligence 实验。四、方向 4做一个“没有目标函数”的机器人这个方向非常激进。传统强化学习state ↓ policy ↓ action ↓ reward ↓ update你可以反过来不给机器人明确任务。例如只提供光声音碰撞运动温度空间变化然后让神经系统自己形成行为。例如环境 ↓ sensory neurons ↓ connectome ↓ neuromodulation ↓ motor neurons ↓ 身体 ↓ 环境研究的问题变成行为到底需不需要一个显式 reward甚至一个没有“任务”的神经系统在具身环境中是否会自发形成稳定行为这已经开始接近Artificial Life / Active Matter / Embodied Cognition而不仅仅是机器人学。五、方向 5让“身体状态”成为果蝇大脑的输入这是我特别推荐你实验的一个方向。不要只输入camera → brain而增加camera bumper wheel velocity battery motor current body acceleration head angle turn rate然后全部转换成类似生物感觉视觉 ↓ optic neurons 运动 ↓ proprioceptive neurons 碰撞 ↓ mechanosensory neurons 能量状态 ↓ internal-state neurons 运动速度 ↓ self-motion neurons这样机器人就拥有了一个非常重要的东西interoception内感受也就是它不仅感知外部世界还感知“自己的身体”。这一步非常重要因为具身智能与纯视觉 AI 的一个根本区别就是世界不是“机器人看到的东西”而是“机器人通过身体正在经历的东西”。六、方向 6建立一个“机器人内感受 → 神经调制”的人工生物体可以再往前一步。例如 Rovio 电量下降battery ↓ ↓ internal state ↓ neuromodulation ↓ behavior changes不是if battery 20: go_home()而是energy state ↓ 改变 neural gain ↓ 改变整个 connectome 的动力学 ↓ 行为自然发生变化于是“回充电”不是一个程序员写进去的动作。而是身体状态改变了神经系统因此行为改变。
上一篇/下一篇内容由系统自动关联 返回资讯列表 →