What is Gemini Robotics 1.5 / ER 1.5 used for?

They are embodied reasoning models that let robots perceive, plan, and act across complex, multi‑step tasks in the physical world—like picking items, preparing food, or facility operations. They emphasize grounding, safety, and adaptive planning.

How do I write prompts for multi‑step robotic tasks?

State the goal, environment, and constraints. Ask for assumptions to verify, safety checks, recovery behaviors, and success metrics. Let the model plan steps while you enforce policies and thresholds.

Can these prompts handle uncertainty and errors?

Yes. Include confidence thresholds, error signatures, and fallback branches. Designing state machines with nominal, low‑confidence, and failure paths improves reliability in unstructured settings.

Do I need to specify exact trajectories?

Usually no. Provide high‑level objectives, clear constraints (force, clearance, speed), and verification gates. The model can generate trajectories consistent with those constraints.

Where can I find official docs and examples?

See Google DeepMind’s Gemini Robotics pages and the developer overview for ER 1.5, plus the Gemini cookbook and agent guides for broader prompting and agent patterns.

自信地编写多步骤机器人任务

如果你能清晰地描述一项任务，你的机器人很可能就能完成它。这就是 Gemini Robotics 1.5 和 ER 1.5 所承诺的——这些模型专为扎实、具身推理而构建，可以将高级意图转化为物理世界中可靠的多步骤行动计划。以下是 25 个经过验证的提示模板——按意图组织——可帮助你为真实世界的机器人技术编写强大的多步骤工作流程。

样式说明：实用且面向解决方案。每个模板都包含结构、推荐的保护措施和可选变量。将 {OBJECT}、{LOCATION}、{POLICY} 和 {CONSTRAINTS} 等占位符替换为你的上下文。

如何使用这些模板

从一个高层次的目标开始，然后列举步骤，包括传感器检查和恢复行为。

包括约束条件：安全、速度/精度、环境假设和后备策略。

提供状态反馈通道（例如，视觉成功标准、力/扭矩阈值）。

首选声明性目标，而不是脆弱的逐步微管理；让模型进行计划和适应。

顺便说一句，如果你在团队中协调提示、日志和迭代，像 Sider.AI 这样的侧面板助手可以帮助你在文档和代码旁边起草、测试和改进提示，在迭代机器人技能和程序时保持上下文可见。

A 部分 — 规划与扎实（基础）

任务蓝图（目标 → 约束 → 计划 → 检查）

Prompt “你正在控制一个移动操作臂。目标：{GOAL}。环境：{DESCRIPTION}；已知物体：{OBJECT_LIST}。约束：{CONSTRAINTS}。输出：1) 验证的假设，2) 带有感知/行动步骤的有序计划，3) 每个步骤的安全检查，4) 恢复行为，5) 终止条件和成功指标。”

使用场景：将高层次目标转换为带有保护措施的运营计划。

感知优先计划与不确定性量化

Prompt “在行动之前，建立一个观察模型。确定 {GOAL} 所需的观察、置信度阈值和边缘情况。输出 JSON： { observations:. 对于更广泛的提示和代理模式，Google 的 Gemini cookbook 和代理指南是有用的参考资料。

示例：厨房任务的端到端提示

目标：准备一份简单的沙拉并打包带走。

Prompt “你正在控制一个带有平行夹爪和工具更换器的 7 自由度移动操作臂。目标：准备并打包一份含有生菜、番茄、黄瓜和调味品的沙拉。环境：带有水槽、砧板、厨师刀、沙拉碗、午餐容器的厨房岛台。可能有人在场。约束：刀刃与人之间的距离不得小于 0.5 米。除非切割，否则刀刃始终保持在鞘中。夹爪力 ≤ 15 N。切片厚度 3–4 毫米。表面已消毒。输出：