విశ్వాసంతో బహుళ-దశల రోబోటిక్ పనులను కంపోజ్ చేయండి
మీరు ఒక పనిని స్పష్టంగా వివరించగలిగితే, మీ రోబోట్ దానిని చేసే అవకాశం ఉంది. అది Gemini Robotics 1.5 మరియు ER 1.5 యొక్క వాగ్దానం—భౌతిక ప్రపంచంలో నమ్మదగిన, బహుళ-దశల కార్యాచరణ ప్రణాళికలుగా ఉన్నత-స్థాయి ఉద్దేశాన్ని మార్చేందుకు నిర్మించబడిన ఆధారిత, వ్యక్తమైన రీజనింగ్ నమూనాలు. వాస్తవ-ప్రపంచ రోబోటిక్స్ కోసం దృఢమైన, బహుళ-దశల వర్క్ఫ్లోలను కంపోజ్ చేయడానికి మీకు సహాయపడే 25 నిరూపితమైన ప్రాంప్ట్ టెంప్లేట్లు—ఉద్దేశం ప్రకారం నిర్వహించబడతాయి—క్రింద ఉన్నాయి.
శైలి గమనిక: ఆచరణాత్మక & పరిష్కారం-ఆధారితమైనది. ప్రతి టెంప్లేట్లో నిర్మాణం, సిఫార్సు చేయబడిన గార్డ్రైల్స్ మరియు ఐచ్ఛిక వేరియబుల్స్ ఉన్నాయి. {OBJECT}, {LOCATION}, {POLICY}, మరియు {CONSTRAINTS} వంటి ప్లేస్హోల్డర్లను మీ సందర్భంతో భర్తీ చేయండి.
ఈ టెంప్లేట్లను ఎలా ఉపయోగించాలి
- ఉన్నత-స్థాయి లక్ష్యంతో ప్రారంభించండి, ఆపై సెన్సార్ తనిఖీలు మరియు రికవరీ ప్రవర్తనతో దశలను లెక్కించండి.
- నియంత్రణలను చేర్చండి: భద్రత, వేగం/ఖచ్చితత్వం, పర్యావరణ ఊహలు మరియు ఫాల్బ్యాక్ వ్యూహాలు.
- స్టేట్ ఫీడ్బ్యాక్ ఛానెల్లను అందించండి (ఉదా., విజన్ సక్సెస్ ప్రమాణాలు, ఫోర్స్/టార్క్ థ్రెషోల్డ్లు).
- దశల వారీ సూక్ష్మ నిర్వహణ కంటే డిక్లరేటివ్ లక్ష్యాలను ఇష్టపడండి; మోడల్ ప్లాన్ చేయడానికి మరియు స్వీకరించడానికి అనుమతించండి.
మార్గం ద్వారా, మీరు ఒక బృందం అంతటా ప్రాంప్ట్లు, లాగ్లు మరియు పునరావృత్తులను సమన్వయం చేస్తే, Sider.AI వంటి సైడ్ ప్యానెల్ అసిస్టెంట్ మీ డాక్స్ మరియు కోడ్తో పాటు ప్రాంప్ట్లను రూపొందించడానికి, పరీక్షించడానికి మరియు మెరుగుపరచడానికి మీకు సహాయపడుతుంది, మీరు మీ రోబోటిక్ నైపుణ్యాలు మరియు విధానాలపై పునరావృతం చేస్తున్నప్పుడు సందర్భాన్ని కనిపించేలా ఉంచుతుంది. విభాగం A — ప్రణాళిక & గ్రౌండింగ్ (పునాదులు)
- టాస్క్ బ్లూప్రింట్ (లక్ష్యం → నియంత్రణలు → ప్రణాళిక → తనిఖీలు)
- Prompt
"మీరు మొబైల్ మానిప్యులేటర్ను నియంత్రిస్తున్నారు.
లక్ష్యం: {GOAL}.
పర్యావరణం: {DESCRIPTION}; తెలిసిన వస్తువులు: {OBJECT_LIST}.
నియంత్రణలు: {CONSTRAINTS}.
Output: 1) ధృవీకరించడానికి ఊహలు, 2) అవగాహన/చర్య దశలతో ఆర్డర్ చేసిన ప్రణాళిక, 3) ప్రతి దశకు భద్రతా తనిఖీలు, 4) రికవరీ ప్రవర్తనలు, 5) ముగింపు పరిస్థితులు మరియు విజయ కొలమానాలు."
- ఎప్పుడు ఉపయోగించాలి: ఉన్నత-స్థాయి లక్ష్యాన్ని గార్డ్రైల్స్తో కూడిన కార్యాచరణ ప్రణాళికగా మార్చేటప్పుడు.
- ఖచ్చితత్వం నిర్ధారణతో అవగాహన-మొదటి ప్రణాళిక
- Prompt
"చర్య తీసుకునే ముందు, పరిశీలన నమూనాను రూపొందించండి. {GOAL} కోసం అవసరమైన పరిశీలనలు, విశ్వాస పరిమితులు మరియు ఎడ్జ్ కేసులను గుర్తించండి. JSON అవుట్పుట్ చేయండి:
{ observations:. విస్తృత ప్రాంప్ట్ మరియు ఏజెంట్ నమూనాల కోసం, Google యొక్క Gemini కుక్బుక్ మరియు ఏజెంట్ గైడ్లు సహాయకరమైన సూచనలు.
ఉదాహరణ: కిచెన్ పని కోసం ఎండ్-టు-ఎండ్ ప్రాంప్ట్
లక్ష్యం: ఒక సాధారణ సలాడ్ను సిద్ధం చేసి, దానిని టూ-గో కోసం ప్యాక్ చేయండి.
Prompt
"మీరు సమాంతర గ్రిప్పర్ మరియు టూల్-ఛేంజర్తో 7-DOF మొబైల్ మానిప్యులేటర్ను నియంత్రిస్తున్నారు.
లక్ష్యం: పాలకూర, టమోటా, దోసకాయ మరియు డ్రెస్సింగ్తో సలాడ్ను సిద్ధం చేసి ప్యాక్ చేయండి.
పర్యావరణం: సింక్, కట్టింగ్ బోర్డ్, చెఫ్ నైఫ్, సలాడ్ బౌల్, లంచ్ కంటైనర్తో కిచెన్ ద్వీపం. మానవులు ఉండవచ్చు.
నియంత్రణలు: మానవులకు 0.5 మీటర్ల లోపల బ్లేడ్లు ఉండకూడదు. కత్తి అంచు కత్తిరించే వరకు ఎల్లప్పుడూ తొడుగులో ఉండాలి. గ్రిప్పర్ ఫోర్స్ ≤ 15 N. ముక్క మందం 3–4 మిమీ. ఉపరితలాలు శుభ్రం చేయబడతాయి.
Output:
- ధృవీకరించడానికి ఊహలు (పరికరాలు, పదార్థాలు, లైటింగ్),
- దశల్లో ప్రణాళిక (కడగడం → తయారు చేయడం → కత్తిరించడం → కలపడం → ప్యాక్ చేయడం),
- ప్రతి-దశ భద్రతా తనిఖీలు (దృష్టి/బలం),
- లోపం పునరుద్ధరణ (తిరిగి పట్టుకోవడం, తిరిగి గుర్తించడం, తిరిగి శుభ్రం చేయడం),
- విజయ కొలమానాలు (సమాన ముక్కల దృశ్య నిర్ధారణ; కంటైనర్ మూసివేయబడింది; ప్రాంతం శుభ్రంగా ఉంది),
- లాగ్ స్కీమా మరియు ముందు/తర్వాత ఫోటోలు."
మీకు ఏమి లభిస్తుంది: అవగాహన గేట్లు, టూల్ హ్యాండ్లింగ్ నియమాలు మరియు స్పష్టమైన విజయ ప్రమాణాలతో కూడిన సుదీర్ఘ-హారిజోన్, భద్రత-గుర్తించే విధానం.
ముగింపు ఆలోచనలు
గొప్ప రోబోటిక్స్ ప్రాంప్ట్లు విమానయానం నుండి వచ్చిన చెక్లిస్ట్ల వలె చదవబడతాయి: స్పష్టమైన లక్ష్యాలు, కొలవగల గేట్లు మరియు ప్రణాళికాబద్ధమైన తప్పించుకునే మార్గాలు. ఈ 25 టెంప్లేట్లను బిల్డింగ్ బ్లాక్లుగా ఉపయోగించండి, ఆపై వాటిని నిజమైన రన్ల నుండి లాగ్లతో మెరుగుపరచండి. Gemini Robotics 1.5 మరియు ER 1.5 ఏజెంటిక్ ప్రణాళికను భౌతిక ప్రపంచంలోకి తీసుకురావడం కొనసాగిస్తున్నందున, మీ ప్రాంప్ట్లు మంచి డెమో మరియు నమ్మదగిన రోజువారీ కార్యకలాపాల మధ్య వ్యత్యాసాన్ని కలిగిస్తాయి.
FAQ
Q1:Gemini Robotics 1.5 / ER 1.5 దేనికి ఉపయోగించబడతాయి?
అవి శరీరధారి రీజనింగ్ మోడల్లు, ఇవి వస్తువులను ఎంచుకోవడం, ఆహారాన్ని సిద్ధం చేయడం లేదా సౌకర్యాల కార్యకలాపాలు వంటి భౌతిక ప్రపంచంలో సంక్లిష్టమైన, బహుళ-దశల పనులలో రోబోట్లు గ్రహించడానికి, ప్లాన్ చేయడానికి మరియు చర్య తీసుకోవడానికి అనుమతిస్తాయి. అవి గ్రౌండింగ్, భద్రత మరియు అనుకూల ప్రణాళికకు ప్రాధాన్యతనిస్తాయి.
Q2:బహుళ-దశల రోబోటిక్ పనుల కోసం నేను ప్రాంప్ట్లను ఎలా వ్రాయాలి?
లక్ష్యం, పర్యావరణం మరియు నియంత్రణలను పేర్కొనండి. ధృవీకరించడానికి ఊహలు, భద్రతా తనిఖీలు, రికవరీ ప్రవర్తనలు మరియు విజయ కొలమానాలను అడగండి. మీరు విధానాలు మరియు పరిమితులను అమలు చేస్తున్నప్పుడు మోడల్ దశలను ప్లాన్ చేయడానికి అనుమతించండి.
Q3:ఈ ప్రాంప్ట్లు అనిశ్చితి మరియు లోపాలను నిర్వహించగలవా?
అవును. విశ్వాస పరిమితులు, లోపం సంతకాలు మరియు ఫాల్బ్యాక్ బ్రాంచ్లను చేర్చండి. నామమాత్రపు, తక్కువ-విశ్వాసం మరియు వైఫల్య మార్గాలతో స్టేట్ మెషీన్లను రూపొందించడం నిర్మాణాత్మకం కాని సెట్టింగ్లలో విశ్వసనీయతను మెరుగుపరుస్తుంది.
Q4:నేను ఖచ్చితమైన పథాలను పేర్కొనవలసిన అవసరం ఉందా?
సాధారణంగా అవసరం లేదు. ఉన్నత-స్థాయి లక్ష్యాలు, స్పష్టమైన నియంత్రణలు (బలం, క్లియరెన్స్, వేగం) మరియు ధృవీకరణ గేట్లను అందించండి. మోడల్ ఆ నియంత్రణలకు అనుగుణంగా పథాలను రూపొందించగలదు.
Q5:నేను అధికారిక డాక్స్ మరియు ఉదాహరణలను ఎక్కడ కనుగొనగలను?
Google DeepMind యొక్క Gemini Robotics పేజీలు మరియు ER 1.5 కోసం డెవలపర్ అవలోకనం, అలాగే విస్తృత ప్రాంప్టింగ్ మరియు ఏజెంట్ నమూనాల కోసం Gemini కుక్బుక్ మరియు ఏజెంట్ గైడ్లను చూడండి.