በልበ ሙሉነት ባለብዙ-ደረጃ የሮቦቲክስ ስራዎችን ያዘጋጁ
አንድን ተግባር በግልፅ መግለጽ ከቻሉ፣ ሮቦትዎ ሊያከናውነው ይችላል። ይህ የ Gemini Robotics 1.5 እና ER 1.5 ተስፋ ነው - ከፍተኛ ደረጃ ያለውን ሀሳብ በአካላዊው ዓለም ወደ ሚታመኑ፣ ባለብዙ-ደረጃ የድርጊት እቅዶች የሚቀይሩ፣ ለመሠረታዊ እና አካላዊ አስተሳሰብ የተገነቡ ሞዴሎች ናቸው። ከዚህ በታች ለእውነተኛ ዓለም ሮቦቲክስ ጠንካራ፣ ባለብዙ-ደረጃ የስራ ፍሰቶችን እንዲያዘጋጁ የሚያግዙ በዓላማ የተደራጁ 25 የተረጋገጡ የትዕዛዝ አብነቶች አሉ።
የቅጥ ማስታወሻ: ተግባራዊ እና መፍትሄን ያማከለ። እያንዳንዱ አብነት አወቃቀሩን፣ የሚመከሩ የጥንቃቄ መስመሮችን እና አማራጭ ተለዋዋጮችን ያካትታል። እንደ {OBJECT}፣ {LOCATION}፣ {POLICY} እና {CONSTRAINTS} ያሉ ቦታዎችን በእርስዎ ሁኔታ ይተኩ።
እነዚህን አብነቶች እንዴት መጠቀም እንደሚቻል
- በከፍተኛ ደረጃ ግብ ይጀምሩ፣ ከዚያም በዳሳሽ ፍተሻዎች እና የማገገሚያ ባህሪዎች ደረጃዎችን ይዘርዝሩ።
- ገደቦችን ያካትቱ: ደህንነት፣ ፍጥነት/ትክክለኛነት፣ የአካባቢ ግምቶች እና የመውደቅ ስልቶች።
- የግቤት ምላሽ ቻናሎችን ያቅርቡ (ለምሳሌ የእይታ ስኬት መመዘኛዎች፣ የኃይል/የጉልበት ገደቦች)።
- ደካማ ከሆኑ ደረጃ-በደረጃ ጥቃቅን አስተዳደር ይልቅ የተገለጹ ግቦችን ይምረጡ፤ ሞዴሉ እንዲያቅድ እና እንዲስማማ ያድርጉ።
በነገራችን ላይ፣ ጥያቄዎችን፣ ምዝግቦችን እና ድግግሞሾችን በመላው ቡድን ውስጥ የምታስተባብሩ ከሆነ፣ እንደ Sider.AI ያለ የጎን ፓነል ረዳት ሰነዶችዎን እና ኮድዎን ጎን ለጎን ጥያቄዎችን ለመቅረጽ፣ ለመፈተሽ እና ለማጣራት ሊረዳዎ ይችላል፣ ይህም የሮቦቲክ ችሎታዎችዎን እና ሂደቶችዎን ሲደግሙ ሁኔታውን እንዲታይ ያደርጋል። ክፍል A — እቅድ ማውጣት እና መመስረት (መሰረቶች)
- የስራ እቅድ (ግብ → ገደቦች → እቅድ → ፍተሻዎች)
- ጥያቄ
"ተንቀሳቃሽ መቆጣጠሪያ እየተጠቀሙ ነው።
ግብ: {GOAL}።
አካባቢ: {DESCRIPTION}; የታወቁ ነገሮች: {OBJECT_LIST}።
ገደቦች: {CONSTRAINTS}።
ውጤት: 1) ማረጋገጥ ያለባቸው ግምቶች፣ 2) በቅደም ተከተል የተቀመጠ እቅድ ከእይታ/የድርጊት እርምጃዎች ጋር፣ 3) በእያንዳንዱ እርምጃ የደህንነት ፍተሻዎች፣ 4) የማገገሚያ ባህሪዎች፣ 5) የማቋረጫ ሁኔታዎች እና የስኬት መለኪያዎች።"
- መቼ መጠቀም እንደሚቻል: ከፍተኛ ደረጃ ያለውን ግብ ወደ ተግባራዊ እቅድ በጠባቂዎች ሲቀይሩ።
- በእይታ ቀዳሚነት ያለው እቅድ እርግጠኛ ያለመሆንን መለካት ጋር
- ጥያቄ
"ከመተግበሩ በፊት፣ የክትትል ሞዴል ይገንቡ። ለ {GOAL} የሚያስፈልጉ ምልከታዎችን፣ የመተማመን ደረጃዎችን እና የጠርዝ ሁኔታዎችን ይለዩ። የ JSON ውጤት:
{observations:. ሰፋ ያለ ጥያቄ እና ወኪል ቅጦች ለማግኘት፣ የ Google's Gemini የምግብ አዘገጃጀት እና የወኪል መመሪያዎች ጠቃሚ ማጣቀሻዎች ናቸው።
ምሳሌ: ለማእድ ቤት ስራ መጨረሻ-ለ-መጨረሻ ጥያቄ
ግብ: ቀላል ሰላጣ አዘጋጅቶ ለመውሰድ ማሸግ።
ጥያቄ
"የ 7-DOF ተንቀሳቃሽ መቆጣጠሪያን በትይዩ መያዣ እና የመሳሪያ መቀየሪያ እየተቆጣጠሩ ነው።
ግብ: ሰላጣን ከሰላጣ ቅጠል፣ ቲማቲም፣ ኪያር እና ድሬሲንግ ጋር አዘጋጅቶ ማሸግ።
አካባቢ: የወጥ ቤት ደሴት ከመታጠቢያ ገንዳ፣ መቁረጫ ሰሌዳ፣ ሼፍ ቢላዋ፣ ሰላጣ ሳህን፣ የምሳ መያዣ ጋር። ሰዎች ሊኖሩ ይችላሉ።
ገደቦች: ከሰው ልጆች በ 0.5 ሜትር ርቀት ውስጥ ምንም ምላጭ የለም። ቢላዋ ጫፍ በሚቆረጥበት ጊዜ ካልሆነ በስተቀር ሁልጊዜ መሸፈን አለበት። የመያዣ ኃይል ≤ 15 N. ቁራጭ ውፍረት 3–4 ሚሜ. ንጣፎች ተበክለዋል።
ውጤት:
- ማረጋገጥ ያለባቸው ግምቶች (መሳሪያዎች፣ ንጥረ ነገሮች፣ መብራት)፣
- በደረጃዎች እቅድ (መታጠብ → ዝግጅት → መቁረጥ → መሰብሰብ → ማሸግ)፣
- በእያንዳንዱ ደረጃ የደህንነት ፍተሻዎች (እይታ/ጉልበት)፣
- የስህተት ማገገም (ዳግም መያዝ፣ ዳግም መገኛ፣ ዳግም ማጽዳት)፣
- የስኬት መለኪያዎች (የተስተካከሉ ቁርጥራጮች የእይታ ማረጋገጫ፤ መያዣው የታሸገ፤ አካባቢው ንጹህ ነው)፣
- ከዚህ በፊት/በኋላ የምዝግብ ማስታወሻ ንድፍ እና ፎቶዎች።"
የሚያገኙት: የእይታ በሮች፣ የመሳሪያ አያያዝ ህጎች እና ግልጽ የስኬት መመዘኛዎች ያሉት የረጅም ጊዜ፣ የደህንነት ግንዛቤ ያለው ሂደት።
የመዝጊያ ሀሳቦች
ታላላቅ የሮቦቲክስ ጥያቄዎች ከአቪዬሽን የመጡ የፍተሻ ዝርዝሮች ይመስላሉ፡ ግልጽ ግቦች፣ ሊለኩ የሚችሉ በሮች እና የታቀዱ ማምለጫዎች። እነዚህን 25 አብነቶች እንደ ግንባታ ብሎኮች ይጠቀሙ፣ ከዚያ ከእውነተኛ ሩጫዎች ምዝግቦች ጋር ያሻሽሏቸው። Gemini Robotics 1.5 እና ER 1.5 ወኪል እቅድ ማውጣትን ወደ አካላዊው ዓለም ማምጣታቸውን ሲቀጥሉ፣ ጥያቄዎችዎ በጥሩ ማሳያ እና በአስተማማኝ የዕለት ተዕለት ስራዎች መካከል ያለው ልዩነት ናቸው።
FAQ
Q1:Gemini Robotics 1.5 / ER 1.5 ለምን ጥቅም ላይ ይውላል?
እነሱ እንደ ዕቃዎችን መምረጥ፣ ምግብ ማዘጋጀት ወይም የቦታ ስራዎች ባሉ ውስብስብ፣ ባለብዙ-ደረጃ ስራዎች ውስጥ ሮቦቶች እንዲገነዘቡ፣ እንዲያቅዱ እና እንዲሰሩ የሚያስችሏቸው አካላዊ የአስተሳሰብ ሞዴሎች ናቸው። እነሱ በመሠረታዊነት፣ በደህንነት እና በተለዋዋጭ እቅድ ላይ ያተኩራሉ።
Q2:ለባለብዙ-ደረጃ የሮቦቲክስ ስራዎች ጥያቄዎችን እንዴት እጽፋለሁ?
ግቡን፣ አካባቢውን እና ገደቦችን ይግለጹ። ማረጋገጥ ያለባቸውን ግምቶች፣ የደህንነት ፍተሻዎች፣ የማገገሚያ ባህሪያት እና የስኬት መለኪያዎች ይጠይቁ። መመሪያዎችን እና ገደቦችን በሚያስፈጽሙበት ጊዜ ሞዴሉ ደረጃዎችን እንዲያቅድ ያድርጉ።
Q3:እነዚህ ጥያቄዎች እርግጠኛ ያለመሆንን እና ስህተቶችን መቋቋም ይችላሉ?
አዎ። የመተማመን ደረጃዎችን፣ የስህተት ፊርማዎችን እና የመውደቅ ቅርንጫፎችን ያካትቱ። በስም፣ በዝቅተኛ መተማመን እና በውድቀት መንገዶች የስቴት ማሽኖችን መንደፍ ባልተዋቀሩ ቅንብሮች ውስጥ አስተማማኝነትን ያሻሽላል።
Q4:ትክክለኛ መንገዶችን መግለጽ አለብኝ?
ብዙውን ጊዜ አይሆንም። ከፍተኛ ደረጃ ያላቸውን ዓላማዎች፣ ግልጽ ገደቦችን (ኃይል፣ ክፍተት፣ ፍጥነት) እና የማረጋገጫ በሮችን ያቅርቡ። ሞዴሉ ከእነዚያ ገደቦች ጋር የሚጣጣሙ መንገዶችን ማመንጨት ይችላል።
Q5:ኦፊሴላዊ ሰነዶችን እና ምሳሌዎችን የት ማግኘት እችላለሁ?
የ Google DeepMind's Gemini Robotics ገጾችን እና የ ER 1.5 የገንቢ አጠቃላይ እይታን፣ በተጨማሪም ሰፋ ያለ ጥያቄ እና ወኪል ቅጦች ለማግኘት የ Gemini የምግብ አዘገጃጀት እና የወኪል መመሪያዎችን ይመልከቱ።
