Pernahkah anda terfikir untuk menggandakan diri anda untuk melakukan klik yang membosankan sementara anda mengendalikan bahagian yang menarik? Saya telah mencuba sesuatu yang hampir serupa. Ia dipanggil Gemini 2.5 “Computer Use” Google, dan ia adalah AI yang bukan sahaja menulis perkataan—malah ia menggerakkan tetikus, menatal, menaip dalam ruangan, dan berfungsi di dalam tetingkap pelayar sebenar seperti pembantu yang sangat tekun dan sangat literal. Bayangkan “pelatih yang mengikut arahan tepat seperti yang tertulis,” tanpa rehat kopi.
Dalam ulasan ini, saya akan menunjukkan kepada anda perkara yang Gemini 2.5 Computer Use lakukan dengan baik, di mana ia tersangkut, bagaimana ia dibandingkan dengan ejen AI yang lain, dan sama ada manusia biasa (bukan hanya pembangun) patut mencubanya. Sepanjang perjalanan, saya akan menyelitkan petua praktikal, beberapa perkara yang perlu diperhatikan, dan dos yang adil bagi keraguan yang sihat. Pakai tali pinggang keledar anda.
Apakah Gemini 2.5 Computer Use, Sebenarnya?
Bayangkan memberitahu pembantu, “Buka pelayar saya. Pergi ke laman web syarikat penerbangan itu. Klik Daftar Masuk. Tampal kod pengesahan saya. Sekarang tapis hanya untuk tempat duduk lorong.” Itulah helah magik: Gemini 2.5 Computer Use boleh mengendalikan pelayar seperti yang anda lakukan—mengklik butang, menaip ke dalam borang, mengikut label pada skrin—terutamanya apabila tidak ada API yang kemas untuk mendapatkan data atau mencetuskan tindakan. Ia adalah ejen yang bertindak, bukan hanya berbual. Google meletakkan ini sebagai model yang dioptimumkan untuk tugas web (dan, semakin meningkat, aliran gaya mudah alih), membolehkannya mengakses maklumat dan melakukan tugas di alam liar di mana banyak aplikasi adalah “API-averse” dan segala-galanya berada di sebalik JavaScript, kuki, dan CAPTCHA.
Berita besar: Google mengatakan rasa Computer Use ini tersedia melalui API dan ditala khusus untuk pelayar dan tugas UI yang kompleks. Penguji pihak ketiga telah melaporkan prestasi yang kukuh dalam penilaian berasaskan pelayar, dalam beberapa kes mengatasi pesaing dalam ketepatan, kelajuan, dan juga kos dalam penanda aras tertentu (perbatuan anda mungkin berbeza, sudah tentu). Liputan bebas juga menyatakan bahawa Google telah menyasarkan ini pada kebolehpercayaan aliran web terlebih dahulu, dengan beberapa kekuatan tugas Android yang baru muncul yang ditunjukkan dalam penanda aras gaya “AndroidWorld” dalaman.
Mengapa Ini Penting (Sehari dalam Kehidupan)
Mari bayangkan internet sebagai bangunan pejabat yang besar dan cerewet. API adalah seperti rakan sekerja yang mesra yang menyerahkan data kepada anda dengan kemas. Halaman web? Itu adalah kabinet berkunci, laci berdecit, dan sampul surat yang tertutup rapat yang masih perlu anda buka secara fizikal. Computer Use ialah pelatih yang boleh berjalan di sepanjang dewan, membuka kabinet, dan menyalin borang dengan betul—perlahan-lahan, berhati-hati, satu klik pada satu masa.
Jika anda seorang pekerja bebas yang menyerahkan lembaran masa mingguan di beberapa portal yang berliku-liku; seorang penyelidik yang mengisi borang yang sama di 20 laman web kerajaan; seorang ibu bapa yang mengklik melalui portal dalam talian sekolah untuk mengemas kini kenalan kecemasan—ini adalah jenis kerja membosankan yang boleh anda serahkan kepada bot yang berhati-hati dan berfikiran literal.
Begini Rupanya untuk Digunakan
- Persediaan: Dalam dunia pembangun, anda memulakan model melalui API, memberikan arahan, dan menentukan persekitaran (pelayar terkawal). Sebaik sahaja ia berjalan, anda “menggesa” ejen dengan tugas. Anda akan melihatnya membuka halaman, mengklik butang, dan mengisi ruangan. Di bahagian pengguna—jika aplikasi pilihan anda mengintegrasikannya—anda akan mendapat sesuatu seperti: “Terangkan tugas yang anda mahu dilakukan,” kemudian perhatikan semasa kursor mula berfungsi.
- Suasana: Fikirkan penunggang basikal yang sabar, bukan Formula 1. Ia mengambil langkah yang disengajakan dan boleh dilihat. Itu boleh meyakinkan (anda melihat dengan tepat apa yang ia lakukan) dan juga agak perlahan berbanding dengan manusia yang menundukkan kepala dan mengklik seperti tupai yang berkafein. Tetapi untuk tugas yang berterusan, berulang, dan terdedah kepada ralat? Perlahan dan mantap menang.
- Pagar keselamatan: Ia tidak akan menjadi nakal. Ejen ini dikawal dengan ketat dan terikat dengan kandungan dan penapis keselamatan, terutamanya dalam konteks perusahaan melalui Vertex AI. Mereka berhati-hati dengan tindakan sensitif, dan mereka lebih suka arahan yang jelas daripada “getaran.” Jika anda samar-samar, ia meminta penjelasan.
Perkara yang Ia Bagus
- Mengisi borang di laman web yang degil: Apa-apa sahaja yang tidak mempunyai API yang betul tetapi mempunyai label yang konsisten adalah wilayah utama.
- Tugas web berbilang langkah: Log masuk (dalam konteks yang dibenarkan), menavigasi menu bersarang, menapis hasil, mengeksport CSV, dan memuat naik atau memuat turun fail—jika UI laman web stabil.
- Tugas berulang: Aliran kerja mingguan, penamaan semula pukal melalui UI web, menyenaraikan item, menarik data daripada papan pemuka yang anda dibenarkan untuk melihat.
- Urutan yang panjang dan membosankan: Perkara yang membuatkan anda berkhayal. Ejen tidak berkhayal.
Di Mana Ia Bergelut
- Halangan CAPTCHA dan MFA: Anda masih akan menjadi orang dewasa di dalam bilik untuk saat-saat “buktikan anda manusia”.
- Perubahan UI: Jika teks butang atau susun atur laman web berubah, ejen mungkin memerlukan dorongan atau gesaan semula.
- Syaitan kelajuan: Manusia yang pantas kadangkala boleh melalui borang dengan lebih cepat. Kemenangan di sini ialah ketekalan dan tiada rungutan.
- Gesaan yang samar-samar: “Cari yang bagus untuk saya” bukanlah rancangan. Sebutkan kriteria.
Berbanding dengan Pesaing
- Terhadap model sembang tradisional (hanya teks): Computer Use melukis garis di dalam pasir dengan bertindak secara langsung di dalam pelayar. Ia bukan sahaja memberitahu anda cara melakukannya; ia melakukannya.
- Terhadap model agentic yang lain: Laporan dan ujian awal mencadangkan Gemini 2.5 Computer Use bersaing dengan kukuh dalam tugas pelayar sebenar dan sedang diposisikan sebagai dioptimumkan untuk interaksi web. Liputan daripada akhbar teknologi mengesahkan padanan “menggunakan pelayar web seperti yang anda lakukan”, dan menekankan tumpuan pada navigasi UI dunia sebenar. Beberapa organisasi penanda aras pihak ketiga mengatakan ia mendahului dalam ketepatan dan kelajuan dalam persediaan mereka, walaupun, seperti biasa, penanda aras adalah seperti horoskop—seronok, kadangkala tepat, bukan pengganti untuk ujian anda sendiri.
- Web vs Android: Laporan awam membingkaikannya sebagai dioptimumkan terutamanya untuk web, dengan keupayaan tugas Android yang menjanjikan muncul dalam ujian. Jika anda mengimpikan ia menjalankan keseluruhan telefon anda secara automatik, redakan jangkaan—buat masa ini.
Kisah Pantas: Pertukaran Penerbangan
Saya memberinya sakit kepala klasik: “Buka Syarikat Penerbangan X. Log masuk. Tarik perjalanan saya yang akan datang. Tukar penerbangan pulang ke hari Sabtu. Pilih tempat duduk lorong. Guna batu. Sahkan jika yuran di bawah $100; jika tidak, berhenti dan laporkan.” Menontonnya terasa seperti melatih pembantu baharu. Ia menavigasi ke laman web, mencari “Perjalanan Saya,” mencari nombor pengesahan yang betul, dan… berhenti seketika di carta tempat duduk. Labelnya tidak begitu standard. Ia meminta penjelasan: “Tempat duduk lorong ditandakan dengan ‘A’, sahkan?” Saya mengesahkan. Ia meneruskan—dan membawa saya ke halaman semakan. Yuran itu ialah $149. Ia berhenti, seperti yang diarahkan, meringkaskan yuran pertukaran, dan menyerahkan kawalan kembali kepada saya. Tidak begitu magik. Sangat berguna.
Privasi dan Keselamatan
Dokumen rasmi Google dan laluan perusahaan menekankan penapis keselamatan dan kandungan yang boleh dikonfigurasikan—pada asasnya suis “jangan klik butang merah” yang digemari oleh jabatan IT. Ejen berjalan di dalam persekitaran terkawal, dan anda boleh mengehadkan perkara yang boleh dilihat atau dilakukannya. Walau bagaimanapun: Jangan serahkan kunci kepada seluruh kerajaan digital anda kepada mana-mana ejen. Kompromi praktikal ialah menskopkan kelayakan (satu tugas, satu akaun), menggunakan log masuk buang atau keistimewaan terendah untuk tugas berisiko tinggi, dan meminta ejen menunjukkan kerjanya sebelum ia mengklik “Sahkan.”
Ketersediaan dan Akses
Google mengatakan Gemini 2.5 Computer Use tersedia melalui API, dengan tumpuan pada pembangun dan platform yang ingin membenamkan kuasa “melakukan sesuatu di dalam pelayar” ini ke dalam aplikasi mereka. Akses menghadap pengguna bergantung kepada siapa yang mengintegrasikannya—fikirkan alatan produktiviti, perkhidmatan seperti RPA, atau bar sisi AI yang boleh memulakan sesi pelayar dengan selamat bagi pihak anda.
Rentak Dunia Sebenar: Seberapa Pantas Ia?
Jika anda mengidamkan kepuasan segera, ketahui ini: ia berkelakuan seperti pelatih yang berhati-hati. Setiap langkah boleh dilihat dan disahkan, yang merupakan sebahagian daripada maksudnya. Ia kurang tentang mencukur milisaat dan lebih tentang menutup jurang “tiada API, tiada masalah”. Dalam aliran kerja yang lebih panjang, kemantapan menjadi kuasa besar. Kurang ralat. Kurang kerja semula. Dan tidak seperti saya, ia tidak pernah bertukar tab untuk menyemak cuaca.
Petua untuk Hasil Terbaik
- Berterus terang: Berikan arahan langkah demi langkah, kriteria kejayaan, dan perkara yang perlu dilakukan jika sesuatu yang tidak dijangka berlaku (contohnya, “Jika yuran melebihi $100, berhenti dan ringkaskan”).
- Gunakan laman web yang stabil: Jika susun atur laman web berubah setiap hari, anda akan menghabiskan masa untuk menggesa semula. Mulakan dengan UI yang konsisten.
- Pastikan kelayakan diskopkan: Minimakan risiko dengan akaun keistimewaan terendah dan batalkan token selepas tugas.
- Minta pratonton: Minta ia meringkaskan langkah atau mengambil tangkapan skrin sebelum melakukan tindakan yang tidak boleh dipulihkan.
- Ulang: Anggap gesaan seperti resipi. Ubah suai bahan, bakar lagi.
Siapa yang Patut Mencubanya
- Orang operasi yang lemas dalam portal: Jika tugas anda ialah “melakukan 28 klik yang sama di 12 laman web vendor,” ini adalah terapi.
- Pasukan kecil tanpa sumber kejuruteraan: Tiada API? Tiada masalah. Biarkan ejen memandu pelayar.
- Pengguna hebat dan penggemar RPA: Jika anda telah menggunakan automasi proses robotik, ini adalah seperti RPA yang “membaca” halaman dalam bahasa semula jadi.
Ke Mana Ia Boleh Pergi Seterusnya
- Ketahanan yang lebih baik: Cara yang lebih bijak untuk menyesuaikan diri apabila halaman berubah.
- Pemulihan ralat yang lebih bijak: “Jika modal ini muncul, cuba laluan B; jika log masuk gagal, gesa pengguna untuk MFA.”
- Aliran API + UI hibrid: Gunakan API apabila tersedia, kembali kepada UI apabila tidak. Terbaik dari kedua-dua dunia.
Jika anda tinggal di dalam pelayar anda, bar sisi AI yang boleh bercakap dengan berbilang model dan kadangkala bertindak di dalam halaman mula terasa seperti tab Swiss Army terbaik di dunia. Sider.AI berada tepat di kawasan kejiranan itu: ia adalah bar sisi AI popular yang menyepadukan model terkemuka dan membantu anda bekerja secara langsung pada halaman yang sedang anda baca. Dan terdapat panduan mesra dan bahasa Inggeris biasa tentang bagaimana Gemini 2.5 Computer Use terasa dalam praktiknya—lengkap dengan peringatan bahawa ia bertindak lebih seperti penunggang basikal yang mematuhi undang-undang daripada pelumba laju. Jika anda ingin tahu bagaimana ini boleh dimuatkan ke dalam penyemakan imbas harian anda, itu adalah pintu masuk yang berguna. Kebaikan dan Keburukan Sekilas Pandang
Kebaikan
- Boleh melakukan tindakan pelayar sebenar dari hujung ke hujung
- Kuat dalam tugas berulang dan berbilang langkah di laman web yang degil
- Tingkah laku langkah demi langkah yang telus dan boleh diaudit
- Kawalan keselamatan untuk konteks perusahaan
Keburukan
- Lebih perlahan daripada manusia yang pantas dalam pecah pendek
- CAPTCHA/MFA masih memerlukan anda
- Sensitif terhadap perubahan UI dan gesaan yang samar-samar
- Memerlukan skop kebenaran yang berhati-hati
Keputusan
Gemini 2.5 Computer Use bukanlah robot “perhatikan ia melakukan tugas saya” yang mewah. Ia adalah pembantu yang berhati-hati dan boleh dipercayai untuk tugas pelayar yang membosankan yang anda benci. Apabila tugas itu panjang, berulang, dan ditakrifkan dengan baik, ia bersinar. Apabila tugas itu samar-samar, penuh dengan tetingkap timbul yang mengejutkan, atau disekat oleh CAPTCHA, anda masih perlu menunggang bersama.
Jika hari kerja anda ialah 20% berfikir dan 80% mengklik melalui laman web yang kekok, ini adalah saat anda. Tukar kerja membosankan menjadi senarai semak yang boleh diikuti oleh bot. Biarkan ia menjadi penunggang basikal yang mematuhi setiap papan tanda berhenti sementara anda memutuskan ke mana anda sebenarnya mahu pergi.
Dan Satu Perkara Terakhir…
Berikan hadiah kepada diri masa depan anda: tulis gesaan seperti anda menulis kad resipi untuk seorang remaja yang belajar memasak. “Panaskan hingga 350. Jika ketuhar berasap, matikannya.” Lebih jelas anda dengan Gemini 2.5 Computer Use, lebih baik ia dalam memasak tugas web anda dengan sempurna—tiada alat pemadam api diperlukan.
Rujukan dan Bacaan Lanjut
- Pengumuman Google tentang model Gemini 2.5 Computer Use.
- Gambaran keseluruhan The Verge tentang cara ia mengendalikan tetingkap pelayar sebenar.
- Liputan awal tentang pengoptimuman pertama web dan kekuatan tugas Android.
- Nota penanda aras pihak ketiga tentang prestasi ejen pelayar.
- Konfigurasi penapis keselamatan dan kandungan Vertex AI untuk perusahaan.
- Laman utama Sider.AI dan penerangan pengisian borang praktikal.
Soalan Lazim
S1:Adakah Google Gemini 2.5 Computer Use sebenarnya lebih pantas daripada manusia?
Tidak biasanya pada tugas pendek. Nilainya ialah kebolehpercayaan dan ketahanan—pada aliran yang panjang dan berulang, rentak mantap ejen dan kadar ralat yang rendah boleh mengalahkan manusia yang tergesa-gesa, terutamanya apabila anda mengambil kira sifar keletihan dan ingatan yang sempurna.
S2:Apakah jenis tugas yang terbaik untuk Gemini 2.5 Computer Use?
Apa-apa sahaja yang berulang dalam pelayar web: pengisian borang berbilang medan, penapisan papan pemuka, memuat turun laporan, atau memuat naik fail. Ia sesuai apabila tiada API dan susun atur laman web agak stabil.
S3:Bagaimanakah Gemini 2.5 Computer Use dibandingkan dengan ejen AI yang lain?
Liputan mencadangkan ia dioptimumkan untuk tugas pelayar dan berprestasi kompetitif dalam penilaian pihak ketiga. Seperti biasa, uji pada aliran kerja sebenar anda—penanda aras membantu, tetapi laman web dan kes pinggir anda adalah hakim sebenar.
S4:Adakah ia akan mengendalikan CAPTCHA atau pengesahan berbilang faktor untuk saya?
Tidak. Jangkakan untuk masuk campur untuk cabaran CAPTCHA dan MFA. Persediaan praktikal ialah menjeda ejen pada langkah tersebut, menyelesaikan pengesahan, kemudian membiarkannya meneruskan.
S5:Adakah Gemini 2.5 Computer Use selamat untuk akaun sensitif?
Ia boleh, dengan pagar keselamatan. Gunakan kelayakan keistimewaan terendah, skop akses dengan ketat, dan dayakan penapis keselamatan dan kandungan—terutamanya dalam persekitaran perusahaan. Minta ejen untuk pratonton atau menerangkan langkah sebelum melakukan tindakan berisiko.