Sistem komputer tradisional sering kesulitan mengotomatiskan tugas kompleks yang melibatkan banyak aplikasi, file, dan alur kerja, sehingga membutuhkan upaya manual yang terus-menerus. Otomasi computer use mengubah hal ini dengan memungkinkan agent AI memahami, berinteraksi dengan, dan mengelola lingkungan digital layaknya manusia. Panduan ini menjelaskan cara kerjanya, penerapannya di dunia nyata, dan bagaimana alat seperti Kimi Work menyederhanakan otomasi, manajemen file, serta eksekusi alur kerja.
Apa itu AI computer use?
Computer use memungkinkan AI mengoperasikan komputer melalui antarmuka grafisnya, layaknya pengguna manusia. Alih-alih mengandalkan API atau integrasi khusus, AI dapat memahami apa yang muncul di layar dan melakukan tindakan seperti mengklik tombol, memasukkan teks, menggulir halaman, serta menavigasi aplikasi.
Dengan berinteraksi langsung melalui antarmuka pengguna, computer use memungkinkan AI bekerja di berbagai aplikasi desktop dan situs web tanpa memerlukan integrasi khusus untuk setiap perangkat lunak. Hal ini memungkinkan satu sistem AI mengotomatiskan berbagai alur kerja menggunakan antarmuka yang sama seperti yang digunakan orang setiap hari.
Bagaimana cara kerja agent computer use?
Agent computer use umumnya melibatkan kemampuan seperti persepsi visual, penentuan elemen (grounding), perencanaan, dan eksekusi tindakan—terkadang ditangani oleh komponen terpisah, terkadang disatukan dalam satu model multimodal. Pertama, model visual menganalisis screenshot dan elemen antarmuka untuk memahami apa yang terjadi di layar. Komponen grounding kemudian berusaha menemukan lokasi elemen UI, meskipun akurasinya bervariasi, seperti posisi tepat tombol, menu, dan kolom input, lalu menerjemahkan informasi visual tersebut menjadi target yang dapat ditindaklanjuti.
Selanjutnya, sistem perencanaan memecah tujuan pengguna menjadi rangkaian langkah logis dan menentukan tindakan terbaik yang harus diambil. Terakhir, eksekutor tindakan menjalankan langkah-langkah tersebut dengan mengklik, mengetik, menggulir, atau berinteraksi dengan aplikasi, sambil terus memantau umpan balik untuk menyesuaikan perilakunya dan menyelesaikan tugas.
Computer use vs. Otomasi tradisional
Sebelum mengadopsi alur kerja berbasis AI, penting untuk memahami perbedaan antara computer use dan otomasi tradisional. Meskipun keduanya bertujuan mengurangi upaya manual dan meningkatkan efisiensi, keduanya menggunakan pendekatan yang secara mendasar berbeda dalam menjalankan tugas dan menyesuaikan diri dengan perubahan lingkungan. Perbandingan berikut menguraikan perbedaan utama keduanya untuk membantu menentukan pendekatan yang paling sesuai dengan kebutuhan operasional dan kompleksitas alur kerja tertentu.
| AI computer use | Otomasi tradisional | |
|---|---|---|
| Pendekatan inti | Menggunakan agent AI untuk berinteraksi dengan komputer layaknya manusia, memahami antarmuka, dan menyelesaikan tugas secara mandiri | Menggunakan skrip, aturan, dan alur kerja yang telah ditentukan untuk menjalankan tugas berulang |
| Cara kerja | Mengamati layar, menafsirkan konteks, mengambil keputusan, dan melakukan tindakan melalui klik, pengetikan, dan navigasi | Mengikuti instruksi tetap seperti API, makro, aturan RPA, atau langkah-langkah terprogram |
| Fleksibilitas | Fleksibilitas tinggi; mampu menangani alur kerja yang kompleks, multi-langkah, dan dinamis | Fleksibilitas lebih rendah; paling cocok untuk proses yang stabil dan dapat diprediksi |
| Kemampuan belajar | Dapat meningkat melalui model AI, umpan balik, dan konteks yang terkumpul | Tidak dapat belajar kecuali pengembang mengubah aturan otomasi |
| Interaksi antarmuka pengguna | Berinteraksi langsung dengan GUI, tombol, formulir, dokumen, dan elemen visual | Sering bergantung pada API, data terstruktur, atau selektor UI yang tetap |
| Proses penyiapan | Memerlukan konfigurasi agent AI, tujuan, izin, dan akses ke tools | Memerlukan perancangan workflow, scripting, dan pemeliharaan |
| Upaya pemeliharaan | Lebih rendah untuk lingkungan yang berubah karena AI dapat menyesuaikan diri dengan perubahan UI | Lebih tinggi saat software, tata letak, atau proses berubah |
| Contoh | Agent AI yang menjadwalkan pertemuan, meneliti informasi, mengelola file, dan menyelesaikan workflow di berbagai aplikasi | Aturan email, script ekstraksi data, bot pemrosesan invoice, dan workflow terjadwal |
Contoh penggunaan nyata dari computer use agent
Computer use agent membantu organisasi mengotomatiskan tugas yang biasanya membutuhkan interaksi manual dengan software. Kemampuannya menavigasi antarmuka dan menjalankan workflow membuatnya bernilai untuk berbagai aplikasi bisnis dan teknis.
Pengujian software: Computer use agent dapat berinteraksi dengan aplikasi seperti pengguna manusia, yaitu mengklik tombol, mengisi formulir, dan menavigasi workflow. Ini membantu menemukan bug lebih cepat, mengurangi upaya pengujian manual, dan meningkatkan kualitas software.
Pengumpulan data & riset: Agent ini dapat menjelajahi situs web, mengumpulkan informasi, dan mengorganisasi data ke dalam format terstruktur secara otomatis. Ini membuat riset pasar, analisis kompetitor, dan pengumpulan data berskala besar jadi jauh lebih cepat dan efisien.
Otomatisasi workflow administratif: Computer use agent dapat menangani tugas berulang seperti menjadwalkan pertemuan, memperbarui spreadsheet, dan memproses dokumen. Dengan mengotomatiskan pekerjaan rutin, agent ini membantu tim menghemat waktu dan mengurangi kesalahan operasional.
Dukungan pengembangan & engineering: Dalam lingkungan pengembangan, agent ini dapat membantu proses debugging, penyiapan environment, dan interaksi dengan tools. Ini memungkinkan engineer menghabiskan lebih sedikit waktu untuk proses manual dan lebih banyak waktu untuk menyelesaikan masalah teknis.
Operasi customer support: Computer use agent dapat menavigasi platform CRM, mengambil informasi pelanggan, dan membantu pengelolaan tiket. Ini membantu tim support merespons lebih cepat sekaligus menjaga kualitas layanan yang konsisten.
Otomatisasi proses bisnis: Organisasi menggunakan computer agent untuk mengotomatiskan workflow seperti pemrosesan invoice, onboarding karyawan, dan pembuatan laporan. Ini meningkatkan efisiensi di berbagai departemen dan mengurangi kebutuhan pekerjaan manual yang berulang.
Kelola file lokal dan tugas secara otomatis dengan Kimi Work
Kimi Work dirancang untuk menyederhanakan cara pengguna menangani file lokal maupun tugas digital dengan mengubah workflow manual menjadi proses otomatis dan cerdas. Daripada berpindah-pindah antara berbagai tools atau berulang kali melakukan tindakan rutin, pengguna dapat mengandalkan otomatisasi berbasis AI untuk mengorganisasi file, menjalankan tugas, dan mengambil informasi secara efisien. Ini membuatnya sangat bermanfaat bagi profesional yang mengelola data dalam jumlah besar, laporan berulang, atau workflow multi-langkah yang kompleks.
Fitur utama
Tugas otomatisasi terjadwal: Kimi Work memungkinkan pengguna menjadwalkan tugas berulang yang berjalan otomatis di latar belakang. Ini membantu mengotomatiskan laporan, pengorganisasian file, dan workflow rutin lainnya tanpa upaya manual.
WebBridge untuk penjelajahan otonom: WebBridge memungkinkan Kimi Work menjelajahi situs web, berinteraksi dengan halaman web, dan mengumpulkan informasi secara mandiri. Fitur ini sangat bermanfaat untuk tugas riset dan pengumpulan data online.
Agent swarm untuk eksekusi tugas kompleks: Kimi Work dapat menjalankan beberapa agent AI untuk bekerja pada bagian-bagian tugas yang berbeda secara bersamaan. Ini meningkatkan efisiensi dan membantu menangani workflow kompleks dengan lebih efektif.
Akses dan pengambilan data otonom: Kimi Work dapat mengumpulkan informasi dari file, sistem yang terhubung, dan sumber online secara otomatis. Data tersebut kemudian diorganisasi menjadi output yang bermanfaat seperti laporan, ringkasan, atau insight.
Plugin yang dapat diperluas untuk kemampuan tambahan: Melalui integrasi plugin, Kimi Work dapat terhubung dengan tools, layanan, dan sistem bisnis eksternal. Ini memungkinkan pengguna memperluas fungsionalitas sesuai kebutuhan workflow tertentu.
Goal Mode untuk eksekusi tugas berkelanjutan: Goal Mode memungkinkan pengguna menentukan tujuan dan membiarkan Kimi Work menangani proses eksekusinya. Mode ini secara berkelanjutan merencanakan, mengumpulkan informasi, dan menyelesaikan tugas hingga tujuan tercapai.
Bagaimana cara menggunakan Goal Mode di Kimi Work?
Goal Mode di Kimi Work memungkinkan AI bekerja untuk mencapai tujuan yang ditentukan, bukan hanya menyelesaikan satu permintaan. Mode ini secara berkelanjutan merencanakan dan menjalankan langkah-langkah yang diperlukan untuk menyelesaikan tugas, sehingga ideal untuk mengelola file lokal, mengorganisasi folder, dan mengotomatiskan workflow desktop multi-langkah.
Langkah 1: Unduh dan instal Kimi Work
Kunjungi situs resmi dan unduh aplikasi desktop Kimi Work. Anda dapat mengunduhnya untuk Windows maupun macOS.
Langkah 2: Gunakan Goal Mode di Kimi Work
Buka workspace baru dan jelaskan hasil yang ingin Anda capai. Untuk hasil terbaik, sertakan tujuan, persyaratan, batasan, dan kriteria keberhasilan. Anda dapat mengaktifkan Goal Mode dengan menambahkan perintah /goal ke prompt Anda.
Jika Anda tidak membutuhkan Goal Mode untuk tugas Anda, cukup berikan prompt kepada Kimi tanpa mengetik /goal.
Template prompt:
Contoh prompt:
Bagaimana cara membuat tugas terjadwal dengan Kimi Work?
Kimi Work memungkinkan Anda mengotomatiskan alur kerja yang berulang dengan menjadwalkan tugas agar berjalan secara otomatis pada waktu tertentu. Baik Anda memerlukan laporan harian, pembaruan riset, atau pemrosesan data rutin, tugas terjadwal membantu memastikan pekerjaan selesai tanpa perlu campur tangan manual.
Langkah 1: Buat tugas secara manual atau melalui chat
Buka Kimi Work, lalu pilih "Scheduled Tasks" dari menu navigasi di sebelah kiri. Untuk menyiapkan alur kerja berulang, pilih salah satu opsi berikut:
Buat secara manual: Atur sendiri jadwal, detail tugas, dan pengaturan eksekusinya.
Buat melalui chat: Jelaskan alur kerja tersebut dalam bahasa natural, dan Kimi Work akan otomatis membuat tugas terjadwalnya.
Langkah 2: Jelaskan alur kerja berulang Anda
Masukkan prompt yang menjelaskan alur kerja yang ingin Anda otomatiskan. Sertakan tujuan tugas, jadwal eksekusi, file atau sumber data yang dibutuhkan, serta lokasi penyimpanan hasilnya. Kimi Work akan menggunakan instruksi ini untuk membuat alur kerja terjadwal yang berjalan otomatis pada waktu yang ditentukan.
Sebagai contoh, Anda dapat mengotomatiskan tugas-tugas rutin seperti membuat laporan berkala, memantau pembaruan situs web, mengelola file lokal, atau mengumpulkan dan merangkum informasi.
Langkah 3: Periksa hasil alur kerja yang telah selesai
Setelah eksekusi selesai, tinjau hasil yang dihasilkan. Tergantung pada tugasnya, hasil tersebut bisa berupa laporan, ringkasan, spreadsheet, temuan riset, atau file lainnya. Anda dapat memeriksa hasilnya, melakukan penyesuaian jika diperlukan, dan terus menyempurnakan alur kerja untuk eksekusi berikutnya.
Kesimpulan
Singkatnya, penggunaan komputer dan otomatisasi berbasis AI mengubah cara pekerjaan digital dilakukan, bergeser dari eksekusi manual menuju sistem yang cerdas dan mandiri. Dengan alat seperti Kimi Work, tugas-tugas seperti menjelajah web, penjadwalan, pengelolaan data, dan manajemen alur kerja dapat berjalan lancar di latar belakang tanpa memerlukan input pengguna secara terus-menerus. Pergeseran ini tidak hanya mengurangi beban operasional, tetapi juga meningkatkan kecepatan, konsistensi, dan kualitas pengambilan keputusan di seluruh alur kerja.