Uji dengan inspektur dan lapangan bermain

Inspektor menguji operasi yang dikonfigurasi. Lapangan bermain obrolan dapat menguji bagaimana model memilih dan menggabungkan alat. Pemeriksaan ini menjawab pertanyaan yang berbeda dan tidak harus diperlakukan sebagai pralihat yang tidak berbahaya dari menulis langsung.

Siapkan data uji aman#

Gunakan rekaman tes yang disepakati, akun tes khusus atau masukan fiktif yang tidak dapat menyebabkan aksi bisnis yang tidak diinginkan. Identifikasi apakah alat yang dipilih membaca, menulis, mengirim atau menghabiskan. Tes administrator dapat menjalankan operasi nyata.

Uji alat secara langsung#

Buka panel tes alat yang diinginkan dan masukkan masukan kecil yang valid. Periksa akun target, hasil HTTP, medan yang dikembalikan dan keluaran MCP akhir. Juga coba masukan yang diperlukan yang hilang, nilai yang tidak sah dan hasil kosong bila diperlukan.

Jangan berbagi keluaran diagnostik mentah tanpa inspeksi. Kepala atau badan permintaan yang rinci dapat mengungkapkan rahasia atau rekaman pribadi bahkan ketika layar konfigurasi normal menyembunyikannya. Gunakan rute administrator yang disetujui untuk diagnostik.

Uji aliran kerja obrolan#

Jika playground telah dikonfigurasi, pilih koneksi model yang disetujui dan seleksi alat sempit. Akses provider dan penggunaan model mungkin memiliki biaya terpisah dan implikasi pemrosesan data. Gunakan akun dan anggaran yang disepakati; membuka playground tidak membuat panggilan model gratis.

Minta tugas hanya baca yang sama yang akan digunakan oleh klien. Periksa alat mana yang dipilih model, apakah argumennya benar dan apakah jawabannya berdasarkan bukti yang dikembalikan.

Ulangi melalui klien AI nyata#

Sebuah tes administrator dapat menggunakan kredensial yang berbeda dari klien produksi. Selesai dengan sambungan HTTPS publik yang ditugaskan: otentikasi, temukan alat yang diinginkan dan jalankan operasi yang disepakati. Uji kredensial yang hilang/salah dan batas akun melalui jalur itu.

Memainkan ulang panggilan#

Perlakukan replay sebagai eksekusi lain. Jangan mainkan kembali pesan, perintah, publikasi atau operasi penghapusan sampai efek dan otoritasnya jelas. Setelah waktu habis, periksa keadaan tujuan sebelum memutuskan apakah eksekusi lain aman.