Aģenti nav cilvēki — pārstāj tos vadīt kā cilvēkus

Ir viena tendence, ko turpinu novērot komandās, kas sāk lietot AI aģentus: tās piešķir tiem cilvēciskas īpašības līdz absurdam.

Tās iedod aģentam vārdu. Raksta promptus tā, it kā sūtītu Slack ziņas jaunam darbiniekam. Kļūst neapmierinātas, kad aģents "nesaprot" — it kā sapratne būtu vājā vieta.

Vājā vieta gandrīz vienmēr ir specifikācija, nevis inteliģence.

Jaunākā izstrādātāja ilūzija

Kad tu ievadi darbā jaunāko izstrādātāju, tu vari izteikties aptuveni. Vari pateikt "padari pogu skaistāku" un cilvēks nolasīs kontekstu no koda bāzes, dizaina sistēmas, iepriekšējām sarunām un savas gaumes.

Aģents to nedarīs. Aģents padarīs pogu skaistāku saskaņā ar saviem apmācības datiem, kas var sakrist vai nesakrist ar tavu dizaina sistēmu, tavu zīmolu vai tavu lietotāju gaidām.

Tas nav trūkums, ko apiet. Tā ir priekšrocība, uz kuras būvēt.

Kas patiesībā darbojas

Pēc aģentu ieviešanas desmitiem projektu, lūk, ko esmu secinājis:

1. Ierobežo darbības jomu bezžēlīgi. Aģents, kas dara vienu lietu labi, ir desmit reizes vērtīgāks nekā desmit, kas dara visu slikti. Nebūvē "universālu kodēšanas aģentu." Būvē aģentu, kas raksta migrācijas skriptus tavam konkrētajam ORM.

2. Nosaki izvades formātu kā neapspriežamu. Neļauj aģentam izlemt, kā strukturēt savu atbildi. Iedod tam shēmu. Validē pret to. Noraidi visu, kas neatbilst.

3. Būvē atgriezeniskās saites cilpas, nevis aizsargbarjeras. Tā vietā, lai mēģinātu novērst katru iespējamo kļūdu, būvē sistēmas, kas ātri kļūdas pamana un novirza tās labošanai. Tas ir lētāk un stabilāk nekā sarežģīta promptu inženierija.

4. Mēri to, kas ir svarīgi. Seko līdzi uzdevumu izpildes rādītājiem, nevis "precizitātei." Mēri atrisināšanas laiku, nevis tokenu skaitu. Metrikas, ko tu optimizēsi, noteiks, cik noderīgs aģents patiesībā kļūs.

Pragmatiskais secinājums

Aģenti ir rīki ar jaunu saskarni — dabisko valodu. Bet dabiskā valoda pēc būtības ir neprecīza. Komandas, kas gūst panākumus ar aģentiem, ir tās, kas uzspiež struktūru ap dabiskās valodas saskarni, nevis tās, kas mēģina padarīt dabisko valodu precīzāku.

Beidz rakstīt garākus promptus. Sāc būvēt labākas sistēmas ap īsākiem.