De la pilot AI la producție: criterii go/no-go și pași concreți
Trecerea de la pilot la producție este momentul în care un proiect AI iese din mediul controlat al unui test și intră în fluxul real de lucru, cu utilizatori reali, date reale și responsabilitate operațională. Majoritatea piloturilor AI nu pică la demo, ci aici: fără criterii de decizie, fără owner și fără plan de operare, pilotul rămâne un experiment permanent.
Scenariul clasic: pilotul arată bine, toată lumea e mulțumită la prezentare, apoi trec trei luni și nimic nu s-a schimbat în fluxul real. Nu e o problemă de tehnologie, ci de decizie: nimeni nu a stabilit ce înseamnă "merge", cine semnează trecerea mai departe și ce trebuie să existe ca sistemul să ruleze de luni dimineață.
De ce mor piloturile AI în demo
- Succesul nu a fost definit înainte: fără un prag scris ("reduce timpul de procesare cu 30%", "acuratețe de minim 95% pe cazurile X"), orice rezultat e interpretabil și decizia se amână.
- Pilotul a rulat pe date curate: demo pe cazuri alese de mână, producție pe realitate. Diferența dintre cele două e exact riscul tău.
- Nu există owner: pilotul e "al echipei de inovație", producția e a nimănui. Sistemele fără responsabil nu trec de etapa de jucărie.
- Operarea nu a fost gândită: cine intervine când răspunsurile se degradează? Cine plătește infrastructura? Cine instruiește utilizatorii noi?
- Frica nedeclarată: pilotul care reușește creează obligații. Fără un drum clar înainte, organizația preferă confortul lui "mai testăm".
Criteriile go/no-go, scrise înainte de pilot
Lista minimă pe care o semnezi înainte să pornești:
- Rezultatul țintă: indicatorul, valoarea, perioada de măsurare.
- Pragul de calitate: acuratețe, rata de eroare acceptabilă și pe ce set de cazuri se măsoară, inclusiv cazurile dificile.
- Costul acceptabil pe tranzacție: pilotul îți arată costul real pe utilizare; decide dinainte cât e prea mult.
- Condițiile de oprire: ce rezultat înseamnă no-go ferm, ca să nu prelungești agonia.
- Cine decide: o persoană, cu data deciziei în calendar.
Pilotul fără aceste cinci puncte nu e un pilot; e un demo cu buget.
Datele: testul real
Întrebarea care separă pilotul de producție: sistemul a văzut datele tale urâte? Documente scanate prost, cereri ambigue, cazuri rare, limbaj amestecat. Înainte de go, verifică:
- eșantionul de test include distribuția reală a cazurilor, nu selecția favorabilă;
- știi ce face sistemul când nu știe: răspunde "nu știu" sau inventează?
- fluxul de date din producție e sustenabil: cine actualizează sursele, cu ce frecvență, cu ce drepturi de acces.
Riscuri și guvernanță înainte de scale
Producția înseamnă răspundere, iar aici intră disciplina de operare cerută și de EU AI Act:
- Supraveghere umană desemnată: cine poate interveni și opri sistemul, cu ce competențe.
- Loguri și trasabilitate: poți reconstrui de ce sistemul a dat un anumit răspuns?
- Plan de fallback: ce se întâmplă când sistemul nu e disponibil sau greșește? Procesul vechi trebuie să rămână funcțional ca plasă de siguranță.
- Monitorizarea calității: degradarea e silențioasă; fără măsurare continuă o descoperi de la clienți.
- Clasificarea de risc: dacă sistemul intră în categoria cu risc ridicat, obligațiile de documentare și operare cresc; afli înainte de scale, nu după.
Cine răspunde luni dimineață
Trecerea în producție e completă când există un nume pentru fiecare dintre întrebările de mai jos:
- Cine răspunde de rezultatul de business al sistemului?
- Cine operează tehnic: monitorizare, incidente, actualizări?
- Cine instruiește utilizatorii și adună feedbackul?
- Cine decide schimbările: prompturi, praguri, furnizor?
Patru întrebări, posibil același nume la început, dar scris. Un sistem AI în producție fără owner e un incident care încă nu s-a întâmplat.
Primele 90 de zile în producție
Go-ul nu e finalul, e începutul perioadei în care sistemul își câștigă locul:
- Săptămânile 1-2: monitorizare intensă, cu procesul vechi încă activ în paralel pentru cazurile sensibile. Orice incident se documentează, nu se rezolvă din vorbe.
- Săptămânile 3-6: compari indicatorii reali cu pragurile din go/no-go. Diferențele se discută cu cifre: unde s-a degradat calitatea, ce tipuri de cazuri scapă, cât costă pe tranzacție în realitate.
- Săptămânile 7-12: decizia de extindere. Mai multe echipe, mai multe fluxuri sau mai mult volum, una pe rând, cu aceeași disciplină de măsurare. Tot acum stabilești ritmul permanent: revizuirea lunară a calității și a costurilor, cu ownerul de business în cameră.
Regula simplă pentru toată perioada: orice schimbare de model, prompt sau prag se tratează ca o mini-lansare, cu test înainte și măsurare după. Sistemele AI nu se strică zgomotos; se degradează în liniște, iar rutina de măsurare e singura care prinde asta la timp.
Checklist pilot → producție
- Criteriile go/no-go au fost scrise și semnate înainte de pilot.
- Testul a inclus cazurile dificile, nu doar fluxul fericit.
- Costul real pe tranzacție e cunoscut și acceptat.
- Ownerul de business și operatorul tehnic au nume.
- Supravegherea umană e desemnată și competentă.
- Logurile, monitorizarea și planul de fallback există.
- Clasificarea de risc și obligațiile aferente sunt clarificate.
- Utilizatorii sunt instruiți, iar procesul vechi rămâne plasă de siguranță în tranziție.
- Decizia de go e luată de persoana stabilită, la data stabilită.
Dacă ești mai devreme în proces și încă alegi soluția, începe cu build, buy sau integrare.
Întrebări frecvente
Cât ar trebui să dureze un pilot AI?
Suficient cât să acopere variația reală a cazurilor și să măsoare indicatorul țintă: pentru multe fluxuri, 4-8 săptămâni de utilizare reală. Un pilot fără termen e un proiect fără decizie; pune data ședinței de go/no-go în calendar din prima zi.
Ce KPI definesc succesul unui pilot?
Trei familii: rezultat de business (timp economisit, cazuri rezolvate, conversie), calitate (acuratețe pe setul de evaluare, rata de escaladare către om) și cost (pe tranzacție, pe utilizator). Alege puține, măsurabile și stabilite înainte de start.
Pilotul merge bine. De ce ezită organizația?
Pentru că producția schimbă responsabilități: cineva trebuie să semneze pentru rezultat, buget și riscuri. Ezitarea e rar tehnică; e lipsa unui owner și a unui drum clar. Răspunsul e decizional, nu încă un test.
Ce echipă ne trebuie pentru producție?
Minim: un owner de business, cineva care operează tehnic sistemul (intern sau partener) și supravegherea umană desemnată pentru deciziile sensibile. Volumul determină dacă sunt trei roluri sau trei oameni; claritatea responsabilităților contează mai mult decât numărul.
Când e corect să oprim un pilot?
Când atinge condițiile de oprire scrise dinainte: rezultat sub prag pe date reale, cost pe tranzacție inacceptabil sau risc neacoperibil. Un no-go documentat e un rezultat bun: ai învățat ieftin ce nu funcționează și poți redirecționa bugetul.