Equità per l'azienda agente

Equità per l'impresa agente

Quando gli agenti autonomi prendono decisioni che riguardano clienti, dipendenti e comunità, l'equità diventa la qualità architettonica che distingue l'automazione responsabile dall'automazione dannosa. Gli agenti Agentforce che operano con una supervisione umana limitata perpetuano e amplificano la distorsione su una scala senza precedenti, trasformando gli schemi discriminatori individuali in disparità sistemiche. L'equità nei sistemi agentici è una preoccupazione architettonica di prima classe nella piattaforma Salesforce, che combina equità dell'intelligenza artificiale, accessibilità, supervisione umana, responsabilità algoritmica e governance etica in un pilastro architettonico unificato.

Questa pagina affronta le sfide di equità specifiche delle architetture agenti. I principi fondamentali di equità, i requisiti di accessibilità e i quadri di governance etica sono trattati nel pilastro Equità. Qui ci concentriamo sulle considerazioni degli agenti autonomi: rilevamento della distorsione per gli agenti che prendono decisioni consequenziali e schemi di supervisione che mirano a rendere la responsabilità sostanziale anziché nominale, trasparenza che consente agli utenti interessati di contestare le decisioni e funzionalità della piattaforma come Einstein Trust Layer che supportano una pratica di intelligenza artificiale responsabile tramite controlli dei dati e registrazione di controllo.

Gli agenti Agentforce imparano gli schemi dai dati di addestramento, dalle fonti di recupero e dalle interazioni del mondo reale. Quando tali fonti contengono distorsioni che riflettono discriminazioni storiche o squilibri demografici, gli agenti perpetuano tali distorsioni con efficienza algoritmica che interessano migliaia di utenti prima che gli esseri umani rilevino lo schema.

  • Fondazione con distorsione del modello: I modelli linguistici di grandi dimensioni (LLM) vengono addestrati su dati su scala Internet contenenti distorsioni sociali relative a razza, genere, età, disabilità e altre caratteristiche protette. Queste distorsioni compaiono nelle risposte degli agenti anche senza istruzioni discriminatorie esplicite ed è improbabile che vengano risolte completamente solo con l'ingegneria tempestiva o i test; riflettono schemi in parte inerenti ai dati di formazione su scala Internet. Ad esempio, un agente di assunzione Agentforce potrebbe descrivere ruoli dirigenziali utilizzando schemi di linguaggio maschile. Oppure, un agente dell'assistenza potrebbe rispondere in modo diverso ai clienti il cui nome indica un'etnia o un sesso non maggioritari, un problema di qualità della rappresentazione che può influire sull'esperienza del cliente indipendentemente dall'esito di qualsiasi decisione.

Testare sistematicamente le distorsioni demografiche degli agenti utilizzando profili diversi che rappresentano i gruppi protetti. Generare richieste identiche variando solo segnali demografici come nomi, posizioni o stili di comunicazione. Confrontare le risposte degli agenti tra i profili per individuare differenze di qualità, variazioni di tono e disparità nei risultati.

  • Lacune nella rappresentazione dei dati di addestramento: Se i dati CRM (Customer Relationship Management) storici dell'organizzazione sottorappresentano determinati segmenti di clienti, gli agenti Agentforce formati o basati su tali dati avranno prestazioni scadenti per tali segmenti. Un agente di calcolo del punteggio dei lead addestrato su dieci anni di dati delle opportunità sottovaluta sistematicamente i clienti potenziali provenienti da aree geografiche storicamente depriorizzate dal team di vendita, creando un loop di feedback in cui la distorsione algoritmica crea distorsioni umane.

Prima di utilizzare i dati Salesforce per la formazione degli agenti o il radicamento nella generazione aumentata di recupero (RAG), controllare la rappresentazione demografica. Identificare i gruppi sottorappresentati e valutare se i gap di rappresentanza riflettono legittime differenze aziendali o discriminazioni storiche. Ridurre gli squilibri tramite l'aumento dei dati o la mitigazione esplicita della distorsione prima di distribuire gli agenti; alcune distorsioni residue tendono a rimanere e vengono in genere gestite tramite il monitoraggio e la supervisione a valle anziché risolvere la pre-distribuzione.

  • Tasso di recupero nei sistemi RAG: Agenti Agentforce che utilizzano le risposte a terra RAG nelle Knowledge Base, nei segmenti di Data 360 e nei record Salesforce. Quando tali fonti di recupero contengono contenuti distorti o variano in qualità tra i gruppi demografici, l'agente distribuito può inserire tale distorsione nelle esperienze degli utenti interessati. Per ridurre questo rischio, controllare le fonti di recupero prima della produzione come procedura ottimale. Un agente dell'assistenza che recupera gli articoli Knowledge offrendo una risoluzione dettagliata dei problemi per i clienti aziendali ma solo risposte generiche per i clienti delle piccole imprese perpetua le disparità di qualità del servizio, una preoccupazione di equità in cui il livello del cliente è correlato alle caratteristiche protette.

Controllare le Knowledge Base e le fonti di recupero per individuare eventuali lacune nella rappresentazione demografica e disparità di qualità. Laddove i gap sono difficili da chiudere, considerare tali limitazioni come guardrail su dove l'agente è adatto. Assicurarsi che la qualità, la completezza e l'accuratezza della documentazione siano comparabili in tutti i segmenti di clienti. Includere rappresentazioni diversificate negli esempi di contenuto anziché utilizzare per impostazione predefinita riferimenti culturali maggioritari che alienano gli utenti sottorappresentati.

  • Tensione dello schema di interazione: Gli agenti possono adattare il comportamento in base a segnali di conversazione correlati a caratteristiche protette. Il monitoraggio di questo schema è una pratica comune anche dopo la distribuzione, poiché alcune dinamiche di interazione emergono dal comportamento degli utenti non presente nei dati di addestramento. Lo stile di comunicazione, la complessità del linguaggio e gli schemi temporali possono segnalare informazioni demografiche. Un agente che tratta stili di comunicazione formali diversi da quelli casuali può inavvertitamente discriminare in base al background culturale, al grado di istruzione o allo stato della lingua madre.

Monitorare le interazioni degli agenti tra i gruppi demografici per verificare la coerenza del comportamento. Analizzare la lunghezza della risposta, il livello di dettaglio, gli indicatori di cortesia e la qualità della soluzione stratificati in base alle caratteristiche dell'utente. Le disparità suggeriscono una distorsione dell'interazione che richiede un'indagine.

  • Amplificazione del loop di feedback: Gli agenti che influenzano i propri dati di addestramento futuri creano distorsioni che si rafforzano da sole. Ad esempio, un agente di instradamento che assegna meno opportunità di valore elevato a determinati territori di vendita genera meno dati di successo per tali territori. Ciò, a sua volta, riduce la probabilità di successo prevista, riducendo ulteriormente l'instradamento delle opportunità future. Senza intervento, questa distorsione iniziale si aggrava nel tempo.

Rilevare i loop di feedback monitorando le modifiche della distribuzione delle decisioni nel tempo. Quando alcuni gruppi demografici ricevono sistematicamente meno risultati positivi, verificare se le decisioni degli agenti stanno creando la disparità che giustifica le decisioni negative future. Interrompere i loop attraverso l'esame umano dei casi limite e il ribilanciamento periodico.

Quando più agenti Agentforce lavorano insieme in catene di orchestrazione, la distorsione di un agente diventa input per gli agenti a valle, creando effetti di compounding in cui piccole distorsioni iniziali si amplificano in risultati discriminatori significativi.

  • Catene sequenziali degli agenti: Quando l'output dell'agente A diventa l'input dell'agente B, si corre il rischio che le decisioni distorte dell'agente A limitino le opzioni dell'agente B in modo da perpetuare o amplificare la discriminazione.

Si consideri un'orchestrazione di qualifica dei lead:

  1. L'agente di ricerca raccoglie Intelligence clienti da fonti Web e cronologia CRM.
  2. L'agente di calcolo del punteggio assegna il punteggio dei lead in base ai risultati dell'agente di ricerca.
  3. L'agente di instradamento assegna il lead al territorio in base al punteggio.
  4. L'agente del coinvolgimento personalizza il contatto in base a tutti gli output degli agenti precedenti.

Quando l'agente di ricerca recupera sistematicamente dati meno completi per determinati dati demografici dei clienti (a causa di lacune nei dati di addestramento o distorsioni di recupero), l'agente di calcolo del punteggio interpreta le informazioni incomplete come segnali negativi. L'agente di instradamento assegna quindi il territorio con priorità più bassa e l'agente del coinvolgimento offre un contatto meno personalizzato. L'effetto composto crea disparità di qualità del servizio che superano di gran lunga la distorsione di qualsiasi singolo agente.

  • Consenso degli agenti paralleli: Gli schemi in cui più agenti analizzano in modo indipendente lo stesso input e i risultati vengono aggregati offrono opportunità di amplificazione della distorsione quando gli agenti condividono dati di addestramento o modelli di base.

Se cinque agenti calcolano il punteggio di un lead in modo indipendente ma tutti condividono dati di addestramento distorti o distorsioni del modello di base, il consenso non corregge la distorsione, ma semplicemente la convalida. "Cinque agenti d'accordo" offre una falsa fiducia in esiti discriminatori quando tutti e cinque condividono la stessa distorsione sistematica.

Strategie di mitigazione della distorsione dell'orchestrazione:

  • Controllo dell'output degli agenti in ogni fase: Registrare input e output completi per ogni agente nelle catene di orchestrazione. Quando viene rilevata una distorsione negli esiti finali, risalire alla catena per identificare l'agente che ha introdotto la distorsione e in quale fase si è verificata l'amplificazione.

Creare cruscotti digitali CRM Analytics che mostrano le distribuzioni delle decisioni in ogni fase dell'orchestrazione suddivise per dati demografici. Identificare dove nella catena le disparità emergono o si espandono.

  • Diversità nell'addestramento e nei prompt degli agenti: la diversità riduce gli errori correlati, rendendo meno probabile l'amplificazione della distorsione. Quando si utilizzano schemi di consenso multi-agente, ottimizzare la diversità:
  • Diversi modelli di base sono fattibili e supportati commercialmente, ad esempio tramite configurazioni Bring Your Own LLM (BYOLLM)
  • Diverse fonti di recupero tra gli agenti
  • Diversi approcci di prompt engineering
  • Diverse calibrazioni delle soglie di confidenza
  • Recensione umana ai punti di flessione: Identificare le fasi dell'orchestrazione in cui le decisioni limitano in modo significativo le opzioni a valle. Inserire una revisione umana in questi punti di flessione anche se la confidenza dei singoli agenti è elevata. L'orchestrazione crea effetti emergenti che i punteggi di confidenza dei singoli agenti non rilevano.
  • Metriche di equità per fase di orchestrazione: Non limitarsi a misurare l'equità dei risultati finali. Calcolare la parità demografica, le pari opportunità e l'impatto discriminatorio in ogni fase della catena.

Se la Fase 1 mostra una parità demografica del 90%, la Fase 2 mostra l'85%, la Fase 3 mostra il 78% e la Fase 4 mostra il 70%, ogni fase appare accettabile isolatamente ma si aggiunge a una disparità finale inaccettabile. Le metriche a livello di fase rilevano il compounding prima che generi risultati discriminatori.

  • Interruttori automatici per errori di orchestrazione - Configurare la logica di orchestrazione in modo che si interrompa e si inoltri agli utenti quando:
  • Qualsiasi confidenza degli agenti scende al di sotto della soglia anche se gli agenti a valle sono fiduciosi
  • La distribuzione dell'output cambia in modo significativo tra le fasi di orchestrazione
  • La catena decisionale incontra dati non rappresentati negli insiemi di addestramento o convalida
  • L'utente mette esplicitamente in discussione o contesta le decisioni intermedie

L'orchestrazione multi-agente consente un ragionamento sofisticato ma crea catene decisionali opache in cui la responsabilità si diffonde e i composti di distorsione. L'attenzione architettonica al monitoraggio dell'equità a livello di fase e alla supervisione umana strategica impedisce che l'orchestrazione diventi un meccanismo di amplificazione della distorsione.

Prima di distribuire qualsiasi agente Agentforce che prenda decisioni conseguenti sugli utenti, calcolare le metriche di equità per tutti i gruppi demografici. Rendere la valutazione dell'equità un cancello di distribuzione obbligatorio equivalente in termini di autorità alla revisione della sicurezza.

  • Parità demografica: I tassi di esito positivo devono essere approssimativamente uguali in tutti i gruppi demografici protetti. Se un agente approva le richieste di servizio per il Gruppo A al 60% ma per il Gruppo B al 40%, la parità demografica viene violata. La parità demografica è appropriata quando non vi sono motivi legittimi per le differenze di percentuale di risultati tra i gruppi.

Calcolare la parità demografica dividendo la popolazione in segmenti demografici, misurando le percentuali di esito positivo per segmento e confrontando le percentuali tra i segmenti. Lacune nella parità dei documenti rispetto ai responsabili approvazioni denominati e alla logica.

  • Pari opportunità: I tassi di veri positivi rimangono comparabili tra i gruppi. Gli agenti identificano ugualmente bene le persone qualificate indipendentemente dalle caratteristiche demografiche. Un modello predittivo riconosce i richiedenti meritevoli di credito a tassi simili nei gruppi protetti quando il merito di credito sottostante è simile.

Le pari opportunità sono spesso la metrica più appropriata della parità demografica per le decisioni relative alle qualifiche individuali, in cui le percentuali di base possono essere legittimamente diverse. Monitorare se gli agenti mancano sistematicamente candidati qualificati di gruppi sottorappresentati. Se permangono disparità dopo la mitigazione, l'agente potrebbe non essere adatto a questo caso d'uso.

  • Quote uguali: Sia i tassi di veri positivi che i tassi di falsi positivi sono uguali in tutti i gruppi. Si tratta di una definizione rigorosa che limita i tassi di veri positivi e falsi positivi in tutta la popolazione. Equalized odds evita che le opportunità perse si concentrino in gruppi specifici e le false accuse si concentrino in gruppi specifici.

Il raggiungimento di quote uguali richiede spesso soglie decisionali separate per gruppo demografico. Negli Stati Uniti, per le decisioni relative all'occupazione, la rettifica dei punteggi o l'impostazione di diversi punteggi limite in base alla classe protetta è proibita ai sensi del Titolo VII (Civil Rights Act del 1964), quindi le quote uguali non possono essere perseguite in questo modo nell'assunzione. In altri contesti, e in altre giurisdizioni, solleva questioni giuridiche relative a una differenziazione esplicita di trattamento, pertanto consultare l'avvocato prima di implementare soglie specifiche del gruppo.

  • Rapporto impatto discriminatorio: La regola dei quattro quinti prevede una soglia di screening: Se un gruppo riceve risultati positivi inferiori all'80% rispetto al gruppo con le prestazioni più elevate, verificare la presenza di distorsioni. Una percentuale del 75% (ad esempio, una percentuale di approvazione del 45% rispetto a una percentuale di approvazione del 60%) scende al di sotto della soglia dei quattro quinti e indica una potenziale discriminazione che richiede una giustificazione o un'attenuazione.

L'analisi dell'impatto discriminatorio è standard nel diritto del lavoro e sempre più applicata ai sistemi di intelligenza artificiale. Quando le razioni scendono al di sotto dell'80%, documentare le fasi di indagine e riparazione; quando la riparazione non aumenta il rapporto, i team possono concludere che il caso d'uso non è adatto.

  • Equità individuale: Persone simili ricevono previsioni simili indipendentemente dall'appartenenza ai gruppi. Due clienti con solvibilità, cronologia acquisti e coinvolgimento identici ricevono consigli sui limiti di credito simili indipendentemente dalle differenze demografiche.

L'equità individuale è importante dal punto di vista filosofico ma impegnativa dal punto di vista operativo perché la "somiglianza" è soggettiva e dipendente dal contesto. Utilizzare l'equità individuale come principio di progettazione che guida la selezione e il test delle funzioni anziché un rigido vincolo matematico.

Due funzionalità della piattaforma acquisiscono i dati per il rilevamento della distorsione. Einstein Trust Layer registra un itinerario di controllo generativo dell'intelligenza artificiale per ogni interazione Agentforce: i prompt inviati al modello, le risposte restituite, le fonti di radicamento utilizzate e i segnali Trust come i punteggi di tossicità. Il tracciamento sessione Agentforce registra i ragionamenti passo per passo alla base di ogni decisione. Insieme forniscono dati che supportano il rilevamento delle distorsioni e il monitoraggio dell'equità; l'interpretazione di tali dati è opera umana e in genere richiede revisori formati e tempo dedicato.

  • Registrazione delle risposte: Trust Layer registra i prompt, le risposte del modello e i segnali Trust per ogni interazione generativa. Utilizzare questi dati per analizzare le distribuzioni delle previsioni tra i gruppi demografici. Creare cruscotti digitali CRM Analytics che confrontano le percentuali di approvazione, gli schemi di consiglio e i punteggi di rischio per segmento di clienti.

Eseguire query sul livello Trust regolarmente: Utilizzare il prompt seguente: "Mostra tutte le previsioni opportunità di valore elevato negli ultimi 30 giorni raggruppate per settore cliente, regione e dimensione account. Le distribuzioni delle previsioni sono coerenti tra i segmenti o alcuni segmenti hanno sistematicamente un punteggio più alto/più basso?"

  • Acquisizione della traccia di ragionamento: Per gli agenti Agentforce, Tracciamento sessione Agentforce registra come l'agente ha raggiunto la decisione, mentre l'itinerario di controllo Trust Layer acquisisce i prompt, le risposte e le fonti di base, inclusi gli articoli Knowledge e i record Salesforce recuperati. Esaminare entrambi quando gli utenti segnalano una distorsione per capire quali fonti di dati, schemi di recupero o fasi di ragionamento possono aver introdotto una distorsione.

Le tracce di ragionamento rendono i controlli di equità post-hoc più granulari e facili da eseguire rispetto ai sistemi tradizionali. Esempi di 100 decisioni degli agenti stratificate per gruppo demografico e con revisori che valutano se la qualità del ragionamento è comparabile tra i gruppi.

  • Rilevamento dell'anomalia: Configurare gli avvisi quando gli schemi decisionali degli agenti si discostano in modo significativo dalla base di riferimento. Se le percentuali di approvazione per un segmento di clienti specifico diminuiscono del 20% settimana dopo settimana, attivare l'indagine. Turni di distribuzione improvvisi possono indicare Problemi di qualità dei dati, fluttuazione del modello o distorsioni emergenti che richiedono un'attenzione immediata.

Creare un monitoraggio personalizzato per avvisare sui segnali di equità: "Avvisa quando la durata media della conversazione dell'agente dell'assistenza Agentforce per qualsiasi segmento di clienti supera 1,5 volte la media complessiva per tre giorni consecutivi." Le disparità di durata possono indicare che alcuni gruppi ricevono un servizio meno efficace.

  • Modelli di cruscotto digitale Fairness: Creare modelli di cruscotti digitali CRM Analytics riutilizzabili che tengono traccia delle metriche di equità per i casi d'uso più comuni degli agenti. Includere calcoli della parità demografica, metriche delle pari opportunità, rapporti di impatto disparati e grafici di tendenza che mostrano l'evoluzione delle metriche nel tempo. Condividere i modelli tra i team di sviluppo degli agenti standardizzando il monitoraggio dell'equità.

Quando viene rilevata una distorsione, applicare la mitigazione nella fase appropriata in base alla causa principale.

  • Interventi pre-elaborazione dei dati: Correggere la distorsione a livello di dati prima dell'addestramento degli agenti o dell'indicizzazione RAG. Un campione eccessivo di gruppi demografici sottorappresentati nei dati di formazione garantisce una rappresentazione equilibrata. È possibile sintetizzare dati aggiuntivi per gruppi sottorappresentati utilizzando tecniche come Synthetic Minority Oversampling Technique (SMOTE) quando i dati reali sono insufficienti. Tenere presente che SMOTE interpola funzioni numeriche tabulari, quindi si applica ai dati di addestramento CRM strutturati, non al testo non strutturato utilizzato per il radicamento nel contesto RAG.

Controllare i dati di Salesforce CRM per individuare eventuali differenze demografiche prima di utilizzarli per l'addestramento del modello. Se i dati storici delle opportunità sovrarappresentano determinati tipi di clienti, riequilibrare gli insiemi di formazione o utilizzare i pesi di campionamento per impedire agli agenti di apprendere tale sovrarappresentazione come segnale di decisione.

  • Vincoli dell'algoritmo in elaborazione: Applicare vincoli di equità durante l'addestramento del modello che ottimizzano contemporaneamente sia la precisione che l'equità. Questo può ridurre la precisione del 2-3%, migliorando notevolmente l'equità tra i gruppi. Quando si controlla l'addestramento del modello, l'addestramento con vincoli di equità è spesso l'approccio di mitigazione più efficace.

Per gli agenti Agentforce che utilizzano modelli di base in cui non è possibile modificare l'addestramento, limitare il comportamento degli agenti tramite prompt di sistema: "Trattare tutti i dati demografici dei clienti con la stessa professionalità e dettaglio. Fornire spiegazioni di lunghezza e qualità comparabili indipendentemente dallo stile di comunicazione o dal background del cliente."

  • Modifica della soglia di post-elaborazione: Ove lecito, la rettifica delle soglie decisionali per gruppo demografico può equalizzare le percentuali di risultati dopo l'addestramento del modello. Ad esempio, un agente dell'approvazione potrebbe applicare una soglia di confidenza dell'80% per un gruppo e una soglia del 75% per un altro per compensare la distorsione sottostante del modello. La legge antidiscriminazione limita fortemente questa tecnica e alcune giurisdizioni la vietano completamente per determinate decisioni (vedi sotto).

L'adeguamento della soglia è controverso perché tratta esplicitamente i gruppi in modo diverso e la legge antidiscriminazione in molte giurisdizioni lo limita o lo vieta. Negli Stati Uniti, per le decisioni relative all'occupazione è vietato: Il Titolo VII (Civil Rights Act del 1964) impedisce la rettifica dei punteggi o l'utilizzo di punteggi di cutoff diversi per classe protetta e nessuna quantità di giustificazione documentata rende la pratica lecita. Altre giurisdizioni impongono i propri vincoli, pertanto confermare le regole valide per gli utenti. Ove la pratica sia consentita, documentare la giustificazione giuridica quando si attuano soglie specifiche del gruppo e confermare che le soglie migliorano l'equità senza creare altri effetti discriminatori.

  • Rilevamento e rimozione delle funzioni proxy: Identificare le caratteristiche correlate alle caratteristiche protette e fungere da meccanismi di discriminazione indiretta. I proxy comuni includono:
  • Proxy con CAP per razza, etnia e livello di reddito
  • Schemi di nome proxy per genere ed etnia
  • Proxy di tempistica della comunicazione per la religione e le responsabilità di assistenza
  • Proxy tipo di dispositivo per livello di reddito
  • L'assegnazione di territori può delegare la composizione demografica

Calcolare i coefficienti di correlazione tra tutte le funzioni del modello e le caratteristiche protette. Per le funzioni strettamente correlate, valutare se il valore predittivo legittimo giustifica l'inclusione o se le funzioni alternative potrebbero fornire una previsione simile senza effetti proxy.

Gli agenti Agentforce possono operare con la supervisione umana progettata per rendere la revisione sostanziale anziché nominale. Il livello di supervisione appropriato dipende dagli stake decisionali, dalla reversibilità e dai requisiti normativi.

Instradare le decisioni consequenziali attraverso il riesame umano prima dell'esecuzione. Se una decisione è abbastanza alta da giustificare un riesame umano è un giudizio basato sul rischio: valutare la gravità del danno potenziale e la probabilità che si verifichi. Le decisioni consequenziali spesso sorgono in ambiti regolamentati come l'assistenza sanitaria, i servizi finanziari e il settore pubblico, ma sorgono anche al di fuori di essi. I contesti più comuni ad alto rischio includono:

  • Decisioni sul lavoro - Assunzione, promozione, licenziamento, retribuzione, revisione delle prestazioni
  • Servizi creditizi e finanziari - Approvazioni crediti, modifiche dei limiti, chiusure account, prezzi
  • Assistenza sanitaria - Suggerimenti diagnostici, raccomandazioni di trattamento, decisioni di copertura
  • Diritti legali - Interpretazione dei contratti, risoluzione delle controversie, accesso ai servizi
  • Alloggio - Screening dell'inquilino, approvazioni di leasing, raccomandazioni di sfratto

Progettare gli agenti Agentforce in questi contesti per analizzare, consigliare e preparare le decisioni richiedendo l'approvazione umana prima dell'esecuzione. Posizionare gli agenti come strumenti di supporto alle decisioni che migliorano il giudizio umano, non come decisori autonomi che sostituiscono gli umani.

Configurare le soglie di confidenza che attivano il riesame umano in base all'incertezza degli agenti:

  • Alta confidenza (>90%) - L'agente procede in autonomia con la registrazione di controllo completa
  • Moderata confidenza (70-90%) - L'agente consiglia con revisione umana prima dell'azione
  • Bassa confidenza (<70%) - L'agente si riferisce interamente all'uomo con riepilogo contesto

Calibrare le soglie utilizzando i dati di produzione. Una previsione di "confidenza del 70%" riesce circa il 70% delle volte quando viene convalidata. I punteggi di confidenza errati minano il Trust nei meccanismi di inoltro al livello superiore.

Testare la calibrazione campionando le decisioni degli agenti in ogni fascia di confidenza e calcolando le percentuali di successo effettive. Se le decisioni "ad alta confidenza" hanno successo solo il 75% delle volte, ricalibrare le soglie o migliorare la stima della confidenza del modello.

Se Agentforce non è in grado di risolvere una richiesta entro limiti definiti, inoltrarla al livello umano. Verificare che la destinazione dell'inoltro al livello superiore abbia la capacità di aiutare: l'instradamento alle aree di attesa sovraccariche non riduce i danni.

Impostare trigger di inoltro al livello superiore:

  • La conversazione gira: dopo 5-7 giri senza risoluzione, inoltrare al livello superiore
  • Tempo trascorso: dopo 10 minuti senza risoluzione, inoltrare al livello superiore
  • Sentiment degli utenti: quando l'utente esprime frustrazione, inoltrare al livello superiore
  • Rilevamento della ripetizione: quando l'agente ripete la stessa risposta, inoltrare al livello superiore

Configurare Omnicanale per instradare i casi inoltrati al livello superiore alle aree di attesa appropriate basate sulle competenze con contesto di conversazione completo. Addestrare gli agenti umani a gestire gli inoltri al livello superiore in modo efficiente senza richiedere agli utenti di ripetere le informazioni già fornite all'agente.

Consentire alle persone autorizzate di ignorare qualsiasi decisione Agentforce in qualsiasi momento con una motivazione documentata. Le esclusioni servono a diversi scopi:

  • Correzione degli errori: Le persone correggono gli errori degli agenti che potrebbero danneggiare gli utenti o violare la policy. La funzionalità di sostituzione fornisce una valvola di sicurezza per i sistemi autonomi che operano in ambienti complessi in cui i casi limite sono inevitabili.
  • Rilevamento bias: Se gli esseri umani ignorano i rifiuti Agentforce più frequentemente per determinati dati demografici rispetto ad altri, esaminare entrambe le possibilità: l'agente potrebbe sfavorire sistematicamente quel gruppo e gli esseri umani potrebbero correggerlo o i sostituti potrebbero introdurre una nuova distorsione. Il primo schema punta alla revisione dell'agente; il secondo alla formazione del revisore.
  • Miglioramento degli agenti: Le esclusioni basate sulla logica diventano dati di addestramento per il miglioramento degli agenti. Esempi di decisioni ignorate e analisi del motivo per cui gli esseri umani non erano d'accordo con gli agenti. Incorporare schemi di sostituzione in un rapido perfezionamento o riaddestramento del modello.
  • Responsabilità: Le esclusioni assegnano la responsabilità. La persona che ignora una decisione dell'agente si assume la responsabilità degli esiti di tale decisione. Una chiara responsabilità impedisce la diffusione delle responsabilità laddove tutti danno per scontato che l'intelligenza artificiale sia responsabile e nessuno ne prenda la responsabilità.

Assegnare la responsabilità prima della distribuzione, non dopo che si sono verificati incidenti:

  • Titolare modello: Responsabile della scienza dei dati responsabile dell'equità, dell'accuratezza e del comportamento del modello. Approva le distribuzioni, risponde agli avvisi di equità, autorizza gli aggiornamenti. Il titolare del modello è una persona denominata documentata nei record decisione architettura.
  • Titolare decisione: Titolare del prodotto responsabile della scelta di distribuire l'intelligenza artificiale per casi d'uso specifici e per l'impatto reale sui clienti. Il titolare della decisione non può delegare la responsabilità ai sistemi AI.
  • Autorità di ricorso: La commissione di revisione etica o il team designato gestisce i ricorsi degli utenti che ritengono che le decisioni degli agenti siano ingiuste. I processi di appello devono essere accessibili, tempestivi e in grado di invertire le decisioni degli agenti.
  • Autorità di audit: Il team di conformità che conduce controlli periodici che convalidano gli agenti opera nel rispetto dei parametri di equità e può sospendere gli agenti che non rispettano gli standard in attesa di essere corretti.

Documentare tutti i ruoli con nomi, non solo titoli, assicurandosi che la responsabilità continui attraverso le modifiche organizzative.

Quando gli agenti Agentforce prendono decisioni che riguardano gli utenti, meritano spiegazioni comprensibili proporzionali all'impatto della decisione.

Creazione di più livelli di spiegazione per pubblici diversi:

  • Spiegazioni rivolte agli utenti: Ragionamento semplice comprensibile senza esperienza tecnica. "La richiesta di servizio richiede l'approvazione del responsabile perché l'importo richiesto (12 000 €) supera il limite di autorizzazione (10 000 €). L'approvazione del responsabile in genere viene completata entro 24 ore o nell'ambito del contratto sul livello di servizio (SLA) concordato."
  • Spiegazioni aziendali: Gli utenti operativi visualizzano i fattori decisionali chiave con il contesto aziendale. "Punteggio lead: 73/100. Fattori positivi primari: Dimensioni dell'azienda (500 dipendenti), Coinvolgimento attivo del sito Web (12 visite in 30 giorni), Abbinamento di settore (SaaS). Fattori negativi primari: Nessun coinvolgimento MQL, Fuori regione di destinazione."
  • Spiegazioni tecniche: I data scientist visualizzano i dettagli del modello: pesi delle funzioni, calibrazione della confidenza, versione del modello, data di addestramento, distribuzioni degli input. Le spiegazioni tecniche supportano il debug e le indagini sulla distorsione.
  • Spiegazioni di controllo: I team di conformità visualizzano le tracce decisionali complete: versione del modello, valori di input esatti al momento della decisione, tutte le fonti di dati consultate, traccia del ragionamento, stato della configurazione. Le spiegazioni di controllo supportano le indagini normative e i controlli di equità che richiedono una ricostruzione precisa.

Il tracciamento sessione Agentforce registra i ragionamenti passo per passo alla base delle decisioni degli agenti, mentre Einstein Trust Layer acquisisce l'itinerario di controllo del prompt-and-response, incluse le fonti di base. Insieme consentono di garantire la trasparenza ai livelli di dettaglio appropriati:

  • Trasparenza in tempo reale: Quando Agentforce prende una decisione, visualizzare il ragionamento di riepilogo agli utenti: "Ho consigliato il Prodotto A in base alla cronologia acquisti (3 acquisti simili), alla promozione corrente (20% di sconto) e alla disponibilità dell'inventario (in magazzino, spedizione domani)."
  • Spiegazione dettagliata on-demand: Fornire il link "Perché mi hai consigliato questo?" che consente agli utenti di visualizzare un ragionamento completo che include tutti gli articoli Knowledge recuperati, i record Salesforce consultati e la logica decisionale. Le spiegazioni dettagliate creano Trust e consentono agli utenti di identificare errori o distorsioni.
  • Ricostruzione storica: Quando gli utenti contestano le decisioni precedenti settimane o mesi dopo, recuperare le tracce del ragionamento della sessione e la cronologia di controllo del livello Trust per consentire una spiegazione precisa delle decisioni storiche. La ricostruzione storica supporta i ricorsi e le indagini normative.
  • Analisi degli schemi aggregati: Esempi di tracce di ragionamento stratificate per gruppi demografici per analizzare se la qualità delle decisioni è coerente. Esaminare 100 tracce di ogni segmento di clienti e valutare se la profondità del ragionamento, la qualità della fonte e la logica sono confrontabili tra i gruppi.

Visualizzare la confidenza della previsione in termini appropriati per l'utente evitando punteggi di probabilità non elaborati che gli utenti interpretano in modo errato.

Anziché "confidenza al 73%", comunicare la confidenza come:

  • Alta confidenza – "Sono certo che questa raccomandazione sia appropriata in base a casi simili"
  • Moderata fiducia – “Questo consiglio è probabilmente appropriato, ma si consiglia la revisione del responsabile”
  • Poca fiducia – “Questa situazione è insolita. Sto inoltrando al livello superiore uno specialista che possa fornire una guida migliore".

Spiegare che cosa significa livello di confidenza per l'affidabilità: "Le raccomandazioni con elevata confidenza sono corrette circa il 95% delle volte in base alla convalida storica."

Per le decisioni di moderata o bassa confidenza, spiegare quale riesame supplementare si verificherà: "Poiché questa richiesta non rientra nei nostri parametri standard, verrà esaminata da uno specialista senior con l'approvazione che in genere viene completata entro 24 ore o nell'ambito del contratto sul livello di servizio (SLA) concordato."

Se appropriato, mostrare agli utenti che cosa modificherebbe l'esito. I controfattuali consentono agli utenti di migliorare i risultati attraverso azioni specifiche anziché limitarsi a informarli delle decisioni già prese.

Ad esempio: "Il punteggio dei lead aumenterebbe con informazioni verificate sull'impiego (+8 punti) e riferimenti al credito aggiuntivi (+5 punti). Fornire questa documentazione sposterebbe l'applicazione nell'area di attesa di revisione della priorità."

I controfattuali sono potenti meccanismi di trasparenza ma richiedono una progettazione accurata. Evitare di fornire controfattuali che incoraggiano il gioco del sistema o che rivelano inavvertitamente caratteristiche protette come fattori decisionali. "La tua domanda avrebbe un punteggio più alto se avessi 10 anni in meno" è una discriminazione illegale, non una trasparenza utile.

In alcune giurisdizioni, comunicare chiaramente che gli utenti interagiscono con un bot è un requisito legale, non solo una procedura ottimale di progettazione. Indicare chiaramente quando gli utenti interagiscono con gli agenti Agentforce anziché con gli agenti umani. L'informativa deve essere visibile e continua, non nascosta in termini di servizio o visualizzata una sola volta all'inizio dell'interazione.

Visualizza indicatori visivi persistenti:

  • Avatar dell'agente chiaramente contrassegnato come "Assistente AI"
  • Intestazione che mostra "Si chatta con un agente dell'assistenza Agentforce"
  • Opzione "Connessione con agente umano" visibile durante la conversazione

L'informativa rispetta l'autonomia dell'utente abilitando la scelta informata sulla modalità di interazione. Gli utenti che preferiscono l'interazione umana devono disporre di tale opzione senza frizioni o penalità per la qualità del servizio.

Le funzionalità della piattaforma Salesforce come Monitoraggio evento e Itinerario di controllo campi, che precedono l'intelligenza artificiale degli agenti, estendono la responsabilità algoritmica alle decisioni prese dai singoli agenti.

  • Monitoraggio evento per le azioni degli agenti: Monitoraggio evento acquisisce l'accesso ai dati degli agenti, le chiamate API e le modifiche del sistema con l'integrità controllata da Salesforce. Streaming Event Monitoring registra a SIEM esterno per la conservazione a lungo termine e la manomissione delle prove che soddisfano i requisiti normativi per le decisioni consequenziali.

Configurare Monitoraggio evento per monitorare:

  • Registri eventi API che mostrano le interazioni del sistema degli agenti
  • Eventi di accesso per gli account di servizio degli agenti
  • Esportazioni di rapporti quando gli agenti accedono ai dati in blocco
  • Traccia di controllo dei campi per i dati influenzati dall'intelligenza artificiale: La cronologia dei campi standard conserva le modifiche ai dati per 18 mesi (24 mesi tramite l'API). L'itinerario di controllo campi consente di conservare la cronologia dei campi indefinitamente, archiviandola dopo un massimo di 18 mesi, quindi conservando i dati archiviati fino a quando non vengono eliminati, supportando controlli di equità a lungo termine e indagini normative. Abilitare Itinerario di controllo campi per gli oggetti che memorizzano o sono influenzati dalle decisioni degli agenti, scegliendo tra gli oggetti standard supportati da Itinerario di controllo campi e tutti gli oggetti personalizzati con tracciamento della cronologia dei campi abilitato (fino a 200 campi per oggetto).

Per le decisioni di credito, le decisioni di assunzione e altri casi d'uso con rischi elevati, la conservazione pluriennale può essere un requisito normativo. I periodi di conservazione variano a seconda del regime. Confermare il requisito applicabile per il proprio caso d'uso.

  • Monitoraggio evento scudo per gli stake più alti: Shield Event Monitoring offre funzionalità di controllo avanzate con campi evento strutturati e integrazione con strumenti di reporting sulla conformità. I dati del file registro eventi vengono conservati per un anno per impostazione predefinita sia per i clienti di Monitoraggio evento che per i clienti di Shield. Utilizzare Shield per le decisioni degli agenti con le maggiori probabilità di successo in cui l'integrità dell'itinerario di controllo è fondamentale.

Memorizzazione di informazioni sufficienti per ricostruire con precisione qualsiasi decisione di agente storico:

  • Versione del modello: Registrare la versione del modello (modello di base, versione prompt, ID modello perfezionato) che ha preso ogni decisione. Le versioni del modello cambiano spesso e producono output diversi. Un tracciamento preciso delle versioni consente l'analisi delle cause principali quando viene rilevata una distorsione.
  • Valori delle funzioni di input: Memorizzare i valori di input esatti al momento della decisione, non i valori correnti che potrebbero essere cambiati. Le istantanee di input consentono di verificare se una decisione sarebbe diversa con i dati correnti o di confermare che la decisione originale era corretta date le informazioni disponibili al momento.
  • Stato configurazione: Soglie record, regole aziendali e impostazioni dei parametri attive al momento della decisione. Le modifiche alla configurazione influiscono sugli esiti. La cronologia delle configurazioni consente di determinare se la fluttuazione delle decisioni riflette le modifiche del modello o della configurazione.
  • Contesto ambientale: Acquisire il contesto pertinente: identità dell'utente, indicazione oraria, cronologia delle conversazioni, contesto della sessione. Il contesto influisce sul comportamento degli agenti e deve essere conservato per una ricostruzione accurata.

Il rilevamento della distorsione deve essere continuo, non una convalida singola prima della distribuzione. Gli agenti evolvono attraverso aggiornamenti rapidi, modifiche della versione del modello di base e la modifica delle distribuzioni dei dati.

  • Cruscotto digitale delle metriche di equità: Creare cruscotti digitali CRM Analytics che tengono traccia delle metriche di equità dai registri Einstein Trust Layer. Monitorare costantemente la parità demografica, le pari opportunità e i rapporti di impatto discriminatori. Configurare gli avvisi quando le metriche superano le soglie definite.

Creare un cruscotto digitale che mostra:

  • Distribuzione delle decisioni per segmenti demografici di clienti (grafici a barre)
  • Metriche di equità nel tempo (linee di tendenza con soglie di avviso)
  • Calcoli del rapporto di impatto discriminatorio con indicatore di regola dei quattro quinti
  • Predittori migliori che contribuiscono alle decisioni, dove il modello sottostante li espone
  • Percentuale di sostituzione per gruppo demografico
  • Rilevamento turni di distribuzione: Monitorare le distribuzioni degli input degli agenti alla ricerca di modifiche che indicano potenziali problemi di equità. Se la composizione demografica degli utenti che ricevono le decisioni degli agenti cambia in modo significativo rispetto ai dati demografici dei dati di addestramento, l'equità del modello può peggiorare.

Avviso quando cambiano le distribuzioni degli input: "La distribuzione dei segmenti di clienti per l'instradamento dei lead Agentforce è stata spostata del 15% verso Enterprise negli ultimi 30 giorni. Esaminare se la logica di instradamento rimane equa per i clienti delle PMI che ora ricevono modelli di servizio diversi."

  • Integrazione dei commenti degli utenti: Consentire agli utenti di segnalare la distorsione percepita tramite meccanismi accessibili. I rapporti utente evidenziano problemi qualitativi che mancano alle metriche quantitative.

Aggiungere l'opzione "Segnala preoccupazione" all'interfaccia chat Agentforce. Instradare i rapporti alla commissione di revisione etica con il contesto completo della conversazione. Tenere traccia dei rapporti in un oggetto personalizzato con un flusso di lavoro di indagine richiesto e una risoluzione documentata.

Progettare architetture degli agenti che prevedano controlli esterni da parte di enti regolatori, organizzazioni per i diritti civili o clienti che richiedono dimostrazioni di affidabilità algoritmica.

  • Capacità di esportazione: Creare funzionalità di esportazione che consentono ai team di conformità di estrarre serie di dati decisionali complete con stratificazione demografica per l'esame da parte di revisori esterni. Gli esportatori devono rispettare i regolamenti sulla privacy dei dati garantendo al contempo una trasparenza sufficiente per la convalida dell'equità.
  • Documentazione di controllo: Mantenere la documentazione corrente:
  • Scopo dell'agente e casi d'uso previsti
  • Addestramento dei dati demografici e limitazioni note
  • Metriche di equità calcolate prima della distribuzione e in produzione
  • Strategie di mitigazione della distorsione applicate
  • Configurazioni di supervisione umana
  • Monitoraggio delle soglie di avvicinamento e di allarme
  • Assegnazioni di responsabilità (titolare modello, titolare decisione, autorità di ricorso)
  • Valutazioni d'impatto algoritmiche: Prima di distribuire gli agenti che prendono decisioni consequenziali, eseguire valutazioni d'impatto che valutano i potenziali effetti positivi e negativi nei gruppi di stakeholder. Le valutazioni d'impatto dimostrano la dovuta diligenza e la gestione proattiva del rischio apprezzate dalle autorità di regolamentazione.

Gli utenti mantengono un controllo significativo su come Agentforce influisce sulla loro esperienza.

  • Consenso esplicito per gli agenti consequenziali: Gli agenti che prendono decisioni che influiscono in modo significativo sugli utenti richiedono un consenso esplicito anziché essere attivi per impostazione predefinita. Gli agenti addetti alle decisioni creditizie, gli agenti addetti allo screening dell'occupazione e gli agenti idonei al servizio si attivano solo dopo il consenso degli utenti, con una chiara comprensione dell'effetto dell'agente.
  • Consenso granulare: Abilitare il consenso per caso d'uso dell'agente anziché il consenso AI globale. Un cliente potrebbe acconsentire agli agenti dell'assistenza Agentforce mentre rifiuta gli agenti di vendita Agentforce. L'architettura che supporta il tracciamento del consenso a livello di caso d'uso è un input; i test e il controllo periodico della logica di applicazione aiutano a confermare che i cancelli di consenso reggono nella pratica.
  • Consenso dinamico per le nuove funzionalità: Quando si distribuiscono nuove funzionalità Agentforce che interessano gli utenti esistenti, cercare in modo proattivo il consenso per i nuovi casi d'uso anziché affidarsi al consenso originale che non contemplava applicazioni specifiche. Ogni funzionalità degli agenti materialmente nuova che interessa gli utenti attiva il controllo del consenso con una spiegazione chiara.
  • Revoca del consenso con effetto immediato: Consentire agli utenti di revocare il consenso in qualsiasi momento con l'interruzione immediata del trattamento degli agenti. Revocare il consenso deve essere facile come concederlo, senza contatti di assistenza o procedure burocratiche richieste.
  • Gestione delle preferenze: Consentire agli utenti di configurare il comportamento degli agenti entro limiti definiti:
    • Stile di comunicazione (spiegazioni concise e dettagliate)
    • Livello di proattività (rispondere solo quando richiesto e suggerire in modo proattivo)
    • Preferenza di inoltro al livello superiore (preferire la risoluzione AI anziché preferire quella umana rapidamente)

Memorizzare le preferenze nei campi personalizzati dei record utente. Preferenze di riferimento nei prompt di sistema degli agenti: "L'utente preferisce spiegazioni dettagliate. Fornire risposte complete con ragionamento di supporto."

  • Consegna umana su richiesta: Fornire l'opzione "Connettiti con un agente umano" permanente nelle interazioni Agentforce senza richiedere agli utenti di completare le interazioni degli agenti o spiegare perché preferiscono gli esseri umani.

Configurare l'instradamento di handoff immediato: Quando l'utente seleziona "Agente umano", instradare a Omnicanale con il contesto completo della conversazione e il flag di priorità che indica la preferenza dell'utente. Per la scelta dell'interazione umana non vengono applicate penalità per servizi o tempi di attesa degradati.

  • Indicatori di trasparenza: Contrassegnare chiaramente le interazioni degli agenti con indicatori visivi persistenti che consentono agli utenti di mantenere la consapevolezza della modalità di interazione. Gli utenti che dimenticano di interagire con gli agenti possono nutrire aspettative irrealistiche o percepire l'inganno quando emergono limitazioni.

Progettare agenti che producano risultati equi in tutti i gruppi demografici protetti attraverso scelte architettoniche intenzionali.

Gli agenti che prendono decisioni consequenziali non devono discriminare in base a caratteristiche protette (tra cui, razza, genere, età, disabilità, religione, origine nazionale o orientamento sessuale) a meno che non siano legalmente giustificati per scopi specifici come gli alloggi per disabili.

  • Controllo delle funzioni: Esaminare tutte le fonti di dati utilizzate nel ragionamento degli agenti per il contenuto caratteristico protetto. I dati CRM, i segmenti di Data 360 e le Knowledge Base possono contenere informazioni demografiche che gli agenti non dovrebbero considerare per determinate decisioni.

Rimuovere o mascherare le caratteristiche protette dagli input degli agenti quando tali caratteristiche non sono legalmente giustificate per il tipo di decisione. Per le decisioni di credito, escludere lo stato di disabilità, poiché è irrilevante. Per le richieste di alloggio per disabili, lo stato di disabilità è essenziale e deve essere incluso.

  • Prompt engineering per la non discriminazione: Includere istruzioni esplicite di non discriminazione nei prompt di sistema degli agenti:

"L'utente è un agente dell'assistenza clienti. Trattare tutti i clienti con la stessa professionalità indipendentemente dal nome, dalla posizione, dallo stile di comunicazione o da qualsiasi altra caratteristica. Fornire consigli di pari qualità e dettaglio a tutti i clienti. Non fare mai supposizioni sui clienti in base alle caratteristiche demografiche."

  • Test con profili demografici: Prima della distribuzione in produzione, testare gli agenti con profili diversi che rappresentano i gruppi protetti. Generare richieste identiche che variano solo i segnali demografici (inclusi nomi che suggeriscono etnie diverse, posizioni che suggeriscono regioni diverse e stili di comunicazione che suggeriscono livelli di istruzione diversi).

Confrontare le risposte degli agenti in base ai profili per qualità, lunghezza, professionalità e risultati. Le differenze indicano una distorsione che richiede una mitigazione.

Monitorare la qualità del servizio Agentforce nei dati demografici dei clienti per garantire esperienze comparabili:

  • Percentuale di risoluzione per segmento: Calcolare le percentuali di risoluzione al primo contatto stratificate per segmento di clienti. Se i clienti Enterprise raggiungono una risoluzione del 75% mentre i clienti delle PMI raggiungono una risoluzione del 55%, verificare se la qualità della Knowledge Base, la formazione degli agenti o le funzionalità dei prodotti differiscono a seconda del segmento.
  • Qualità della risposta per segmento: Esempi di conversazioni degli agenti tra i segmenti e revisori valutano la qualità della risposta su dimensioni coerenti: precisione, completezza, professionalità, disponibilità. I test di affidabilità tra revisori assicurano che i revisori applichino standard coerenti.
  • Tasso di inoltro al livello superiore per segmento: Monitorare la frequenza con cui gli agenti inoltrano al livello superiore le persone stratificate in base ai dati demografici dei clienti. I tassi di inoltro al livello superiore per determinati segmenti indicano che gli agenti sono meno efficaci per quegli utenti, creando disparità di qualità del servizio.
  • Soddisfazione per segmento: Sondaggiare gli utenti di tutti i gruppi demografici e confrontare i punteggi di soddisfazione. Nel complesso, un'elevata soddisfazione può mascherare esperienze negative per i gruppi minoritari soffocati dalla soddisfazione della maggioranza.

Le interfacce Agentforce devono essere accessibili agli utenti con disabilità che soddisfano le norme WCAG 2.2 AA. Fare riferimento al componente Salesforce Lightning Design System e alle librerie di schemi per i componenti Agentforce e gli schemi di progettazione riutilizzabili e accessibili. Questi schemi rendono le esperienze degli agenti accessibili, coerenti e apprendibili.

  • Compatibilità dello screen reader: I componenti di messaggistica Lightning che forniscono interfacce chat Agentforce includono l'accessibilità di base se utilizzati come progettato. Le implementazioni chat personalizzate richiedono l'implementazione manuale dell'accessibilità:
  • Struttura HTML semantica con punti di riferimento appropriati
  • Regioni live ARIA che annunciano nuovi messaggi
  • Navigazione da tastiera nella cronologia dei messaggi
  • Chiari indicatori di messa a fuoco sugli elementi interattivi

Testare con JAWS, NVDA e la tecnologia di supporto per screen reader VoiceOver durante lo sviluppo, non solo la scansione automatica.

  • Accessibilità cognitiva: Le risposte degli agenti utilizzano un linguaggio normale per i pubblici generali. Evitare il gergo e fornire glossari per i termini tecnici inevitabili. Strutturare le risposte lunghe con intestazioni e utilizzare elenchi puntati o numerati per facilitare la comprensione laddove appropriato.
  • Equità linguistica: Agentforce supporta più lingue tramite le funzionalità multilingue del modello di base. La qualità di convalida delle risposte è comparabile nelle varie lingue tramite la valutazione madrelingua, non solo con le metriche automatiche che non presentano sfumature culturali.

Per i casi d'uso critici per l'azienda che servono popolazioni linguistiche diverse, configurare la gestione specifica della lingua (variabili di lingua, prompt localizzati e filtro degli articoli Knowledge in base alla lingua) e convalidare la qualità per lingua anziché affidarsi esclusivamente al trasferimento multilingue del modello di base, che può compromettere la qualità per le lingue con risorse inferiori.

Implementare l'equità per Agentforce in fasi allineate alla maturità della distribuzione degli agenti.

Fase 1: Fondazione (prima di qualsiasi agente di produzione)

  • Istituzione di una commissione di riesame etico con autorità di controllo
  • Assegnazioni responsabilità documenti (titolare modello, titolare decisione, autorità di ricorso)
  • Abilitazione dell'acquisizione del controllo Einstein Trust Layer
  • Configurazione di Monitoraggio evento per le azioni degli agenti
  • Creare cruscotti digitali di monitoraggio dell'equità di riferimento in CRM Analytics
  • Definire porte di distribuzione obbligatorie: controllo dei dati, metriche di equità, valutazione dell'impatto

Fase 2: Primo agente di produzione

  • Eseguire una valutazione d'impatto completa per il caso d'uso
  • Controllo dei dati di formazione/RAG per la rappresentazione demografica
  • Calcolare le metriche di equità nei gruppi demografici
  • Implementare lo schema di supervisione umana (human-in-the-loop, aumento della confidenza o limitazione temporale)
  • Configurazione del meccanismo di segnalazione delle distorsioni per gli utenti
  • Versione del modello di documento, configurazione e approccio alla ricostruzione delle decisioni

Fase 3: Monitoraggio continuo

  • Monitorare settimanalmente i cruscotti digitali di equità, indagando sulle violazioni delle soglie entro 24 ore (o sul contratto sul livello di servizio di risposta concordato dall'organizzazione)
  • Condurre un'analisi mensile dello schema di sostituzione identificando i problemi sistematici
  • Esaminare settimanalmente i rapporti sulla distorsione degli utenti con esiti delle indagini documentati
  • Eseguire controlli trimestrali completi sull'equità per gli agenti con alte quote
  • Aggiornare la documentazione man mano che gli agenti evolvono attraverso aggiornamenti rapidi o modifiche del modello

Fase 4: Scalabilità e governance

  • Creare modelli di cruscotti digitali di equità riutilizzabili per i tipi di agenti più comuni
  • Creare strumenti di ricostruzione delle decisioni degli agenti che abilitano il self-service del team di conformità
  • Standardizzare gli schemi di gestione del consenso per tutti i nuovi agenti
  • Implementare test di regressione dell'equità automatici nelle opportunità in corso di realizzazione CI/CD
  • Pianificazione di audit semestrali di equità esterni da parte di terzi
  • Mantenere il monitoraggio normativo e adeguarsi agli obblighi attivi ed emergenti, tra cui la legge UE AI (introduzione graduale fino al 2025-2027), le leggi statali e i regolamenti di settore

L'equità è un aspetto fondamentale dell'architettura dei sistemi agenti nella piattaforma Salesforce. Le organizzazioni che progettano Agentforce in modo equo come azienda architettonica di prima classe si posizionano in anticipo rispetto ai requisiti normativi mentre creano soluzioni di cui tutti gli utenti si possono Trust e utilizzare in modo efficace. Le funzionalità della piattaforma esistono. La domanda è se gli architetti li useranno.

Condividere i propri commenti sul framework ben progettato.