Agenttien luotettavuuskuviot
Lue lisää Hyvin rakennettu luotettavuus → Agentin yrityksen luotettavuus
Kuvio
| Mistä etsiä | Miltä hyvä näyttää |
|---|---|
| Sovellusalusta | Sovellusalustan välimuisti | ✅ Toteuta katkaisijoita, jotka seuraavat LLM-palvelun kuntoa sovellusalustan välimuistissa vähäisen viiveen reaaliaikaisten lukujen varalta, ja jotka tukevat kynnysarvoja ja kokoonpanoja koskevia mukautettuja metadatatyyppejä. Koska sovellusalustan välimuisti on paras vaihtoehto, avoin/poissa oleva tila säilytetään pysyvässä tallennustilassa (kuten mukautetussa objektissa) eikä pelkällä välimuistilla. Avaa piiri, kun virheiden kynnysarvo on mukautettu (esimerkiksi viisi peräkkäistä päätelmävirhettä) ja reititä se varakuvioihin |
| Sovellusalusta | Sovellusalustan välimuisti | ✅ Tallenna vahvistettuja vastausskeemoja sovellusalustan välimuistiin salliaksesi agenttien vastausten nopean vahvistuksen odotettua rakennetta vasten |
| Agentforce | Kehotteen malli | ✅ Kun vastauksen vahvistus epäonnistuu, yritä uudelleen tarkennetuilla kehotteilla, mukaan lukien vahvistusvirhe ja esimerkki oikeasta rakenteesta (enintään 3-5 uudelleen) |
| Agentforce | Istunnon jäljitysoikeus | ✅ Käytä Agentforcen istunnon jäljittämisen järkeilyketjuja tarkastaaksesi agentin järkeilypolun ja havaitaksesi hallusinaatioita sen tuloksissa |
| Data 360 | Vektorihaku | ✅ Vaadi agentteja viittaamaan Data 360 -vektorihaun lähteisiin, jotta korvausvaatimuksia voidaan ristiviitata noudettuihin lähteisiin ennen toiminnon suorittamista |
| Sovellusalusta | Proactive Monitoring | ✅ Jos tilillä on Allekirjoituksen onnistuminen -oikeutus, luota Proactive Monitoring -ominaisuuteen, jossa Salesforce-henkilöstö valvoo organisaatiota uusien ongelmien varalta. Se ei ole itsepalvelukokoonpanoon perustuva hälytys |
| Sovellusalusta | Skaalikeskus | ✅ Käytä skaalauskeskusta tunnistaaksesi tiettyjä agenttien toimintoja, jotka lähestyvät hallintarajoituksia |
| Agentforce | Toiminto | ✅ Käytä sivutusta agenttitoiminnoissa, jotka noutavat suuria tietueiden kokoelmia |
| Agentforce | Toiminto | ✅ Suunnittele agenttitoimintoja, joilla on kovia rajoituksia (enintään 200 alitason per ylätaso) ja toteuta näytestrategioita, kun rajoitukset ylitetään |
Anti-Mallit
| Mistä etsiä | Miltä huono näyttää |
|---|---|
| Sovellusalusta | Mukautetut metadatatyypit | ⚡️ Salli rajoittamaton määrä uudelleenkäynnistyksiä ilman katkaisinta ja luo loputtomia uudelleenkäynnistys silmukoita, kun LLM-palvelu heikkenee |
| Agentforce | Kehotteen malli | ⚡️ Epäonnistuneiden agenttien vastausten uudelleenyrittäminen lisäämättä vahvistusvirhettä ja odotettua rakennetta uudelleenyrityksen kehotteeseen |
| Agentforce | Toiminto | ⚡️ Salli agenttien pyytää rajoittamattomia tietoja asiayhteydestä (esimerkiksi “kaikki historiatiedot”) ilman vahvoja rajoituksia alitason tietueisiin per ylätason tietue |
| Agentforce | Toiminto | ⚡️ Suunnittelet agenttitoimintoja, jotka hakevat suuria tietueiden kokoelmia ilman sivutusta, mikä aiheuttaa hallintarajoitusten rajoituksia |
| Einstein | Trust | ⚡️ Luottavat agenttien vastaukset ilman ristiinviittauksia korvausvaatimuksiin perustana olevista tietolähteistä, jolloin hallusinaatiot voivat saavuttaa toiminnon suorituksen |
| Sovellusalusta | Organisaatio | ⚡️ LLM-palvelun saatavuuden käsitteleminen identtisinä Salesforce Platform -käytettävyyden kanssa sen sijaan, että valvoisit sitä erillisenä sidonnaisuutena |
Kuvio
| Mistä etsiä | Miltä hyvä näyttää |
|---|---|
| Agentforce | Agentin kokoonpano | ✅ Monitasoisten varaketjujen suunnittelu: full-context agentti → reduced-context agentti → deterministinen sääntöjärjestelmä → human handoff Omni-Channelin kautta |
| Agentforce | Agentin kokoonpano | ✅ Määritä toissijainen agentti käyttämällä tiivistettyä kontekstia (viimeiset 30 päivää vs koko historia, 5 parasta vektorihaun tulosta vs. 20 parasta) vähentääksesi epäonnistumisen todennäköisyyttä |
| Sovellusalusta | Kulku | ✅ Toteuta varalogiikkaa orkestrointikulussa tai Apex, joka kirjaa onnistuneet tasot näkyviin epäonnistumiskuvioihin |
| Sovellusalusta | Kulku | ✅ Laadi deterministinen kulku tai Apex, joka käsittelee yleisiä skenaarioita varakuvana, kun agenttien järkeily epäonnistuu (esimerkiksi vakiomuotoiset vahvistussäännöt, sääntöihin perustuva pisteytyslaskenta) |
| Agentforce | Omni-Channel | ✅ Määritä taitoihin perustuva reititys ihmisille, jotta eskaloinnit saavuttavat asiaankuuluvan ammattitaidon |
| Agentforce | Omni-Channel | ✅ Välitä koko keskustelun konteksti ihmisjonoon, mukaan lukien yritetyt strategiat, agenttien luottamuspisteet ja epäonnistumisen syyt |
Anti-Mallit
| Mistä etsiä | Miltä huono näyttää |
|---|---|
| Agentforce | Agentin kokoonpano | ⚡️ Suunnittelet agentteja, joilla on yksi suorituspolku, joka epäonnistuu kokonaan, kun jokin komponentti heikkenee |
| Agentforce | Agentin kokoonpano | ⚡️ Käytä samaa täyden kontekstin agenttikokoonpanoa varakonsertteihin kontekstin asteittaisen yksinkertaistamisen sijaan |
| Agentforce | Omni-Channel | ⚡️ Reitittäminen henkilökohtaiseen käsittelyyn välittämättä keskustelun asiayhteyttä, yritettyjä strategioita tai epäonnistumisen syitä, pakottaen agentin aloittamaan alusta alkaen |
| Sovellusalusta | Kulku | ⚡️ Ei kirjaa, mikä varustaso onnistui, epäonnistumiskuvioiden näkyvyys ja varastotoiminnot häviävät |
Kuvio
| Mistä etsiä | Miltä hyvä näyttää |
|---|---|
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Julkaise tarkastuspisteiden tapahtumia monivaiheisten agenttien työnkulkujen onnistuneiden vaiheiden jälkeen, tallentamalla tapahtuman tietosisällön jatkamiseen tarvittavat korrelaatiotunnukset, suoritetut vaiheet ja tila |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Suunnittele agenttien työnkulut löysästi yhdistettyinä tapahtumaketjuina, joissa jokainen agentti voi epäonnistua ja yrittää uudelleen itsenäisesti estämättä koko työnkulkua |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Toteuta uudelleenyritysjonoja, joilla on eksponenttisia rästitysten viiveitä (30s, 2min, 8min, 30min) käyttämällä sovellusalustan tapahtumia ja uudelleenyritysten määrää tietosisällössä |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Reititä kuolleen kirjaimen jonoon ja hälytystoiminnot, kun uudelleenyritysten enimmäismäärä (tavallisesti 5) on loppunut |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Sisällytä korrelaatiotunnus kaikkiin asiaan liittyviin tapahtumiin. Käytä Platform Event Replay API -rajapintaa rakentaaksesi koko työnkulkuhistorian uudelleen virheenkorjausta varten |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Hyödynnä 72 tunnin toistohyökkäysten säilytysaikaa, joka on käytettävissä raskaan sovellusalustan tapahtumille (vakiomuotoiset tapahtumat säilytetään 24 tuntia) säilyttääksesi uudelleenyritysjonot organisaation huoltojaksojen tai käyttöönoton käyttökatkosten kautta |
Anti-Mallit
| Mistä etsiä | Miltä huono näyttää |
|---|---|
| Sovellusalusta | Sovellusalustan tapahtumat | ⚡️ Laadi monivaiheisia agenttien työnkulkuja ilman tarkastuspisteitä, jotka vaativat täyden uudelleenkäynnistyksen, kun jokin välivaihe epäonnistuu |
| Sovellusalusta | Sovellusalustan tapahtumat | ⚡️ Epäonnistuneiden agenttien pyyntöjen uudelleenyrittäminen ilman eksponenttista rästityötä, mikä aiheuttaa ruuhkautuvan karjan vaikutuksia palvelujen palauttamiseen |
| Sovellusalusta | Sovellusalustan tapahtumat | ⚡️ Tiiviisti yhdistettyjen peräkkäisten työnkulkujen suunnitteleminen, jossa yksi agentin virhe estää kaiken myöhemmän käsittelyn |
| Sovellusalusta | Sovellusalustan tapahtumat | ⚡️ Korrelaatiotunnusten jättäminen pois tapahtumista, jolloin työnkulun suorittamisen jäljittämistä ja virheenkorjaamista ei voida suorittaa. |
| Sovellusalusta | Sovellusalustan tapahtumat | ⚡️ Yritetään uudelleen määrittämättömästi ilman uudelleenyritysten enimmäismäärää tai dead letter -jonoa, mikä kuluttaa sovellusalustan resursseja pysyvästi epäonnistuneille operaatioille |
Kuvio
| Mistä etsiä | Miltä hyvä näyttää |
|---|---|
| Sovellusalusta | Apex | ✅ Käytä Apex agenttien operaatioille, jotka analysoivat yli 1 000 tietuetta, hyödyntämällä asynkronoinnin hallintarajoituksia (200 SOQL-kyselyä, 150 DML-operaatiota, 60s CPU per suoritus) |
| Sovellusalusta | Apex | ✅ Käytä jonoon asetettavia Apex monivaiheisille agenttien työnkuluille, jotka vaativat useita ulkoisia API-kutsuja tai pidempiä käsittelyaikoja; seuraa mukautettujen objektien edistymistä ja ota käyttöön jatkaminen epäonnistumisen yhteydessä |
| Sovellusalusta | Apex | ✅ Käytä @future-metodeja lievissä ja unohdetuissa agenttien toiminnoissa (ilmoituksissa, ulkoisessa lokissa, ei-painuvissa päivityksissä), kun epäonnistuminen on sallittua |
| Sovellusalusta | Apex | ✅ Valvo asynkronisen käsittelyn kapasiteettia Apex (Määritykset → Apex) ja Apex Flex -jonosta: enintään 5 samanaikaista erätyötä (ylimääräisiä töitä Flex-jonossa, enintään 100 Pidossa-tilassa) ja asynkronisten Apex-suoritusten (DailyAsyncApexExecutions) organisaationlaajuinen päivittäinen rajoitus — suurempi kuin 250 000 tai 200 x käyttäjälisenssien määrä per 24 tuntia — jaettu eri-, jono-, tuleva- ja ajoitettu-Apexissa |
| Sovellusalusta | Organisaatio | ✅ Hälytys, kun asynkroninen kulutus lähestyy rajoituksia, jotka sallivat ennakoivan kapasiteettinhallinnan ennen kuin agenttien käsittely estetään |
Anti-Mallit
| Mistä etsiä | Miltä huono näyttää |
|---|---|
| Sovellusalusta | Apex | ⚡️ Yli 1 000 tietuetta käsitellään synkronoiduissa agenttien transaktioissa Apex siirtymisen sijaan, jolloin 100 SOQL-kyselyn rajoitus saavutetaan vain muutaman tietueen jälkeen |
| Sovellusalusta | Apex | ⚡️ Jonotettavat ketjut ilman mukautettujen objektien edistymisen seuraamista, mikä estää jatkamisen epäonnistumista |
| Sovellusalusta | Organisaatio | ⚡️ Ei valvo 5 samanaikaista erätyön rajoitusta tai jaetun päivittäisen asynkronisen Apex-suorituksen rajoitusta (DailyAsyncApexExecutions — suurempi kuin 250 000 tai 200 x käyttäjälisenssiä per 24 tuntia erässä, jonossa, tulevaisuudessa ja ajoitetussa Apexissa), mikä aiheuttaa agenttien käsittelyn hiljaisen jonon tai epäonnistumisen |
Kuvio
| Mistä etsiä | Miltä hyvä näyttää |
|---|---|
| Sovellusalusta | Organisaatio | ✅ Lataa agenttien suorituskyvyn testaaminen Full Copy -sandboxissa tuotanto-asteikon datamäärien avulla; simuloi samanaikaisia keskusteluita, jotka vastaavat huippupyyntöä |
| Sovellusalusta | Organisaatio | ✅ Mittaa p95- ja p99-lähtöä kuormituksen aikana tunnistaaksesi suorituskyvyn heikentymisen kuormituksen aikana. Vahvista, että hallintaohjelman kulutusrajoitus pysyy kynnysarvojen alapuolella huippukuormituksen aikana |
| Agentforce | Agentin kokoonpano | ✅ Suorita virhe-injektio: simuloi LLM:n johtopäätöksen virheitä palvelualueessa, jota katkaisija valvoo, syötä SOQL-poikkeuksia testaamaan virheiden käsittelyä, testaa korruptoitujen vastausten vahvistuslogiikkaa |
| Agentforce | Agentin kokoonpano | ✅ Esittele datavirhe (tilit, joissa on yli 10 000 alitason tiliä) testauksen aikana vahvistaaksesi, että sivutuslogiikka käsittelee pahimpien tapausten skenaariot |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Suorita kaaostekniikka: poista sovellusalustan tapahtumien tilaajat satunnaisesti käytöstä testaamalla toistohyökkäyksen palautusta, lopeta asynkronointitöitä suorituksen aikana testauksen tarkastuspisteen uudelleenkäynnistys |
| Sovellusalusta | Organisaatio | ✅ Ajoita säännöllisiä kaaoksen päiviä vaiheistettuihin ympäristöihin ja ylläpidä kestävyyttä agenttien kehittyessä |
| Sovellusalusta | Organisaatio | ✅ Suorita pitkäaikaisia vakaustestejä (72+ tuntia) ajasta riippuvien virheiden valvomiseksi: virheiden kertyminen ja suorituskyvyn asteittainen heikentäminen |
| Sovellusalusta | Organisaatio | ✅ Seuraa CPU-aikojen trendejä ja kopion kulutusta pitkällä aikavälillä havaitaksesi asteittaisen heikkenemisen kontekstinhallinnassa |
Anti-Mallit
| Mistä etsiä | Miltä huono näyttää |
|---|---|
| Sovellusalusta | Organisaatio | ⚡️ Lataa testit Partial Copy -sandboxissa pienemmällä datamäärällä, mikä tarjoaa harhaanjohtavaa luottamusta, koska datamäärä vaikuttaa suoraan agenttien suorituskykyyn |
| Agentforce | Agentin kokoonpano | ⚡️ Testaa vain onnellisia polkuja ilman, että ottaisit tahallisesti käyttöön virheitä virheiden vahvistamiseksi, uudelleenkokeilla logiikkaa ja aikakatkaisun käsittelyä varten |
| Sovellusalusta | Organisaatio | ⚡️ Suorittaa vain lyhytaikaisia testejä, puuttuvat ajasta riippuvat virheet (kumulatiiviset virheet, asteittainen heikkeneminen), jotka näytetään vain kestävän 72 tunnin toimintavaiheessa |
| Sovellusalusta | Sovellusalustan tapahtumat | ⚡️ Älä koskaan testaa Sovellusalustan tapahtuman toisto -ominaisuuden palautusta tai tarkastuspisteen uudelleenkäynnistystä, jolloin kestävyysmekanismit eivät ole vahvistettuja |
Kuvio
| Mistä etsiä | Miltä hyvä näyttää |
|---|---|
| Yritys | Dokumentaatio | ✅ Luo SLO-uloskirjautumiset ennen agenttien rakentamista, äläkä tuotanto-virheiden jälkeen. Määritä keskustelun onnistumisen tavoitteet (tavallisesti 95–99 %) per agenttityyppi |
| Sovellusalusta | Organisaatio | ✅ Seuraa keskustelun onnistumissuhdetta ensisijaisena agenttien luotettavuustilastona: Keskusteluiden suorittaminen ilman virheitä tai aikakatkaisuja prosentteina. Laske ihmiselle myönnetty lahjakkuus onnistuneeksi, koska eskalointi on suunniteltu lopullinen varataso. Laske vain epäonnistuneet tai tahattomat eskaloinnit tilastoon |
| Sovellusalusta | Organisaatio | ✅ Seuraa onnistumissuhdetta erikseen agentin tyypin ja käyttötarkoituksen mukaan, koska onnistumisen ehdot vaihtelevat agentin käyttötarkoitusten välillä |
| Sovellusalusta | Organisaatio | ✅ Laske keskiarvoinen aikaväli epäonnistumisten välillä (MTBF) per agenttityyppi tunnistaaksesi vähiten luotettavia agentteja, jotka vaativat optimointiinvestointeja |
| Sovellusalusta | Organisaatio | ✅ Mittaa keskiarvoista palautusaikaa (MTTR); automatisoi palautus sovellusalustan tapahtumien toistamisen ja katkaisijoiden avulla, jotta palautus tapahtuu paljon nopeammin ja vähemmän virheellisesti kuin manuaalisella toimenpiteellä |
| Einstein | Trust | ✅ Esimerkki satunnaisista agenttien vastauksista, jotka vahvistavat Data 360 -lähteiden vaatimukset maadoituksen tarkkuuden mittaamiseksi; tutki, kun tarkkuus laskee alle 95 % |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Valvo sovellusalustan tapahtumien toistohyökkäysten aukkoja (epäonnistuneet tai toimittamattomat tapahtumat) tilaajan puolella olevan lokikuvion avulla, joka tallentaa kunkin tapahtuman replayId-arvon ja korrelaatiotunnuksen mukautettuun objektiin |
| Sovellusalusta | Organisaatio | ✅ Hälytystoiminnot, kun mikä tahansa SLI laskee sen määritetyn SLO-kynnysarvon alle |
Anti-Mallit
| Mistä etsiä | Miltä huono näyttää |
|---|---|
| Yritys | Dokumentaatio | ⚡️ Rakenna agentteja määrittämättä ensin SLO-uloskirjautumisia, asettamalla luotettavuustavoitteita vain tuotanto-virheiden jälkeen |
| Sovellusalusta | Organisaatio | ⚡️ Käytä yhtä aggregaatin onnistumissuhdetta kaikille agenttityypeille sen sijaan, että seurattaisiin erikseen agenttityypin ja käyttötarkoituksen mukaan |
| Sovellusalusta | Organisaatio | ⚡️ Luottaa vain perinteiseen Salesforce-valvontaan (trust.salesforce.com) ilman, että seurattaisiin agenttikohtaisia palvelutasosopimuksia, kuten keskustelun onnistumissuhteen, MTBF:n, MTTR:n ja maantieteellisen tarkkuuden. |
| Sovellusalusta | Organisaatio | ⚡️ Vaatii manuaalisen toimenpiteen kaikille agenttien virheille palautuksen automatisoinnin sijaan sovellusalustan tapahtumien toistolla ja katkaisijoilla |
| Einstein | Trust | ⚡️ Älä koskaan näytä agenttien vastauksia maadoituksen tarkkuuden vahvistusta varten, jolloin hallusinaatioita ei havaita tuotantoympäristössä |
Kuvio
| Mistä etsiä | Miltä hyvä näyttää |
|---|---|
| Agentforce | Agentin kokoonpano | ✅ Suunnittele uudelleenyrityskuvioita, varaketjuja ja eskaloinnin kynnysarvoja agenttien työnkuluiksi alusta alkaen, ei jälkisuunnitteluna |
| Agentforce | Toiminto | ✅ Bulkkaamaan kontekstiin valmistautumista ja sivuttamaan suuria tietueiden kokoelmia agenttitoiminnoissa |
| Sovellusalusta | Sovellusalustan välimuisti | ✅ Tallenna usein käytetty viitetieto välimuistiin sovellusalustan välimuistissa vähentääksesi tarpeettomia kyselyitä agentin kontekstin valmistelun aikana |
| Sovellusalusta | Skaalikeskus | ✅ Käytä skaalauskeskusta tunnistaaksesi optimointia vaativat resurssiintensiteettiset agenttitoiminnot |
| Sovellusalusta | Sovellusalustan tapahtumat | ✅ Suunnittele itse palautuvia työnkulkuja käyttämällä Sovellusalustan tapahtumat -ominaisuutta kestävinä uudelleenyritysjonoina, joiden katkaisijat suojaavat ulkoisia riippuvuuksia |
| Agentforce | Agentin kokoonpano | ✅ Sisällytä aina henkilökohtainen käsittely jokaisen agentin heikentämisketjuun. |
| Sovellusalusta | Organisaatio | ✅ Valvo agenttien SLI-kertakirjautumiskertojen jatkuvia hälytyksiä, kun tilastot laskevat SLO-kertakirjautumiskertojen alle |
| Agentforce | Agentin kokoonpano | ✅ Tasapainottaa itsenäisiä kykyjä asianmukaisella valvonnalla: Ota käyttöön itserakentaminen väliaikaisista virheistä ja eskaloi, kun luottamustaso heikkenee tai edessä olevat tapaukset ilmestyvät |
Anti-Mallit
| Mistä etsiä | Miltä huono näyttää |
|---|---|
| Agentforce | Agentin kokoonpano | ⚡️ Luotettavuusmekanismien lisääminen (uudelleenyritys, varasto, eskalointi) jälkisuunnitteluna sen sijaan, että suunnittelisi ne alusta alkaen |
| Agentforce | Toiminto | ⚡️ Ei bulkata kontekstiin valmistautumista, mikä aiheuttaa hallintorajoitusvirheitä todellisen maailman kyselykuvioissa |
| Sovellusalusta | Organisaatio | ⚡️ Ei valvo API-kulutusta ja sovellusalustan tapahtumien allokaatiota ennakoivasti, vaan havaitse rajoituksia vain, kun agentit epäonnistuvat |
| Agentforce | Agentin kokoonpano | ⚡️ Suunnittelet agenttiketjuja ilman henkilökohtaista käsittelyä lopulliseksi varastoksi, jättäen mitään palautuspolkua, kun kaikki automatisoidut vaihtoehdot ovat loppuneet |
| Agentforce | Agentin kokoonpano | ⚡️ Tarjoamme agenteille täysin itsenäisiä toimintoja ilman eskaloinnin kynnysarvoja epäluottamuksellisille tilanteille tai reunojen tapauksille |