Přeskočit na obsah

Jak zvolit architekturu AI řešení

Začněte úlohou a měřením

Zvolte nejjednodušší řešení, které splní požadavky na kvalitu, bezpečnost, odezvu a cenu. Pro část úloh stačí pravidla nebo jedno volání modelu. Více agentů přidává režii, body selhání a potřebu kontroly.

Pojem frontier model označuje model na technologické špičce; neříká sám o sobě, který model je nejlepší pro konkrétní úlohu. Menší obecný model může fungovat bez vlastního tréninku. Vlastní provoz nemusí být levnější než API: započítejte hardware, vytížení, správu, aktualizace i bezpečnost.

Čtyři možnosti

VzorKdy jej zvažovatCo ověřit
Pravidla a běžná automatizaceKroky a požadovaný výsledek jsou přesně určitelnéPokrytí výjimek a údržbu pravidel
Jeden model s potřebným kontextemÚloha se vejde do jednoho dobře definovaného krokuKvalitu na vlastních příkladech a dostupnost zdrojů
Pevný postup nebo směrováníRůzné typy vstupů vyžadují odlišné nástroje či modelyChyby směrování, návaznosti a náklady celého procesu
Orchestrátor a pracovní agentiPodúlohy se mění podle zadání a nelze je předem dobře rozepsatOprávnění agentů, koordinaci, limity a kvalitu výsledné syntézy

Orchestrátor může rozdělovat práci a sestavovat výsledek. Pracovní agent může použít model, vyhledávání nebo běžný program. Rozdělení na „velký model pro myšlení“ a „malý pro provedení“ je možnost k ověření, nikoli obecné pravidlo.

Příklad: návrh odpovědi na zákaznickou stížnost

  1. Načtěte oprávněně dostupná data a ověřte typ požadavku.
  2. Vyhledejte platné podmínky a potřebnou historii případu.
  3. Sestavte návrh odpovědi s odkazy na podklady.
  4. Zkontrolujte faktické údaje a pravomoc nabídnout nápravu.
  5. Před odesláním nechte rizikové nebo nejednoznačné případy schválit člověkem.

Nejdříve tento postup otestujte s jedním modelem. Směrování na menší model nebo více agentů přidejte, pokud měření prokáže přínos. Žádný obecně doložený poměr „20 % nákladů / 80 % hodnoty“ pro tento příklad neexistuje.

Kritéria pilotu

Předem stanovte reprezentativní úlohy, chybové případy a přijatelnou kvalitu. Porovnejte varianty na stejných vstupech. Sledujte náklady celého případu včetně oprav, dobu do použitelného výsledku, chybné akce a zásahy člověka. Po změně modelu měření opakujte.

Vzory odpovídají obecnému rozlišení workflow a agentů v technickém článku Anthropic; konkrétní volba musí vycházet z vlastního ověření.