
Fizikailag leválasztott szuverén LLM-platform, MCP-alapú többágenses automatizálás és token FinOps
Éles MI, amelyet a CISO jóváhagyott és a pénzügyi igazgató is üdvözölt, miközben az ügyféladatok minden bájtja a saját joghatóságában maradt.
Röviden
Ügyfél
Egy szabályozott európai és MENA-régióbeli pénzügyi szolgáltató intézmény.
Csapat
1 vezető MI- és adatarchitekt, 2 szuverén ML- és ágensmérnök és 1 felhő- és PQC-biztonsági mérnök
Időtartam
10 hét
A kihívás
Az ügyfél automatizálni kívánta az összetett, kétnyelvű (angol és arab) KYC-dokumentumkinyerést, a megfelelőségi auditálást és a belső tudásvisszakeresést. Az adattárolási helyre vonatkozó szigorú jogszabályok, a MENA-régió személyesadat-védelmi törvényei (PDPL), az EU AI Act és a DORA megtiltották, hogy a nyers személyes ügyféladatokat nyilvános amerikai fogyasztói LLM-API-knak küldjék.
Első felhőalapú MI-prototípusát ráadásul elszabadult token-inferenciaköltségek és a hallucináció kockázata terhelte.
Mit építettünk és kötöttünk össze
Privát inferencia, kimenő adatforgalom nélkül
Privát inferenciaklaszter nagy és kis nyelvi modellekhez egy szuverén regionális felhő VPC-jén belül, jogosultságtudatos GraphRAG-gel, amely szerepköralapú hozzáférést kényszerít ki a dokumentumokhoz.
Felügyelt MCP-ágensek
Autonóm ágensek a Model Context Protocol (MCP) alapján, emberek felügyeletével (human on the loop), amelyek KYC-, kereskedelemfinanszírozási és ügyfélbevezetési dokumentumokat nyernek ki, vetnek össze, és könyvelnek közvetlenül az alaprendszerekbe (intelligens dokumentumfeldolgozás, IDP 2.0).
Token FinOps-átjáró
Szemantikus gyorsítótárazás és dinamikus modellútvonalválasztás, amely a rutinfeladatok 75%-át kvantált kis nyelvi modellekhez küldi, és az élvonalbeli modelleket az összetett érvelésre tartogatja.
Rendszerek és technológiák
- MI és gépi tanulás
- Mistral
Mért eredmények
Az XSIS élesüzemre kész szuverén MI-t adott nekünk, amelyet a CISO-nk jóváhagyott, a pénzügyi igazgatónk pedig lelkesen fogadott: felére csökkentette inferenciaszámlánkat, miközben az ügyféladatok minden bájtja a joghatóságunkon belül maradt.
Beszélgetéssel kezdje, nem szerződéssel.
Mondja el, mit szeretne megépíteni, összekötni vagy biztonságossá tenni. Egy architekt végigmegy Önnel a részleteken, majd javasolja, hol érdemes kezdeni.
Mi történik ezután
Időpont egyeztetése
Csapatunk e-mailben egyeztet Önnel egy időpontot a konzultációra.
Előzetes konzultáció
Egy ingyenes 30 perces online előzetes konzultáció: áttekintjük a céljait, rendszereit és korlátait.
Felkészültségi értékelés
Egy ingyenes 48 órás felkészültségi értékelés során egyik vezető architektünk a hatpontos készenléti definíció (Definition of Ready) alapján megvizsgálja a projektjét, és javasolja a hozzá illő utat.
Az út kiválasztása
A kész hatókörű projektek 3 és 5 munkanapon belül kötelező érvényű ajánlatot kapnak. A koncepciószakaszban lévő projektek a Blueprint Studióban indulnak. A hibás, dokumentálatlan vagy integrációra szoruló éles rendszer diagnosztikával indul (időtartam: 1 és 2 hét között). A Blueprint Studiónak és a diagnosztikának egyaránt fix díja van, amelyet az ajánlat tartalmaz.
