ContacteAnalítica avançada i IA
Objectiu
Les eines d’analítica avançada i d’Intel·ligència Artificial contribueixen a la transformació dels serveis públics de la Generalitat de Catalunya, integrant tecnologies d’IA i analítica avançada que permeten millorar l’eficiència, la qualitat del servei i la presa de decisions, sota un marc comú que assegura una adopció segura i controlada.
Aquestes eines desenvolupades per la Generalitat de Catalunya i el Centre de Telecomunicacions i Tecnologies de la Informació (CTTI) s’integren amb la Plataforma Transversal de Dades (PTD), proporcionant suport complet i d’extrem a extrem al cicle de MLOps i LLMOps, i facilitant l’execució de projectes d’analítica avançada i d’intel·ligència artificial, tant tradicional com generativa.
Funcions i serveis
Integrada amb la Plataforma Transversal de Dades (PTD) i basada en tecnologia Databricks, aquesta arquitectura completa té com a objectius principals:
- Proporcionar serveis tecnològics corporatius per al desenvolupament i l’operació de solucions d’analítica avançada i IA.
- Definir i promoure arquitectures de referència i patrons reutilitzables, basats en casos d’ús ja desenvolupats.
- Oferir serveis d’acompanyament al llarg del cicle de vida del projecte d’analítica avançada i IA: disseny, implementació, posada en producció i tancament.
- Donar suport per assegurar l’alineament amb els estàndards corporatius, la Plataforma Transversal de Dades (PTD) i l’ecosistema tecnològic del CTTI.
Beneficis
- Governança unificada i alta qualitat de les dades: gestió centralitzada de models i dades mitjançant Databricks Unity Catalog, garantint fiabilitat, consistència i traçabilitat completa.
- Control d’accés basat en rols: definició de privilegis segons el perfil d’usuari: enginyers de dades, científics de dades, enginyers ML i professionals DevOps.
- Integració d’eines per a aprenentatge automàtic i IA generativa: desenvolupament fluït de models aprofitant Databricks Mosaic AI i altres eines compatibles.
- Automatització del desplegament i compatibilitat amb CI/CD: suport per a pipelines existents (SIC+) que agiliten la implementació de projectes d’analítica avançada i intel·ligència artificial.
- Monitoratge i eficiència en costos: seguiment centralitzat de gestió, rendiment i costos dels recursos, amb etiquetes FinOps.
- Conformitat normativa i seguretat: Compliment dels requisits legals, reguladors i de seguretat.
- Models i sistemes robustos i precisos: disseny segons bones pràctiques i validacions continuades, amb explicabilitat que facilita interpretació i confiança.
- Escalabilitat de la infraestructura: capacitat d’adaptar-se a l’evolució i la magnitud dels projectes.
- Explicabilitat dels models: facilita la interpretació, la transparència i la confiança en els resultats.
Serveis transversals
Les eines d’analítica avançada i IA estan orientades a posar-se a disposició dels proveïdors perquè puguin desenvolupar, operar i industrialitzar projectes d’analítica avançada i intel·ligència artificial de manera estandarditzada, segura i governada.
Llista de serveis
A continuació s’inclouen un conjunt de serveis tecnològics que es poden utilitzar i combinar segons les necessitats dels usuaris o proveïdors, incloent l’estat (si es troben disponibles a producció o encara en desplegament), una descripció de la seva funció i els enllaços de documentació disponible per cadascun d’ells:
| Servei | Estat | Proveïdor | Descripció | Enllaços d’interès |
|---|---|---|---|---|
| GD. Anonimitzador | Disponible | Nymiz | Solució d’intel·ligència artificial (IA) que permet ocultar de forma irreversible dades sensibles com noms de persones, organitzacions, números d’identificació i altres. | • GD. Anonimitzador - Intranet d’Administració digital |
| Mineria de processos | Disponible | Celonis | Plataforma basada en la mineria de processos que analitza els processos a partir de les dades existents, detectant colls d’ampolla, ineficiències i oportunitats de millora. També proporciona visualitzacions i recomanacions. | • Manual d’acces a l’eina (properament) • Plantilla filtre cas d’ús (properament) • Mineria de Processos Celonis Manual Usuari (v1.0.0) • Mineria de Processos Celonis DA SaaS DT DAQ (v2.2.0) • Mineria de Processos Celonis KPIs Generals (v1.0) • Mineria de Processos Celonis Guia Bones Pràctiques (v1.0.0) • Mineria de Processos Celonis Llista Requisits (v1.0.0) |
| Generació de dades sintètiques | Disponible | Mostly AI | Plataforma dissenyada per generar conjunts de dades sintètiques que reprodueixen fidelment les característiques estadístiques, la coherència interna i les relacions entre taules de les dades originals. | • Generació Dades Sintètiques MostlyAI Presentació (v1.0.0) • Generacioó Dades Sintètiques MostlyAI Manual Accès (v1.0.0) • Generació Dades Sintètiques MostlyAI Manual Usuari (v1.0.0) • Generació Dades Sintètiques MostlyAI ZipCodi Exemple (v1.0.0) |
| Comprensió de documents | Disponible | NotebookLM (Google) | Plataforma d’intel·ligència artificial de Google orientada a gestionar coneixement corporatiu. Permet que equips i empreses treballin sobre fonts pròpies de dades (documents interns, informes, guies tècniques, etc.) per extreure informació, resumir, comparar o generar contingut d’alt valor. | • Comprensió de Documents Notebook LM Manual Accès (v1.0.0) • Comprensió de Documents Notebook LM Manual Usuari (v1.0.0) • Comprensió de Documents Notebook LM DT DAQ (v3.0.0) |
| Detecció de dades | Disponible | Microsoft Document Intelligence | PPlataforma que analitza documents de manera automàtica, identificant informació clau, com noms, dates, números o contingut delicat i també pot classificar documents segons tipus o prioritat. Facilita l’extracció ràpida de dades rellevants, redueix errors humans i ajuda a organitzar grans volums de documents de manera eficient. | • Detector de Dades Document Intelligence Manual Accès (v1.0.0) • Detector de Dades Document Intelligence Manual Usuari (v2.0.1) • Detector de Dades Document Intelligence Manual Api (v1.0.0) • Detector de Dades Document Intelligence DT DAQ (v1.1.0) (Properament) |
Exemples de sinèrgies entre serveis
El catàleg de serveis conforma un conjunts de solucions que poden combinar-se i que cobreixen des de la governança de les dades i per l’execució i l’ús efectiu dels models, fins al control, la traçabilitat i la monitorització contínua.
| Capa de seguretat i de governança de dades | • Anonimitzador de dades • Detecció de dades (Doc. Intelligence) • Validació de solucions IA (Galtea) |
| Capa d’execució i ús de la IA | • Desenvolupament de solucions d’IA (AI Foundry) • Explotació documental (NotebookLM) |
| Capa de control, traçabilitat i ús | • Monitorització de l’ús d’IA Gen (Neuraltrust) • Anàlisi de processos i impacte (Celonis) |
Gestió d’incidències
En cas de trobar incidències en qualsevol dels serveis presentats anteriorment, podeu seguir el procediment disponible al document Transversal_Gestioincidencies_v1.0.0.
Altres serveis
A més del catàleg de serveis tecnològics i dels casos d’ús, també s’ofereix un conjunt de serveis transversals de suport, acompanyament i capacitació que tenen com a objectiu facilitar l’adopció efectiva i homogènia de l’analítica avançada i la intel·ligència artificial a la Generalitat de Catalunya.
Aquests serveis permeten garantir que els projectes i serveis d’IA s’executen d’acord amb criteris comuns, compleixen els requisits normatius i de governança i generen valor real més enllà del desplegament tècnic.
Acompanyament en el desenvolupament de casos d’ús
També s’ofereix a continuació un servei d’acompanyament especialitzat durant el desenvolupament de casos d’ús, amb l’objectiu de reduir riscos, accelerar els terminis i assegurar l’alineació amb el marc corporatiu.
Aquest acompanyament busca donar suport a equips interns i proveïdors, i s’adapta al grau de maduresa del cas d’ús i a la seva complexitat funcional.
Principals línies d’acompanyament:
Orientació inicial del cas d’ús
• Anàlisi de viabilitat funcional i tècnica.
• Adequació del cas d’ús a l’ecosistema PTD.
Suport al disseny de la solució
• Definició de l’arquitectura de referència.
• Aplicació de patrons i bones pràctiques existents.
• Validació d’aspectes de seguretat, privacitat i governança.
Acompanyament durant el desenvolupament i desplegament
• Suport en la integració amb serveis.
• Coordinació amb els diferents entorns (DEV / PRE / PRO).
• Revisió prèvia a la posada en producció.
Tancament i consolidació del cas d’ús
• Transferència de coneixement i documentació mínima.
• Preparació per a l’operació i l’ús recurrent.
Formació i accions de sensibilització
La formació és un element clau per garantir una adopció efectiva i responsable al voltant de la IA i analítica. Per aquest motiu, s’impulsa accions formatives orientades tant a perfils tècnics com a perfils funcionals, adaptades al nivell de coneixement i al rol de cada col·lectiu.
Objectius de la formació
• Incrementar l’autonomia dels equips en l’ús dels serveis.
• Facilitar l’ús correcte i eficient de les eines i plataformes.
• Promoure una cultura d’IA responsable i alineada amb valors corporatius.
Tipologies de formació
• Formació específica per servei (IA Gen, MLOps, process mining, etc.).
• Sessions pràctiques orientades a casos d’ús concrets.
• Sessions de sensibilització en matèria d’ètica, explicabilitat i risc.
• Les accions formatives es poden oferir en format sessions guiades o materials d’autoaprenentatge, segons les necessitats de cada col·lectiu.
Metodologies, guies, plantilles i recomanacions
Per facilitar el desenvolupament de casos d’ús d’IA i d’IA Gen, es posa a disposició un conjunt de guies transversals, reutilitzables tant per serveis com per casos d’ús, que actuen com a marc comú de treball.
Documentació i guies en el desenvolupament i ús de la Intel·ligència Artificial
| Servei | Estat | Proveïdor |
|---|---|---|
| Guia d’explicabilitat dels sistemes d’IA | Document que té com a objectiu ajudar a entendre com i per què un sistema d’IA pren determinades decisions o genera certs resultats. | • Guia Explicabilitat (v2.0.0) |
| Política de gestió de riscos en el desplegament de tecnologies d’IA | Guia comprensiva per identificar, analitzar, avaluar, gestionar i monitorar els riscos associats amb el desplegament de tecnologies d’ IA. | • Marc Riscos IA (v2.0.0) |
Personalitat i Xatbots
| Servei | Estat | Proveïdor |
|---|---|---|
| Guia de veu, to i personalitat dels assistents conversacionals | Guia recull de les bones pràctiques sobre com han de ser la veu i el to d’assistents conversacionals i com es poden aplicar en diferents contextos i casos d’ús. | • Guia Bots de Conversa VeuiTo (v1.0.0) |
| Guia pràctica de bots de conversa | Guia recull dels indicacions per crear assistents conversacionals o bots de conversa per a qualsevol departament de la Generalitat que hagi d’afrontar un procés de creació d’un bot de conversa. | • Guia Bots de Conversa Guia Pràctica (v1.0.0) |
| Guia de prompting per IA generativa | Introducció a la IA Generativa sobre com estructurar un prompt de manera efectiva, així com bones pràctiques associades. | • Guia Bots de Conversa Prompting (v1.0.0) |
Altres peticions i suport transversal
Es posa a disposició dels departaments i equips un servei de suport transversal per a altres peticions, orientat a donar resposta a necessitats puntuals, consultes específiques o requeriments no estrictament vinculats al desenvolupament de casos d’ús o serveis, però relacionats amb l’ús, la governança o l’evolució dels serveis d’analítica avançada i IA:
Consultes funcionals i tècniques puntuals
• Dubtes sobre l’ús correcte d’un servei.
• Consultes sobre limitacions, capacitats o configuracions recomanades.
• Aclariments sobre integracions amb la PTD o altres sistemes corporatius.
Orientació prèvia a la definició d’un cas d’ús
• Suport a equips que exploren una iniciativa però encara no tenen un cas d’ús definit i recomanacions sobre l’enfocament més adequat.
Peticions d’evolució o millora
• Recollida de propostes de millora dels serveis existents.
• Identificació de necessitats compartides entre departaments.
• Avaluació preliminar abans d’elevar-les als mecanismes de governança.
Suport en situacions especials
• Canvis organitzatius o de proveïdor.
• Necessitats puntuals derivades de projectes estratègics.
• Coordinació amb altres iniciatives corporatives
Transparència i explicabilitat dels models
L’acord de Govern de febrer 2024, pel qual es crea la Comissió d’IA, estableix la necessitat d’impulsar la construcció d’un Registre de sistemes d’Intel·ligència Artificial i Transparència de l’Administració de la Generalitat.
Aquesta solució corporativa, actualment construïda amb tecnologia LowCode de Microsoft (PowerApp Canva), és un inventari que permet integrar tota la informació tècnica relativa als sistemes d’IA i altres algorismes emprats en els serveis de l’administració complint amb els requisits de l’AI Act per a sistemes d’alt risc.
A més, el Registre serveix de base per a una pàgina web pública. Aquesta pàgina es nodreix de la informació del Registre utilitzant com a enllaç el Portal de Dades Obertes. Tot això amb l’objectiu d’oferir informació al ciutadà sobre l’ús de tecnologies d’IA per l’Administració i exemplificant un ús ètic i fiable de la tecnologia en el sector públic.
Així doncs, aquesta solució esta desenvolupada amb un doble enfocament:
- Registre d’IA: Solució corporativa desenvolupada per garantir l’accés, consulta i emplenament als tècnics de l’administració.
- Web del Registre d’IA: Solució web pública desenvolupada per garantir l’accés i el compliment del deure de transparència envers la ciutadania.
