EDIH, EEN, Interreg: platforma programów europejskich.Dowiedz się więcej

Dojrzałość modeli SI etycznych i odpowiedzialnych

Państwa praktyki odpowiedzialnej SI, zmierzone według obszarów tematycznych i przełożone na mapę drogową.

10 obszarów tematycznych, undefined pytań, skala 5 poziomów. I działanie, które pozwala przejść z jednego poziomu na kolejny.

10 obszarów tematycznych modelu referencyjnego, już opracowanych od N1 do N5. Jedna firma, jedna jednostka biznesowa, albo 300 naraz.

Dojrzałość modeli SI etycznych i odpowiedzialnych

Zasady i strategia odpowiedzialnej SIN1 → N5
Zarządzanie (governance) i odpowiedzialnościN1 → N5
Inwentaryzacja i klasyfikacja zastosowańN1 → N5
Dane treningowe i jakośćN1 → N5

10 obszarów tematycznych, undefined pytań, skala 5 poziomów.

Nordhavn Industries

53 / 100

Zasady i strategia odpowiedzialnej SI64 → 84
Zarządzanie (governance) i odpowiedzialności53 → 79
Inwentaryzacja i klasyfikacja zastosowań61 → 82
Dane treningowe i jakość37 → 73
IAZautomatyzowane: wystarczą Państwa notatki ze spotkania, IA wypełnia audyt.

Oni mierzą swoją dojrzałość z Datamensio

  • ANITI
  • CNRS
  • LIRMM
  • CNES
  • Docaposte
  • KPMG

Przykład

Ta sytuacja mogłaby być Państwa sytuacją.

Weźmy przykład firmy: trzy oddziały, trzy arkusze kalkulacyjne, żadnej wspólnej odpowiedzi.

01

Nikt nie potrafi tego skonsolidować.

Nordhavn Industries, 2400 osób w Hamburgu, Lyonie i Porto. Zamawiający pyta, na jakim etapie jest grupa. Każdy oddział odpowiada we własnym arkuszu, z własnymi skalami.

02

Trzy tygodnie, jedna wspólna baza.

Diagnoza Ramy etycznej i odpowiedzialnej SI (zasady OECD, UNESCO, NIST AI RMF, wsparcie ISO/IEC 42001) uruchomiona jednocześnie na trzech oddziałach, na podstawie notatek ze spotkań z osobami odpowiedzialnymi. Model referencyjny był już gotowy, podobnie jak 10 obszarów tematycznych i poziomy od N1 do N5.

03

Dwa wydatki uniknięte, zanim zostały poniesione.

Wynik 53 na 100, luka skoncentrowana na trzech obszarach tematycznych. Asystent IA wykrył, że dwa działania planu pokrywają się z działaniami z innego audytu. Prezentacja wyników dla komitetu powstała w jedno zdanie.

Czego dzięki temu uniknięto

  • 3oddziały zmierzone na tej samej podstawie, zamiast trzech kwestionariuszy do przetworzenia
  • 2zdublowane działania wykryte przed poniesieniem wydatku
  • 1prezentacja wyników dla komitetu, bez ręcznego opracowania

Te liczby pochodzą z przykładu. Mogłyby być Państwa liczbami.

Norma narzuca procesy. Datamensio mówi, na jakim etapie Państwo są.

01

Model referencyjny jest już gotowy

Obszary tematyczne, pytania i poziomy od N1 do N5 opracowane. Nie zaczynają Państwo od pustego arkusza.

02

Wynik jest gotowy tego samego dnia

Online, przez link do samooceny albo podczas spotkania. Obszar po obszarze, porównywalny w czasie.

03

Luka staje się wycenionym planem

Każde przejście na kolejny poziom niesie ze sobą działanie. IA priorytetyzuje według oczekiwanego efektu, nie według kolejności z normy.

04

Postęp da się wykazać

Kampania po kampanii, względem Państwa celu i względem Państwa przeszłości. Tego właśnie oczekuje Państwa zarząd.

Skala dojrzałości

Jeden poziom, kolejny i działanie, które je łączy.

To właśnie ten mechanizm (poziom, poziom wyższy i działanie łączące oba) przekształca stwierdzenie w trajektorię.

Czy błędy systematyczne (biasy) modeli są testowane i monitorowane przez cały cykl ich życia?

  1. N1

    Nie jest przeprowadzany żaden test biasów. Temat nie jest poruszany przy wdrażaniu modelu do produkcji.

  2. N2

    Testy są prowadzone okazjonalnie, z inicjatywy danego zespołu, bez wspólnej metryki ani zachowania wyników.

  3. N3

    Protokół testowania jest zdefiniowany i stosowany przed każdym wdrożeniem do produkcji, z udokumentowanymi metrykami sprawiedliwości i zarchiwizowanymi wynikami.

  4. N4

    Testy są powtarzane okresowo w środowisku produkcyjnym, odchylenia uruchamiają udokumentowane działanie, a wyniki są prezentowane instancji zarządzającej.

  5. N5

    Protokół i metryki są rewidowane na podstawie doświadczeń z użytkowania i incydentów, z udokumentowanym śledzeniem rewizji oraz porównaniem modeli w czasie.

Działanie, aby przejść z N2 do N3

Zdefiniować wspólny protokół testowania biasów, z metrykami i populacjami do pokrycia, wpisać go jako obowiązkowy punkt kontrolny w przeglądzie wdrożenia do produkcji oraz archiwizować wyniki w karcie modelu.

« Dzięki Datamensio realizujemy nasze cele ze znacznie większą skutecznością. Służby inspekcyjne EFRR oraz naszego ministerstwa nadzorującego szczególnie doceniły to podejście, które dostarcza im wiarygodnych danych. »

Dyrektorka CCI 94CCI Île-de-France

Chambre de commerce et d'industrie
« Uważamy, że to rozwiązanie najlepiej odpowiada potrzebie skalowania naszego projektu transformacji i mierzenia jego wpływu zgodnie z naszymi wymaganiami. »

Maja SucekChief Operating Officer, Interreg Danube

Interreg Danube Region

Wykonajcie swój pierwszy pomiarna null.

O czym jest ten model referencyjny

Etyczna i odpowiedzialna SI nie jest normą, lecz zbiorem praktyk, zbudowanym na zasadach, które są już ugruntowane: sprawiedliwość i brak dyskryminacji, przejrzystość i wyjaśnialność, skuteczny nadzór ludzki, odporność i bezpieczeństwo, poszanowanie prywatności, zidentyfikowana odpowiedzialność, uwzględnienie wpływu środowiskowego. Zasady te odnajdujemy w zaleceniach OECD i UNESCO, w NIST AI Risk Management Framework oraz, w formie systemu zarządzania, w ISO/IEC 42001. Opisują one oczekiwane zachowanie modeli i zespołów, które je projektują, a nie listę wymagań egzekwowalnych.

To właśnie czyni ten temat trudnym do sterowania. Zasady są powszechnie akceptowane, ich wdrożenie bywa nierówne między zespołami i między modelami. Kto decyduje, że model może zostać wdrożony do produkcji, i na podstawie jakich zmierzonych kryteriów? Czy błędy systematyczne (biasy) są testowane jednorazowo przed uruchomieniem, czy monitorowane przez cały cykl życia modelu? Czy użytkownik biznesowy wie, że decyzja została wspomagana przez model, i do kogo może się zwrócić, by ją zakwestionować? Większość organizacji potrafi odpowiedzieć na te pytania w odniesieniu do swojego modelu flagowego, znacznie rzadziej w odniesieniu do dziesiątek modeli i zastosowań generatywnej SI wdrożonych poza radarem.

Pojawienie się generatywnej SI przesunęło ten temat. Praktyki odpowiedzialnej SI zostały pierwotnie zaprojektowane dla modeli budowanych wewnętrznie, na danych pod kontrolą, z określonym cyklem życia. Coraz większa część zastosowań opiera się dziś na modelach dostawców zewnętrznych, zintegrowanych z narzędziami biznesowymi, czasem aktywowanych bez udziału działu systemów informatycznych. Pytanie nie dotyczy już wyłącznie dobrego projektowania modeli, ale tego, które są używane, przez kogo, do jakich decyzji i z jakim poziomem kontroli. Powraca częste nieporozumienie: odpowiedzialna SI i zgodność regulacyjna nie pokrywają się. Ta druga wyznacza minimum, pierwsza strukturyzuje sposób pracy.

Diagnoza dojrzałości odpowiada na inne pytanie niż kontrola typu tak lub nie. Nie chodzi o to, czy karta istnieje, lecz na jakim poziomie praktyki są rzeczywiście wyposażone w narzędzia, powtarzalne i monitorowane. Każdy obszar tematyczny otrzymuje wynik, każda luka wobec celu generuje działanie, a SI Datamensio grupuje te działania w priorytetyzowaną mapę drogową, z kosztem, terminem i oczekiwanym wpływem na wynik.

Model referencyjny jest gotowy do użycia i należy do Państwa. Mogą Państwo dostosować obszary tematyczne, przeformułować pytania, przedefiniować poziomy, lub zlecić SI zbudowanie wersji dostosowanej do Państwa branży i do Państwa własnych dokumentów wewnętrznych, karty, polityki zarządzania modelami czy istniejącej siatki przeglądu.

Norma referencyjna: Ramy etycznej i odpowiedzialnej SI (zasady OECD, UNESCO, NIST AI RMF, wsparcie ISO/IEC 42001)

Oceniane obszary tematyczne

  • Zasady i strategia odpowiedzialnej SI

    Istnienie sformalizowanych zasad, powiązanie ze strategią danych i SI, wsparcie ze strony zarządu, operacyjne wdrożenie w zespołach.

  • Zarządzanie (governance) i odpowiedzialności

    Instancja przeglądu przypadków użycia, zidentyfikowane role, kryteria wdrożenia do produkcji, rozstrzyganie wrażliwych zastosowań, eskalacja przypadków spornych.

  • Inwentaryzacja i klasyfikacja zastosowań

    Spis modeli i zastosowań generatywnej SI, w tym pochodzących z narzędzi zewnętrznych, klasyfikacja według poziomu ryzyka i krytyczności.

  • Dane treningowe i jakość

    Pochodzenie i licencje zbiorów danych, reprezentatywność, zarządzanie danymi osobowymi, dokumentacja przetwarzania, identyfikowalność wersji.

  • Sprawiedliwość i postępowanie z biasami

    Przyjęte metryki sprawiedliwości, testowane populacje, protokół testowania przed uruchomieniem, okresowa ponowna ocena, udokumentowane działania naprawcze.

  • Przejrzystość i wyjaśnialność

    Informowanie osób, których dotyczy decyzja, dokumentacja modeli, zdolność wyjaśnienia decyzji indywidualnej, ścieżki odwołania i zakwestionowania.

  • Nadzór ludzki

    Poziom interwencji ludzkiej w zależności od krytyczności, szkolenie osób odpowiedzialnych, rzeczywista zdolność do odrzucenia rekomendacji, identyfikowalność przejęcia kontroli.

  • Odporność i bezpieczeństwo modeli

    Testy odporności, zarządzanie dryfem, kontrola dostępu do modeli i danych, uwzględnienie ataków na dane wejściowe i polecenia (prompty).

  • Monitorowanie w produkcji i cykl życia

    Wskaźniki śledzone po wdrożeniu, wykrywanie dryfu wydajności, procedura wycofania modelu, okresowy przegląd aktywnych zastosowań.

  • Kultura, kompetencje i wpływ środowiskowy

    Uświadamianie jednostek biznesowych, podnoszenie kompetencji zespołów technicznych, uwzględnienie zużycia zasobów, wybór wykorzystywanych modeli.

Krótsza wersja modelu referencyjnego, licząca 32 pytań, jest dostępna do samooceny online. Pełna wersja obejmuje 10 obszarów tematycznych i undefined pytań.

Najczęściej zadawane pytania

Czy etyczna i odpowiedzialna SI może zostać poddana certyfikacji?

Nie, chodzi o zbiór praktyk, a nie o normę podlegającą certyfikacji. Organizacja, która chce uzyskać rozwiązanie podlegające certyfikacji, zwraca się ku ISO/IEC 42001, która strukturyzuje system zarządzania sztuczną inteligencją. Niniejsza diagnoza mierzy dojrzałość praktyk i stanowi wielokrotnie wykorzystywaną podstawę dla tego podejścia.

Jaka jest różnica w stosunku do diagnozy zgodności z europejskim rozporządzeniem o SI?

Ramy regulacyjne ustalają obowiązki w zależności od poziomu ryzyka systemów. Odpowiedzialna SI obejmuje szerszy zakres: sposób projektowania, wdrażania i monitorowania modeli, również w przypadku zastosowań nieobjętych żadnym obowiązkiem. Obie diagnozy krzyżują się w jednej, przekrojowej mapie drogowej, bez powielania działań.

Ile czasu zajmuje ocena?

Wersja skrócona wypełniana jest podczas jednej sesji roboczej. Wersja pełna, w trybie zespołowym z udziałem wielu osób, rozciąga się na jeden do dwóch tygodni: większość czasu służy zebraniu informacji od zespołów danych, jednostek biznesowych i działu systemów informatycznych.

Czy odpowiedź wymaga wiedzy technicznej?

Pytania dotyczą praktyk zarządzania i gospodarowania cyklem życia, a nie architektury modeli. Odpowiedzialny za zarządzanie SI lub kierownik projektu danych może na nie odpowiedzieć. Niektóre pytania wymagają wkładu data scientista: tryb zespołowy pozwala przypisać je bezpośrednio właściwej osobie.

Czy można dostosować model referencyjny do naszego kontekstu?

Tak. Obszary tematyczne, pytania i poziomy są modyfikowalne, mogą Państwo również dodać własne osie. SI może także zbudować wersję na podstawie Państwa karty, polityki zarządzania modelami lub istniejących siatek przeglądu.

Jak porównać kilka jednostek biznesowych?

Każdy podmiot jest oceniany według tego samego modelu referencyjnego, co czyni wyniki porównywalnymi w ramach obszarów tematycznych. Benchmark sytuuje podmiot względem innych oraz względem jego własnych wcześniejszych ocen. Przekrojowa mapa drogowa konsoliduje następnie plany działania z kilku diagnoz.

Czy plan działania jest wyceniony?

Tak. Każda luka wobec celu generuje działanie, a katalog usług otwiera rozwiązanie odpowiadające tym działaniom, z kosztem, terminem i oczekiwanym wpływem na wynik. Mapa drogowa jest priorytetyzowana przez SI, a następnie prowadzona aż do realizacji.

Gdzie przechowywane są dane?

We Francji, u OVH, z kopią zapasową u Scaleway. Brak transferu poza Unię Europejską. Modele SI wykorzystywane w platformie mogą być wybierane, również spośród rozwiązań europejskich.

Wykonajcie swój pierwszy pomiarna null.