Jak prowadzić gotowe do audytu zapisy decyzji w fabryce, także tych z udziałem AI
DBR77 Team7 min czytania
Na tej stronie
Gotowy do audytu zapis decyzji pokazuje, co zdecydowano, kto zdecydował, kiedy, na podstawie jakich danych i dlaczego, a zmienić go nie da się bez pozostawienia śladu. W przypadku decyzji podejmowanych z udziałem AI zapis zawiera też to, co AI zarekomendowała, co człowiek z tym zrobił i powód każdego odstępstwa od rekomendacji. Jeśli w kilka minut, z jednego systemu, odtworzysz dowolną decyzję z zeszłego miesiąca, Twoje zapisy są gotowe do audytu.
Większość zakładów zapisuje wynik decyzji, a nie samą decyzję. Partia została zwolniona albo kontrola pominięta, ale to, kto i dlaczego, jest w e-mailu albo w czyjejś głowie.
Co „gotowy do audytu” oznacza w przypadku decyzji
Branże regulowane mają dobrze sprawdzoną definicję. Wytyczne amerykańskiej FDA dotyczące integralności danych w produkcji leków mówią, że dane powinny być przypisywalne, czytelne, zapisywane na bieżąco, oryginalne lub będące wierną kopią oraz dokładne, co określa się skrótem ALCOA. Te same wytyczne definiują ścieżkę audytu jako bezpieczny, generowany komputerowo zapis ze znacznikiem czasu, który pozwala odtworzyć przebieg zdarzeń związanych z utworzeniem, zmianą lub usunięciem zapisu elektronicznego.
Amerykańskie przepisy 21 CFR Part 11 dodają stronę systemową. Wymagają bezpiecznych, generowanych komputerowo ścieżek audytu ze znacznikiem czasu, które niezależnie rejestrują wpisy i działania operatorów tworzące, zmieniające lub usuwające zapisy, a zmiany nie mogą zasłaniać wcześniejszych wpisów. Wymagają też dostępu ograniczonego do upoważnionych osób i sprawdzania uprawnień tego, kto może podpisywać lub zmieniać zapisy.
Te zasady dotyczą zapisów podlegających przepisom FDA. Poza tym zakresem nadal są dobrą listą kontrolną przed audytami klientów i certyfikacyjnymi.
Partia 4 000 wtryskiwanych obudów jest zablokowana po tym, jak wymiar w gnieździe 3 wyszedł poza normę.
Co musi zawierać zapis decyzji
Większość tych pól można wypełnić automatycznie, jeśli decyzja zapada w systemie, w którym są dane.
| Pole | Przykład | Dlaczego pyta o to audytor |
|---|---|---|
| Co zdecydowano | Partia 2291 zwolniona do wysyłki | Sama decyzja, a nie tylko jej skutek |
| Kto zdecydował | Imię, nazwisko i rola, zalogowany | Przypisywalność i to, czy rola miała uprawnienia |
| Kiedy | Data i godzina ustawiane przez system | Zapis na bieżąco, a nie wpisany później |
| Na podstawie jakich danych | Wyniki kontroli, odczyty, powiązane zlecenie i partia | Decyzję można sprawdzić z faktami |
| Dlaczego | Uzasadnienie, zastosowana norma lub procedura | Szczególnie przy wyjątkach i odstępstwach |
| Udział AI | Rekomendacja, poziom pewności, przyjęta, zmieniona lub odrzucona | Pokazuje, gdzie człowiek kierował się własną oceną |
| Wynik | Krok weryfikacji i jego rezultat | Dowodzi, że decyzja została doprowadzona do końca |
Zapisy decyzji podejmowanych z udziałem AI
Gdy AI ustala ranking, podpowiada albo przygotowuje szkic, pytanie audytora zmienia się z „kto zdecydował?” na „kto zdecydował i co powiedział mu system?”. Cztery zasady pozwalają na nie odpowiedzieć:
- Przechowuj rekomendację w takiej postaci, w jakiej była pokazana, z danymi wejściowymi, wyjaśnieniem i poziomem pewności, a nie jej późniejszą wersję.
- Przechowuj działanie człowieka: zatwierdzono, zmieniono lub odrzucono, kto i kiedy.
- Wymagaj uzasadnienia przy odstępstwach i odrzuceniach. Odrzucenie z uzasadnieniem to przydatny dowód, a ciche odrzucenie to luka.
- Nigdy nie nadpisuj. Zmieniona decyzja to nowy wpis powiązany ze starym.
Unijny akt w sprawie sztucznej inteligencji (AI Act) stawia podobną poprzeczkę systemom, które uznaje za wysokiego ryzyka: muszą one technicznie umożliwiać automatyczne rejestrowanie zdarzeń (logów) przez cały okres działania systemu, aby zapewnić identyfikowalność. Większość rekomendacji na hali nie będzie należeć do tej klasy, ale nawyk rejestrowania jest ten sam.
Przykład ilustracyjny: partia 4 000 wtryskiwanych obudów jest zablokowana przez dział jakości po tym, jak wymiar w gnieździe 3 wyszedł poza normę. AI rekomenduje zwolnienie części z gniazd 1, 2 i 4 i złomowanie części z gniazda 3 na podstawie 120 ponownie zmierzonych sztuk. Kierowniczka jakości zmienia to: zwolnić gniazda 1 i 2, ponownie skontrolować gniazdo 4, złomować gniazdo 3. Zapis zachowuje rekomendację AI i jej dane, jej zmianę, jej uzasadnienie („gniazdo 4 w granicach tolerancji, ale z trendem”), wynik ponownej kontroli dwie godziny później i ostateczne zwolnienie. Pół roku później klient pyta o tę partię. Odpowiedź zajmuje trzy minuty.
Kto jest właścicielem których danych
Zapisy są tak wiarygodne jak listy, na których się opierają. Każdemu rodzajowi danych przypisz jednego właściciela według roli:
- Dane podstawowe (zasoby, materiały, plany kontroli, role i uprawnienia): po jednym właścicielu, zwykle w dziale technicznym, jakości lub IT.
- Zapisy operacyjne (zlecenia, kontrole, zlecenia pracy, blokady): właścicielem jest rola, która je zamyka.
- Zasady i progi (limity alertów, bramki zatwierdzania, zasady pobierania próbek): właścicielem jest właściciel procesu, a zmiany wymagają zarejestrowanego uzasadnienia.
- Konfiguracja AI (które rekomendacje wymagają zatwierdzenia i przez jaką rolę): wspólna odpowiedzialność produkcji i jakości.
Sprawdzaj dostępy co najmniej raz w roku. Ludzie zmieniają stanowiska, a stare uprawnienia do zatwierdzania lub edycji to częsta niezgodność w audytach. O tym, kto odpowiada za otwarte sprawy przy przekazaniu zmiany, przeczytasz w artykule Jak utrzymać jasną odpowiedzialność na wszystkich zmianach.
15-minutowy test gotowości do audytu
Wybierz trzy decyzje z zeszłego miesiąca: jedno zwolnienie jakościowe, jedną pominiętą lub przełożoną kontrolę i jedno zamknięte zlecenie pracy. Dla każdej spróbuj odpowiedzieć wyłącznie na podstawie zapisów:
- Kto ją podjął i czy jego rola na to pozwalała?
- Jakie dane miał w tamtej chwili?
- Dlaczego zdecydował właśnie tak?
- Czy jakąś część podpowiedział system i czy ta osoba ją zmieniła?
- Czy widać każdą późniejszą zmianę zapisu?
Jeśli jakakolwiek odpowiedź wymaga telefonu, ta decyzja nie jest gotowa do audytu. Zanotuj, którego pola brakowało, i popraw zarówno zapis, jak i proces, przez który to pole zostało puste.
Jak to działa w DBR77 IRIS
Decyzje w DBR77 IRIS zapadają w tym samym systemie, w którym są dane. IRIS QMS wiąże każdą niezgodność z jej zleceniem produkcyjnym, maszyną i partią materiału oraz dokumentuje każdy krok pracy metodą 8D i 5-Why, od działań zabezpieczających do weryfikacji. Artykuł Jak powiązać problemy jakościowe z produkcją i utrzymaniem ruchu wyjaśnia, jak działają te powiązania. IRIS QMS wspiera też audyty wewnętrzne i zewnętrzne, ze śledzeniem ustaleń i działań korygujących. IRIS CMMS prowadzi pełną ścieżkę audytu zleceń pracy z notatkami techników, czasem pracy i zużytymi częściami. Dostęp oparty na rolach określa, co widzi każda rola.
Przy decyzjach podejmowanych z udziałem AI moduł Data & AI przechowuje każdą rekomendację razem z podstawą jej oceny i działaniem, które podjął w jej sprawie człowiek, a przy rekomendacjach zastosowanych także z ich efektem. Decision Traces pokazują, jak doszło do decyzji, a ekran Compliance prowadzi rejestr zastosowań AI i decyzji wysokiego ryzyka. Asystent IRIS tylko odczytuje dane, więc każdą zmianę w rekordzie wprowadza na ekranie modułu konkretna, imiennie wskazana osoba. Artykuł Kiedy AI powinna rekomendować, a kiedy decydować powinni ludzie omawia, które decyzje w ogóle zostawić ludziom.
Najczęstsze pytania
Czy musimy spełniać 21 CFR Part 11?
Tylko w przypadku zapisów podlegających przepisom FDA. Poza tym zakresem Part 11 i ALCOA są nadal dobrą listą kontrolną przed każdym audytem klienta lub certyfikacyjnym.
Czy przechowywać odrzucone podpowiedzi AI?
Tak. Odrzucenia z uzasadnieniem pokazują, że ludzie przeglądali wyniki, i pomagają poprawiać zasady i model.
Jak długo przechowywać zapisy decyzji?
Tak długo, jak wymagają tego Twoje przepisy i umowy z klientami. Part 11 wymaga, by dokumentacja ścieżki audytu była przechowywana co najmniej tak długo jak zapisy, których dotyczy.
Czy AI może prowadzić zapis za nas?
Może przygotowywać szkice podsumowań i wypełniać pola na podstawie danych. Decyzję i uzasadnienie potwierdza człowiek.
Podsumowanie
W tym tygodniu przeprowadź 15-minutowy test na trzech decyzjach z zeszłego miesiąca: zwolnieniu jakościowym, pominiętej lub przełożonej kontroli i zamkniętym zleceniu pracy. Tam, gdzie odpowiedź wymagała telefonu, popraw to pole w procesie. Przy decyzjach podejmowanych z udziałem AI sprawdź też, czy zapis zachowuje rekomendację w pokazanej postaci, działanie człowieka i uzasadnienie każdego odstępstwa.