Tak działa “polski ChatGPT”. PLLuM wyłożył się już na pierwszym pytaniu

PLLuM (Polish Large Language Model) rozwijany jest przez polskich ekspertów z myślą o polskim użytkowniku, a do jego trenowania wykorzystano rodzime treści. W przyszłości ma on pełnić funkcję cyfrowego asystenta w aplikacji mObywatel i pomóc w pozyskiwaniu czy interpretowaniu informacji publicznych. 

Na papierze - super. Wirtualny asystent urzędniczy, który pomoże rozliczyć PIT czy zarejestrować działalność gospodarczą może być dla milionów Polaków zbawieniem. A postawienie na własny model niweluje ryzyko siania zagranicznej propagandy czy dezinformacji. 

Problem w tym, że aktualnie PLLuM nie ma dostępu do internetu, więc uzależniony jest od swoich danych treningowych. A te - jak sam twierdzi - pochodzą z okresu sięgającego od 1 stycznia 2010 do 1 lipca 2024. 

Innymi słowy - "polski ChatGPT" nie wie, co wydarzyło się w Polsce przez ostatnich 8 miesięcy, a to w przypadku urzędniczego asystenta może się okazać zgubne w skutkach. W swoich odpowiedziach może on bowiem uwzględniać przepisy, które już nie obowiązują. 

Przeprowadziłem prosty test porównawczy, w którym PLLuM oraz ChatGPT dostały ode mnie kilka pytań dotyczących naszego podwórka. Zaczynając od wyborów prezydenckich. 

PLLuM zaliczył wpadkę już na pierwszym pytaniu, bo data wyborów prezydenckich jest już oczywiście znana. Mimo to postanowiłem kontynuować i zapytać o kandydatów. 

Z tym pytaniem PLLuM poradził sobie jeszcze gorzej, bo zamiast zasłonić się formułką typu “lista kandydatów nie jest jeszcze znana” po prostu wypunktował kandydatów z wyborów z 2020 roku. A przecież nawet dysponując danymi z lipca 2024 sztuczna inteligencja powinna wiedzieć, że Andrzej Duda po dwóch kadencjach nie ma nawet prawa ubiegać się o reelekcję. 

OK, a teraz załóżmy, że potrzebuję wsparcia urzędniczego. 

PLLuM wprowadził mnie w błąd, opierając swoją odpowiedź na ubiegłorocznych danych. Co ciekawe, ChatGPT postąpił podobnie, ale po kilku sekundach sam zweryfikował podaną przez siebie informację w internecie i podał aktualne minimalne wynagrodzenie. 

Pora na trudniejsze pytanie. 

Na tym pytaniu wyłożyły się oba czatboty, bo od 1 stycznia 2025 limit prowadzenia ksiąg rachunkowych wynosi 2,5 mln euro. 

Oczywiście w ramach testu celowo wybrałem zagadnienia związane z wydarzeniami z ostatnich kilku miesięcy. Chciałem pokazać realne scenariusze użycia, w których brak dostępu aktualnych danych jest ogromnym problemem. Jeśli przecież ktoś jest na tyle zaznajomiony z danym tematem, by wiedzieć, że w ostatnim czasie nie zaszły żadne istotne zmiany w przepisach, to najpewniej w ogóle nie potrzebuje pomocy wirtualnego asystenta. 

Jeśli PLLuM ma być skutecznym i godnym zaufania urzędowym pomocnikiem, to po prostu musi mieć natychmiastowy dostęp do wszystkich ustaw, rozporządzeń i innych informacji publicznych. Miejmy nadzieję, że do czasu jego integracji z mObywatelem tak się stanie. 

PLLuM dostępny jest na tej stronie.