Architektura AI #124
Synthetic data
termin oryginalny: synthetic data (ang.) · dane syntetyczne, dane generowane, dane sztuczne
Rodowód środkowoeuropejski: 1 wątek (antycypacja) · 1949–2022 · przejdź do dokumentacji ↓
Definicja robocza
Dane syntetyczne (synthetic data) to dane wytworzone przez celowo zbudowany model lub algorytm, a nie zaobserwowane w świecie, używane w miejsce danych rzeczywistych albo obok nich do konkretnego zadania analitycznego. Model-generator może być wszystkim: od równań różniczkowych i symulacji agentowej, przez wielokrotną imputację w statystyce urzędowej, po sieci generatywne i wielkie modele językowe. Potoczne użycie zrównuje termin z „danymi wymyślonymi przez AI”; użycie techniczne odróżnia dane w pełni syntetyczne (żaden rekord nie jest prawdziwy) od częściowo syntetycznych (zastąpiono tylko wartości wrażliwe) i pyta o dwie miary naraz: ile zbiór zachowuje użyteczności oryginału i ile o nim zdradza.
Geneza i rodowód
Pojęcie ma dwa równoległe źródła, które dopiero po 2015 r. zrosły się w jedno. Pierwsze to statystyka urzędowa: w 1993 r. w „Journal of Official Statistics” Donald Rubin zaproponował, by zamiast prawdziwych mikrodanych spisowych udostępniać rekordy wygenerowane metodą wielokrotnej imputacji, a Roderick Little w tym samym numerze opisał wariant częściowy. Linia ta biegnie przez prace Raghunathana, Reitera i Drechslera do dzisiejszych syntetycznych spisów i rejestrów medycznych, a jej problemem było od początku ujawnienie (disclosure), nie brak danych. Drugie źródło to uczenie maszynowe: augmentacja zbiorów treningowych, symulatory do widzenia komputerowego i robotyki, a od 2014 r. sieci GAN i kolejne modele generatywne, które uczyniły generowanie realistycznych próbek rutyną. Raport Jordona, Szprucha i współautorów dla Royal Society (2022), przyjęty tu za sformułowanie kanoniczne, scala obie linie w jednej definicji i zarazem ostrzega przed przechwyceniem terminu przez marketing: hasła „privacy by design” sprzedają dane syntetyczne jako gotową anonimizację, choć w ujęciu technicznym prywatność jest własnością do udowodnienia, nie etykietą.
Rodowód środkowoeuropejski
Wcześniej pokrewną myśl sformułował Stanisław Ulam. Sam raport Jordona i współautorów wyprowadza ideę komputerowo generowanych danych „co najmniej” od prac Ulama i Johna von Neumanna nad metodą Monte Carlo z lat 40., czyli od pomysłu, by układ zbyt złożony do rachunku badać, losując z modelu sztuczne próby. Ulam ukształtował się we Lwowie: doktorat na Politechnice Lwowskiej obronił w 1933 r. pod kierunkiem Kazimierza Kuratowskiego, w środowisku lwowskiej szkoły matematycznej, i wyjechał z Polski w sierpniu 1939 r. Sama metoda Monte Carlo powstała już w Los Alamos (pomysł z 1946 r., publikacja z Nicholasem Metropolisem w 1949 r.), a jej celem była fizyka neutronów, nie ochrona danych. To więc antycypacja nazwana przez autorów kanonicznego tekstu, a nie udokumentowany wpływ na techniki danych syntetycznych; raport nie korzysta z prac Ulama w sensie metodycznym. Z regionu pochodzi formacja matematyczna autora, nie miejsce odkrycia.
Udokumentowany rodowód regionalny · Związek: 1. Opracowanie: październik 2026.
-
antycypacja 73 lata
Źródło w regionie: Stanisław Ulam, „Metoda Monte Carlo (Los Alamos 1946; publikacja z Nicholasem Metropolisem w „Journal of the American Statistical Association” 1949) — wcześniej doktorat na Politechnice Lwowskiej (1933) pod kierunkiem Kazimierza Kuratowskiego”; Lwów / Los Alamos, 1949
Obieg globalny: synthetic data (dane syntetyczne) jako dane wytworzone przez model do rozwiązania zadania analitycznego — James Jordon, Łukasz Szpruch i in. (raport dla Royal Society), 2022
antycypacja
73 lataStanisław Ulam, „Metoda Monte Carlo (Los Alamos 1946; publikacja z Nicholasem Metropolisem w „Journal of the American Statistical Association” 1949) — wcześniej doktorat na Politechnice Lwowskiej (1933) pod kierunkiem Kazimierza Kuratowskiego”
1949 · Lwów / Los Alamos
synthetic data (dane syntetyczne) jako dane wytworzone przez model do rozwiązania zadania analitycznego
2022 · James Jordon, Łukasz Szpruch i in. (raport dla Royal Society)
- Teza i powiązanie
- Raport Jordona i współautorów, przyjęty w serwisie za kanoniczne sformułowanie pojęcia, sam wyprowadza ideę danych generowanych komputerowo „co najmniej” od prac Stanisława Ulama i Johna von Neumanna nad metodą Monte Carlo z lat 40. Ulam ukształtował się matematycznie we Lwowie (doktorat na Politechnice Lwowskiej w 1933 r., szkoła lwowska), a metodę Monte Carlo opracował już w Los Alamos. To wcześniejsze sformułowanie pokrewnej myśli — generowania sztucznych prób z modelu zamiast obserwacji — a nie dowód wpływu na dzisiejszą technikę danych syntetycznych.
- Dokumentacja źródłowa
-
- recepcja / przekład James Jordon, Lukasz Szpruch, Florimond Houssiau, Mirko Bottarelli, Giovanni Cherubin, Carsten Maple, Samuel N. Cohen, Adrian Weller, „Synthetic Data – what, why and how?”, raport dla Royal Society, arXiv:2205.03257, 6 maja 2022; s. 5, rozdz. „What is Synthetic Data?”: Definition 1 i zdanie o Ulamie i von Neumannie. arxiv.org ↗
- dokumentacja biograficzna J. J. O’Connor, E. F. Robertson, „Stanisław Marcin Ulam”, MacTutor History of Mathematics Archive, University of St Andrews; akapity o studiach na Politechnice Lwowskiej (doktorat 1933, promotor Kuratowski), wyjeździe w sierpniu 1939 r. i o metodzie Monte Carlo (1946, publikacja z Metropolisem 1949). mathshistory.st-andrews.ac.uk ↗
- Kontekst historyczny
- Metoda Monte Carlo powstała poza regionem; z regionu pochodzi formacja Ulama (Lwów). Związek jest antycypacją nazwaną w samym tekście kanonicznym, nie wpływem: autorzy raportu nie korzystają z prac Ulama w sensie technicznym. Rok 1949 to data artykułu Metropolisa i Ulama; MacTutor datuje pomysł na 1946 r.
Dlaczego teraz
Trzy ciągi zdarzeń z lat 2018–2026 wyniosły termin z niszy. Po pierwsze, regulacja: RODO (stosowane od maja 2018 r.) i jego naśladowcy zwiększyły koszt pracy na danych osobowych, a dane syntetyczne zaczęto sprzedawać jako drogę obejścia. Odpowiedzią była fala krytyki, z pracą Stadler, Oprisanu i Troncoso (USENIX Security 2022) na czele, pokazującą, że generatory albo przeciekają, albo tracą użyteczność. Po drugie, głód danych do wielkich modeli: gdy publicznie dostępny tekst wysokiej jakości zaczął się kończyć, laboratoria zaczęły trenować modele na danych wytwarzanych przez inne modele (destylacja, samouczenie, „syntetyczne” zbiory instrukcji), a Shumailov i współautorzy opisali w 2023 r. koszt tej strategii jako zapaść modelu (model collapse), rozwijając temat w „Nature” w 2024 r. Po trzecie, instytucje: raport dla Royal Society (2022), programy brytyjskiego ONS i amerykańskiego Census Bureau oraz syntetyczne rejestry zdrowotne przeniosły pytanie z laboratoriów do urzędów, gdzie decyduje się, czy syntetyczny spis może zastąpić mikrodane.
Siła wyjaśniająca
Pojęcie każe rozdzielić trzy rzeczy, które w praktyce mieszają się nieustannie: skąd pochodzi rekord, co z niego można wywnioskować i czy ktoś może go z powrotem przypisać osobie. Po pierwsze, pozwala zobaczyć, że „sztuczny” nie znaczy „bezpieczny”: generator dopasowany do małego zbioru potrafi odtworzyć rzadkie rekordy niemal dosłownie, więc przyjęte w organizacjach przekonanie, że dane syntetyczne wychodzą spod RODO, jest w najlepszym razie hipotezą do sprawdzenia. Po drugie, wyjaśnia, dlaczego systemy uczone na danych syntetycznych są dobre w typowych przypadkach, a zawodzą na brzegach: generator reprodukuje środek rozkładu, a usuwa lub wygładza ogony, w których siedzą wartości odstające, mniejszości i awarie. Po trzecie, ujawnia pętlę w ekosystemie informacyjnym: tekst z modeli trafia do sieci, sieć staje się zbiorem treningowym, a kolejne modele uczą się coraz bardziej własnych nawyków niż świata. Bez pojęcia danych syntetycznych widać tylko „więcej danych”; z nim widać, że część tych danych nie niesie żadnej nowej obserwacji.
Osie sporu
Czy dane syntetyczne rozwiązują problem prywatności
Dostawcy platform danych syntetycznych i część statystyków urzędowych w linii Rubina twierdzą, że w pełni syntetyczny zbiór z definicji nie zawiera niczyich rekordów, więc rozwiązuje problem ujawnienia. Badacze bezpieczeństwa (Stadler, Troncoso, Cherubin) odpowiadają pomiarami ataków wnioskowania o przynależności i atrybutach. Najmocniejszy kontrargument: Prywatność jest własnością procesu generowania, nie wyniku; dopóki generator nie ma formalnej gwarancji (np. prywatności różnicowej), rzadki rekord może zostać zapamiętany, a wtedy „syntetyczny” zbiór jest kopią z szumem. Z gwarancją zaś użyteczność spada tam, gdzie była najbardziej potrzebna. Charakter sporu: rzeczowy — obie strony zgadzają się co do miar, różnią się tym, jakie ryzyko uznają za akceptowalne.
Czy modele mogą trenować się na własnych wytworach
Laboratoria budujące wielkie modele traktują dane syntetyczne jako główne źródło dalszego postępu (destylacja z modeli-nauczycieli, generowanie rozwiązań zadań z weryfikacją). Badacze w linii Shumailova i Andersona widzą w tym mechanizm degeneracji, który z pokolenia na pokolenie ściska rozkład. Najmocniejszy kontrargument: Zapaść udokumentowano dla naiwnego zastępowania danych; gdy dane syntetyczne są filtrowane zewnętrznym kryterium (kompilator, dowód, wynik eksperymentu) i mieszane z ludzkimi, akumulacja zamiast zastępowania nie musi prowadzić do zaniku. Spór dotyczy więc warunków, nie zasady. Charakter sporu: mieszany — empiryczne wyniki są rozbieżne, a każdą stronę napędza interes: dostępność danych kontra prawo do ludzkich treści.
Statystyczna wierność kontra wiarygodność wnioskowania
Inżynierowie danych mierzą jakość zbioru syntetycznego podobieństwem rozkładów brzegowych i korelacji. Metodolodzy ze szkoły Rubina i Reitera odpowiadają, że liczy się, czy estymatory i przedziały ufności policzone na zbiorze syntetycznym pokrywają prawdziwe parametry, co wymaga osobnych reguł łączenia wielu zbiorów. Najmocniejszy kontrargument: Zbiór może być wierny w każdej statystyce, którą zmierzono, i fałszywy w tej, o którą zapyta badacz jutro; wierność jest zawsze względem listy pytań, której użytkownik nie zna. Charakter sporu: rzeczowy — to spór o definicję użyteczności, a nie o fakty.
Niedoceniany kąt
W debacie prawie nie pojawia się pytanie o status epistemiczny danych syntetycznych jako świadectwa. Dane rzeczywiste są śladem zdarzeń, który można podważyć, ale który istniał niezależnie od badacza; zbiór syntetyczny jest wnioskiem z modelu przebranym za obserwację. Gdy taki zbiór trafia do rejestru, publikacji albo postępowania sądowego bez oznaczenia, zmienia się łańcuch dowodowy: błąd generatora nie jest błędem pomiaru, lecz błędem teorii, i nie da się go wykryć przez powtórzenie pomiaru. Ten sam problem znają metrolodzy i historycy źródeł — kopia zrobiona na podstawie modelu oryginału nie jest kopią. Dlatego najważniejszą praktyczną normą może być nie prywatność i nie wierność, lecz trwałe, nieusuwalne oznaczenie pochodzenia każdego rekordu syntetycznego, analogiczne do znaku wodnego na treściach generowanych.
W przekładzie
Polski termin „dane syntetyczne” przyjął się w dokumentach UODO, GUS i literaturze informatycznej i jest wierną kalką. Problem leży w przymiotniku: „syntetyczny” znaczy po polsku także „zwięzły, podsumowujący” (jak w „ujęciu syntetycznym”), co w tekstach nietechnicznych bywa mylące; alternatywy „dane sztuczne” i „dane generowane” gubią jednak odniesienie do syntezy z modelu i do tradycji statystyki urzędowej. Zostajemy przy „danych syntetycznych”, dopisując przy pierwszym użyciu, że chodzi o dane wygenerowane przez model.
Jedno zdanie na wynos
Zbiór syntetyczny nie jest zapisem świata, lecz opinią modelu o świecie zapisaną w formacie danych — i wszystko, co z niego wynika, dziedziczy po tej opinii zarówno jej ślepe plamki, jak i jej pamięć o ludziach, których miał ukryć.
Sieć pojęć pokrewnych
Jak to pojęcie wzmacnia, ogranicza lub uzupełnia inne ramy analityczne w korpusie.
-
Privacy-preserving ML uzupełnia
Dane syntetyczne są jedną z technik ochrony prywatności w uczeniu maszynowym, ale same w sobie nie dają gwarancji; gwarancję daje dopiero połączenie z prywatnością różnicową.
-
Model collapse w napięciu
Trenowanie kolejnych generacji modeli na danych wytworzonych przez modele prowadzi do zaniku ogonów rozkładu, co ogranicza najprostsze obietnice danych syntetycznych.
-
Data provenance uzupełnia
Bez zapisu, które dane są rzeczywiste, a które wygenerowane, i z jakiego generatora, nie da się ocenić ani prywatności, ani użyteczności zbioru.
-
Deepfake w napięciu
Ta sama klasa generatorów wytwarza dane syntetyczne do badań i syntetyczne fałszywki do oszustw; różnica leży w celu i oznaczeniu, nie w technice.
-
Mapa to nie terytorium ogranicza
Zbiór syntetyczny jest mapą sporządzoną przez model na podstawie innej mapy; wnioski z niego dziedziczą wszystkie uproszczenia generatora.
-
Generatywna AI wzmacnia
Modele generatywne (GAN, VAE, modele dyfuzyjne, LLM) dostarczyły generatorów, które uczyniły dane syntetyczne masową praktyką, a nie niszą statystyki urzędowej.
-
Datafikacja uzupełnia
Gdy pozyskiwanie danych o ludziach trafia na granice prawne i etyczne, dane syntetyczne stają się sposobem na kontynuację datafikacji bez nowych obserwacji.
Kanon lektur i most przekładowy
Kluczowe prace założycielskie, wprowadzenia i głosy krytyczne — wraz z informacją o dostępności wydań w języku polskim i angielskim.
-
tekst założycielski 2022 · angielski
James Jordon, Lukasz Szpruch, Florimond Houssiau, Mirko Bottarelli, Giovanni Cherubin, Carsten Maple, Samuel N. Cohen, Adrian Weller, Synthetic Data – what, why and how?
Raport dla Royal Society i Alan Turing Institute: robocza definicja, mapa zastosowań (prywatność, odbarczanie, augmentacja) i trzeźwe zastrzeżenia, że dane syntetyczne nie są automatycznie prywatne ani nie zastępują danych rzeczywistych.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
tekst założycielski 1993 · angielski
Donald B. Rubin, Discussion: Statistical Disclosure Limitation
Krótki głos w dyskusji w „Journal of Official Statistics” (9/2, s. 461–468), w którym Rubin proponuje udostępnianie w pełni syntetycznych mikrodanych wygenerowanych przez wielokrotną imputację zamiast prawdziwych rekordów spisu.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
tekst założycielski 1993 · angielski
Roderick J. A. Little, Statistical Analysis of Masked Data
Artykuł z tego samego numeru „Journal of Official Statistics” (9/2, s. 407–426), wprowadzający dane częściowo syntetyczne: zastępowanie tylko wartości wrażliwych w zbiorze publicznym.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
perspektywa krytyczna 2022 · angielski
Theresa Stadler, Bristena Oprisanu, Carmela Troncoso, Synthetic Data – Anonymisation Groundhog Day
Pierwszy ilościowy pomiar zysku prywatności z publikowania danych syntetycznych (USENIX Security 2022, s. 1451–1468): generatory albo nie chronią przed atakami wnioskowania, albo tracą użyteczność, a kompromis jest nieprzewidywalny.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
perspektywa krytyczna 2023 · angielski
Ilia Shumailov, Zakhar Shumaylov, Yiren Zhao, Yarin Gal, Nicolas Papernot, Ross Anderson, The Curse of Recursion: Training on Generated Data Makes Models Forget
Preprint (arXiv, maj 2023), rozwinięty w artykule w „Nature” w 2024 r., pokazujący na VAE, mieszankach gaussowskich i LLM, że trenowanie na danych wygenerowanych kasuje ogony rozkładu i prowadzi do zapaści modelu.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
wprowadzenie i synteza 2011 · angielski
Jörg Drechsler, Synthetic Datasets for Statistical Disclosure Control: Theory and Implementation
Monografia ze szkoły Rubina i Reitera (Springer, Lecture Notes in Statistics), systematyzująca dane w pełni i częściowo syntetyczne wraz z regułami wnioskowania z wielu zbiorów syntetycznych.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
z innej dziedziny 1949 · angielski
Nicholas Metropolis, Stanisław Ulam, The Monte Carlo Method
Sześciostronicowy artykuł z „Journal of the American Statistical Association” (44/247), w którym generowanie sztucznych prób losowych z modelu zostaje po raz pierwszy opisane jako ogólna metoda badania układów zbyt złożonych do analizy.
Po polsku: wydania polskiego nie sprawdzono
Po angielsku: tekst oryginalny po angielsku
-
z innej dziedziny 2019 · angielski
Steven M. Bellovin, Preetam K. Dutta, Nathan Reitinger, Privacy and Synthetic Datasets
Artykuł prawniczy ze „Stanford Technology Law Review”, pytający, czy dane syntetyczne mieszczą się w prawnych definicjach anonimizacji i czy regulator powinien je traktować inaczej niż dane maskowane.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
Cytaty źródłowe
Synthetic data is data that has been generated using a purpose-built mathematical model or algorithm, with the aim of solving a (set of) data science task(s).
Dane syntetyczne to dane wygenerowane za pomocą modelu matematycznego lub algorytmu zbudowanego w tym celu, z zamiarem rozwiązania (zestawu) zadań analizy danych. (przekład: przekład roboczy)
Synthetic data is not automatically private. A common misconception with synthetic data is that it is inherently private. This is not the case.
Dane syntetyczne nie są automatycznie prywatne. Częstym nieporozumieniem jest przekonanie, że dane syntetyczne są z natury prywatne. Tak nie jest. (przekład: przekład roboczy)