Etyka i normy #162
Info-hazards
termin oryginalny: information hazard (ang.) · zagrożenia informacyjne, infohazard, niebezpieczna wiedza
Rodowód środkowoeuropejski: 1 wątek (antycypacja) · 1934–2011 · przejdź do dokumentacji ↓
Definicja robocza
Zagrożenie informacyjne (information hazard) to ryzyko, które powstaje przez samo rozpowszechnienie prawdziwej informacji: wiedza może wyrządzić szkodę bezpośrednio albo umożliwić komuś jej wyrządzenie. Operacyjnie: pytamy nie „czy to prawda?”, lecz „kto, dowiedziawszy się tego, zyska zdolność lub motyw do szkodzenia i jak duży?”. Wersja techniczna u Bostroma jest typologią kilkudziesięciu odmian ryzyka, od sekwencji genomu patogenu po skutki psychologiczne u odbiorcy; wersja potoczna, żargonowe „infohazard” z forów racjonalistycznych, oznacza każdą myśl, której lepiej nie znać, i bywa używana pół żartem. Pojęcie wyłącza informacje fałszywe: dezinformacja to osobny problem.
Geneza i rodowód
Termin i typologię sformułował Nick Bostrom w artykule „Information Hazards: A Typology of Potential Harms from Knowledge” („Review of Contemporary Philosophy”, t. 10, 2011, s. 44–79), napisanym w Oksfordzie w ramach programu badań nad ryzykiem egzystencjalnym. Punktem wyjścia jest obserwacja, że kultura naukowa ma domyślne nastawienie na rzecz jawności, a wyjątki (tajemnica wojskowa, anonimowość pacjentów, ślepa próba) traktuje jako przypadki szczególne, bez wspólnego języka. Bostrom rozróżnia tryby przekazu (dane, idea, zwrócenie uwagi, szablon, sygnał, ewokacja) i obszary szkody (przewaga przeciwnika, rynki i organizacje, psychika, systemy informatyczne, rozwój technologii). Dziedziczy po debacie fizyków o tajności w latach 1939–1945 i sporach o publikację badań dual-use w biologii po 2001 r., ale dopiero on nadaje temu postać katalogu. W drugiej dekadzie XXI w. pojęcie zostało przechwycone przez obieg internetowy, gdzie „infohazard” oznacza raczej memetyczną klątwę niż ryzyko do oszacowania; obie wersje trzeba czytać osobno.
Rodowód środkowoeuropejski
Leó Szilárd zastosował w praktyce rozróżnienie, które Bostrom nazwał później hazardem idei i hazardem danych, kilkadziesiąt lat przed powstaniem terminu. Szilárd rozpoczął studia inżynierskie na Politechnice w Budapeszcie w 1916 r., przerwał je na służbę w armii austro-węgierskiej i w grudniu 1919 r. wyjechał do Berlina, gdzie przeszedł na fizykę. Pomysł reakcji łańcuchowej przyszedł mu do głowy w Londynie w 1933 r.; patent zgłoszony w 1934 r. przekazał brytyjskiej Admiralicji, aby nie został opublikowany, i jego treść ujrzała światło dzienne dopiero w 1949 r. W 1939 r., po odkryciu rozszczepienia, namawiał Enrica Fermiego w Nowym Jorku i Frédérica Joliota w Paryżu, by nie ogłaszali wyników o neutronach wtórnych; Fermi niechętnie się zgodził, Joliot odmówił i jego zespół opublikował dane w „Nature” w kwietniu 1939 r. Bostrom wspomina o Szilárdzie jednym zdaniem w przypisie, jako dowód, że naiwność fizyków była do uniknięcia „co najmniej od 1933 r.”, i odsyła do Rhodesa. To nie jest wpływ na typologię, lecz wcześniejsza, udokumentowana praktyka tego samego rozumowania. Reguła formacji jest tu spełniona słabo: Budapeszt dał Szilárdowi wykształcenie inżynierskie, ale nie fizykę i nie samą ideę. Zapisujemy związek jako antycypację do rozstrzygnięcia przez redakcję.
Udokumentowany rodowód regionalny · Związek: 1. Opracowanie: październik 2026.
-
antycypacja 77 lat
Źródło w regionie: Utajnienie patentu na reakcję łańcuchową (1934–1936) i próba dobrowolnej autocenzury publikacji o rozszczepieniu uranu (1939) — Leó Szilárd; Budapeszt (formacja); Londyn, Nowy Jork (działanie), 1934
Obieg globalny: information hazard — typologia Bostroma (idea hazard, data hazard) — Nick Bostrom, 2011
antycypacja
77 latUtajnienie patentu na reakcję łańcuchową (1934–1936) i próba dobrowolnej autocenzury publikacji o rozszczepieniu uranu (1939) — Leó Szilárd
1934 · Budapeszt (formacja); Londyn, Nowy Jork (działanie)
information hazard — typologia Bostroma (idea hazard, data hazard)
2011 · Nick Bostrom
- Teza i powiązanie
- Szilárd, który rozpoczął studia inżynierskie na Politechnice w Budapeszcie w 1916 r. i wyjechał do Berlina w grudniu 1919 r., w praktyce zastosował rozróżnienie, które Bostrom nazwał później „idea hazard” i „data hazard”: patent na reakcję łańcuchową zgłoszony w 1934 r. przekazał brytyjskiej Admiralicji, aby pozostał tajny, a w 1939 r. namawiał Fermiego i Joliota, by nie publikowali wyników o neutronach wtórnych. Bostrom wspomina o tym jednym zdaniem w przypisie, powołując się na Rhodesa; nie jest to źródło jego typologii, lecz wcześniejszy przykład tego samego problemu w działaniu.
- Dokumentacja źródłowa
-
- źródło pierwotne Nick Bostrom, „Information Hazards: A Typology of Potential Harms from Knowledge”, Review of Contemporary Philosophy, Vol. 10 (2011), s. 44–79 (preprint autora); przyp. 48 (s. 26 preprintu): „Leo Szilard’s example suggests that much of this naïveté was avoidable at least as early as 1933”, z odesłaniem do Rhodes 1995. nickbostrom.com ↗
- dokumentacja biograficzna Wikipedia (en), hasło „Leo Szilard”; sekcje Early life, Time in Berlin i Nuclear physics: wstąpienie na Politechnikę w Budapeszcie we wrześniu 1916 r., wyjazd do Berlina 25 XII 1919 r., patent GB 630726 (zgłoszenie VI 1934, udzielenie III 1936, przekazanie Admiralicji dla zachowania tajemnicy bez podanej w haśle daty, publikacja 1949). en.wikipedia.org ↗
- opracowanie naukowe Wikipedia (en), hasło „Nuclear fission”, sekcja historyczna; podsekcja Fission chain reaction realized: akapit o namawianiu Fermiego (Nowy Jork) i Joliot-Curie (Paryż) w 1939 r. do nieogłaszania wyników o możliwości reakcji łańcuchowej; Fermi zgodził się z wahaniem, zespół Joliota opublikował liczbę neutronów z rozszczepienia w „Nature” w kwietniu 1939 r.. en.wikipedia.org ↗
- Kontekst historyczny
- Związek wątły pod względem reguły formacji: Szilárd kształcił się w Budapeszcie tylko do 1919 r., a fizykę studiował już w Berlinie; pomysł reakcji łańcuchowej przyszedł mu do głowy w Londynie w 1933 r. Szczegóły z 1939 r. pochodzą z encyklopedii, nie z Rhodesa. Reguła formacji jest spełniona formalnie (szkoła i studia w Budapeszcie do 1919 r.), na tej samej zasadzie co von Neumann w „gry-niezerowe” i Polanyi w „emergencja”; typ antycypacja jest właściwy, bo przypis Bostroma podaje Szilárda jako przykład, a nie źródło typologii. Czy tak słaby związek z regionem publikować, rozstrzyga redakcja.
Dlaczego teraz
W lutym 2019 r. OpenAI odmówiło publikacji pełnej wersji GPT-2, powołując się na ryzyko nadużyć, a w raporcie „Release Strategies and the Social Impacts of Language Models” (sierpień 2019 r., wersja rozszerzona w listopadzie) uzasadniło etapowe udostępnianie modeli; od tego momentu rachunek zagrożeń informacyjnych stał się rutyną laboratoriów AI, od kart systemowych po klauzule o wiedzy biologicznej i chemicznej w politykach odpowiedzialnego skalowania. W tym samym roku ukazał się artykuł Lewisa i współautorów w „Risk Analysis” o zagrożeniach informacyjnych w biotechnologii, pisany po sporach o publikację badań nad przenoszeniem wirusa H5N1 (2011–2012) i po pracach nad syntezą wirusa ospy końskiej (2017). Pandemia 2020 r. i debata o pochodzeniu SARS-CoV-2 pokazały, że sama dyskusja o tym, co możliwe w laboratorium, jest hazardem uwagi. Równolegle generatywne modele obniżyły koszt przejścia od idei do danych: to, co w 2011 r. było różnicą między „wiedzieć, że się da” a „mieć przepis”, w 2025 r. jest różnicą jednego dobrze sformułowanego zapytania.
Siła wyjaśniająca
Pojęcie pozwala zobaczyć, że „prawda” i „bezpieczne” to dwie osie, nie jedna, i że instytucje nauki mierzą tylko pierwszą. Trzy zastosowania. Po pierwsze, hazard uwagi wyjaśnia, dlaczego szczegółowe raporty o lukach bezpieczeństwa (w sieciach, w biosecurity, w ochronie infrastruktury) mogą szkodzić nawet wtedy, gdy wszystkie fakty są już w literaturze: przeciwnik nie potrzebuje nowych danych, tylko wskazania, gdzie szukać. Po drugie, rozróżnienie hazardu idei i danych tłumaczy, dlaczego udowodnienie, że coś jest możliwe (test jądrowy, demonstracja ataku), bywa groźniejsze niż sam przepis: skraca cudzy proces poszukiwań. Po trzecie, kategoria hazardów psychologicznych (wiedza o własnej diagnozie, o prawdopodobieństwie katastrofy, o cudzej opinii) pokazuje, że prawo do niewiedzy w medycynie i tajność głosowania należą do tej samej rodziny decyzji co utajnianie sekwencji patogenów.
Osie sporu
Otwartość jako broń
Tradycja Kantrowitza i Brina, a dziś zwolennicy otwartych modeli AI i otwartej nauki: tajność osłabia stronę, która ją stosuje, bo odcina ją od korekty błędów, a przeciwnik i tak zdobędzie informacje szpiegostwem lub własną pracą. Najmocniejszy kontrargument: Argument działa dla rywalizacji między państwami o podobnych zasobach, nie dla asymetrii między państwem a pojedynczym aktorem, któremu brakuje tylko wiedzy; Bostrom pokazuje, że dla takiego aktora publikacja jest czystym transferem zdolności. Charakter sporu: rzeczowy, bo obie strony zgadzają się co do mechanizmu i różnią się w ocenie, kto jest typowym odbiorcą niebezpiecznej informacji.
Kto decyduje i z jaką odpowiedzialnością
Krytycy z filozofii nauki i polityki publicznej zarzucają, że rachunek zagrożeń informacyjnych oddaje decyzje o jawności w ręce nielicznych ekspertów i firm, bez procedury odwoławczej, i że w praktyce (GPT-2, raporty o zdolnościach modeli) służy też ochronie przewagi rynkowej. Najmocniejszy kontrargument: Alternatywą nie jest decyzja demokratyczna, lecz decyzja domyślna, czyli publikacja; Bostrom podkreśla, że samo zbadanie, jak wiedza może szkodzić, jest wymogiem uczciwości intelektualnej, nie jej zdradą. Charakter sporu: mieszany, bo problem legitymacji jest realny, ale argument o interesie rynkowym często zastępuje analizę konkretnego przypadku.
Typologia czy rachunek
Badacze ryzyka (w tym autorzy artykułu z „Risk Analysis”) uważają, że katalog Bostroma nazywa zjawiska, ale nie daje metody ważenia szkód i korzyści, więc w praktyce skłania do nadmiernej ostrożności. Najmocniejszy kontrargument: Bostrom wprost zastrzega, że nie ocenia częstości ani wagi hazardów; typologia ma być słownikiem, bez którego rachunku nie da się nawet zacząć, bo większość szkód pozostaje niewidoczna. Charakter sporu: rzeczowy, dotyczy podziału pracy między pojęciem a procedurą.
Niedoceniany kąt
Najmniej omawianą częścią typologii jest hazard uwagi, bo podważa on sam akt pisania o zagrożeniach. Każdy raport o ryzyku biologicznym, każda lista słabości modelu, każdy briefing taki jak ten sortuje dla przeciwnika przestrzeń możliwości według skuteczności. Z tego wynika paradoks, który Bostrom zauważa, ale go nie rozwiązuje: im lepsza nasza obrona, tym bardziej jej dokumentacja jest mapą ataku. W praktyce prowadzi to do kultury ezoterycznej, w której najważniejsze oceny ryzyka krążą w wąskich kręgach, a publiczna debata dostaje wersję rozmytą. To ma koszt epistemiczny, który wraca jak bumerang: społeczeństwo, które nie zna argumentów, nie potrafi ocenić, czy tajność jest uzasadniona, i reaguje albo paniką, albo lekceważeniem.
W przekładzie
Polski termin nie jest ustalony. „Hazard informacyjny” jest kalką, w której „hazard” znaczy po polsku grę losową, nie ryzyko, więc myli. „Niebezpieczna wiedza” jest naturalna, ale gubi to, że chodzi o ryzyko wynikające z rozpowszechnienia, nie z samej treści. „Zagrożenie informacyjne” jest poprawne i używane w bezpieczeństwie, choć tam oznacza raczej ataki informacyjne i dezinformację, czyli dokładnie to, co Bostrom wyłącza. Wybieramy „zagrożenie informacyjne” z angielskim terminem w nawiasie przy pierwszym użyciu i zachowujemy „info-hazards” jako nazwę hasła, bo pod nią pojęcie krąży.
Jedno zdanie na wynos
O tym, czy wiedza jest niebezpieczna, nie decyduje jej prawdziwość, lecz to, komu skraca drogę.
Sieć pojęć pokrewnych
Jak to pojęcie wzmacnia, ogranicza lub uzupełnia inne ramy analityczne w korpusie.
-
Ryzyko egzystencjalne wzmacnia
Typologia Bostroma powstała w tym samym programie badawczym, a najcięższe zagrożenia informacyjne to te, które przybliżają katastrofę egzystencjalną.
-
Red teaming uzupełnia
Red teaming wytwarza wiedzę o słabościach systemu, która sama jest zagrożeniem informacyjnym, stąd spory o to, ile z raportów można publikować.
-
AI alignment uzupełnia
Decyzje laboratoriów o etapowym udostępnianiu modeli i utajnianiu danych o zdolnościach są praktycznym zastosowaniem rachunku zagrożeń informacyjnych.
-
Precautionary principle wzmacnia
Oba pojęcia przerzucają ciężar dowodu na stronę, która chce działać, tu na publikującego.
-
Płot Chestertona w napięciu
Chesterton każe rozumieć normę przed jej zniesieniem; norma otwartości nauki jest takim płotem, a koncepcja Bostroma pyta, czy nie trzeba go częściowo rozebrać.
-
Memetyka uzupełnia
Kategoria hazardu uwagi zakłada, że idee rozprzestrzeniają się i działają niezależnie od intencji nadawcy, czyli memetycznie.
-
Dezinformacja (rama) ogranicza
Bostrom wyraźnie wyłącza informacje fałszywe ze swojej typologii, co odcina pojęcie od debaty o dezinformacji.
Kanon lektur i most przekładowy
Kluczowe prace założycielskie, wprowadzenia i głosy krytyczne — wraz z informacją o dostępności wydań w języku polskim i angielskim.
-
tekst założycielski 2011 · angielski
Nick Bostrom, Information Hazards: A Typology of Potential Harms from Knowledge
Tekst źródłowy: definicja, sześć trybów przekazu informacji i katalog kilkudziesięciu typów hazardów, od danych po hazard uwagi i hazard „psychologicznej reakcji”.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
wprowadzenie i synteza 2019 · angielski
Gregory Lewis, Piers Millett, Anders Sandberg, Andrew Snyder-Beattie, Gigi Gronvall, Information Hazards in Biotechnology
Najbardziej operacyjne rozwinięcie pojęcia: jak rozstrzygać, które wyniki z biologii syntetycznej publikować, kiedy sama dyskusja o ryzyku jest ryzykiem.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
wprowadzenie i synteza 2019 · angielski
Irene Solaiman, Miles Brundage, Jack Clark i in., Release Strategies and the Social Impacts of Language Models
Raport OpenAI po wstrzymaniu pełnej publikacji GPT-2 (wersja 1: sierpień 2019, wersja 2: listopad 2019), szczegółowo uzasadniający etapowe udostępnianie modeli rachunkiem ryzyka nadużyć, czyli w praktyce rachunkiem zagrożeń informacyjnych, choć samego terminu nie używa.
Po polsku: brak polskiego wydania
Po angielsku: tekst oryginalny po angielsku
-
perspektywa krytyczna 1992 · angielski
Arthur Kantrowitz, The Weapon of Openness
Esej fizyka z epoki zimnej wojny, cytowany przez Bostroma: tajność osłabia stronę, która ją stosuje, bo odcina ją od korekty błędów; główny kontrargument wobec kultury utajniania.
Po polsku: wydania polskiego nie sprawdzono
Po angielsku: tekst oryginalny po angielsku
-
perspektywa krytyczna 1998 · angielski
David Brin, The Transparent Society: Will Technology Force Us to Choose Between Privacy and Freedom?
Argument, że w świecie taniej obserwacji asymetria wiedzy jest groźniejsza niż jawność, więc odpowiedzią na niebezpieczne informacje powinna być wzajemna przejrzystość, nie cenzura.
Po polsku: wydania polskiego nie sprawdzono
Po angielsku: tekst oryginalny po angielsku
-
z innej dziedziny 1986 · angielski
Richard Rhodes, The Making of the Atomic Bomb
Historia fizyki jądrowej, w której spór Szilárda z Joliotem o publikację wyników z 1939 r. jest najlepiej opisanym przypadkiem hazardu idei przed powstaniem terminu; Bostrom cytuje wydanie z 1995 r.
Po polsku: wydania polskiego nie sprawdzono
Po angielsku: tekst oryginalny po angielsku
-
z innej dziedziny 1996 · angielski
Roger Shattuck, Forbidden Knowledge: From Prometheus to Pornography
Historia literacka motywu zakazanej wiedzy, którą Bostrom wskazuje w pierwszym przypisie jako tło kulturowe; pokazuje, że intuicja o szkodliwej prawdzie jest dużo starsza niż jej rachunek.
Po polsku: wydania polskiego nie sprawdzono
Po angielsku: tekst oryginalny po angielsku
Cytaty źródłowe
Information hazard: A risk that arises from the dissemination or the potential dissemination of (true) information that may cause harm or enable some agent to cause harm.
Zagrożenie informacyjne: ryzyko wynikające z rozpowszechnienia lub możliwości rozpowszechnienia (prawdziwej) informacji, która może wyrządzić szkodę albo umożliwić jakiemuś podmiotowi jej wyrządzenie. (przekład: przekład roboczy)