inspiracja
Lethe w Hadesie to rzeka zapomnienia. Projekt szuka polskich domen .pl, których Common Crawl nie zaindeksował — nazwa wprost z PLAN.md projektu.
źródło: lethe/PLAN.md
cel
Metoda dobra na 90%: 12 ostatnich crawli CC + darmowe źródła list domen (crt.sh), zamiast drogiego pełnego indeksu Athena (subset=domain nie istnieje od 2020).
źródło: lethe/PLAN.md
zależności
Common Crawl S3 (Open Data, egress ~$0) -> CDX range-GET filtrowany po prefiksie pl, -> cc_pl_domains.csv. Certificate Transparency (crt.sh) -> universe_pl_domains.csv. DuckDB lokalnie robi anti-join. Walidacja przez CC Index API.
źródło: lethe/PLAN.md + data/*.duckdb
znaczenie
Domena expired_score 609/2001 (top 15%), obecnie wolna (RDAP 404, brak DNS). Historycznie oficjalna strona czasopisma Hutnik-Wiadomości Hutnicze (od 1929, ISSN, Index Copernicus) — realne backlinki z sigma-not.pl, icm.edu.pl, po.edu.pl, nauka.gov.pl, wszystkie żywe dziś.
źródło: sesja 2026-07-09, duckdb query + RDAP + wayback
co działa
whois wpada w request limit exceeded i jest niewiarygodny do live-checków. RDAP (rdap.dns.pl) + dig A/NS działa niezawodnie — 404 z RDAP = domena wolna. Sprawdzone empirycznie na hutnik-wh.com.pl.
źródło: sesja 2026-07-09
co nie działa
Ze 133 unikalnych domen-źródeł linkujących do hutnik-wh.com.pl, tylko 35 (26%) w ogóle się dziś rozwiązuje w DNS. 127 z 133 to jeden masowy zrzut z pojedynczego crawla — klasyczny wzorzec wstrzykniętej linkfarmy/PBN.
źródło: sesja 2026-07-09, duckdb query pl_web.duckdb
co do przetestowania
sigma-not.pl blokuje boty (403), więc nie potwierdzono czy 6 domen akademicko-rządowych nadal ma żywy href do hutnik-wh.com.pl, czy to już martwy/zdjęty link.
źródło: sesja 2026-07-09 — niepotwierdzone
rekomendacja
Przy rekomendowaniu klientowi wygasłej domeny: (1) użyj RDAP/DNS, nie whois; (2) sprawdź czy backlinki grupują się w jednym timestampie crawla (red flag = PBN); (3) traktuj tylko wielokrotne, rozłożone w czasie linki jako sygnał realnej wartości.
źródło: wniosek z sesji 2026-07-09