https://data.iana.org/TLD/tlds-alpha-by-domain.txt
lista svih top-level domena
1 Like
100 terabajta ceo Internetā¦Internet propo
Inace imaju izgleda jako dobru dokumentaciju na https://www.commoncrawl.org/get-started o tome sta ima u kom fajlu, koji je format, cak i kako da se skine na razlicite nacine (browser, wget, python :D)
Imaju i WET fajl, koji sadrzi samo tekstove sa sajtova, bez htmla i sadrzi manje od 10 terabajta. Ovo je nesto sto je sasvim dostupacno za prosecnog coveka. Imaju diskovi od 2 TB za 4200 rsd. Znaci skladistenje teksta svih mapiranih sajtova kosta 21 000 rsd
1 Like
to je 100tb kompresovano
Ok los je meme, lljudi kapiraju kao promociju startapa, izmenicu haha
2 Likes
1 Like
1 Like
nisam gledao ali izgleda zanimljivo emisija
Nadjoh ga i na AntennaPod-u