Analyza dat je krasna prace. Clovek se tak nauci ruzne nastroje, ktere mu umoznuji shromazdovat a nasledne analyzovat obrovsky mnozstvi zaznamu. Ja trebas aktualne zpracovavam az 5 miliard dat denne. Neni to malo ? 🙂 Nicmene, muj zajem o data se tyka trafficu domen. Tzn prakticky by cela prace sla . . . Read more
Dneska jsem si jen tak ze zvedavosti vyjel, na cem ze vlastne provozuju parking a analytiku dat.
Posledni dobou se dostavam do stavu, kdy me uz nestaci vydefinovat sloupce v tabulce a nasazet tam hodnoty. Duvodu je mnoho, ale hlavni je predevsim ten, ze potrebuju k radkum prirazovat ruznorody hodnoty, podle nich pak hledat, pracovat – napriklad konfigurace v ramci nejaky aplikace. Zacal jsem se tedy zajimat . . . Read more
Ale jo … i přes tu situaci v naši zemi a ve světě obecně to byl docela dobrý rok 🙂
V ramci zpracovani zones files z CZDS do Elastic Search potrebuju nejak prevest i zonefile od .com do JSON pro import do ES. Problem je, ze zabaleny ma 4,5GB, rozbaleny pak neco okolo 23 GB.
Vcera jsem resil, ze se mi neskutecne hromadi data v Elastiku. Mam denni prijem novych dat okolo 250GB a to proste z dlouhodobeho hlediska je neunosny. Faktem zustava, ze ale nerad mazu stary data, protoze se vzdycky najde neco k cemu se hodilo je mit. Napad byl tedy jasny – . . . Read more
V půlce ledna 2021 jsem registroval nějaké domény (co.za) které jsem vybral na základě různých ranků. Sepsal jsem o tom články zde: https://franta.cz/2021/01/19/ranky-neranky-jak-s-nimi-nalozit/https://franta.cz/2021/02/22/ranky-neranky-aneb-jak-se-nestat-milionarem-za-mesic/https://franta.cz/2021/02/28/ranky-neranky-stale-se-nedari/ Jaká je situace nyní po 10ti měsících ? Zaplatily se pozorované domény ? Udržely se dlouhodobě ? Za mě tedy naprostá spokojenost. Sledované domény se jednoznačně zaplatily . . . Read more
Po dlouhe dobe jsem se opet pustil do sveho crawlera. Preci jen jsem za posledni dobou docela postoupil jak v programovani v Go, tak i v praci s ElasticSearch (alespon myslim :D) tak i snad v chapani domen samotnych. Tenhle clanek je vysledkem testu, ktery jsem udelal ted predchozi dva . . . Read more
Tak jsem dlouho uz nic nenapsal …. tak nejak me jisty jedinec demotivovat se podilet o nejaky hlubsi informace z meho parkovani, uvidime. Kazdopadne dneska mam novinku, kterou jsme v ramci Gransy spustili v techto dnech – sluzbu presmerovani domen tak trochu jinak na https://redirect.host
Par dni zpatky jsem narazil bohuzel na diskove limity a ES me prestal indexovat novy data, protoze jsem se dostal na prilis nizkou hladinu volne kapacity. Do tohodle clanku si pridam ruzny admin prikazy, kteryma nejen tyto veci resim, abych to mel nekde pohromade 🙂