Po case zas GeeBun!
V utery jsem se uspesne vratil s rodinou z cesty kolem sveta, a tak se zas vracim do pracovniho procesu.
Pred odjezdem jsem byl nuceny GeeBun! vypnout, protoze mel obrovsky traffic a ja tam nemel uplne setrne udelany cachovani, resp jsem ho mel udelany tak spatne, ze mi zustavali puvodni cache soubory ktere se neodmazavali, a protoze to dokazalo vygenerovat miliony souboru tydne, hostingovemu prostredi se to opravdu nelibilo.
Za ten mesic a pul co jsem byl pryc jsem si vsiml, ze se do RSS DB nacetlo novych cca 76 milionu clanku. To neni vubec spatny 🙂
Kazdopadne abych to dal znovu dohromady, tak jsem musel udelat par uprav:
- vydedikoval jsem na to samostatny server, a celou domenu tam presunul
- prekopal jsem souborovou cache pro Elastic dotazy na Redis
- prekopal jsem ukladani obrazku z filesystemu do cloudovyho reseni (vlastni Minio server)
Ted to vypada, ze to jede svizne a nedela to problemy na urovni filesystemu.
V provozu jsou tedy generator: https://geebun.com a vyhledavac v RSS zdrojich: https://rssstream.net
Lukas -
Jak to dopadlo s GeeBun?
gransy -
Spatne 🙁 System diky velikosti byl narocny, reklamni site me nechtely protoze jsem byl jen agregator a afil nejak nefungoval 🙁 Ale nechci to uplne zakopat, jen jsem se venoval pak vic spise cistemu parkingu