Odebírat | ||
|
Obrázek 'two villans' (medabeda) (26.8.2024 8:39) | reagovat |
trháááčííííííí  |
||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 19:09) | reagovat |
| Blm: no, neni treba se domnivat, vis jak to dopadlo. O ty story bychom se vubec ted nebavili, kdyby ty vypadky twitteru po tomhle slavnym najezdu na datacentrum neresila pulka internetu. Neslo jen o ty vypadky dat z toho obdobi, ale trvalo jim tejdny, nez to vubec znova stabilizovali. Ja jsem v nasazovani naopak spis punker v praci, ale proste do tyhle hura akce bych ooravdu nesel bez minimalniho testu predem. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 19:06) | reagovat |
| Hele jestli globalni aplikace pri nenadalem vypadku, ktery jinak muze nastat sam v dusledku treba HW problemu a pro ktery je ta aplikace navrzena a postavena (tedy aby ho ustala), nastane tak rozsahla korupce dat, tak ta aplikace patri smazat a zbytek lidi, co jeste nebyli vyhozeni, zmasakrovat holyma rukama. Obhajujes tady uplne neobhajitelne bludy. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 18:59) | reagovat |
| V momente, kdy zaroven vyhazis IT lidi, ktery nesouhlasili s sestidennim pracovnim rezimem nebo s tebou nekdy nesouhlasili nebos se svoji kvalifikaci bastlice kodu z jednoho commitu poznal, ze autor je debil... tak o to vic nedava smysl riskovat vytvoreni nekonzistence dat v rozsahu, kterej pred tim twitter mozna ani nezazil. Jen rikam, ze risk/reward za tohle punkovy seknuti sekerou byl i v dany situaci totalni nesmysl. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 18:53) | reagovat |
| No a druhou latku nastavujes ty, ze se nic neudela, i blba vec na par hodin se protahne na kvartal a technicky dluh se vrsi dal za financniho krvaceni firmy na lidech, co neodvadi realnou praci mimo meetingu a vysvetlovani, proc neco nejde. Dovolim si odhadnout, ze na vypadek a periodu globalni ztraty dat (ktera by ani nemusela byt globalni), by se zapomnelo do dalsi uplynule delky trvani vypadku. Na dvouhodinovy vypadek by po dvou hodinach uz kazdej zapomnel. Tak strasne dulezita sluzba Twitter totiz je. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 18:52) | reagovat |
| Nevim, proc porad dostavam takovou cocku a hemzi kolem korporatni lopaty, kdyz mam pocit, ze v zasade by se tvoje reseni az tak nelisilo. Ty mluvis o testovani, ze kteryho bys byl ochotnej zahodit data. Porad je to ale testovani, o ktery mi slo primarne. To neni zadna petiletka. Misto toho proste nabehnout do DC a odnyst si servery. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 18:49) | reagovat |
| Blm: nevim, jestli mas moznost nejakyho srovnani z minulosti treba, ale tenhle mindset dela zasadni rozdil. Pokud ke vsemu budes pristupovat tak, ze to neni nemocnice a muzes zahodit kdykoliv data z nejakyho "testu" a vysrat se na uzivatele, tak nastavis nejakou latku jak kvalitni bude vsechno. A v. Omwnte kdy chces ziskat placeny uzivatele (twitter blue) a neztracet inzerenty je lepsi na ty uzivatele nesrat, protoze konkurence twitteru byla vzdycky. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 18:33) | reagovat |
| krysa: Inzerenti plati za zobrazenou reklamu a prokliky, ktere muzou klidne jet, i kdyz nasledne veskery vytvoreny obsah za posledni dve hodiny zmizi pri rollbacku. Ale i kdyby, cena ad rev za nekolik malo hodin je nizsi nez drzet si tym lopat jako nebrat, co praci a progresu brani jen aby vypadali dobre, ze je v monitoringu vse zeleny. A povest? Jako ze uzivatele nebo inzerenti pujdou na konkurencni Twitter? A to je kterej? Zadnej. Proto ho Musk vubec koupil. | ||
|
|
||
|
|
Obrázek 'two villans' (anonykrysa) RP (25.8.2024 18:30) | reagovat |
| ALe i ten jinej rezim je blbe. Proste realny zhodnoceni - kdyz se Musk na neco zeptal, dostal odpoved ne podle skutecnosti, ale aby vypadali hezky. Po prevzeti se to stalo X-krat. Pak prisel s migraci, a najednou dostal migracni plan jak pri korporatnim prechodu z Javy do Haskelu. @blm ale ono i ten nedulezitej Twitter kazda minuta outage znamena miliony dolaru (inzerce, povest), to nemuzes tak brat. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 18:26) | reagovat |
| Ty vole ty to porad nechapes. Kdyz bude mit sluzba jako Twitter rozesrana data, tak proste vsechno od zacatku testovani smazu a nasrat. Kurva je to Twitter vole. Uplne nedulezita sluzba sice se stovkami milionu uzivatelu (jenze neplaticich, bez naroku na nic) a jen par stovkami mozna tisici zakazniku (=inzerentu). Ty se o to porad chces starat v uplne jinem rezimu, nez jaky ta sluzba vyzaduje. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 18:19) | reagovat |
| Pak bys vedel, ze to hovno to dat do kupy padne na tebe a budes klit zadrenej nad klavesnici tejdny, mezitim co Muskova jedina napln bude, ze te bude mrdat za to, ze jsi jeho idiotsky rozhodnuti jeste nedal dokupy. Raci zustan u koureni ruskejch nemytejch curaku nebo maximalne vymenou papiru u tiskarny v tesco pokladne. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 18:16) | reagovat |
| Blm: ty ses fakt neskutecnej mimon. Mozna jestli nemas nejakej komplex, ze kdyz se nekde objevi naznak nejakyho bose (nevim, proc me u tebe napada treba Putin), tak se hnes ohnes a delas co chce jestwle driv nez to rekne,bez pokusu o nejakyho protinavrhu. Taky si myslim, zes nikdy nesresil na produkci nejak vyznamne rozesrany data. Kde nemas nejakou jesnoduchou shardovanou relacni databazi, easy to fix, ale cast mas data rozhozeny mezi mq, srackoidnima dokumentovyma databazema, bez jasnyho schema | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 18:06) | reagovat |
| V kontextu sluzby jako Twitter je to malo punk, zlamal bych ti ruce, poslal domu na neschopenku abys prestal skodit a jal bych se aktivniho testovani jako Musk. Uplne ti unika kontext vyznamu te dane sluzby. U Twitteru jde o hovno a podle toho se s nim ma zachazet. Neni to nemocnice ani rizeni letoveho provozu, tak se uz kurva prober. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 17:56) | reagovat |
| Tak jasne, oni dali tu timeline na migraci proto, ze zaroven tvrdili, ze je zam redundance a da se to hned vypnout. Tohle by nereklo zadny svepravny IT ever. Kdyby to bylo na me, tak urcite rizika pojmenuju a priznam kde nevim. Trval bych na tom, at se nejdriv zkusi traffic jenom preroutovat na kratsi moment, zanalyzujou se logy a pak at si to Musk klidne zapali. Pokud vam to prijde malo punk, tak spolu urcite pracovat nebudeme. Don't worry. | ||
|
|
||
|
|
Obrázek 'two villans' (anonykrysa) RP (25.8.2024 17:43) | reagovat |
| Fakt bych chtel mit za kolegy nekoho jako je Nebrat. "Sefe mame plnou redundanci. Ale nesmis na to sahnout, jinak se to cely sesype". Za tohle bych ho proste vyhodil. Ne za to, ze se to sesypalo, to se v praxi stava. Za to, ze mi mazal med kolem huby. Jo, neco jinyho je "No redundanci nemame, zkouselo se to, ale do toho prislo predloni katovani kostu, tak se to odlozilo na dalsi fiskal a pak na dalsi" je relevantni odpoved. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 17:38) | reagovat |
| Asi mel Musk zkusenost (nebo duvodne predpokladal), ze IT jde na vec s tvym kokotskym pristupem, a protoze o hovno slo tak to tam dosel vytrhat sam. Akce byla plne v souladu s dulezitosti sluzby a jejim nutnym SLA. Jen ty z toho delas nejakou velkou vec. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 17:33) | reagovat |
| Meti tim co ty si predstavujes jako zbytecbou investici do predchazeni problemum a tim co udelal on lezelo asi milion kompromisu, jenze tohke je proste zpusob jeho vedeni. Coz byla moje pointa. Facebook se svym testovanim odpojeni od DC je uolne jinej level. Nic dalsiho k tomu nemam. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 17:29) | reagovat |
| Jezisi neco si o tom uz prosimte zjisti. Narazka na prescasy vecer je, ze Musk vubec neuvazoval o tom, ze tim rozmrdaj twitter na dva mesice. Ani uz nevim, kde jswm tu story cetl, myslim, ze to byla jeho biografie, ale ve zkratce to bylo tak, ze chtel zmigrovat kuli nakladum, IT (ktera o problemu neco vedela) mu dalo timeframe,TF se nepromitnul do Muskova sveta kdy jde vsexhno okamzite, tak se nasral, nabehl do DC sltusim brachou, kterej je farmar a proste vytrhali servery ze site. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 17:17) | reagovat |
| No zjevne to moc nerozbil, kdyz Twitter jel dal a maximalne nejaky subsystem nebo cast sveta mela skytavku. Na vypadek datacentra se pripravit lze, ale lidi jako ty nemaji koule na to ho poradne otestovat a vedou veci do sracek. A ze se oprava protahla do prescasu? To meli lidi, co na tom aktivne delali, se vsi kratkodobou znalosti cerstve v hlave, predat sichtu a jit domu? Ty vole ty ses takova lopata, ze bych ti nesveril ani ovladat vytah, natoz neco komplikovanejsiho. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 17:07) | reagovat |
Blm: lol, to bude nejaky ublizeni z mladi takovej vylev, co?  . Az to nebudes patlat jak vidlak, rak zjistis, ze v praxi resis oboji. Na veci na ktery se nemuzeals pripravit se samozrejme nepripravis a resis je ale co ovlivnit muzes se snazis resit nejak proaktivne. To co udelal facebook je uplnej opak toho vyrazit do datacentra a vzit si servery. Ocividne zavedli nejaky circuit breakers a redundance a zestovali, jestli to funguje. Musk se proste rozhodl to rozbit i fixnout trable prescasama vecer. |
||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 16:56) | reagovat |
| Takovy kokoty jako ty uz jsem zazil. Hlavne nic nedelat, hlavne na nic nesahat, hlavne aby to jelo a byly zeleny metriky, a pak se divi, ze to, za co jsou zodpovedni, je ve srackach a ma to desetilety technicky dluh, ze pak musi prijit jiny tym a ten Augiasuv chlev vykydat. Testovani, ktere tu ja hajim, se deje i v tom nejvetsim meritku, viz treba Fb takto testoval uz pred 10 lety. Suline. https://www.datacenterknowledge.com/hyperscalers/facebook-turned-off-entire-data-center-to-test-resiliency | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 16:52) | reagovat |
| Epickej fejl by to byl, kdyby mel epickej dopad. Coz nemel a dusledkem bylo takove skobrtnuti. Tak jo, tak si jed na stabilitu a uptime u veci, u ktere na tom nezalezi, a pak si res to rozjeti databazi v nasobne vetsim meritku pri skutecnem vypadku, ktery se stane kdyz ho neplanujes, kdyz nemas plan testu, rozjete dodatecne monitorovani, vsechny odpovedne lidi pripravene atd. Ses kokot a zjevne to nepochopis, protoze ses karierni patlal. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 16:48) | reagovat |
| V takle rozsahlejch distribuovanejch datech fakt nechces ani zkouset zjistit, kde vsude se to rozjelo a jak to slepit zpatky. Resp. odstraneni demage je mnohem narocnejsi a drazsi nez tomu zkusit predejit. Twitter urcite neni kriticky dukezita infrastruktura, ale kdyz ses jednou ceo, tak by ti to melo bejt uplne jedno. Ale mozna kdyz pouzijes priste vic smailiku, treba to lip pochopim. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 16:43) | reagovat |
| Blm: dve ruzny veci - jak moc je Twitter k hovnu a velikost toho failu. Ja stojim za tim, ze to byl epickej fail a ze kdyby stejny rouhodnuti udelal vykonej reditel, kterej by nebyl majitel, tak. Y letel. Udelat pro tu migraci plan melo smysl hlavne kuli tomu, ze twitter je absolutni nightmare pro to resit nejaky "rucni" opravy dat, kdyz se ti to rozjede. 350k tweetu za minutu. Nevim, kde jsou architekturou dneska, ale pred casem meli data v nerelacnich db. Dost lezeli na redisech. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 16:00) | reagovat |
|
Ty vole no tak to je tragedie, ze v podstate blogovaci platforma, kterou drtiva vetsina uzivatelu pouziva zadarmo a nejsou to zakaznici, chvili nejela na 100 %. Hrozny utrpeni, cim si ti lidi prosli. Takovej fajl. Na nahle vypadky se nejlepe pripravis simulaci tech vypadku. Kdyz ti nekde bakr fikne kabel (a druhej, treti), tak proste to DC jde offline behem vteriny a nejake graceful preroutovani provozu tohle nesimuluje. U Twitteru jde o hovno a ty ho chces resit jako treba nemocnici |
||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 15:20) | reagovat |
| Blm: nebo ja nevim jak uz by sis nefunkcnost neceho, co uchovava a siri zpravy, predstavoval. Vypnuti datacentra by i v mensi firme melo nejakej krizovej plan s rucni brzdou, kde by se treba zkusil provoz preroutovat na minuty/hodiny a sledoval se bug rate. Jestli meli zahardcodovany linky do sacramenta, tak jim hned po vypojeni museli svitit logy jak diskoteka. Takze se na to pravdepodobne uplne vysrali, Mzsk nabehl s brachou a proste prestehovali techniku jako kdyby slo o skladovani brambor. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 15:13) | reagovat |
| Blm: nebudu to dohledavat, ale nejakej jeden audio meeting, jakkoliv prestizni je naprosto minoritni problem. Problem byl, ze se uzivatelum nasledne zblaznilily jejich feedy. Cetl jsem nekonecnej brekot o tom jak nekdo stravil hodiny managementem svyho contentu, jen aby se mu pak do nekonecna vracely veci ktery smazal nebo se objevovali duplicitni posty. X pouzivam okrajove, takze nevim, jak dlouho to trvalo, ale co si pamatuju, tak to odpovida vic tomu tejdny nez dny. A to je sakra fail. | ||
|
|
||
|
|
Obrázek 'two villans' (blm v prestrojeni 4) (25.8.2024 13:36) | reagovat |
| No vzdyt presne o tom mluvim. Nebylo to "epicky posrane", ale jen destabilizovane. No tak nekde nefungoval nejakej ten masivni audio meeting, a co jako. Dyt to je prdel vody. Jo a redundance DC se nikdy neotestuje lip nez prostym odriznutim primaru a preklopenim na zalohu. Muzes mit stovku nejlepsich expertu a nikdy ti jejich analyza neda tak dobou odpoved, jako dobre pripraveny prakticky pokus. Twitter neni mission critical aplikace a tak je treba k nemu pristupovat. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 13:09) | reagovat |
| Blm: sorry, ale tohke fakt nebyl kosmetickej preslap, kterej by spravil hotfix. Byli lidi, ktery mu rikali, ze tohle nejde resit sekerou a stejne sel a udelal to. Abychom se spravne pochopili, ja Musku vidim jako jednu z nejvetsich osobnosti moderni doby. Bez vahani bych ho postavil napriklad pred Jobse. Ale myslim, ze je taky bezohlednej maniak. Za vyhozeni woke aparatu a zverejneni twittwler files zase neakutecny respekt. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 12:57) | reagovat |
| Blm: For the next two months, X was destabilized. The lack of servers caused meltdowns, including when Musk hosted a Twitter Spaces for presidential candidate Ron DeSantis. “In retrospect, the whole Sacramento shutdown was a mistake,” Musk would admit in March 2023. “I was told we had redundancy across our data centers. What I wasn’t told was that we had 70,000 hard-coded references to Sacramento. And there’s still shit that’s broken because of it.” | ||
|
|
||
|
|
Obrázek 'two villans' (jonto) (25.8.2024 11:32) | reagovat |
Preco ma byt Musk curak, pretoze nechce cenzurovat Trumpa atd?  Sloboda slova vam moc nechuti vy kurvy "demokraticke" |
||
|
|
||
|
|
Obrázek 'two villans' (blmblmblm+jiz+byl+2.74234161x+nevakcinovan+Roumenem) (25.8.2024 5:50) | reagovat |
| V Twitteru neco drhne? Musk orezal zmrdi sadlo a ta firma a aplikace funguji lip nez kdy predtim. A co oznacujes za "epicky posral" byla jen drobna skytavka. Zjevne tomu nerozumis a pod tihou emoci meles sracky. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 2:39) | reagovat |
| Jinak se nedivim, ze mu to v twitteru drhne. V IT uplne nefunguje, kdyz se dlouhodobe jede na 200%, programatori jsou vyhoreli a kumuluje se technickej dluh. Nehlede na picoviny, kdy nechtel ztracet cas planovanim migrace z data centra, napochodoval tam, vypnul servery a z toho damage se pak twitter epicky posral. Tohle udelat nejakej muj nadrizenej a chtit po me pak preacasy aby se to zachranilo, tak okamzite koncim. | ||
|
|
||
|
|
Obrázek 'two villans' (Nebrat) (25.8.2024 2:28) | reagovat |
| Na Muskovi me sere nejvic to pokrytectvi, kdy aby vyzdimal z lidi maximum, nocuje v tovarne (tesla) / v kanclu (twitter), zavadi spaci mistnosti aby lidi nemeli vymluvu jezdit domu. A tvari se ze v tom jsou vsichni stejne. Az na to, ze in the end of the day on je za to nocovani na zemi nejbohatsi clovek na svete, oni maj praci u linky / klaveanice, s proplacenyma prescasama. | ||
|
|
||
|
|
Obrázek 'two villans' (morlor) RP (24.8.2024 18:12) | reagovat |
| jakože díky za připomenutí Kranka hned tam začalo proudit technodrom, general Traag atd | ||
|
|
||
|
|
Obrázek 'two villans' (misil) RP (24.8.2024 13:36) | reagovat |
| Androidka: hlava je mnohem zranitelnejsi, po te jde nepritel jako prvni | ||
|
|
||
|
|
Obrázek 'two villans' (Sratan) (24.8.2024 11:48) | reagovat |
| Osobne - pokud uz si mam vybrat ze dvou curaku - tak preferuji curaka typu Musk, pred curaky, kteri se s vydelanymi, nebo zdedenymi penezi jenom vytahuji a nicemu nerozumi. Ale kdyby se jednou prozmenu objevil nekdo, kdo se chova jako clovek, tak by to bylo prijemne. | ||
|
|
||
|
|
Obrázek 'two villans' (Sratan) (24.8.2024 11:47) | reagovat |
| no-X: Musk je curak a je to videt na tom, jak se snazi ridit twatter. Ale protoze ma dost technickych znalosti a penez, tak dokazal vybudovat nekolik superuspesnych firem. Jenomze pred twatterem ani on sam netusil, ze zakladni uspech je vybrat cil, za kterym pujdou lidi sami a pro dosazeni cile vybuduji zpusob, jak odfiltrovat Muskuv vliv od rizeni firmy. Coz ve twatteru nemohlo nastat kvuli typu firmy i kvuli tomu, ze nebyla vybudovana pod Muskem. | ||
|
|
||
|
|
Obrázek 'two villans' (OMFGv2) (24.8.2024 11:18) | reagovat |
| Zásadní rozdíl je, že Mlask si nechal nastřelit vlasy! | ||
|
|
||
|
|
Obrázek 'two villans' (pambu) (24.8.2024 11:08) | reagovat |
| a co přesně jsou všechny ty failed tech projects? Hyperloop a..? | ||
|
|
||
|
|
Obrázek 'two villans' (Androidka) (24.8.2024 11:08) | reagovat |
| Dodnes nechápu, proč byl ten mozek "Krank" v břiše toho robota a ne v jeho hlavě. | ||
|
|
||
|
|
Obrázek 'two villans' (lmao) RP (24.8.2024 10:48) | reagovat |
| Je to sice zmrd, ale taky bych rad failoval jako on. | ||
|
|
||
|
|
Obrázek 'two villans' (no-X) RP (24.8.2024 10:32) | reagovat |
Mně se líbí, jak někteří mají neustálou potřebu shazovat Muska a kritizovat jeho „failed projects“, kterými za posledních ~5 let zvýšil hodnotu svého jmění z ~$20 miliard na ~$200 miliard. To je opravdu fail jako hrom  |
||
|
|
||