Hlavní navigace

Seznam otevřel Kokuru. Teď ho čeká stěhování 30 tun hardwaru

 Autor: David Slížek, Lupa.cz
David Slížek 26. 3. 2015

Takové stěhování serverů tady ještě nebylo. Do nového datacentra v Horních Počernicích Seznam převeze na 1300 strojů. Jak to v Kokuře vypadá? UVNITŘ VELKÁ GALERIE

Začne to příští týden. Do stěhování Seznamu z malešického datacentra TTC se postupně zapojí na sedmdesát zaměstnanců firmy. Odpojí, převezou, překonfigurují a znovu zapojí stovky serverů, diskových polí a dalšího hardwaru. Vše bez výpadku služeb – uživatelé nemají nic poznat.

Novým domovem serverů bude ve středu oficiálně otevřené datacentrum Kokura, které si Seznam postavil v Horních Počernicích. Za deset let do něj chce investovat celkem 200 milionů Kč – cenu pozemku a hardwaru nepočítaje.

V provozu je zatím jeden ze dvou datasálů – do 96 racků každého z nich se přitom vejdou necelé čtyři tisíce serverů. Zprovoznění druhého sálu Seznam očekává už v roce 2017. Část ze svých současných asi tří tisíc (fyzických) serverů zároveň ponechává v datacentru Nagano.

TIP: Jak to v novém datacentru vypadá? Podívejte se na naši fotoreportáž:

Seznam má na stěhování připraveno několik scénářů, které se liší podle nároků jednotlivých služeb. V drtivé většině případů chce postupovat stylem, který administrátoři označují za „velký třesk“. 

Jeden den vypnou virtuální servery – kdyby se něco pokazilo, můžou je takto ještě druhý den rychle nahodit. Druhý den vypnou fyzické stroje, převezou je do Kokury, kde je zapnou a nainstalují. Pak přečíslují IP adresy, protože v novém datacentru jsou jiné domény a jiné rozsahy. 

Po spuštění ještě musí spárovat aplikace s odpovídajícími stroji v Naganu, kde má Seznam druhou polovinu serverů. Firma u svých služeb drží dualitu – to znamená, že každá běží v každý okamžik ze dvou míst nezávisle na sobě. Některé služby ale Seznam před stahováním „odstaví“ jen do Nagana – budou tedy dočasně provozovány jen odtud. 

Služby, které nesnesou dlouhou odstávku, se budou stěhovat tak, že administrátoři v Kokuře nainstalují buffer, složený z dvaceti až třiceti serverů. V noci pak do nového přestěhují virtuální servery a druhý den je vypnou v TTC, převezou je a z nich utvoří buffer pro stěhování dalších strojů. 

Na rychlosti záleží

Služby, které jsou citlivější na množství zapisovaných dat – například e-mail – čeká při stěhování ještě mírně odlišný postup. Při jejich přesunu jde totiž o rychlost. Administrátoři tak vypnou jejich datové servery v TTC, co nejrychleji je převezou do Kokury, kde je zapnou, nastaví nové IP adresy a nechají je dosynchronizovat data.

Je potřeba to zvládnout co nejrychleji, protože s časem rychle stoupá množství dat, která se pak musí dosynchronizovávat. Ale kdyby se něco stalo, třeba kdyby se cestou poškodily disky, nic zásadního se neděje – data máme několikrát jištěna, říká Marek Leš, Data Center Manager Seznamu.


Autor: David Slížek, Lupa.cz

Racky v Kokuře zatím zahřívají jen testovací servery

Na přestěhování asi 1300 serverů z Malešic do Horních Počernic má Seznam přichystána jen dvě auta. Pojedeme po menších várkách, na auta totiž máme pojistku, která nás jistí do určité výše, takže nepovezeme víc než třeba 40 strojů najednou, vysvětluje Leš.

Stěhovací vozidla si v Seznamu na akci připravili sami. Nejde o žádné specializované vozy, jsou jen vybaveny paletami a různým obalovým materiálem, který má tlumit vibrace a nárazy. Uvažovali jsme i o tom, že bychom pod palety dávali takové ty podložky, které se dávají pod pračky, abychom co nejvíc odstínili vibrace, ale nakonec to zřejmě dělat nebudeme, popisuje Leš.

Se stěhováním podle něj budou pomáhat i administrátoři a někteří vývojáři. Každá ruka se hodí – některé servery totiž váží až 80 kg. „Akce Kulový blesk“ by měla podle plánu trvat asi měsíc. Chceme stěhovat jen v pracovní dny a přes den, v pracovních hodinách, aby si administrátoři mohli normálně odpočinout. Máme vytvořených celkem sedm administrátorských týmů a každý se stará o svou množinu serverů, říká Leš.

Povolené ztráty

Cestování se servery může znamenat, že ne všechny dojedou do cíle v pořádku. Seznam předem počítá se ztrátami kolem 5 %. Rizik je celá řada a nedá se jim beze zbytku zabránit: některé stroje nemusí z různých důvodů po přemístění naběhnout, cestou se mohou poškodit disky atd.

Provoz služeb Seznamu ale nemají ani případné ztráty hardwaru ovlivnit. Každá služba běží v každý okamžik ze dvou míst nezávisle na sobě. Takže i kdyby nastal ten nejhorší možný scénář a žádný stěhovaný stroj nepřežil, služby poběží dál z Nagana, ujišťuje manažer provozního oddělení Martin Doleček. Jen by v takovém případě Seznam stál před problémem, kde rychle sehnat stovky nových strojů.


Autor: David Slížek, Lupa.cz

Oficiální otevření Kokury – zleva technický ředitel Vlastimil Pečínka, generální ředitel Pavel Zima, data center manager Marek Leš a Business Development Director Michal Feix

Aby toho nebylo málo, chystají síťaři v rámci stěhování u některých strojů zároveň obměnit konfiguraci. Nebudou tedy měnit jen IP adresy, ale i strukturu sítě, pravidla firewallů a podobně.

Na stěhování do Kukury se Seznam připravuje od začátku letošního roku. Loni v menším měřítku trénoval v Naganu, kde přesouval stroje z jedné místnosti do druhé. Zkušenosti čerpal také při navážení současných asi tří stovek testovacích serverů do Kokury.

Administrátoři průběžně už teď testují třeba i chování některých starších diskových polí, která běží už několik let bez přerušení. Na zkoušku je několik hodin vypínají, aby si ověřili, jak se budou chovat po znovuzapnutí. 

Žádné zkoušky vás ale obvykle nedokážou úplně připravit na skutečnost. Snad se datacentru Kokura při stěhování prvních nájemníků vyhne smůla. Pojmenované je přece po nejšťastnějším městě na světě.

Našli jste v článku chybu?

26. 3. 2015 14:53

Petr (neregistrovaný)

Protože si strhne záda a bude mít pracovní úraz, a při výsledném vyšetřování se ukáže, že stěhování neměl v popisu práce v pracovní smlouvě, jednalo se tudíž o šikanu zaměstnavatele a vysoudí na něm 3 miliony na bolestném :-)

26. 3. 2015 12:41

Tomáš Kapler (neregistrovaný)

Sorry, ale to je nesmysl. Samozřejmě že i v ČR existuje tuna stěhovacích firem, která má zkušenosti se stěhováním věcí náročných na otřesy a má k tomu potřebné vybavení (některé jsou i členy mezinárodních korporací a mají tak mezinárodní zkušenosti a dané postupy).

Ale jako bývalý šéf IT to trochu chápu - ti administrátoři si totiž stejně chtějí všechny stroje "osahat" - potřebují zjistit, v jakém jsou stavu, rovnou nejspíš udělají profylaxi, doplní paměti, ověří, jestli mají správně sepsanou j…

Měšec.cz: U levneELEKTRO.cz už reklamaci nevyřídíte

U levneELEKTRO.cz už reklamaci nevyřídíte

Měšec.cz: Zdravotní a sociální pojištění 2017: Připlatíte

Zdravotní a sociální pojištění 2017: Připlatíte

Podnikatel.cz: Přehledná titulka, průvodci, responzivita

Přehledná titulka, průvodci, responzivita

Měšec.cz: Nenechte se ošidit, když vám staví dům

Nenechte se ošidit, když vám staví dům

Měšec.cz: Vklad na cizí účet je draze zpoplatněn (přehled)

Vklad na cizí účet je draze zpoplatněn (přehled)

Vitalia.cz: Znáte „černý detox“? Ani to nezkoušejte

Znáte „černý detox“? Ani to nezkoušejte

Měšec.cz: Air Bank zruší TOP3 garanci a zdražuje kurzy

Air Bank zruší TOP3 garanci a zdražuje kurzy

DigiZone.cz: Digi CZ výrazně zlevnila balíček HBO

Digi CZ výrazně zlevnila balíček HBO

Podnikatel.cz: Babiše přesvědčila 89letá podnikatelka?!

Babiše přesvědčila 89letá podnikatelka?!

Podnikatel.cz: Chaos u EET pokračuje. Jsou tu další návrhy

Chaos u EET pokračuje. Jsou tu další návrhy

DigiZone.cz: Recenze Westworld: zavraždit a...

Recenze Westworld: zavraždit a...

Podnikatel.cz: Na poslední chvíli šokuje výjimkami v EET

Na poslední chvíli šokuje výjimkami v EET

Vitalia.cz: Jmenuje se Janina a žije bez cukru

Jmenuje se Janina a žije bez cukru

120na80.cz: Pánové, pečujte o svoje přirození a prostatu

Pánové, pečujte o svoje přirození a prostatu

120na80.cz: Co všechno ovlivňuje ženskou plodnost?

Co všechno ovlivňuje ženskou plodnost?

Měšec.cz: Platby do zahraničí: pozor na tučné poplatky

Platby do zahraničí: pozor na tučné poplatky

DigiZone.cz: HD programy ČT i v UPC Horizon

HD programy ČT i v UPC Horizon

Vitalia.cz: Pravda o přibírání na zimu

Pravda o přibírání na zimu

DigiZone.cz: Milan Kruml: procházka TV historií

Milan Kruml: procházka TV historií

Vitalia.cz: Dáte si jahody s plísní?

Dáte si jahody s plísní?