Великолепный век от PQ.Hosting: как арест в миллион долларов изменил жизнь команды

Моя цель - предложение широкого ассортимента товаров и услуг на постоянно высоком качестве обслуживания по самым выгодным ценам.

Привет, друзья! Обычно мы здесь рассказываем про разные self-hosted сервисы и делимся полезными инструментами, которые делают вашу работу проще. Но сегодня у нас совершенно другая история — масштабная, эмоциональная и про настоящее испытание.

Совсем недавно компания PQ.Hosting столкнулась с форс-мажором, который поставил под угрозу работу наших серверов в Турции. Это был момент, когда всё висело на волоске. Часть нашей команды экстренно вылетела в Стамбул, бросив все дела. Ребята работали не просто часами — сутками, практически без сна, чтобы спасти проекты и бизнес наших клиентов. И это не просто слова: мы сделали всё, чтобы ваши сайты, сервисы и данные остались в безопасности.

Хотя, наверное, мы немного забежали вперёд... Давайте расскажем обо всём по порядку и погрузим вас в детали того, что же произошло с нашим оборудованием в турецком дата-центре. Это история про вызовы, риски, невероятную самоотдачу и веру в то, что наши клиенты заслуживают только лучшего!

Особенности национального турецкого рынка хостинга

С турецким рынком нас связывает долгая, полная вызовов история. Мы вышли на него задолго до того, как это стало модно: сейчас многие российские хостеры обжились в стамбульских дата-центрах, а мы были чуть ли не первопроходцами — успели до хайпа! Это был смелый шаг, но, как оказалось, далеко не простой.

За «непаханностью» турецкого рынка скрывались свои суровые реалии. Главная из них — это адская проблема с ввозом оборудования. Никто не дает гарантий, а любая попытка ввоза превращается в лотерею. 

И у нас всё было именно так. Мы пытались зайти через брокеров, но в итоге смогли растаможить… только диски. Всё остальное застряло в бесконечном лимбе турецкой бюрократии. Брокеры, конечно, предлагали варианты за крупные суммы за свои услуги, но честно предупреждали: результат всё равно непредсказуем.

В конце концов, решение пришло само собой, но тоже не без боли: мы начали закупать оборудование на местном рынке. И тут нас ждал новый удар — цены! Они оказались в 2–3 раза выше, чем в Европе. Да, в Турции есть аналоги eBay, но они, к сожалению, переполнены скамом. Проверяй, перепроверяй, а потом ещё раз — и всё равно можешь нарваться на мошенников.

Каждая проблема становилась для нас проверкой на прочность, но мы продолжали бороться, потому что знали: за этим всем стоят проекты наших клиентов. Мы не могли позволить себе отступить.

Первые шаги в Турции и первый переезд 

Итак, с оборудованием мы разобрались, хоть и заплатили за это немалую цену. В прямом смысле. Первым нашим домом в Турции стал Измир — потрясающе красивый, древний город на берегу Эгейского моря. Если вы когда-нибудь видели его закаты, то понимаете, почему мы выбрали это место. Но для нас это был не романтический выбор, а жесткий компромисс.

Наше новое пристанище мы нашли через знакомого, который свел нас с директором местного дата-центра. Этот человек стал для нас спасением: помог не только найти подходящее место, но и закупиться оборудованием прямо на месте. Это обошлось дешевле, чем другие варианты, но цены всё равно были ощутимо выше, чем в Европе. Турция, что тут скажешь.

Мы проработали в этом ДЦ около полутора лет, и первое время всё казалось почти идеальным. Доступ к электроэнергии был дешевым, да и сам Измир радовал своим комфортом. Но за внешним спокойствием скрывалась одна огромная проблема, которая постепенно съедала наш бюджет. Цены на интернет здесь были просто космическими: 40 Гбит обходились в $20 000. И это без учёта стоимости защиты от DDoS-атак, о которой мы предпочитаем даже не вспоминать.

Мы поняли, что так долго не протянем. Поэтому начали искать новое место, и наш выбор пал на Стамбул — город, который кипит жизнью и возможностями. В стамбульском ДЦ Comnet нам предложили действительно выгодные условия. Так, например, нам помогли с покупкой оборудования. Но главной фишкой был доступ к 10 Gbps портам, что стало настоящим прорывом.

Кстати, этот ДЦ нам посоветовал наш клиент-хостер. Это вообще очень распространенная история — во многих странах у нас есть компании, которые берут в аренду наши серверы под свои ноды, базы данных, удаленных доступов и других задач . 

Это удобно и для нас, потому что мы получаем стабильного клиента, который покупает много и сразу. Ну клиентам, конечно же: им не нужно самим заморачиваться с покупкой оборудования. К тому же, для них доступны самые разные конфигурации железок — не только те, которые есть у нас на сайте. Поэтому если вы хостер или только хотите им стать, то обращайтесь — все устроим в лучшем виде. Но это так — на правах рекламы. Теперь возвращаемся к нашей истории!

В стамбульском Comnet всё работало просто идеально. Высокая скорость, стабильность, никаких сбоев. Клиенты были довольны, а мы наслаждались тем, что нашли баланс между качеством и ценой. Но, как это часто бывает, именно в момент спокойствия судьба решила проверить нас на прочность.

В ночь на понедельник, 20 января, в 01:21, всё пошло наперекосяк. И события этой ночи стали для нас настоящим испытанием на выживание.

Арест и экстренные меры

Всё началось с того, что в 01:21 ночи мы получили сообщение от их технического директора. Это был момент, который мы не забудем никогда. Сообщение было коротким и тревожным: «Comnet лишили лицензии, имущество компании арестуют. Всё оборудование под угрозой конфискации».

Мир вокруг будто бы замер, а мозг начал лихорадочно искал решение. Мы понимали: если мы промедлим хоть немного, тысячи наших клиентов по всему миру останутся без доступа к своим сайтам, проектам, бизнесу. Это не просто технический сбой — это полный крах для многих.

Позже мы узнали, что у Comnet накопился долг перед одним из крупнейших турецких интернет-провайдеров на сумму 1 200 000 долларов. Аресты проходили пока только в Турции. Однако, по данным некоторых источников, ожидаются также аресты на объектах компании и по всему миру. Мы оказались в центре урагана, где всё рушилось вокруг, а время работало против нас.

Но пугаться не было времени. Уже через несколько минут после сообщения мы начали искать выход. Главная задача: найти новый дата-центр уровня Tier III в пределах Стамбула, чтобы успеть перевезти оборудование максимально быстро.

Критерии были жесткими. Это должен был быть надёжный ДЦ, готовый принять нас немедленно, с возможностью развернуть всё оборудование без задержек. Секунды превращались в часы. Мы перебирали варианты один за другим, отсеивали неподходящие, пока, наконец, ближе к утру не нашли подходящее место.

Цены в новом ДЦ оказались в 2,5 раза выше, чем в Comnet. Да, это был удар по бюджету, но разве могли мы думать о деньгах, когда на кону была репутация и доверие наших клиентов? В такие моменты всё становится предельно ясно: они не должны страдать. Ни скорость, ни качество наших услуг не могут быть поставлены под угрозу.

Единственная хорошая новость была в том, что во всех дата-центрах мы используем только свое оборудование и ничего из железок не арендуем у дата-центров. В таких форс-мажорных ситуациях это очень удобно: ты можешь просто взять, все упаковать и перенести на другую локацию. А если бы мы арендовали серверы, то они бы тоже остались под арестом.

С этого момента началась настоящая гонка на выживание. Работа закипела: наша команда, сотрудники нового ДЦ, техники на местах — все включились в процесс с максимальной самоотдачей.

Мы работали 10 часов подряд без сна, без остановки. Каждый сервер, каждый кабель, каждая стойка были разобраны, перевезены и установлены заново. Мы знали: любой простой, любая ошибка может стать критической.

Почему важно было все сделать ночью? Потому что мы думали о наших клиентах. Мы понимали: для большинства из них это рабочие дни, и любой сбой может выбить их из колеи. Ночь была нашим единственным шансом минимизировать неудобства.

И вот картина, которая останется в нашей памяти надолго: наша команда с красными от усталости глазами, и стойки, которые нужно разобрать и собрать, словно огромные пазлы. В такие моменты понимаешь, что настоящая сила — это не только технологии, но и люди, которые верят в то, что делают.

К 9 утра по стамбульскому времени всё оборудование было перевезено, установлено и подключено. Серверы снова были онлайн, а мы наконец смогли выдохнуть. Вернув прежнюю скорость и качество обслуживания, мы сохранили то, что для нас самое важное — доверие клиентов.

Кстати, Турция — единственная страна, где мы переезжаем уже в 3 ДЦ. Ни в одной другой локации подобного нет.

Это было одно из самых сложных испытаний, через которые мы проходили, но мы справились. Мы доказали себе и всем, кто нам доверяет, что готовы бороться до последнего.

Итоги

И вот мы сидели на рассвете, измученные, измотанные, но с огромным чувством облегчения. Солнце медленно вставало над горизонтом Стамбула, окрашивая город в золотой свет, и казалось, что этот рассвет принадлежал не только этому дню, но и нашей победе. Серверы снова были онлайн, клиенты даже не заметили, через что мы прошли.

Эта ночь изменила нас. Она стала напоминанием о том, что наша работа — это не просто цифры и железо. Это, прежде всего, ответственность за судьбы тысяч людей, которые на нас полагаются. И если для этого нужно работать 10 часов подряд без сна, лететь в другую страну или собирать стойки в последний момент, мы сделаем это снова. Потому что для нас нет ничего важнее вашего доверия.

Этот рассвет в Стамбуле стал для нас символом. Символом того, что никакие трудности не остановят команду, которая готова бороться до последнего. Мы сделали это для вас. И будем делать это снова и снова, потому что вы заслуживаете только лучшего.

Спасибо, что верите в нас. Спасибо, что доверяете нам свое будущее.

Источник: https://habr.com/ru/companies/pqhosting/articles/877030/


Интересные статьи

Интересные статьи

Управление большим числом изменяемых шаблонов бизнес-процессов — непростая задача. А необходимость поддержки актуальных версий шаблонов на нескольких копиях проекта добавляет еще больше сложностей. Де...
Разбираем, как из маленького якутского ВК паблика для заказа такси сервис превратился в международную компанию, которая стоит $1.2 млрд.
В последние десятилетия значительно выросла роль автоматизированных систем управления технологическим процессом (АСУ ТП). Также существенно выросло количество атак на данный сектор. Одним из известных...
Эта статья для тех, кто собирается открыть интернет-магазин, но еще рассматривает варианты и думает по какому пути пойти, заказать разработку магазина в студии, у фрилансера или выбрать облачный серви...
Сегодня мы поговорим о перспективах становления Битрикс-разработчика и об этапах этого пути. Статья не претендует на абсолютную истину, но даёт жизненные ориентиры.