Здравствуйте, меня зовут Роман Окинфеев. Я возглавляю подразделение, которое занимается проектированием и разработкой бэкендов сервисов Яндекс 360.
25 лет назад, когда мы запускали наш первый сервис — Яндекс Почту, — мир вокруг нас был совершенно другим. В то время Яндекс и Google были небольшими по нынешним меркам стартапами. Они недавно запустили свои поисковые машины, искали инвесторов и делали первые шаги на зарождающемся рынке облачных решений, создавая первые продукты своих экосистем. Microsoft только что выпустил Windows 2000, ту, что была перед суперпопулярной Windows XP. На рынке появились первые USB-флешки, до появления Amazon Web Services ещё оставалось долгих 6 лет, а выход первого iPhone должен был случиться только через 7. Интернет еще не вошел в повседневную жизнь миллиардов людей по всей планете и только начинал набирать популярность.
С тех пор произошло много всего изменившего мир. Взрывной рост мобильных технологий и скоростного доступа в интернет сделали облачные технологии неотъемлемой частью повседневной жизни. Появление SSD-накопителей вывела на недосягаемый уровень скорость работы с большими объемами данных. Гиперскейлеры, такие как Amazon Web Services или Yandex Cloud, в корне изменили подходы к гибкости, масштабированию и доступности систем. Социальные сети и мессенджеры прочно вошли в жизнь каждого человека. Голосовые помощники, виртуальная и дополненная реальность изменили представление о возможности взаимодействия человека и машины. Объемы информации, производимые сегодня в мире, лежат за пределами обычного человеческого понимания. Если бы кто-то решил прочитать все письма, получаемые Яндекс Почтой только за одни сутки, то у него ушло бы больше 285 лет. Число файлов в Яндекс Диске столь велико, что если представить, что файл – это лист бумаги толщиной одна десятая миллиметра, то стопка вышла бы высотой около 51 километра. Это в 6 раз выше горы Эверест и Пика Победы.
За последние несколько десятилетий мы создали уникальные продукты и технологии, построили один из крупнейших виртуальных офисов для личных дел и совместной работы в России. Сегодня мир меняется как никогда быстро и открывает перед нами новые возможности. Перед нами встают новые вызовы глобального масштаба, искусственный интеллект усиливает когнитивные способности человека и предвещает взрывной рост объемов информации, создаваемых человечеством. Это время больших вызовов и опасностей для молодой эти индустрии. Но наши сервисы надежны и масштабируемы, а инженеры любознательны и бесстрашны.
Происходящие перемены выглядят для нас очень многообещающе. Я убеждён, что будущее нашей индустрии во многом зависит от того, насколько хорошо мы с вами понимаем мир глобальных, распределённых, нагруженных систем и умеем их строить. Пока в этом мире мы играем не главную скрипку. Но мы стремительно развиваемся, темпы роста IT в нашей стране в два раза превышают общимировые. Кто знает, что нас ждет в следующем десятилетии?
В Яндекс 360 мы много лет создаем и развиваем крупнейшие облачные сервисы в России. В последние пару лет мы активно делимся накопленным опытом на конференциях. Мы верим, что только через обмен знаниями и развитие всей нашей IT индустрии можно достичь новых, доселе невиданных для нас горизонтов. Поэтому мы решили расширить форматы, в которых делимся знаниями и опытом. И представляем вам серию коротких обзорных рассказов о том, как мы проектируем наши сервисы. В первом сезоне мы сосредоточились на основах, на которых строятся наши сервисы, на том, с чего начинается любая информационная система: от небольшой утилиты для поиска текста до глобальных распределенных систем хранения и обработки данных.
Итак, мы начинаем путешествие по дороге к нагруженным распределённым системам.