HighLoad++ Foundation 2022 — Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

Миллион RPS в YDB: история одного переезда Метрики

Базы данных и системы хранения

Базы данных

Целевая аудитория

Доклад рассчитан на разработчиков среднего уровня и выше.

Тезисы

Скачать презентацию

Все презентации конференции

В Яндекс Метрике существует сборка визитов пользователей на сайте, для этого необходимо хранить историю всех событий и склеивать их друг с другом на лету.

Для этого использовалась конвейерная распределенная система, со своим самописным локальным хранилищем и своей логикой репликации и шардирования. По мере роста нагрузки мы уперлись в производительность отдельного шарда, при этом продолжать наращивать их количество без принципиальной перестройки архитектуры было крайне болезненно.

Приняли решение перестраивать и сформулировали следующие требования:
1. новое хранилище должно быть прозрачно масштабируемым как по месту, так и по производительности;
2. обработчики должны быть stateless;
3. количество обработчиков должно наращиваться «по кнопке».

В рамках доклада расскажу:
1. почему остановились на YDB, как переезжали, что сломали;
2. как научились работать с таблицей в 40ТБ и 1 миллионом запросов в секунду;
3. как тестировали и масштабировали.

Разработчик С++. Группа разработки движка Яндекс Метрики.

Яндекс

Яндекс — технологическая компания, которая создаёт инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах. Основные бизнес-направления: поиск и электронная коммерция, сервисы объявлений, медиасервисы, онлайн-заказ такси и еды, беспилотные автомобили, продукты для рекламодателей и владельцев бизнеса. Яндекс также активно развивает проекты с открытым исходным кодом, например, библиотеку машинного обучения CatBoost.

Другие доклады секции

Базы данных и системы хранения

ClickHouse в Kubernetes — это просто!

YDB: мультиверсионность в распределенной базе

Подсистема I/O в PostgreSQL: архитектура, проблемы, обходные пути

Архитектура Vitastor. Тёмная сторона моей распределённой СХД

Поиск проблем в базе данных, если ты разработчик

Ребаланс в распределённой базе данных. Как нагнать состояние узла до состояния кластера?

Pluggable TOAST or One TOAST fits ALL

Топ-5 провальных решений при разработке на Tarantool

Архитектура высокопроизводительных распределенных SQL-движков

JIT-компиляция запросов в ClickHouse

Казанцев Александр Игоревич | personalii.

spmi.ru

Ученая степеньКандидат технических наук
Должность
Начальник отдела учебно-лабораторного обеспечения
Доцент
Инженерной геодезии

Телефон

+7 (812) 328-8436

Mail

[email protected]

Адрес

1 корпус, 21-я линия, 2

Аудитория

2208

Время работы

08:45 — 17:30

Профили автора

Идентификаторы автора

• Публикации
• Биография
• Дисциплины
• Стажировки
• Расписание

Статьи в журналах

2020

• Казанцев А. И., Бойков А. В.
  , Вальков В. А. Monitoring the deformation of the earth’s surface in the zone of influence construction / E3S Web Conf., № 157, Т 1, 2020. С 1 — 13 . Детали

2018

• Kazantsev A. I., Kuzin A. A.
  , Valkov V. A. Calibration of digital non-metric cameras for measuring works / Journal of Physics: Conference Series, № 1118, V 1, 2018. pp. 1 — 7 . Детали
• Kazantsev A. I., Kuzin A. A.
  , Valkov V. A. Satellite-based techniques for monitoring of bridge deformations / Journal of Physics: Conference Series, № 1118, V 1, 2018. pp. 1 — 6 . Детали

2017

• Kazantsev A. I., Kochneva A. A.
  Ground of the geodesic control method of deformatons of the land surface when protecting the buildings and structures under the conditions of urban infill / Ecology, Environment and Conservation, № 23, V 2, 2017. pp. 876 — 882 . Детали
• Kochneva A. A., Kazantsev A. I.
  Justification of quality estimation method of creation of digital elevation models according to the data of airborne laser scanning when designing the motor ways / Journal of Industrial Pollution Control, № 33, V 1, 2017. pp. 1000 — 1006 . Детали
• Mustafin M. G., Valkov V. A.
  , Kazantsev A. I. Monitoring of deformation processes in buildings and structures in metropolises / Procedia Engineering, № 189, 2017. С 729 — 736 . Детали

2015

• Казанцев А. И., Геодезического контроль деформаций зданий и сооружений в условиях уплотненной застройки / Естественные и технические науки, № 6, 2015. С 237 — 239 . Детали
• Казанцев А. И., Методика геодезического контроля деформаций сооружений в условиях уплотненной городской застройки / Горный информационно-аналитический бюллетень, № 12, Т 1, 2015. С 108 — 117 . Детали

Патенты

1. Казанцев А. И. Программа для преобразования эллипсоидальных координат в плоские прямоугольные в проекции Гаусса. Патент РФ № 2020667721. бюллетень программ для ЭМВ. №. дата публикации 2021.
2. Казанцев А. И. Программа для моделирования погрешности определения положения поверхностных грунтовых марок. Патент РФ № 2020613509. бюллетень программ для ЭМВ. №. дата публикации 2020.

В 2013 году окончил федеральное государственное бюджетное образовательное учреждение высшего профессионального образования «Национальный минерально-сырьевой университет «Горный» (ныне федеральное государственное бюджетное образовательное учреждение высшего образования «Санкт-Петербургский горный университет») с присуждением квалификации инженер по специальности «Прикладная геодезия».

В 2016 году после окончания аспирантуры по специальности 25.00.32 «Геодезия» успешно защитил диссертацию по теме «Геодезический мониторинг деформаций зданий и сооружений в условиях уплотнительной застройки с учетом оценки зоны влияния строящегося объекта» на соискание ученой степени кандидата технических наук.

С сентября 2016 года ассистент кафедры «Инженерной геодезии», с января 2020 года и по настоящее время работает на должности доцента кафедры «Инженерной геодезии».

С февраля 2021 г. заместитель начальника отдела по лабораторно-техническому обеспечению отдела УЛО.

С апреля 2022 г. начальник отдела учебно-лабораторного обеспечения

Статьи в журналах

2020

• Казанцев А. И., Бойков А. В.
  , Вальков В. А. Monitoring the deformation of the earth’s surface in the zone of influence construction / E3S Web Conf., № 157, Т 1, 2020. С 1 — 13 . Детали

2018

• Kazantsev A. I., Kuzin A. A.
  , Valkov V. A. Calibration of digital non-metric cameras for measuring works / Journal of Physics: Conference Series, № 1118, V 1, 2018. pp. 1 — 7 . Детали
• Kazantsev A. I., Kuzin A. A.
  , Valkov V. A. Satellite-based techniques for monitoring of bridge deformations / Journal of Physics: Conference Series, № 1118, V 1, 2018. pp. 1 — 6 . Детали

2017

• Kazantsev A. I., Kochneva A. A.
  Ground of the geodesic control method of deformatons of the land surface when protecting the buildings and structures under the conditions of urban infill / Ecology, Environment and Conservation, № 23, V 2, 2017. pp. 876 — 882 . Детали
• Kochneva A. A., Kazantsev A. I.
  Justification of quality estimation method of creation of digital elevation models according to the data of airborne laser scanning when designing the motor ways / Journal of Industrial Pollution Control, № 33, V 1, 2017. pp. 1000 — 1006 . Детали
• Mustafin M. G., Valkov V. A.
  , Kazantsev A. I. Monitoring of deformation processes in buildings and structures in metropolises / Procedia Engineering, № 189, 2017. С 729 — 736 . Детали

2015

• Казанцев А. И., Геодезического контроль деформаций зданий и сооружений в условиях уплотненной застройки / Естественные и технические науки, № 6, 2015. С 237 — 239 . Детали
• Казанцев А. И., Методика геодезического контроля деформаций сооружений в условиях уплотненной городской застройки / Горный информационно-аналитический бюллетень, № 12, Т 1, 2015. С 108 — 117 . Детали

Патенты

1. Казанцев А. И. Программа для преобразования эллипсоидальных координат в плоские прямоугольные в проекции Гаусса. Патент РФ № 2020667721. бюллетень программ для ЭМВ. №. дата публикации 2021.
2. Казанцев А. И. Программа для моделирования погрешности определения положения поверхностных грунтовых марок. Патент РФ № 2020613509. бюллетень программ для ЭМВ. №. дата публикации 2020.

1. «Геодезия» (лекции, практические занятия).
   Специальность «Горное дело». Специализация «Открытые горные работы».
   Семестр: 3.
2. «Геодезия» (лекции, лабораторные работы).
   Специальность ««Горное дело»». Специализация ««Маркшейдерское дело»».
   Семестр: 1.
3. «Космическая геодезия и геодинамика» (лекции, практические занятия).
   Специальность ««Прикладная геодезия»». Специализация ««Инженерная геодезия»».
   Семестр: 10.

1. Программа: «IX конференция Российско-Германского сырьевого форума».Место прохождение: Конгресс-холл Дюссельдорфа (Северный Рейн-Вестфалия), г. Дюссельдорф, Германия.
   Период прохождения: 23.11.2016 — 25.11.2016.
2. Программа: «Современные технологии горного и металлургического производства».Место прохождение: Парижская высшая горная школа, г. Париж, Франция.
   Период прохождения: 17.05.2015 — 24.05.2015 .
3. Программа: «7-ая Российско-Германская сырьевая конференция «Rohstoff – Forum»».Место прохождение: Фрайбергская горная академия, г. Дрезден, Фрайберг, Лейпциг, Германия.
   Период прохождения: 28.03.2014 — 07.04.2014.

OWSLA ALEX METRIC

Акции Alex Metric как всемирно востребованного продюсера, ремиксера и ди-джея не собираются уменьшаться. Уроженец Лондона Алекс Метрик, только что завершивший три последовательных турне по США со сетами на огромном EDC в Лас-Вегасе, а также многочисленные выступления в HARD, переживает знаменательный момент с тех пор, как в 2013 году обосновался в лагере Skrillex OWSLA.

на танцевальной сцене Великобритании на протяжении многих лет, будь то благодаря его собственным постановкам или качественным ремиксам, которые постоянно показывают, что он возглавляет чарты создателей вкусов Hype Machine Charts, Metric успешно совершил этот прыжок через большой пруд, и мальчик, принес ли он дивиденды. Подхватив волну интереса ко всему электронному со стороны наших американских кузенов, Алекс постоянно переезжал через Атлантику в течение последних 18 месяцев, играя в клубах вдоль и поперек страны, включая легендарную Popscene в Rickshaw Shop в Сан-Франциско, Авалон в Лос-Анджелесе. Комната и Вебстер-холл в Нью-Йорке. Метрик снова и снова доказывает, что он может постоять за себя рядом с такими тяжеловесами, как босс лейбла OWSLA Скриллекс, Кэлвин Харрис и A-Trak, и, наконец, мир останавливается, чтобы обратить на это внимание.

Но при чем здесь Метрика? Оглядываясь назад, Метрик видит свой дебютный альбом 2011 года Open Your Eyes с участием таких исполнителей, как Charli XCX и Ian Brown, как инкапсуляцию его продюсерской работы на сегодняшний день. Когда-то, возможно, более известный своими последовательными и меняющими правила игры ремиксами на такие песни, как Depeche Mode, N.E.R.D, Ellie Goulding, Bloc Party и La Roux, Метрик уже давно демонстрирует способность манипулировать треками, а затем штамповать себя прямо сквозь них.

Продюсирование чужих записей — это воплощение мечты, но даже будучи подростком, выросшим в сельской местности, Алекс хотел этим заниматься. Он мог петь и научился играть на клавишных в раннем возрасте, но никогда не соглашался на то, чтобы самому играть в группе. Первоначально инди-ребенок, его обращение к танцевальной музыке произошло, когда он однажды опоздал на автобус домой и решил убить время в музыкальном магазине. Толстяку Слиму 19 летНа одном из постов прослушивания играл альбом 96 Better Living Through Chemistry. «Я был потрясен. Там были гитары, эти большие ломаные биты и эта безумная энергия. Я купил его там и тогда. Это был огромный поворотный момент».

Изучив музыку в колледже в Гилфорде, Алекс выпустил серию синглов на нескольких танцевальных лейблах — смесь прогрессив-хауса, брейкбита и техно. Его прорыв произошел в 2006 году, когда он подписал контракт с лейблом Адама Фриланда Marine Parade. «Я делал прогрессивные, брейкбитные вещи, и у меня это хорошо получалось, — вспоминает он. «Но однажды ночью я был диджеем в России и прямо на сцене понял, что мне не нравятся записи, которые я делаю. У меня было озарение. Я подумал: какую музыку я люблю? Французский хаус, рок, электро. Почему бы мне не бросить все, что я люблю, в одну пластинку?» Результатом стал его сингл 2007 года «Whatshewants», отправная точка на пути к его нынешнему положению одного из самых захватывающих новых талантов в танцевальной музыке.

Перенесемся через несколько лет, и Метрик, естественно, сфокусируется на том, что у него получается лучше всего: создании громких клубных пластинок как для клабберов, так и для ди-джеев. Самостоятельно выпущенный «Rave Weapon» в 2012 году сделал именно то, что было сказано на жестяной банке — заставил танцполы вздыматься, а BBC Radio 1 горячо под воротником: лагерь, который долгое время поддерживал его со всеми, от Энни Мак до Пита Тонга, играющими его пластинки. Последний даже лично пригласил Метрика отыграть шоу, посвященное его 20-летию, в знаменитой студии BBC Maida Vale в Лондоне.

2013 год последовал в том же духе со вторым выпуском его ставшей уже легендарной серии «Боеприпасы» для OWSLA, в которой были представлены потрясающие «Пророчества», которые увеличили количество вещей до 1000 и продвинули Метрика еще дальше в лигу большой арены благодаря своему механическому ритму. на фоне сладких мелодий.

За этим быстро последовала в начале 2014 года текущая коллекция Ammunition через «Hope», которая подняла планку и представила миру Metric как авангард современных электронных инноваций. В новом релизе «Heart Weighs A Ton» Метрик, возможно, прыгнул на два фута к тегу «хамелеон» с попсовым треком, который, похоже, превзойдет все его предыдущие релизы как самый большой.

Metric определенно занимает свою нишу на новом рубеже электронной музыки в Америке. Уважение Скриллекса к нему как к ди-джею и продюсеру помогло ему хорошо обосноваться среди своих товарищей по лейблу OWSLA. Метрик продолжает переосмысливать и отдавать дань уважения великим жанрам британского танцевального прошлого, вплетая самые свежие современные звуки своего нового дома. Может быть, хамелеон, но Алекс Метрик, несомненно, является одним из величайших экспортеров современного британского танца.

Объявления о туре Alex Metric 2022 и 2023, уведомления, даты, концерты и билеты – Songkick

Присоединяйтесь к 37 009 поклонникам, получающим уведомления о концертах этого исполнителя

или

Посмотреть концерты рядом с вами

Дюссельдорф, Германия

Изменить

Похожие исполнители с предстоящими концертами

Смотрите больше концертов рядом с вами

Туры чаще всего с

Зедд

Самолет

Диллон Фрэнсис

Деструкто

ОЛИВЕР

Прошедшие концерты

1. Октябрь

   26
   

   2019

   Брикстон, Великобритания

   Принц Уэльский

2. Август

   7
   

   2019

   Осло, Норвегия

   Кроссет

3. Декабрь

   1
   

   2018

   Бристоль, Великобритания

   Anson Rooms, Бристоль SU

Посмотреть все прошедшие концерты

Биография

• Урожденный Алекс Друри, но известный как Алекс Метрик, этот диджей и продюсер родом из Солсбери, Англия. Его музыка представляет собой сплав танцев, электро и прогрессив-хауса.

  В годы своего становления Друри учился петь и играть на клавишных. Его страсть к музыке продолжалась и в студенческие годы, когда он изучал музыку в Гилфорде. После колледжа он делал ремиксы и выпускал синглы на различных лейблах. В 2006 году он подписал контракт с Адамом Фриландом Marine Parade и выпустил сингл «Whatshewants» в 2007 году, звучание которого представляет собой смесь французского хауса, рока и техно.

  Под руководством Virgin Алекс Метрик выпустил свой сборник Open Your Eyes (Remixes and Production) в 2011 году. В альбом вошли такие ремиксы, как «Lisztomania» Феникса и «Quicksand» Ла Ру. коллаборация со Swedish House Mafia.

  Известно, что Друри занимается продюсированием других артистов. Он работал над альбомом The Infadels «From Out Of The Black Sky» в 2012 году. Алекс Метрик также продюсировал Charli XCX и Адама Фриланда. В 2008 году он был признан «Лучшим прорывным продюсером» лондонским онлайн-сайтом Breakspoll. Как ди-джей он пользуется спросом на международном уровне, выступая в EDC в Лас-Вегасе и на многочисленных фестивалях вместе с такими знаменитостями, как Skrillex, Calvin Harris и A-Trak. 19 июня 2009 года он присоединился к шоу «In DJ’s We Trust» в качестве постоянного ди-джея на BBC Radio 1.

  Музыка Алекса Метрика повлияла на Daft Punk, Chemical Brothers, Fatboy и инди-группы The Verve, Primal Scream и Oasis.

  Читать далее

Живые обзоры

• Алекс Метрик

  Комната затянута дымом и освещена разноцветными стробоскопами. Одна секунда его синий, затем фиолетово-зеленый, затем розовый. Свет исчезает и меняется в такт музыке, которую Алекс Метрик играет на своих проигрывателях. Бит проносится сквозь толпу, каждый новый аккорд усиливает настроение, зрители прыгают и танцуют. Метрика качает кулаком. Он тоже танцует на протяжении всего шоу, показывая пример публике. Никто в комнате не стоит на месте, и все наслаждаются ритмом. Алекс Метрик — диджей и музыкальный продюсер из Лондона. Он выпустил несколько синглов и EP, первым из которых был Whatshewants, выпущенный в 2007 году. Затем последовали EP Deadly On A Mission, In Your Machine, The Head Straight и It Starts. Он также сделал несколько ремиксов, в том числе Reverend & The Makers — «Silence is Talking», Black Daniel — «Gimme What You Got» и Infadels — «Free Things For Poor People». Его первый сингл «Открой глаза» вышел в 2011 году. Метрик — разносторонний музыкант. Помимо выпуска музыки, он является ди-джеем программы «In New DJs We Trust» на BBC Radio 1. Будь то диджейство для большой публики или для небольшого зала, Алекс Метрик производит превосходный звук, который заставит вас двигаться всю ночь напролет.

  Читать далее

  Сообщить о нарушении

  от ZoeWhittall

• Хотя Алекс Друри заявил о себе на электро- и хаус-сцене только в 2008 году, он заработал себе большую репутацию под псевдонимом Alex Metric. Теперь, требуя международных поклонников и выступая на некоторых из самых плодотворных танцевальных событий в мире, он никогда не упускает возможности устроить одну знаменательную вечеринку.

  Толпа собирается в предвкушении под туманным лиловым смогом, пока диджейские пульты Алекса медленно начинают светиться, сигнализируя о начале шоу. Он вступает в жесткое начало со своим печально известным ремиксом на «Stylo» от Gorrilaz. Он быстро переходит к своим собственным оригинальным синглам, смешанным с миксами Hard Fi и Ellie Goulding. Толпа одобрительно аплодирует, а цифровой экран за его спиной продолжает мигать сбивающими с толку визуальными эффектами, искусно разработанными в соответствии с шоу. По мере того, как его сет начинает приближаться к ошеломляющему финалу, Алекс становится все более и более восторженным, поскольку он начинает взволнованно прыгать, прежде чем его последний трек «Quicksand» La Roux врывается в жизнь и заставляет всю аудиторию танцевать в полном восторге.

  Читать далее

  Сообщить о нарушении

  от Sean-Ward

Видео (1)

Фото (4)

Плакаты
(69)

Узнайте больше о датах тура Alex Metric и билетах на 2022-2023

Хотите увидеть Алекса Метрика на концерте? Найдите информацию обо всех предстоящих концертах Alex Metric, датах турне и информацию о билетах на 2022–2023 годы.

This entry was posted in Популярное