![HighLoad Channel](/img/default-banner.jpg)
- 2 373
- 8 657 059
HighLoad Channel
Russia
Приєднався 15 кві 2013
HighLoad++ - крупнейшая в России профессиональная IT-конференция. Более 200 докладов по тематике высоких нагрузок, более 3000 участников. Программа охватывает такие аспекты веб-разработки, как архитектура крупных проектов, базы данных и системы хранения, системное администрирование, нагрузочное тестирование, эксплуатация крупных проектов и другие направления, связанные с высоконагруженными системами.
На нашем канале мы публикуем видео докладов с HighLoad+, РИТ+ и других конференций. Самые свежие записи доступны, как обычно, участникам самих конференций и тем, кто купил эти записи.
Приглашаем на конференцию Saint HighLoad++ 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге!
Программа, подробности и билеты по ссылке: vk.cc/cuyIqx
Календарь всех конференций Онтико - на ontico.ru/
На нашем канале мы публикуем видео докладов с HighLoad+, РИТ+ и других конференций. Самые свежие записи доступны, как обычно, участникам самих конференций и тем, кто купил эти записи.
Приглашаем на конференцию Saint HighLoad++ 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге!
Программа, подробности и билеты по ссылке: vk.cc/cuyIqx
Календарь всех конференций Онтико - на ontico.ru/
TechTalk "Как сделать требования ИБ понятными и выполнимыми для всех продуктов компании" / Н.Андреев
Приглашаем на конференцию Saint HighLoad++ 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге!
Программа, подробности и билеты по ссылке: vk.cc/cuyIqx
--------
--------
Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad++ 2023
Генеральный партнер конференции Garage Eight.
highload.ru/spb/2023/abstracts/10577
В билайн мы делаем сложные телеком-продукты для миллионов пользователей. И мы хотим выпускать их быстро, но при этом не теряя в качестве защиты от угроз информационной безопасности, так что традиционная модель информационной безопасности как "проверяющего органа" уже не подходит.
...
--------
Нашли ошибку в видео? Пишите нам на support@ontico.ru
Программа, подробности и билеты по ссылке: vk.cc/cuyIqx
--------
--------
Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad++ 2023
Генеральный партнер конференции Garage Eight.
highload.ru/spb/2023/abstracts/10577
В билайн мы делаем сложные телеком-продукты для миллионов пользователей. И мы хотим выпускать их быстро, но при этом не теряя в качестве защиты от угроз информационной безопасности, так что традиционная модель информационной безопасности как "проверяющего органа" уже не подходит.
...
--------
Нашли ошибку в видео? Пишите нам на support@ontico.ru
Переглядів: 793
Відео
TechTalk "Платежная система «МИР» и ее (не)персональные данные" / Михаил Архипов (Мир Plat.Form)
Переглядів 8152 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023/abstracts/10587 Что можно анализировать в компании, которая предоставляет банкам услуги по...
TechTalk "Как мы интегрировали нагрузочное тестирование в юнит-тесты" / Кирилл Борисов (Газпромбанк)
Переглядів 6982 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023/abstracts/10545 Цифровая трансформация и переход к независимым командам, а также потребнос...
TechTalk "Как мы пишем код в Дзене: move fast and break things" / Дмитрий Кондрашкин (Дзен)
Переглядів 9262 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023/abstracts/10561 Дзен - контентная платформа, которой каждый месяц пользуются 80,7 миллио...
TechTalk "НТ как сервис" / Антон Дикин (билайн)
Переглядів 5132 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023/abstracts/10537 Внедрение в производственный процесс нефункционального тестирования, в час...
TechTalk "Диспутные процедуры в платежной системе «Мир»" / Роман Назаров (Мир Plat.Form)
Переглядів 4582 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023/abstracts/10543 Каждый из нас ежедневно пользуется банковскими картами и более чем 99,999%...
Открытие Saint HighLoad++ 2023
Переглядів 1152 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023 Нашли ошибку в видео? Пишите нам на support@ontico.ru
Закрытие Saint HighLoad++ 2023
Переглядів 832 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023 Нашли ошибку в видео? Пишите нам на support@ontico.ru
TechTalk "ML-исследования в Дзене: как жить без KPI?" / Андрей Зимовнов (Дзен)
Переглядів 2152 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023/abstracts/10554 Дзен - это не только блог-платформа. Это еще и куча ML-кода под капотом, к...
TechTalk "Trunk based continuous deployment в банке" / Максим Морев (Газпромбанк)
Переглядів 3512 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. highload.ru/spb/2023/abstracts/10547 Банки славятся медленной, бюрократизированный, грустной разработкой. Но но...
Распределенные графовые СУБД - будущее для аналитики на Больших Данных? / Павел Велихов (TigerGraph)
Переглядів 8392 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Презентация и тезисы: highload.ru/spb/2023/abstracts/9320 Графовые СУБД в последнее время стали очень популярны для аналитических задач. Традиционно к графов...
Как мы переживаем сплит-брейн и продолжаем писать данные по S3-протоколу / С. Богатырев (YADRO)
Переглядів 7032 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Презентация и тезисы: highload.ru/spb/2023/abstracts/10363 Наше объектное хранилище умеет жить сразу на большом количестве географически распределенных площа...
Переосмысление рекомендаций в Дзене и внедрение item-to-item-схемы / Дмитрий Шишов (Дзен, VK)
Переглядів 2672 місяці тому
Переосмысление рекомендаций в Дзене и внедрение item-to-item-схемы / Дмитрий Шишов (Дзен, VK)
Применение изображений в рекомендательных системах / Руслан Вергунов (Umbrellio)
Переглядів 1862 місяці тому
Применение изображений в рекомендательных системах / Руслан Вергунов (Umbrellio)
Use actors, Luke / Андрей Парамонов (Dodo Engineering)
Переглядів 7952 місяці тому
Use actors, Luke / Андрей Парамонов (Dodo Engineering)
Антифрод наоборот и использование методов ML в нем / Александра Баженова (Мир Plat.Form)
Переглядів 6922 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. Презентация и тезисы: highload.ru/spb/2023/abstracts/9621 Каждый из нас хотя бы раз в неделю совершает онлайн-п...
Совмещаем потоковые и пакетные процессы в Camunda BPM / Максим Павлов (Axenix)
Переглядів 2992 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. Презентация и тезисы: highload.ru/spb/2023/abstracts/10204 Практические примеры построения схем процессов, техн...
Протокол MirAccept 2.0: что нас ждёт дальше / Алексей Касякин (Мир Plat.Form)
Переглядів 2622 місяці тому
Приглашаем на конференцию Saint HighLoad 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге! Программа, подробности и билеты по ссылке: vk.cc/cuyIqx Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad 2023 Генеральный партнер конференции Garage Eight. Презентация и тезисы: highload.ru/spb/2023/abstracts/10227 Время и технологии не стоят на месте. Кто-то из вас,...
Управляем доступом в распределённой Linux-инфраструктуре / Антон Жаболенко, Павел Пархомец
Переглядів 7882 місяці тому
Управляем доступом в распределённой Linux-инфраструктуре / Антон Жаболенко, Павел Пархомец
Warden - зачем нам свой service mesh? / Ильяс Нежибицкий (Ozon)
Переглядів 7982 місяці тому
Warden - зачем нам свой service mesh? / Ильяс Нежибицкий (Ozon)
Вам нужна CDN! ...или нет? / Алексей Учакин (EdgeЦентр)
Переглядів 1,1 тис.2 місяці тому
Вам нужна CDN! ...или нет? / Алексей Учакин (EdgeЦентр)
Делаем Сбербанк Онлайн надежнее и надежнее: как мы готовимся к пиковым нагрузкам / Артем Арюткин
Переглядів 8642 місяці тому
Делаем Сбербанк Онлайн надежнее и надежнее: как мы готовимся к пиковым нагрузкам / Артем Арюткин
Feature store / Анастасия Тушканова (Ozon)
Переглядів 8862 місяці тому
Feature store / Анастасия Тушканова (Ozon)
Как перевезти 4K человек на in-house-систему инцидент- и алерт-менеджмента за месяц / В. Витковский
Переглядів 3312 місяці тому
Как перевезти 4K человек на in-house-систему инцидент- и алерт-менеджмента за месяц / В. Витковский
Переход к Platform as a Service в Яндекс Вертикалях / Константин Касев, Мария Васильева
Переглядів 4732 місяці тому
Переход к Platform as a Service в Яндекс Вертикалях / Константин Касев, Мария Васильева
Эффективное обновление состояний в БД из сервисов потоковой обработки / Юрий Печатнов (Яндекс)
Переглядів 4642 місяці тому
Эффективное обновление состояний в БД из сервисов потоковой обработки / Юрий Печатнов (Яндекс)
Legacy PHP-FPM в Kubernetes. Тернистый путь опсов / Игорь Титов (Garage Eight)
Переглядів 3382 місяці тому
Legacy PHP-FPM в Kubernetes. Тернистый путь опсов / Игорь Титов (Garage Eight)
Уроки из проекта с коммитом 2001 года / Василий Романов (Облако Mail ru, VK)
Переглядів 3,1 тис.2 місяці тому
Уроки из проекта с коммитом 2001 года / Василий Романов (Облако Mail ru, VK)
Генеративные диффузионные модели. Разработка, обучение и релиз модели Kandinsky 2.1/ Андрей Кузнецов
Переглядів 1862 місяці тому
Генеративные диффузионные модели. Разработка, обучение и релиз модели Kandinsky 2.1/ Андрей Кузнецов
Успеть за 350 миллисекунд. Эволюция архитектуры Антиспама Почты Mail.ru / Константин Хицко
Переглядів 2312 місяці тому
Успеть за 350 миллисекунд. Эволюция архитектуры Антиспама Почты Mail.ru / Константин Хицко
Лютая вода
18:47 - "Python - слабо типизированные сопли". В Python так-то СИЛЬНАЯ динамическая типизация. Число со строкой не сложишь
да, ладно)
“Не надо понимать как работает rust. Надо просто писать». Мужчину заставили восхвалять что-то, но он перегнул и очень сильно. Или таким образом пытаются привить нелюбовь к расту? Шикарный язык, но его надо понять.
Никаких цифр, сравнений, ничего. Просто объяснение что такое акторы ? Да вроде и так литературы полно, кому надо сами прочитают. Мне кажется суть хайлоада в том чтобы на практике показать результативность определённых подходов, чтобы люди могли посмотреть, понять пользу и возможно применить. А это всё звучит так - "ну мы это, акторы заюзали. Они недооценённые и клёвые." А вот правда жизни - акторы нафиг никому не нужны, и никакой волшебной производительности сами по себе не дают.
короткое содержание доклада: наши факапы.
Суть доклада: 1. Авито вместо разработки играются микросервисами 2.в авито зашли на сайт с готовыми решениями, выбрали и настроили их
Спасибо за доклад! Посмотрел с большим интересом, открыл для себя Андрея, буду теперь специально искать :)
Спасибо за доклад. Не знаю, как это сказывается на Elixir, но Erlang последние несколько лет очень прибавил в темпах развития, например, оператор maybe -- просто пушка. Да и то что в другие языки потихоньку берут к себе фичи из E. говорит о многом. Надеюсь, благодаря подобным докладам, люди чаще будут выбирать Erlang/Elixir вместо странного выбора в пользу JavaScript/Python для бекенда
Какой-то баг с Щ
Коллеги как всегда великолепен
Респект таким разработчикам. $mol'юсь что когда-нибудь эти идеи пройдут в массы!
теперь понятно, почему новые процессоры не показывают одинаковый прирост в производительности для всех игр.
Так и не понял о чём доклад. И почему нельзя автоматизировать crud для большинства задач, чтобы не писать их?
Есть вариант с нормальным звуком?
Мало что полезного узнал из этого доклада. Как пользователь Дзена, могу сказать что рекомендации там некачественные
Спасибо за доклад!
о, нашли ещё одно оправдание почему SQL (ЭсКьюЭль) называют Сиквелом.
администратор базы данных
"Уезжало фсе в облака" только у дураков и воришек - поскольку даже тогда когда снималось видео было ясно, что западенцы данные начнут воровать. Плюс в перспективе начнут игнорить все запросы по мониторингу. Те кто "уезжал в облака" теперь либо бегают кругами пытаясь данные вернуть - либо уволены. Ну а если честно это все делалось IRL этими людьми просто из-за откатов.
Бомбезно!
что-то не нашел обещанного оптимального конфига мускула на гите в указанной ветке?
Нет в законодательстве РФ портала госуслуг, вы вводите в заблуждение или некомпетентны. Есть электронное правительство, на портале электронного правительства не упоминается человек или гражданин. Это портал не для граждан. Отсюда следует, что паспорт РФ не является документом гражданина, а является документом МВД РФ, разработанным Правительством РФ по указу некого Президента РФ. Кем являются люди перемещающие паспорта РФ на портал электронного правительства, установить невозможно, в связи с отсутствием такой информации на этом портале. Но установлено точно, что они являются посыльными от МВД РФ по транспортировке паспортов от МВД РФ на портал электронного правительства, то есть физическими лицами - работниками МВД РФ по договору о регистрации паспортов РФ.
Говорите о best practices, а разворачиваете 5 серверов.... Сциллу как и кассандру нужно разворачивать в 3х availability зонах, если у вас replication_factor=3, в каждой availability зоне должно быть одинаковое кол-во нод, чтобы не было перекоса данных. А потом настраивать через GossipingPropertyFileSnitch, так, чтобы rack=AZ. В итоге, используя NetworkTopologyStrategy для репликации, у вас каждая реплика будет в своей availability зоне, тем самым вы гарантируете правильную защиту от потери данных и high availability. Нельзя разворачивать все в одной availability зоне, потому что кассандра даже если у вас durability=true, пишет в commitlog только раз в 10 секунд, и между этими 10 секундными интервалами, данные commitlog'a пишутся в оперативку (посмотрите настройку commitlog_sync в scylla.yaml). Если в AZ пропадет свет, то есть большой риск потери данных. Ну и если в одной AZ отрубят свет, с алгоритмом деплоймента, описанным выше, вы все равно сможете читать и писать с уровнем consistency QUORUM. А вообще решение очень странное, зачем архивные данные хранить в еще одной базе данных, когда есть дешевые managed сервисы, как S3, и данные можно хранить в Iceberg, или хотя бы в parquet файлах, которые не нужно менеджить, как ценый кластер базы данных.. Пардон за критику, но меня прям ужасает такая архитектура. Это как говнокод, только в плане архитектуры.
Apple, Netflix, Facebook, Microsoft и многие другие компании используют Cassandra, а не Scylla.
🎯 Key Takeaways for quick navigation: 00:04 *🎤 Introduction and Speaker Background* - Speaker introduces himself and his intentions for the talk, - Provides a brief career history and his approach to leadership and project management. 02:10 *🚩 Understanding Failures in Projects* - Definition and classification of "fail", - Different types of fails: technical, conceptual, business, and social, - Explanation with real-life examples. 05:06 *🚀 Importance of Detecting Potential Failures* - The necessity for engineers to identify potential fails, - Methods for detecting fails within a project, - Steps to mitigate and respond to identified fails. 07:50 *🔧 Practical Example of a Fail: Backup Systems* - Real-world example of a fail involving backup systems, - Issues due to manual processes and lack of automation, - Lessons learned and the importance of automated backup systems. 10:53 *🖥️ Failure in Automating Server Upgrades* - Example of automating server upgrades gone wrong, - Problems caused by not testing procedures properly, - The need for suitable automation tools and ensuring thorough testing. 13:43 *⚠️ Importance of Proper Risk Analysis* - Technical and reputational issues arise from improper decisions, - Lack of tests for single-use tasks and insufficient risk analysis. 14:53 *📉 High Performance Failures in Trading Platforms* - Robots for trading platforms failed to keep up with user demand, - Impro bug fixes leading to system overload, - Misalignment between platform and robot maintenance teams. 17:27 *🧩 Coordination Issues and System Dependencies* - No singular vision for product behavior, - Conflicts between teams responsible for different system components, - Robots and platform integration issues causing operational failures. 17:58 *🛠️ Agile Methodology Misapplications* - Incorrect application of Agile in infrastructure-related projects, - Early server purchases leading to capacity issues, - Importance of choosing suitable methodology for the project type. 21:23 *📨 Large-Scale Messaging System Failures* - Designing a messaging service to handle unrealistic user load, - Long reconnection times for users during server restarts, - Overengineering vs. practical solutions for user reconnections. 26:14 *🚩 Warning Signs in Project Management* - Project over-reliance on investor demands, - Overextended testing and selection of storage solutions, - Signs that a project is stalling or overly focused on minor details. 27:56 *📊 Language Choice in Projects* - The discussion about choosing Groovy as the programming language over Java, - Challenges faced with the asynchronous code and control in projects. 30:01 *🚩 Social and Technical Failures in Projects* - Example of a failed project due to poorly chosen technical implementation, - Importance of recognizing non-technical arguments as red flags in decision-making. 32:17 *🏢 Misalignment Between Business and Development Goals* - Challenges with business planning and development timelines not aligning, - Discussion of the failures resulting from premature business expectations. 34:53 *📉 Identifying Project Red Flags* - Signs that a project is in trouble, such as lack of deliverables after a long period, - Strategies for recognizing when to move on or reassess project roles. 36:04 *📝 Questions and Answers* - Interactive Q&A session with the presenter addressing audience queries, - Discussion on conceptual understanding and systematization issues in projects. 38:04 *💡 Audience Questions on Specific Failures* - Detailed questions about specific project failures mentioned in the talk, - Insights on practical experiences and decision-making during project management. Made with HARPA AI
Доклад интересный. Но что то состоящий из одной воды
оооочень много тупых кривляний, смотрел через силу, но не осилил...
Хуєта для джунів
а можно где-то почитать об этих опросах по языкам программирования подробнее?
Даниил абсолютно прав, выводы выстраданы опытом, это чувствуется. p.s. Агрессивные комментаторы-хомяки со смузи в голове как всегда. Извините.
Представим глобальное распределение - ЦОДы с БД на разных континентах. Переводим сумму денег А > B и одновременно другой транзакцией (в интервале 5 мс) обнуляем баланс А. Выполнится ли перевод, если 30% узлов отключились с интервалом 3 мс?
"Мы думаем о микросервисах с технологической точки зрения". "Облик микросервиса определяет технология на которой мы его строим". Понимаю почему этот пингвин в 50% случаев стоит распределенные монолиты. Но в упор не понимаю, что он делает на сцене?
А где взять информацию как не ошибиться в таком построении?
спасибо
Если ты рассказываешь на русском презентацию, дак будь добр, подготовь презу тоже на русском
Скоро слово «микросервисы» перейдут в разряд кринжа. Сейчас микросервисы это как какая-то секта - все о них говорят как о спасении, на всех собесах хотят получить от кандидата глубокие знания микросервисов. Когда это уже закончится ?! 😅
Каждый новый доклад он работает в новой компании. Это существенно обесценивает этого бегунка как специалиста и тем более спикера.
хорошо про реббит, спасибо
Ну вот olpt в праймари шардах, olap в репликах, вроде норм
как убрать final с кода в методе вендора php?
22:34 - вообще не слышно ответ из зала, даже на максимальной громкости!
Лучший доклад!
Было очень интересно. Спасибо.
лучший доклад!
Очень интересный подход к повествованию 😊 спасибо!
лучший доклад!
Спасибо
у Даниила вышла какая-то субъективная постная лапша (