ТОП ошибок в инфраструктуре, мешающих высоким нагрузкам / Андрей Половов (Флант) 

Кеш - главная помощь при highload. Причем и Cache, и Cash :D

Грамотно чувак ходит вокруг трибуны, такого я еще не видел :)))))))

Программист в отпуске - беды ждать неоткуда )

Прям концентрированная мудрость базовых вещей. Но на которые реально забивают практически все.

Хороший доклад, спасибо! Конечно все эти грабли уже были опробованы на себе и до всех рекомендаций дошли своим опытом, но людям кто начинает можно позавидовать, если они начнут следовать хотя бы этим советам, цены им не будет.

Про транзакцию улыбнуло

мне вот было интерестно, спасибо

первые 2 случая... вызывают "сомнения" 1) транзакции... про блокировки не сказал ни слова... 6 мин млн. транзакций и по 1 транзакции... блокировка идёт на доли микро-секунд... и остальные запросы работают нормально а Если использовать 1 огромную транзакцию на 32 сек - может случиться ситуация - ПОЛНОЙ блокировки какой-то таблицы... к которой все обращаются (обновление цен/номенклатуры и т.п.) и все запросы будут отваливаться по тайм-ауту.... а это совсем не айс и делать так... совсем нельзя! 2) про индексы... чем их больше - тем дольше идёт добавление и изменение данных и см. 1)... ооочень часто индексы делают не там и не так... добавлять на каждый запрос - новый индекс... вообще не разу не правильно

Спасибо за полезную лекцию. С меня лайк и подписка!

смотрю комментарии и радуюсь. спасибо за факт чек )

Дэплоят по FTP - я думал это уже никто неиспользует, тяжёлый случай.

Периодически натыкаюсь на видосы с этого канала. Один вопрос, где они берут всех этих программистов в своих рассказах? То у них таблицы без индексов, то все запросы через *, то монолиты пишут так что нельзя переиспользовать собственный код.

Забавно. Был на хайлоаде в последний раз в 2007 году. За 13 лет ничего не изменилось.

спасибо!

на слайде про масштабирование - связка nginx + apache + php - а разве apache не лишний в этом списке? nginx же вроде умеет fastcgi делать на несколько backend-ов?

жизненно

37:43 У меня тот-же вопрос возник. Причём тут Апач и рендеринг кода... Апач ведь только отдает код и заголовки, а рендерингом (в понимании генерации кода) занимается приложение.

Отличный доклад, но смотреть тяжко, ходить кругами постоянно это раздражает.

Это не HighLoad Junior, это *HighLoad Infant*

Блин на дворе был 2018 год, какой апач?

чувак очень поверхностно понимает в базах. Где, что сколько раз читается с диска и какова настоящая цена содержания индекса. И особенно классно, когда индекс, вроде бы есть, но база при запросе его не берет, потому что план запроса посчитался неоптимально.

Че, в 21 году еще используются апач проект?

Умозаключения про базы и транзакции огонь!

Все шишки уже набиты..)

Аццкий огонь...

А он в курсе на 2:40, что и так, все запросы выполняются в транзакциях, но неявно? По другому быть не может. А его кейворды это просто явное объявление транзакции (а не автоматическое) и возможность её откатить там где нужно.

mysql_query (из картинки) уже сто лет как устарел.

Что такое Бакл для бакапов

очень тяжело сконцентрироваться на восприятии информации - то громко, то тихо, то "аааааа", то ходит по кругу, то слайды забывает переключить. на 12-й минуте я сдался

он под наркотиками? по кругу ходит как волчок... остановите его кто ни будь ))) ааа все 5 минуте понял Я к этим ребятам обращаться не буду ))) На откатах живут бездари неграмотные на сцену выгнали

Очень крутой доклад то, что нужно. Андрей, спасибо большое!

Отличный доклад!

Капитан очевидность

Запросы через звездочку - это же любая nosql разработка

Первый пример про 4 дисковой операции не корректен. Оптимизация идёт за счёт экономии ресурсов на открытие и закрытие четырёх транзакций.

скорость на 1.5 и считаем "ААааээм"

хорошо, когда высытупление написали заранее, хреново когда это пытаются рассказать но без умения просто что-то повествовать

forbes.ru уг. просто потому что пользователь заходит с мобилки, начинает читать новость, и затем она ска пропадает потому что рендерится. я бы таким не хвалился.

Отличный доклад, но докладчик совсем толком не ответил на вопросы слушателей.

Отличный доклад

8:27 рано или поздно поменяется порядок столбцов в таблице, и тогда вообще все поломается.

назрена мне менеджер очередей или таймаут? я хочу параллельно и быстро.

спасибо за доклад

Конференция по высоконагруженному не могут номальную звукопередачу сделать ^_^

4 записи в одну дисковую операцию если завернуть в транзакцию? Что курил автор?

Я вообще не пойму зачем апач? Объясните мне, я просто уже лет 7 пользуюсь nginx, а с апачем даже не сталкивался. Одно знаю что он прожорлив.

Кто же в крон ставит дёрганье сайта через хттп? Омфг

Может у него особая база, но оборачивать селект в транзакцию не нужно .

mysql_query в 2018...

Да нафиг нужен вообще этот apache?

10:00

gj агхитектор проэктов. джун джуном

ведущий очень сильно нервничает: 2 секунды говорит 1 секунду думает, ходит туда-сюда. Это все из-за того что HLj? или на HL такой же уровень докладов?)

Просто трэш..

13:39 Лол, зачем так делать? чем php-cli не угодил?

Как лихо приравнены термины би и mysql. И навязано впечатление, что все бд полностью одинаковы в работе, а транзакции исключительно повышают производительность, как будто нет ни журналов, ни блокировок. Дальше простите, выключил.

Подобного бреда в 2020 году уже не должно быть от мамкиных дба которых допустили до проектирования систем. Заворачивать в транзакции импорт данных? А когда у тебя по тысячи записей из 10000 в 10 запросов будут заливаться и на 9ом запросе всё это наётся из-за ошибки в одном из 10 продуктов, откатится 1000 записей (или все 10000?!) и потом ищи-свищи где что? Или на первом продукте всё упадёт и остальные просто не импортнутся. Класс. "Надёжно" и "удобно" поддерживать. Записывать нужно по одной штуке такие вещи. Ты вообще знаешь зачем нужны транзакции? Импорт данных в 99% не может быть транзакционным, т.к. это не платежи и можно всё просто напросто повторить. А для увеличения производительности не используй реляционную базу там, где нужна noSql и масштабируй. Транзакции не позволят тебе ничерта масштабировать. Или мы ещё распределённые транзакции введём? ОМГ. Дисковые операции посчитал.... пздц. "Открой транзакцию и заблокируй к чертям всю систему пока импортятся продукты!". Ведь это так важно их за 0.06 а не за 6 секунд импортнуть. Ведь это каждую минуту миллиарды продуктов импортируются, да? Это всё вообще не вопрос транзакций и баз данных. Это вопрос архитектуры приложения. При любом импорте нормальная система должна сожрать всё что ок и выплюнуть разницу которая не подошла. А не откатить всё к херам. Более того, системы, подразумевающие частые Create\update операции должны проектироваться вообще иначе, чем мамкингы сайты со статьями, где надо обновить десяток полей "если чё". Короче, типичный дба из совковой компании, которая положила болт на современные подходы, не учла опыт коллег западных и строит свой деревянный самолёт.

Что за привычка у людей чавкать, как вы это делаете, по ушам бьет, ужас просто

apache + nginx это еще что за бред? статику на отдельный сервер выкиньте и там ставьте свой nginx, а если деньги есть то картинки, архивы и пр. файлы выкиньте на s3. Я вот не помню как на моей старой работе было, по-моему там еще и весь фронтэнд на emberjs + css гзипался и выкидывался на s3, но это не точно

"не позаботились хотя бы о капистране" чтоооо ? о чем речь, какой такой капистран?

А причем тут devops? Все кейсы - онпремисные bare-metal серваки, ни клаудов, ни devops практик. Просто тонкая настройках вебсерверов - это не devops.

флант такой флант) для начала свою производительность поднимите) ну и советы конечно забавные) уровня пхп джуна) юзайте индексы и мульти инсерты)

19:23 SQLite это экзотическая ДБ? Ха-ха.

Офигенный докладчик)

Уже начиная с транзакций можно не смотреть. Человек просто не знает, как это работает на самом деле.

tldr; Ну слезайте уже c LAMP.

Доклад неплохой. Но говорить, что nginx в 2018м - это просто реверсивный прокси - это просто неграмотность, имхо. openresty.org/en/

ходит и плямкает. ужас.

php такой php

Слушать ааааа челика аааа очень аааааа сложно ааааа особенно аааа когда аааа кровь ааааа из ушей аааааа уже аааа идёт ааа

Зачем он ходит кругами?? Ужасно бесит!!

пункт номер 0: не использовать пэхапэ для высоких нагрузок

Ни какие это не кейсы особенно по сессиям, туфта полная берете NVME 970PRO на 1ТБ даже с посещаемостью 1 млн человек проблем не будет

если пишешь на ПЫХЕ в 2к18-19 то ты сверхразум.

зачем пыха, апач?