You know that person everybody comes to when the shit hits the fan and that bug is not going to fix itself? Want to become one? Come to learn about all the skills you'll need when your application freezes in production, leaks memory like crazy or dies under load in fifteen seconds.

1. How to debug.
Everything.
Vsevolod Solovyov
Prophy.Science

2. Секретный
фокус

3. Код не работает,
буду что-то менять,
пока не заработает

4. Библиотека не
собирается,
буду что-то менять,
пока не соберется

5. Научный метод

6. Алярм!
Сайт лежит!

7. Сайт лежит
•Половина страниц открывается быстро
•Половина никогда
•Потом всё ложится

8. Гипотеза!

12. Эксперимент
•Половина страниц открывается быстро
•Половина никогда
•Потом всё ложится
•Рестарт uwsgi помогает наполовину

13. Наблюдаем
•Половина страниц открывается быстро
•Половина никогда
•Потом всё ложится
•Рестарт uwsgi помогает наполовину
•htop, iotop — везде в норме

14. Достанем
инструменты!

15. Блокирующие запросы в БД
•SELECT !!... locking queries;
•Все ждут ALTER TABLE
•Запрос ALTER TABLE ждёт кого-то
•Кто-то — незакрытая транзакция

17. Больше наблюдений
•Мониторинг
•Логи
•htop, iotop — загрузка процессора, диска
•EXPLAIN — план выполнения запроса в БД
•py-spy — профилирование Python
•Всякое специфичное

18. py-spy flamegraph

20. Знать базовые вещи
•Структуры данных
•Особенности языка
•Как устроены ОС
•Как устроена ваша БД
•Как работает сеть
•Виртуальные машины
•Контейнеры
•Сборщики мусора
•...
•https://jvns.ca/zines/

21. Stranger Things

22. Stranger Things
•Приложение перестало стартовать
•Написано на Clojure, запускаем внутри Docker
•Обновили кучу зависимостей
•Качает зависимости на старте и молчит
•В начале нашего кода print не выполняется

23. jstack pid
at java.io.FileInputStream.readBytes(Native Method)
at java.io.FileInputStream.read(FileInputStream.java:255)
at sun.security.provider.SeedGenerator$URLSeedGenerator.getSeedBytes(SeedGenerator.java:539)
at sun.security.provider.SeedGenerator.generateSeed(SeedGenerator.java:144)
at sun.security.provider.SecureRandom$SeederHolder.<clinit>(SecureRandom.java:203)
at sun.security.provider.SecureRandom.engineNextBytes(SecureRandom.java:221)
- locked <0x00000000e3a2f5f0> (a sun.security.provider.SecureRandom)
at java.security.SecureRandom.nextBytes(SecureRandom.java:468)
at java.math.BigInteger.randomBits(BigInteger.java:634)
at java.math.BigInteger.<init>(BigInteger.java:623)
at org.bouncycastle.crypto.generators.ECKeyPairGenerator.generateKeyPair(Unknown Source)
at org.bouncycastle.jcajce.provider.asymmetric.ec.KeyPairGeneratorSpi$EC.generateKeyPair(Unknown Source)
at buddy.core.keys.jwk.ec$get_curve.invokeStatic(ec.clj:87)

24. SecureRandom
•Не псевдослучайная последовательность
•So secure
•Much seed
•Нужно больше энтропии
•> cat /proc/sys/kernel/random/entropy_avail
45

25. Кто сказал
"Python"?

26. Подстилаем соломку
•Учимся читать (чужой) код
•Пишем простой код

27. Простой код
•Нет множественному наследованию
•Нет наследованию
•Нет классам (кроме датаклассов)
•Нет мета-программированию
•Нет изменению аргументов функции

28. Математический код
•В статье написано 5 формул
•В коде написано 400 строк
•Баги портят результат
•Баги незаметно портят результат

29. Математический код
•Экстремально точные названия переменных
•Листик с личным пересказом всех формул
•Code review с повтором процесса

30. Напоследок
•Новые технологии требуют новых инструментов
•Общие подходы всегда одинаковые
•Все врут
•Главное - не бояться!

31. Спасибо за
внимание
Вопросы?
Vsevolod Solovyov
CTO at Prophy Science
@murkt
vsevolod.solovyov@gmail.com