В докладе речь пойдет об архитектуре Upwork. Расскажу, как мы мигрировали с монолита на микросервисы. Какие библиотеки и приложения мы используем для взаимодействия между микросервисами. Как связываем и передаем данные между приложениями. Как логируем, мониторим доступность наших приложений и как реагируем на инциденты.

1. Дмитрий Семёнов
Upwork
Архитектура Upwork

2. - До мая 2015 oDesk и Elance
- Крупнейшая в мире фриланс биржа
- 14 миллионов фрилансеров
- 7 миллионов клиентов
- 5 миллиона постов с работой за последние полгода

3. @mxnr
github.com/mxnr
mxnr@upwork.com

4. Legacy Stack
- Perl O(desk)RPC
- Zend on PHP 5.5
- JQuery
- Кастомные css библиотеки
- Деплой на кластер app серверов в датацентре

5. Причины миграции

6. Причины миграции
- Solid архитектура
- Проблемы с релизами
- Блокер в одной части приложения блокирует все
остальные команды и срывает релиз
- Устаревший Zend фреймворк который тяжело
сапортить и обновлять

7. Требования к новой
архитектуре
- Изоляция рисков
- Разработка, тестирование и деплой независимы
- Доставка фич по мере готовности
- Canary, blue/green, автоматический деплой

8. Новая архитектура бекенда
Agora
- Замена слоя Perl ORPC Java микросервисами
- Использование опенсорс наработок Netflix
- Hystrix (Latency tolerance и Fault tolerance библиотека)
- изоляция и fallback для сервисов
- Eureka (Representational State Transfer) - AWS сервис
локатор и балансировщик
- Миграция на Amazon AWS

9. Новая архитектура UI Agate
- PHP и Symfony с множеством бандлов
- Bootstrap
- Angular (1 и 2)

10. - Миграция на 2.8
- Каждая страница - отдельное Agate приложение
со своей инфраструктурой
-~120 бандлов на приложение
- UI-Components
- Общий сервис навигации

11. Коммуникация между Backend и UI
слоем - Phystrix
- Основан на Netflix Hystrix

12. Коммуникация между Backend и UI
слоем - Phystrix
- Паттерн Команда

13. Коммуникация между Backend и UI
слоем - Phystrix
- Паттерн Circuit breaker
- Fallback

14. Пример Phystrix команды
use OdeskPhystrixAbstractCommand;
class MyCommand extends AbstractCommand
{
protected $name;
public function __construct($name)
{
$this->name = $name;
}
protected function run()
{
return 'Hello ' . $this->name;
}
}

15. Вызов команды
$myCommand = $phystrix->getCommand('MyCommand', 'Dima');
$result = $myCommand->execute();

16. Коммуникация между Backend и UI
слоем - Phystrix
Доступен в опенсорсе
github.com/upwork/phystrix

18. UI: Prana и Consul
- Prana = Eureka для UI
- Абстракция коммуникаций
- Fallbackи

20. Prana + Phystrix
[TalentCloud]+url /get/cloud/{id}

21. Передача данных из Agora
Apache Thrift
- Open source проект компанией Apache Software
Foundation.
- Двоичный протокол связи

22. enum PhoneType {
HOME,
WORK,
MOBILE,
OTHER
}
struct Phone {
1: i32 id,
2: string number,
3: PhoneType type
}
Thrift Definition File и Types

23. Тестирование
- PHPUnit
- Mocha&Karma
- Protractor+Selenium

24. Логирование

26. Логирование
- Graphite
- Grafana
- NewRelic

27. - Круглосуточное дежурство
- Менеджмент инцидентов и отчеты по каждому из них
- DeepHealthCheck bundle
Мониторинг доступности

28. Continuous Integration
&Continuous Deployment
- Запуск тестов
- Сбор статистики по качеству кода
- Деплой по расписанию
- Компиляция серверного окружения

29. On the Road 2017

30. On the Road 2017

31. А еще мы ищем Angular +
Symfony девелоперов
mxnr@upwork.com

32. Спасибо!:)
Вопросы?
@mxnr
github.com/mxnr
mxnr@upwork.com