Реализация сервиса оркестратора, управляющего построением распределенной код-модели

Введение 4
Постановка задачи 6
1. Обзорный раздел по предметной области 7
1.1. Ключевые компоненты системы 7
1.2. Устройство SUDU до введения оркестратора 7
1.3. Недостатки старого подхода 9
1.4. Существующие решения 10
1.4.1 Temporal 10
1.4.2 Conductor 11
2. Приоритизация коммитов и линеаризация 12
2.1. Терминология 12
2.2. Неформальные требования приоритизации 13
2.3. Линеаризация коммитов 13
2.4. Формализация требований 14
3. Устройство оркестратора 15
3.1. Устройство SUDU после добавления оркестратора 15
3.2. Внутреннее устройство оркестратора 17
3.2.1 OrchestratorService 17
3.2.2 PipelineManager и OrchestratorConfig 17
3.2.3 CommitListener и SnapshotProcessingResultListener ... 19
3.2.4 CommitHandler и SnapshotProcessingResultHandler ... 19
3.2.5 OrchestratorManager 20
3.2.6 Scheduler и TaskSubmitter 21
3.2.7 InfoManager и TaskManager 22
3.3. Паттерн Transaction Outbox 22
3.4. Feature Toggle 24
3.5. Структура базы данных 25
3.6. Алгоритм выбора задач на назначение 27
3.6.1 Общий алгоритм 27
3.6.2 Линеаризация 27
3.6.3 Baseline 28
3.7. Тестирование 29
4. Результаты замеров производительности сервиса 32
4.1. Конфигурация окружения 32
4.2. Замеры эффективности линеаризации по используемому дисковому пространству 32
4.3. Замеры эффективности линеаризации по времени построения кодовой модели 33
4.4. Покрытие тестами 33
Заключение 34
Список литературы 36

Купить

IDE (Integrated Development Environment) — интегрированная среда разработки, которая представляет собой программное обеспечение (ПО), используемое разработчиками для создания, редактирования, отладки и оптимизации исходного кода компьютерных программ. Она обеспечивает набор инструментов и служб, которые упрощают и ускоряют процесс разработки программного обеспечения.
Одни из самых больших проблем при работе с IDE, с которыми сталкиваются многие разработчики больших систем — долгая индексация проектов и большая задержка при выполнении различных команд в IDE.
SUDU — инновационная облачная платформа для IDE, основная цель которой решить данную проблему, используя преимущества облачных вычислений. SUDU представляет собой набор сервисов с открытым API, с помощью которого можно получить информацию из кодовой модели для того или иного коммита. Например, в качестве запроса к кодовой модели может быть поиск объявления символа; поиск мест, которые ссылаются на указанный символ и другие. На данный момент SUDU поддерживает несколько языков, а именно C++ и Java, но все кодовые модели этих языков строятся по инкрементальному принципу, то есть построение кодовой модели для нового коммита происходит на основе кодовой модели уже построенного ранее одного из предыдущих коммитов. Такой подход позволяет ускорять построение новой кодовой модели, а также оптимизировать объем данных, который нужен для хранения кодовой модели, так как он позволяет хранить только непосредственные изменения между двумя кодовыми моделями.
В SUDU построение кодовых моделей происходит асинхронно, по запросу пользователя. После добавления проекта в SUDU, проект автоматически синхронизируется с указанным git репозиторием в асинхронном режиме. Но вполне возможна ситуация, при которой пользователь запросил построить дополнительно несколько сотен исторических коммитов, в таком случае возникает неопределенность в порядке построения кодовых моделей для новых коммитов и исторических коммитов. Для управления очередностью построения кодовых моделей и распределения ресурсов при построении возникла необходимость в сервисе, который мог бы оркестрировать построение инкрементальных кодовых моделей.
Данная работа посвящена исследованию и имплементации cервиса, оркестрирующего построение распределенной кодовой модели.
Купить