Данила Аринов

Junior-разработчик — ETL и синхронизация данных

+7 901 431-82-98 · teivrim@gmail.com · Telegram @Smishnyavko · github.com/TeivrimOriginal · Портфолио · LinkedIn

О себе

Регулярная, а не разовая загрузка данных: синхронизация с двумя внешними источниками, идемпотентный апсерт без дублей и журнал прогонов, где видно, какой источник и когда упал. 29 тестов против PostgreSQL 16 и SQLite в CI.

Опыт работы

Фриланс — заказы на Kwork Python · 2022 — н.в.

Telegram-боты, парсеры сайтов, REST API, интеграции внешних API, автоматизация по ТЗ заказчиков; kwork.ru/user/teivrim.

Проекты

anime-sync-api — REST API каталога аниме FastAPI · PostgreSQL 16 · Alembic · GIN

Асинхронный стек: FastAPI, SQLAlchemy 2.0 (asyncpg), Pydantic v2, httpx. Схемы запросов и ответов разделены.
Три таблицы с внешними ключами и CHECK-ограничениями; UNIQUE (source, external_id) — внешний id уникален в пределах источника, потому что у AniList и Jikan нумерация разная.
Полнотекстовый поиск на tsvector с индексом GIN по названию, оригинальному названию и жанрам. Выражение индекса и выражение запроса вынесены в одну константу, чтобы они не разошлись.
Синхронизация с AniList (GraphQL) и Jikan (REST) на httpx: идемпотентный апсерт без дублей и журнал прогонов — отказ внешнего API пишется в базу, а не роняет запрос.
Список с фильтрами, пагинацией и полнотекстовым поиском; размер страницы ограничен сверху, чтобы нельзя было вытащить всю таблицу одним запросом.

TaskHub API — сервис управления задачами FastAPI · PostgreSQL 17.4 · Celery · Redis

Асинхронный сервис на FastAPI и SQLAlchemy 2.0: asyncpg, Pydantic v2, разделение схем запросов и ответов, OpenAPI 3.1 из коробки.
Аутентификация JWT с ротацией refresh-токенов и RBAC: роли проверяются на уровне зависимости, доступ к эндпоинту нельзя получить без проверки прав.
Фоновые задачи на Celery, Redis как брокер и кэш; задачи выполняются синхронно при CELERY_TASK_ALWAYS_EAGER, поэтому тесты не зависят от воркера.

Навыки

SQL и PostgreSQL: PostgreSQL 16/17 (tsvector, GIN, pg_trgm, CHECK, FK CASCADE, EXPLAIN, индексы), Alembic-миграции, SQLite, JOIN/GROUP BY, запросы к регистрам Асинхронность: asyncio, httpx, asyncpg, конкурентность против параллельности, пул соединений Тесты: pytest, pytest-asyncio, httpx ASGITransport, фикстуры, моки внешних API, Allure, Selenium 4, покрытие с ветвлениями Наблюдаемость: Prometheus-метрики, health и readiness, логирование, rate limiting

Дополнительно

Журнал прогонов — самая полезная вещь в пайплайне: по нему видно, что данные устарели из-за чужой поломки, а не из-за моего бага. Английский — чтение технической документации. Открытый код: 12 активных публичных репозиториев, у каждого проекта тесты и CI.