lab9_data_quality
4 месяца назад
4 месяца назад
README.md
Data Quality Framework — Лабораторная работа 9
Описание
Система мониторинга качества данных с веб-дашбордом, уведомлениями и визуализациями.
Запуск
- Клонируйте репозиторий.
- Установите зависимости:
.pip install -r requirements.txt - Поместите
в корень.employees.db - Запустите:
.python run_system.py - Откройте дашборд: http://localhost:5000.
Проверки качества
- Полнота данных (>95%)
- Точность (возраст, зарплата, департаменты)
- Консистентность (опыт работы, категории зарплат)
- Дрифт данных (изменение распределения)
Примеры проблем
- Пропущенные значения в колонках.
- Некорректный возраст (<18 или >70).
- Несоответствие категории зарплаты.
Настройка email-уведомлений
В файле укажите свои SMTP-данные и установите config.json."enabled": true