Skip to content

Level 1: multiprocessing + observability (v0.2.0)#2

Merged
devAsmodeus merged 1 commit intomainfrom
feature/level-1-perf-and-observability
Apr 30, 2026
Merged

Level 1: multiprocessing + observability (v0.2.0)#2
devAsmodeus merged 1 commit intomainfrom
feature/level-1-perf-and-observability

Conversation

@devAsmodeus
Copy link
Copy Markdown
Owner

Что в этом PR

Закрывает «Уровень 1» из ROADMAP: производительность + наблюдаемость.

Производительность

  • Multiprocessing (parallel.py). N воркеров делят nonce-пространство [0, 2³²) равными долями. CLI-флаг --workers N (default cpu_count - 1). На 16-CPU машине — 15 параллельных процессов.
  • EMA-хешрейт: alpha=0.3, окно 5с. Сэмпл = дельта счётчика mp.Value('Q') за интервал.
  • Smoke-тест мультипроцессинга прошёл: counter инкрементируется, stop_event останавливает воркер мгновенно, no zombies.

Наблюдаемость

  • SQLite-журнал (storage.py). Таблицы shares и sessions. WAL-режим, потокобезопасность через threading.Lock. CLI-флаги --db PATH, --no-db.

  • Prometheus-экспортёр (metrics.py). Эндпоинт /metrics на ThreadingHTTPServer. Метрики:

    • hopehash_shares_total (counter)
    • hopehash_hashrate_hps (gauge, EMA)
    • hopehash_pool_difficulty (gauge)
    • hopehash_workers (gauge)
    • hopehash_uptime_seconds (gauge, авто)

    CLI-флаг --metrics-port (default 9090, 0 — отключить).

  • Telegram-уведомления (notifier.py). Через stdlib urllib, БЕЗ python-telegram-bot. Асинхронный воркер на queue.Queue. События: started / stopped / share_accepted / block_found / disconnected / reconnected. Конфиг через env:

    HOPE_HASH_TELEGRAM_TOKEN=…
    HOPE_HASH_TELEGRAM_CHAT_ID=…

    Без env — silent disabled.

Архитектура интеграции

mine() принимает store, metrics, notifier как опциональные kwargs (default None = disabled). Каждый observer проверяется через if X is not None: перед вызовом — нулевой оверхед когда выключено.

CLI инстанцирует observers согласно флагам и пробрасывает в mine(). Закрытие observers в finally-блоке (notify_stopped → drain queue → metrics.stop → store.close) — без potential leaks.

Покрытие тестами

Было 15 тестов, стало 56:

  • test_block.py — 15 (без изменений)
  • test_storage.py — 9 (новый): record/total/per_hour/sessions/concurrent_writes/idempotent_close
  • test_metrics.py — 16 (новый): counter/gauge/sanitization/HTTP endpoint/404/idempotent start-stop
  • test_notifier.py — 16 (новый): disabled mode/env config/HTTP call/message formats/queue drain/network failure logged-not-raised. Никаких реальных HTTP-запросов, всё через unittest.mock.

Все 56 тестов проходят за ~4.5с. Только stdlib.

Конвенции проекта сохранены

  • ✅ Чистый stdlib (никаких runtime-deps).
  • ✅ Endianness/word-swap/header-сборка не тронуты.
  • ✅ Русские комментарии и docstrings.
  • ✅ Логи через единый logger("hope_hash") с тэгами [net]/[stratum]/[mine]/[stats]/[pool]/[storage]/[metrics]/[telegram].
  • src/-layout сохранён. Каждый новый модуль — рядом с существующими.

Запуск (после merge)

hope-hash bc1q...your-address... mylaptop \
  --workers 8 \
  --metrics-port 9090
# В другом окне: curl http://127.0.0.1:9090/metrics

Закрывает все «производительность» и «логи и метрики» пункты Уровня 1.
TUI и команды Telegram-бота — отложены (требуют либо доп. зависимостей, либо отдельной сессии).

Производительность:
- multiprocessing-разнос nonce-loop по N процессам (parallel.py).
  CLI --workers N, default cpu_count - 1.
- EMA-хешрейт (alpha=0.3, окно 5с).

Наблюдаемость:
- SQLite-журнал шаров и сессий (storage.py).
  Таблицы shares/sessions, WAL-режим, потокобезопасность.
- Prometheus-экспортёр /metrics (metrics.py) на http.server.
  Метрики shares_total, hashrate_hps, pool_difficulty, workers, uptime.
- Telegram-уведомления через stdlib urllib (notifier.py).
  Конфиг через env: HOPE_HASH_TELEGRAM_TOKEN, HOPE_HASH_TELEGRAM_CHAT_ID.

Все три observers опциональны, отключаются флагами или отсутствием env.
mine() принимает store/metrics/notifier как None-default параметры.

Покрытие тестами: 56 тестов (было 15). Все на stdlib unittest, без
внешних зависимостей (включая mock'и для Telegram через unittest.mock).

Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
@devAsmodeus devAsmodeus merged commit fe2288d into main Apr 30, 2026
10 checks passed
@devAsmodeus devAsmodeus deleted the feature/level-1-perf-and-observability branch April 30, 2026 11:20
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant