obsidian-vault/sources/bridge-workspace-4c6d747f-memory-2026-08-26-a2be6b00.md
2026-11-03 23:00:01 +00:00

13 KiB
Raw Blame History

pageType id title sourceType sourcePath bridgeRelativePath bridgeWorkspaceDir bridgeAgentIds status updatedAt
source source.bridge.workspace-4c6d747f.memory-2026-08-26-a2be6b00 Memory Bridge (main): 2026-08-26 memory-bridge /home/owner/.openclaw/workspace/memory/2026-08-26.md memory/2026-08-26.md /home/owner/.openclaw/workspace
main
active 2026-08-26T19:20:52.936Z

Memory Bridge (main): 2026-08-26

Bridge Source

  • Workspace: /home/owner/.openclaw/workspace
  • Relative path: memory/2026-08-26.md
  • Kind: markdown
  • Agents: main
  • Updated: 2026-08-26T19:20:52.936Z

Content

# 2026-08-26 — память дня (pre-compaction flush, 18:09 MSK)

## Контекст дня: наладка системы памяти / стабильности Ollama (Dell 192.168.1.200, RTX 5090 32GB, Ollama 0.32.13)

### 1. Concurrency caps 1/1/1 — применено (утро)
- Одобрено Сергеем: `agents.defaults.subagents.maxConcurrent: 8→1`, `cron.maxConcurrentRuns: 8→1` (main maxConcurrent уже был 1). Только 2 ключа, `openclaw config set` ×2, hot-reload, gateway НЕ рестартовался.
- Backup: `projects/openclaw-tooling/backups/openclaw.json.concurrency-111-pre-2026-08-26`.
- Preflight (read-only, dist-исходники): `projects/openclaw-tooling/research/preflight-concurrency-111.md`.
- Verification evaluator: **7/7 PASS** (`projects/openclaw-tooling/research/concurrency-111-verification.md`). Cron 9/9 intact, TASK-001 не тронут.
- Ключевые факты residual-модели (из preflight):
  - `cron.maxConcurrentRuns` cap'ит ОБА лана `cron` и `cron-nested` (applyGatewayLaneConcurrency + resolveLaneResumeConcurrency).
  - Lanes независимы: main / subagent / cron-nested / `nested:<key>` (sessions_send — вне всех трёх cap'ов, 1 слот на ключ).
  - Даже при 1/1/1 максимум = **4 одновременных chat-запроса** (без sessions_send — 3) + до 2 vision (media concurrency default 2, imageModel внутри слота) + 1 embed (bge-m3, вне lane-системы, concurrency=1).
  - Parent(main) + child(subagent) **одновременно делают model calls — ожидаемо**, child адмитится сразу, parent держит слот до конца хода; sessions_yield = yield хода, не «для ребёнка».
  - Ollama-запросов >1 — гарантировать штатно нельзя; строгий global gate = только внешний proxy.

### 2. Churn-анализ — вердикт D (B+C доминируют, A вторичен)
- Отчёт: `projects/openclaw-tooling/research/ollama-model-churn-2026-08-26.md` + artifact `/tmp/ollama_ps_samples.tsv` (36 сэмплов /api/ps, 12 мин).
- Все **23 cron-таймаута 24–26.08** умерли в `model-call-started` (до первого токена) — генерация не при чём.
- `expires_at` = last use + **ровно 5:00.000** (100% в сэмплах) → OLLAMA_KEEP_ALIVE = default 5m. OpenClaw keep_alive не передавал.
- VRAM-математика: 27b = **28.0 ГБ** (измерено в /api/ps); 27b + bge-m3 (1.2) = 29.2 ГБ **влезает**; 27b + 35b (24) / 27b + vl:32b (21) — **нет** (полная eviction 28 ГБ + load 30–120с).
- Сценарий bge-m3 churn (main→embed→main) — **НЕ подтверждён** (bge-m3 в /api/ps не мелькал, 28 ГБ не двигались; вызовов мало: 2–22/день).
- Прямое доказательство cold vs warm: ingest-observation 26.08 10:00 = 901с → timeout(900); 10:15 = 379с → ok.
- SSH на Dell (192.168.1.200:22) **недоступен** (port 22 timeout) — env Ollama подтверждён только поведением expires_at; nvidia-smi не получен.
- **Держать резидентными: qwen3.8-27b-q5xl + bge-m3.** 35b — не влезает рядом (принять 30–120с на первом обращении либо переключить evaluator/humanizer на 27b). vl:32b — по требованию.

### 3. keep_alive=12h для 27b — применено и ПОДТВЕРЖДЕНО (16:10–16:30 MSK)
- Политика одобрена Сергеем: **qwen3.8-27b-q5xl → keep_alive=12h; bge-m3 / qwen3.6-35b-192k / qwen3-vl:32b — default/on-demand (5m).** num_ctx, Ollama env, concurrency 1/1/1, timeouts — НЕ менять.
- Изменение: ровно 1 строка `"keep_alive": "12h"` в params модели `qwen3.8-27b-q5xl` (text-level edit, НЕ -coder; у -coder params остались `{num_ctx:131072}`). Backup: `projects/openclaw-tooling/backups/openclaw.json.keepalive-12h-pre-2026-08-26`.
- Hot-reload 16:20:16 (`config hot reload applied (models.providers.ollama-local.models)`), gateway pid 2541946 — без рестарта.
- **Подтверждение live:** OpenClaw model call 16:29:10 → `expires_at = 2026-08-27 04:29:10` (ровно +12h). Control curl: keep_alive:12h в body → +12h; без → +5m.
- **Семантика per-request (важно):** запрос БЕЗ keep_alive сбивает expiry в default 5m; с keep_alive — поднимает до 12h. Setup-agent на 16:21 видел ~5m (запрос ушёл до/без учёта reload) — ложное «не подтвердилось», исправлено в MEMORY.md (блок Model Keep-Alive Policy).
- Pass-through в dist: `keep_alive` ∈ `OLLAMA_TOP_LEVEL_PARAM_KEYS` → top-level в body `/api/chat` (`stream-DwcvMYU5.js:261-263,331`). Vision-путь (extensions/ollama) шлёт БЕЗ keep_alive.
- Smoke: прямой chat → OK (load 0.35s / eval 0.50s). Regression: cron 9/9, TASK-001 sha256 `d2959970…ad051` нетронут, 1/1/1 нетронут.
- Отчёт: `projects/openclaw-tooling/research/keepalive-12h-change-report.md`.

### 4. Режима наблюдения (продолжается, минимум несколько дней)
- Контрольные точки: **dreaming-sweep 03:00 и ingest-observation 10:00 (27.08)** — если cold-load `model-call-started`-таймаутов нет, связка 1/1/1 + keep_alive 12h работает.
- Фиксировать по run'ам: consumer, lane, model, start, duration, timeout, concurrent consumers; Ollama latency (корреляция с cron/subagent/main/embed/vision).
- Цель: ответ — достаточно ли штатного main=1+subagent=1+cron=1 (+keep_alive) для Dell или нужен глобальный LLM gate.
- Если проблема сохранится: НЕ proxy автоматически → сначала Ollama-side `num_parallel=1`/queue → потом внешний proxy.

### 5. Инфра-события дня
- Wiki-ingest: 2 события закрыты ok (блок Concurrency Caps ~12:55; блок Keep-Alive ~17:30; vault entities/Ollama.md + entities/OpenClaw.md, lint чист).
- Повторный known quirk: live `wiki_apply` op=metadata молча «No changes» при upsert evidence на существующий claim → workaround точечная дозапись evidence (в 2-й раз; зафиксировано в CHANGELOG).
- Фоновый (не от изменений дня): серия timeout'ов dreaming-sweep/check-dreaming продолжается до keep_alive-фикса — именно то, что измеряем.

## Второй flush (pre-compaction, 22:19 MSK) — вечер после /reset

### 6. Model assignment: coder + evaluator → qwen3.8-27b-q5xl (21:31–21:47 MSK)
- Решение Сергея (VRAM-архитектура RTX 5090 32GB): 27B Q5_K_XL resident (keep_alive 12h) + 35b-192k / 32b-vl = mutually exclusive on-demand (не влезает рядом; полная eviction 28GB + load 30–120с). Это ограничение VRAM/архитектуры, НЕ ошибка OpenClaw.
- Preflight read-only: baseline sha256 openclaw.json `5c9b992b…dbbb80`; backup `projects/openclaw-tooling/backups/openclaw.json.model-assign-pre-2026-08-26`.
- Patch (саб-агент model-assign-27b): ровно 2 строки, surgical text-edit без JSON round-trip:
  - `agents.list[coder-agent].model`: `ollama-local/qwen3.8-27b-q5xl-coder` → `ollama-local/qwen3.8-27b-q5xl`
  - `agents.list[evaluator-agent].model`: `ollama-local/qwen3.6-35b-192k` → `ollama-local/qwen3.8-27b-q5xl`
  - humanizer-agent НЕ тронут (`qwen3.6-35b-192k`, on-demand). Meta/lastTouchedAt не бампнут, лишних diff нет.
- Hot-reload 21:31:49 (`config hot reload applied (agents.list)`), gateway pid 2541946 без рестарта.
- Финальный sha256 openclaw.json: `e73f35a12afef45121a34034a97fabd20ba1a75cd4fc50fb601f7de2366b11ec`.
- 27b НЕ выгружен: /api/ps expiry 27.08 09:32 (+12h) — дальше контрольного прогона 27.08 03:00. Никаких ollama stop/unload.
- Cron нетронут: 12 строк в sqlite `cron_jobs` = 11 enabled + 1 disabled one-shot `verify-wiki-full-backup-1` (отслужен 25.08, CLI list не показывает → визуально 11). Конфигурация всех 11 активных = baseline.
- TASK-001: dist/cli-DwyScdE_.js sha256 `d2959970…ad051` — не изменился.
- **Отклонение routing (дисклейм в отчёте):** model-assign саб-агент запустился как `agent:main:subagent` (agentId не указан) вместо setup-agent.

### 7. Smoke-тесты на 27B — PASS (runtime-подтверждение)
- Coder smoke: runtime-модель сессии `ollama-local/qwen3.8-27b-q5xl`; арифметика (sum 1..1000 = 500500, 10 первых простых) — верна.
- Evaluator smoke: runtime-модель `ollama-local/qwen3.8-27b-q5xl`; read-only проверка 3 полей (coder/evaluator = 27b, humanizer = 35b-192k) + sha256 конфига — все PASS, VERDICT PASS.
- Оба запускались по очереди (subagents.maxConcurrent=1).

### 8. Документация (саб-агент docs-vram-arch, ~21:47)
- MEMORY.md блок `### AI Models (Actualized 2026-08-26)`: +2 буллета — (a) VRAM-архитектура (resident 27b + on-demand mutually exclusive 35b/32b), (b) evaluator disclaimer (с 26.08 PASS = проверка на 27B, НЕ эквивалент прошлым PASS на 35B-192k).
- CHANGELOG: 21:35 (patch, 7-пунктная верификация) + 21:47 (документация).
- Volatile-числа в MEMORY.md не писались (ban 2026-08-22 соблюдён).

### 9. Сбои дня (не исправлялись, по решению Сергея)
- **memory_search / bge-m3: down.** Root cause — cold-load bge-m3 на Dell зависает >300с (curl `--max-time 300` → rc=28, ответа нет); tool-таймаут 15с. Ресиз не делался — ждёт решения после эксперимента.
- **Третий саб-агентный abort дня:** wiki-ingest воркер по event `evt_wiki-ingest_1787770039465934229_b841e0f6fe0e0a393cc40e00` (изменения MEMORY.md от docs) упал с `OPENCLAW_DIRECT_ABORT` (runtime 6m55s, 0 токенов). Event claim'нут main-agent'ом, lease до 23:49:54. Ручного rearm НЕ делал (режим «только отчёт»); cron `wiki-ingest-event` (30m) должен подхватить после истечения lease (прогон ~24:00). Dead-letter/rearm: `skills/wiki-ingest/events/failed.jsonl` + `rearm <event_id>` (max 3 попытки).

### 10. Режим: только наблюдение (тонирование завершено)
- Дальнейших изменений НЕ ПЛАНИРУЕТСЯ до контрольных точек.
- Эксперимент: `keep_alive=12h` + `timeout sweep=900s / check-dreaming=300s` (isolated sessions). Гипотезы проверяются раздельно: A — keep_alive 12h (warm-модель, prefill короткий), B — timeout 900s (prefill влезает в окно).
- Контрольные точки: 27.08 03:00 dreaming-sweep; 27.08 09:28 check-dreaming; 27.08 10:00 ingest-observation + 10:15 mem-obs-2708 (в Telegram); 02.09 18:45 mem-obs-report-d7 (BEFORE/AFTER за 7 дней, вердикт).
- Финальный отчёт дня отправлен в чат (~22:0x). Self-check: конфиг (3 поля + sha256), smoke ×2 (runtime-модель), 27b warm, cron 12, docs (grep по пунктам) — расхождений нет.

Notes

  • No related pages yet.