Record verified worker shutdown fix and negative control

This commit is contained in:
evgeny committed 2026-10-26 20:46:31 +01:00
1 parent 230a9ce228
commit 71eec8a5b2
3 files changed
+71 -18

No files matched your search

+48 -2
View File
@@ -9,7 +9,8 @@ Chat: исправление приглашений и проверка конт
Полный аудит всех модулей src/chat не завершён. chat_sync.h остаётся [~].
Продолжение26.10.2026 после ab8713d8:оба дефекта chat_admin исправлены по согласованному плану.
Проверки и отдельное падение member_files worker с сохранённым core описаны в конце отчёта.
Новый дефект worker остаётся открытым; дальнейший аудит остановлен по AGENTS.md:10.
По отдельному поручению пользователя дефект worker также исправлен и проверен;
результаты и отрицательный контроль на прежнем коде приведены в конце отчёта.
Реализация
@@ -236,7 +237,7 @@ JOIN sanitizer запускался отдельно от остальных ч
chat_admin.h и topo_node_sqlite.h закрыты [V]. Полный аудит src/chat не завершён.
Desktop/Android/Windows/FreeBSD сборки этого продолжения не выполнялись.
Отдельный незакрытый дефект:member_files completion после stop
Дефект member_files completion после stop:диагностика до исправления
Первый native-профиль дал4/5:JOIN завершился SIGSEGV; остальные4 теста прошли.
Последующий полный check и sanitizer-профиль прошли,но это не устраняет гонку.
@@ -266,3 +267,48 @@ Drain вызывает done ровно один раз;worker не остана
в одном batch,проверкой ровно одного done,cleanup continuations и отсутствия утечек;
затем повтор JOIN и sanitizer-профиль. Правку worker пока не выполняли.
worker.h возвращён в [~];добавлена открытая задача. По AGENTS.md:10 аудит остановлен.
Исправление member_files worker — 26.10.2026, по поручению пользователя
mf_worker_drain ждёт completed под mutex:к этому моменту disk_thread уже завершил
uasync_post_reserved и больше не обращается к completion. В том же потоке uasync,
до освобождения mf_work,drain обнуляет callback/arg completion и вызывает cancel_post.
Для общей очереди cancel освобождает task;для уже извлечённого batch оставшийся loop
видит NULL callback и освобождает task самостоятельно. Work_finish доставляет done
ровно один раз,включая добавленные из done обязательные cleanup continuations.
Новых аллокаций,рекурсивного poll или изменения общего планировщика не требуется.
Новый DEBUG-лог различает removed from queue и disabled in current batch.
В worker.h,u_async.h/u_async_doc.md и member_files.txt согласован контракт:
внешняя команда в uasync может остановить worker,собственный done — не может.
Реализация lib/u_async не менялась,поправлен только комментарий cancel_post.
Постоянный test_member_files расширен четырьмя Linux-сценариями:обычное завершение,
destroy с task в общей очереди,drain и destroy в уже извлечённом batch.
GNU ld wrapper только наблюдает настоящую публикацию и будит condvar-барьер;
callback не подменяется. Stop публикуется до двух работ,poll начинается после двух
completion. Первый done добавляет заранее зарезервированную cleanup-задачу.
Проверены work/done каждого задания ровно один раз,нужные потоки,error=0,
готовность cleanup до возврата stop и полный баланс выделений после следующего poll.
Эта регрессия включена в штатную цель,общее число тестов не изменилось.
Отрицательный контроль:тот же sanitizer-тест и настоящая libutun с worker.c из393449cf,
подставленным отдельным объектом перед архивом,не меняя рабочую копию.
Первые два сценария проходят;первый detached drain выявляет heap-use-after-free
в work_completed(worker.c:45). ASAN показывает освобождение в work_finish из drain,
а затем чтение из process_posted_tasks:это подтверждает механизм исходного core.
Ожидаемый exit1;лог /tmp/member-worker-negative.log,сборка /tmp/member-worker-negative-build.log.
Native build PASS;профиль member_files,member_files_network,daemon_worker,join_faults,
services,group_avatar,uasync_regressions,chat_admin —8/8 PASS.
Ранее падавший JOIN дополнительно50/50 PASS,без изменения самого JOIN-теста.
ASAN/UBSan/LSan тот же профиль8/8 PASS,detect_leaks=1,halt_on_error=1;
libuasync и встроенный Opus проверены на ASAN/UBSan instrumentation.
Sanitizer-сборка изолирована в /tmp/utun-member-purge-sanitizers;
Opus sanitizer flags добавлены только в этой временной копии,native-объекты не смешивались.
Окончательный check.sh207/207 PASS,0 failed/0 skipped,STUN PASS,
proxy9/9,burst1/1,load8/8 (134217728байт),exit0,182с.
Логи /tmp/member-worker-fix-{build,regression,native-results,join-repeat,asan-build,
asan-tests-build,asan-results,full-check}.log и /tmp/member-worker-fix-{native,asan}-test_*.log.
Первоначальный core/ELF и отчёт GDB сохранены. git diff --check PASS.
worker.h закрыт [V],задача закрыта;полный аудит chat/member_files остаётся частичным.
Desktop/Android/Windows/FreeBSD сборки этого исправления не выполнялись. Push не выполнялся.
+15 -12
View File
@@ -4,18 +4,22 @@
## Текущие задачи
[ ] **member_files: completion обращается к освобождённой задаче после stop из uasync batch** — 26.10.2026.
mf_worker_drain игнорирует ERR_FAIL отмены уже извлечённой completion и освобождает mf_work;
оставшийся callback вызывает work_completed с прежним arg. Падение JOIN подтверждено core и повтором GDB.
Стек worker.c:45 → u_async.c:432 → test_chat_join_faults.c:298;в core owner=NULL,mutex=0x10.
[+] **member_files: безопасное завершение completion при stop из uasync batch** — исправлено26.10.2026.
mf_worker_drain после ожидания публикации отключает callback/arg до освобождения mf_work;
queued task освобождает отмена,извлечённый task остаётся у uasync и позже освобождается без callback.
Done доставляется ровно раз,включая обязательные cleanup continuations;нет новых аллокаций/рекурсивного poll.
Контракты worker/uasync/docs согласованы:stop из внешней команды допустим,из собственного done запрещён.
Постоянный test_member_files:4 барьерных сценария normal/queued destroy/detached drain/detached destroy,
по2 работы и cleanup,правильные потоки,единственный done и полный баланс выделений.
На прежнем worker.c новая регрессия ожидаемо выявляет heap-use-after-free в строке45 под ASAN;
/tmp/member-worker-negative.log подтверждает чтение после освобождения в drain,без изменения рабочей копии.
Native/lifecycle-профиль8/8 PASS,JOIN50/50 PASS;ASAN/UBSan/LSan8/8 PASS,detect_leaks=1.
Полный check.sh207/207 PASS,0 failed/0 skipped,STUN/proxy9/9/burst1/1/load8/8,182с.
Первоначальный SIGSEGV и повтор GDB сохранены,стек worker.c:45 → u_async.c:432 → join_faults.c:298.
Core /tmp/admin-key-fix-join.core,бинарник /tmp/admin-key-fix-test_chat_join_faults.elf,
разбор /tmp/admin-key-fix-join-core-analysis.log,повтор /tmp/admin-key-fix-join-repeat-gdb.log (10-й запуск).
Предложение:после ожидания публикации обезвредить callback/arg completion до освобождения mf_work;
queued task освобождает успешная отмена,извлечённый task остаётся uasync и освобождается без callback.
Согласовать контракт stop из внешней команды,сохранить запрет stop из собственного done и единственность done.
Нужен барьерный тест stop → completion в одном batch,cleanup continuations,JOIN и санитайзеры.
Runtime worker не менялся;worker.h имеет [~]. По AGENTS.md:10 дальнейший аудит остановлен.
Подробности: [chat_audit_findings.txt](chat_audit_findings.txt),отдельный дефект после проверки admin.
worker.h закрыт [V];полный аудит chat/member_files остаётся частичным,платформенные GUI не проверялись.
Подробности: [chat_audit_findings.txt](chat_audit_findings.txt),исправление worker;/tmp/member-worker-fix-*.log.
[+] **chat_admin: атомарный импорт ключей и безопасный отказ NULL transfer** — исправлено26.10.2026.
channel_set_privs проверяет savepoint/prepare/все bind/step/одну строку/finalize/RELEASE и откатывает отказ.
@@ -26,8 +30,7 @@
Независимое чтение пары/autocommit в событии,отсутствие ложного успеха,allocations восстановлены.
Исходный стенд теперь exit0,defects0,bind hits3. Native build/check.sh207/207 PASS,0 failed/0 skipped,
STUN/proxy9/9/burst1/1/load8/8 (134217728байт),201с;ASAN/UBSan/LSan5/5 PASS,detect_leaks=1.
Первый native-профиль4/5 с SIGSEGV JOIN сохранён и разобран в отдельной открытой задаче выше;
успешные общий и sanitizer-прогоны не доказывают устранение этой гонки.
Первый native-профиль4/5 с SIGSEGV JOIN сохранён;отдельный дефект worker исправлен в задаче выше.
[chat_audit_findings.txt](chat_audit_findings.txt),продолжение chat_admin;/tmp/admin-key-fix-*.log.
chat_admin.h/topo_node_sqlite.h закрыты [V]. Полный аудит chat остаётся частичным;push не выполнялся.
+8 -4
View File
@@ -106,9 +106,13 @@ void thread_func(UTUN_INSTANCE* u) {
Задачу освобождает uasync после исполнения, успешной отмены или при уничтожении без вызова callback; `arg` не освобождается.
Ошибка wakeup оставляет уже опубликованную задачу в очереди; обе функции публикации не возвращают эту ошибку.
Отмена через `uasync_cancel_post` выполняется в потоке владельца вне callbacks после завершения производителя.
`ERR_OK` означает, что задача найдена в ожидающей очереди и освобождена; `ERR_FAIL` — не найдена.
Порция, уже взятая на исполнение, в этой очереди не находится. `uasync_memsync` лишь захватывает и отпускает
Отмена через `uasync_cancel_post` выполняется в потоке ua после завершения публикации производителем;
задача ещё не должна исполняться. Вызов из другого callback допустим.
`ERR_OK` означает, что задача найдена в ожидающей очереди и освобождена; `ERR_FAIL` — уже извлечена в batch.
Такой task остаётся у uasync с прежним callback/arg: отмена сама не обезвреживает его.
Если владелец освобождает arg, он заранее обнуляет callback и arg ещё живого task в потоке ua;
оставшийся batch затем только освобождает task. Это не разрешает доступ к уже исполненному task.
Порция, уже взятая на исполнение, в ожидающей очереди не находится. `uasync_memsync` лишь захватывает и отпускает
`posted_lock`; он не ждёт исполнения задач и не заменяет согласование времени жизни контекста.
### Получение времени
@@ -183,7 +187,7 @@ Handle кодирует индекс без поколения и сохраня
|---------|----------|
| `uasync_post(ua, cb, arg)` | **Потокобезопасно.** Выделить и опубликовать задачу для потока экземпляра, попытаться разбудить его. При OOM задача не публикуется, ошибка логируется; статуса возврата нет. |
| `uasync_post_reserved(ua, task)` | **Потокобезопасно.** Передать заранее выделенный через `u_malloc` task с заполненными callback/arg без новых аллокаций. `ua` и `task` обязательны. Владение task переходит uasync. |
| `uasync_cancel_post(ua, task)` | В потоке владельца вне callbacks после завершения производителя: `ERR_OK` при удалении и освобождении ожидающего task, `ERR_FAIL`, если он не найден. `ua` и `task` обязательны. |
| `uasync_cancel_post(ua, task)` | В потоке ua после публикации, до исполнения task; допустим из другого callback. `ERR_OK` освобождает task из очереди, `ERR_FAIL` оставляет извлечённый task у uasync с прежним callback/arg. `ua` и `task` обязательны. |
| `uasync_memsync(ua)` | Lock/unlock `posted_lock` живого экземпляра. Не ждёт исполнения задач; публикация через post уже использует этот мьютекс. |
| `uasync_wakeup(ua)` | 0 при успешной записи, -1 при ошибке/неинициализированном wakeup. POSIX: запись `uint64_t(1)` в eventfd/pipe; Windows: send одного байта в UDP-сокет. Экземпляр должен оставаться живым. |
| `uasync_get_wakeup_fd(ua)` | Заимствованный endpoint записи, либо -1 при `NULL`/неинициализированном wakeup. Linux: eventfd, тот же fd для чтения и записи (писать `uint64_t`); прочие POSIX: pipe; Windows: UDP-сокет. Самостоятельно не закрывать. |