diff --git a/doc/chat_audit_findings.txt b/doc/chat_audit_findings.txt index c8382138d..4fa8ef78c 100644 --- a/doc/chat_audit_findings.txt +++ b/doc/chat_audit_findings.txt @@ -9,7 +9,8 @@ Chat: исправление приглашений и проверка конт Полный аудит всех модулей src/chat не завершён. chat_sync.h остаётся [~]. Продолжение26.10.2026 после ab8713d8:оба дефекта chat_admin исправлены по согласованному плану. Проверки и отдельное падение member_files worker с сохранённым core описаны в конце отчёта. -Новый дефект worker остаётся открытым; дальнейший аудит остановлен по AGENTS.md:10. +По отдельному поручению пользователя дефект worker также исправлен и проверен; +результаты и отрицательный контроль на прежнем коде приведены в конце отчёта. Реализация @@ -236,7 +237,7 @@ JOIN sanitizer запускался отдельно от остальных ч chat_admin.h и topo_node_sqlite.h закрыты [V]. Полный аудит src/chat не завершён. Desktop/Android/Windows/FreeBSD сборки этого продолжения не выполнялись. -Отдельный незакрытый дефект:member_files completion после stop +Дефект member_files completion после stop:диагностика до исправления Первый native-профиль дал4/5:JOIN завершился SIGSEGV; остальные4 теста прошли. Последующий полный check и sanitizer-профиль прошли,но это не устраняет гонку. @@ -266,3 +267,48 @@ Drain вызывает done ровно один раз;worker не остана в одном batch,проверкой ровно одного done,cleanup continuations и отсутствия утечек; затем повтор JOIN и sanitizer-профиль. Правку worker пока не выполняли. worker.h возвращён в [~];добавлена открытая задача. По AGENTS.md:10 аудит остановлен. + +Исправление member_files worker — 26.10.2026, по поручению пользователя + +mf_worker_drain ждёт completed под mutex:к этому моменту disk_thread уже завершил +uasync_post_reserved и больше не обращается к completion. В том же потоке uasync, +до освобождения mf_work,drain обнуляет callback/arg completion и вызывает cancel_post. +Для общей очереди cancel освобождает task;для уже извлечённого batch оставшийся loop +видит NULL callback и освобождает task самостоятельно. Work_finish доставляет done +ровно один раз,включая добавленные из done обязательные cleanup continuations. +Новых аллокаций,рекурсивного poll или изменения общего планировщика не требуется. +Новый DEBUG-лог различает removed from queue и disabled in current batch. +В worker.h,u_async.h/u_async_doc.md и member_files.txt согласован контракт: +внешняя команда в uasync может остановить worker,собственный done — не может. +Реализация lib/u_async не менялась,поправлен только комментарий cancel_post. + +Постоянный test_member_files расширен четырьмя Linux-сценариями:обычное завершение, +destroy с task в общей очереди,drain и destroy в уже извлечённом batch. +GNU ld wrapper только наблюдает настоящую публикацию и будит condvar-барьер; +callback не подменяется. Stop публикуется до двух работ,poll начинается после двух +completion. Первый done добавляет заранее зарезервированную cleanup-задачу. +Проверены work/done каждого задания ровно один раз,нужные потоки,error=0, +готовность cleanup до возврата stop и полный баланс выделений после следующего poll. +Эта регрессия включена в штатную цель,общее число тестов не изменилось. + +Отрицательный контроль:тот же sanitizer-тест и настоящая libutun с worker.c из393449cf, +подставленным отдельным объектом перед архивом,не меняя рабочую копию. +Первые два сценария проходят;первый detached drain выявляет heap-use-after-free +в work_completed(worker.c:45). ASAN показывает освобождение в work_finish из drain, +а затем чтение из process_posted_tasks:это подтверждает механизм исходного core. +Ожидаемый exit1;лог /tmp/member-worker-negative.log,сборка /tmp/member-worker-negative-build.log. + +Native build PASS;профиль member_files,member_files_network,daemon_worker,join_faults, +services,group_avatar,uasync_regressions,chat_admin —8/8 PASS. +Ранее падавший JOIN дополнительно50/50 PASS,без изменения самого JOIN-теста. +ASAN/UBSan/LSan тот же профиль8/8 PASS,detect_leaks=1,halt_on_error=1; +libuasync и встроенный Opus проверены на ASAN/UBSan instrumentation. +Sanitizer-сборка изолирована в /tmp/utun-member-purge-sanitizers; +Opus sanitizer flags добавлены только в этой временной копии,native-объекты не смешивались. +Окончательный check.sh207/207 PASS,0 failed/0 skipped,STUN PASS, +proxy9/9,burst1/1,load8/8 (134217728байт),exit0,182с. +Логи /tmp/member-worker-fix-{build,regression,native-results,join-repeat,asan-build, +asan-tests-build,asan-results,full-check}.log и /tmp/member-worker-fix-{native,asan}-test_*.log. +Первоначальный core/ELF и отчёт GDB сохранены. git diff --check PASS. +worker.h закрыт [V],задача закрыта;полный аудит chat/member_files остаётся частичным. +Desktop/Android/Windows/FreeBSD сборки этого исправления не выполнялись. Push не выполнялся. diff --git a/doc/tasks.md b/doc/tasks.md index 3b35ef41e..6c01c95b7 100644 --- a/doc/tasks.md +++ b/doc/tasks.md @@ -4,18 +4,22 @@ ## Текущие задачи -[ ] **member_files: completion обращается к освобождённой задаче после stop из uasync batch** — 26.10.2026. - mf_worker_drain игнорирует ERR_FAIL отмены уже извлечённой completion и освобождает mf_work; - оставшийся callback вызывает work_completed с прежним arg. Падение JOIN подтверждено core и повтором GDB. - Стек worker.c:45 → u_async.c:432 → test_chat_join_faults.c:298;в core owner=NULL,mutex=0x10. +[+] **member_files: безопасное завершение completion при stop из uasync batch** — исправлено26.10.2026. + mf_worker_drain после ожидания публикации отключает callback/arg до освобождения mf_work; + queued task освобождает отмена,извлечённый task остаётся у uasync и позже освобождается без callback. + Done доставляется ровно раз,включая обязательные cleanup continuations;нет новых аллокаций/рекурсивного poll. + Контракты worker/uasync/docs согласованы:stop из внешней команды допустим,из собственного done запрещён. + Постоянный test_member_files:4 барьерных сценария normal/queued destroy/detached drain/detached destroy, + по2 работы и cleanup,правильные потоки,единственный done и полный баланс выделений. + На прежнем worker.c новая регрессия ожидаемо выявляет heap-use-after-free в строке45 под ASAN; + /tmp/member-worker-negative.log подтверждает чтение после освобождения в drain,без изменения рабочей копии. + Native/lifecycle-профиль8/8 PASS,JOIN50/50 PASS;ASAN/UBSan/LSan8/8 PASS,detect_leaks=1. + Полный check.sh207/207 PASS,0 failed/0 skipped,STUN/proxy9/9/burst1/1/load8/8,182с. + Первоначальный SIGSEGV и повтор GDB сохранены,стек worker.c:45 → u_async.c:432 → join_faults.c:298. Core /tmp/admin-key-fix-join.core,бинарник /tmp/admin-key-fix-test_chat_join_faults.elf, разбор /tmp/admin-key-fix-join-core-analysis.log,повтор /tmp/admin-key-fix-join-repeat-gdb.log (10-й запуск). - Предложение:после ожидания публикации обезвредить callback/arg completion до освобождения mf_work; - queued task освобождает успешная отмена,извлечённый task остаётся uasync и освобождается без callback. - Согласовать контракт stop из внешней команды,сохранить запрет stop из собственного done и единственность done. - Нужен барьерный тест stop → completion в одном batch,cleanup continuations,JOIN и санитайзеры. - Runtime worker не менялся;worker.h имеет [~]. По AGENTS.md:10 дальнейший аудит остановлен. - Подробности: [chat_audit_findings.txt](chat_audit_findings.txt),отдельный дефект после проверки admin. + worker.h закрыт [V];полный аудит chat/member_files остаётся частичным,платформенные GUI не проверялись. + Подробности: [chat_audit_findings.txt](chat_audit_findings.txt),исправление worker;/tmp/member-worker-fix-*.log. [+] **chat_admin: атомарный импорт ключей и безопасный отказ NULL transfer** — исправлено26.10.2026. channel_set_privs проверяет savepoint/prepare/все bind/step/одну строку/finalize/RELEASE и откатывает отказ. @@ -26,8 +30,7 @@ Независимое чтение пары/autocommit в событии,отсутствие ложного успеха,allocations восстановлены. Исходный стенд теперь exit0,defects0,bind hits3. Native build/check.sh207/207 PASS,0 failed/0 skipped, STUN/proxy9/9/burst1/1/load8/8 (134217728байт),201с;ASAN/UBSan/LSan5/5 PASS,detect_leaks=1. - Первый native-профиль4/5 с SIGSEGV JOIN сохранён и разобран в отдельной открытой задаче выше; - успешные общий и sanitizer-прогоны не доказывают устранение этой гонки. + Первый native-профиль4/5 с SIGSEGV JOIN сохранён;отдельный дефект worker исправлен в задаче выше. [chat_audit_findings.txt](chat_audit_findings.txt),продолжение chat_admin;/tmp/admin-key-fix-*.log. chat_admin.h/topo_node_sqlite.h закрыты [V]. Полный аудит chat остаётся частичным;push не выполнялся. diff --git a/lib/u_async_doc.md b/lib/u_async_doc.md index 8a21f979a..4c661f38d 100644 --- a/lib/u_async_doc.md +++ b/lib/u_async_doc.md @@ -106,9 +106,13 @@ void thread_func(UTUN_INSTANCE* u) { Задачу освобождает uasync после исполнения, успешной отмены или при уничтожении без вызова callback; `arg` не освобождается. Ошибка wakeup оставляет уже опубликованную задачу в очереди; обе функции публикации не возвращают эту ошибку. -Отмена через `uasync_cancel_post` выполняется в потоке владельца вне callbacks после завершения производителя. -`ERR_OK` означает, что задача найдена в ожидающей очереди и освобождена; `ERR_FAIL` — не найдена. -Порция, уже взятая на исполнение, в этой очереди не находится. `uasync_memsync` лишь захватывает и отпускает +Отмена через `uasync_cancel_post` выполняется в потоке ua после завершения публикации производителем; +задача ещё не должна исполняться. Вызов из другого callback допустим. +`ERR_OK` означает, что задача найдена в ожидающей очереди и освобождена; `ERR_FAIL` — уже извлечена в batch. +Такой task остаётся у uasync с прежним callback/arg: отмена сама не обезвреживает его. +Если владелец освобождает arg, он заранее обнуляет callback и arg ещё живого task в потоке ua; +оставшийся batch затем только освобождает task. Это не разрешает доступ к уже исполненному task. +Порция, уже взятая на исполнение, в ожидающей очереди не находится. `uasync_memsync` лишь захватывает и отпускает `posted_lock`; он не ждёт исполнения задач и не заменяет согласование времени жизни контекста. ### Получение времени @@ -183,7 +187,7 @@ Handle кодирует индекс без поколения и сохраня |---------|----------| | `uasync_post(ua, cb, arg)` | **Потокобезопасно.** Выделить и опубликовать задачу для потока экземпляра, попытаться разбудить его. При OOM задача не публикуется, ошибка логируется; статуса возврата нет. | | `uasync_post_reserved(ua, task)` | **Потокобезопасно.** Передать заранее выделенный через `u_malloc` task с заполненными callback/arg без новых аллокаций. `ua` и `task` обязательны. Владение task переходит uasync. | -| `uasync_cancel_post(ua, task)` | В потоке владельца вне callbacks после завершения производителя: `ERR_OK` при удалении и освобождении ожидающего task, `ERR_FAIL`, если он не найден. `ua` и `task` обязательны. | +| `uasync_cancel_post(ua, task)` | В потоке ua после публикации, до исполнения task; допустим из другого callback. `ERR_OK` освобождает task из очереди, `ERR_FAIL` оставляет извлечённый task у uasync с прежним callback/arg. `ua` и `task` обязательны. | | `uasync_memsync(ua)` | Lock/unlock `posted_lock` живого экземпляра. Не ждёт исполнения задач; публикация через post уже использует этот мьютекс. | | `uasync_wakeup(ua)` | 0 при успешной записи, -1 при ошибке/неинициализированном wakeup. POSIX: запись `uint64_t(1)` в eventfd/pipe; Windows: send одного байта в UDP-сокет. Экземпляр должен оставаться живым. | | `uasync_get_wakeup_fd(ua)` | Заимствованный endpoint записи, либо -1 при `NULL`/неинициализированном wakeup. Linux: eventfd, тот же fd для чтения и записи (писать `uint64_t`); прочие POSIX: pipe; Windows: UDP-сокет. Самостоятельно не закрывать. |