From ffec0fb7d72dc4a565ecd344c112d3a47ea60fe2 Mon Sep 17 00:00:00 2001 From: evgeny Date: Sat, 24 Oct 2026 16:15:28 +0200 Subject: [PATCH] docs(media): record validated SQLite announcement fix --- doc/media_async_audit_findings.txt | 46 ++++++++++++++++++++++++++++-- doc/tasks.md | 17 +++++++---- 2 files changed, 55 insertions(+), 8 deletions(-) diff --git a/doc/media_async_audit_findings.txt b/doc/media_async_audit_findings.txt index 98c3d458c..9cda97bd7 100644 --- a/doc/media_async_audit_findings.txt +++ b/doc/media_async_audit_findings.txt @@ -1,6 +1,6 @@ Аудит media_async / media_delivery — 2026-10-24 -Статус: encrypted_file и граница voice_file исправлены; подтверждён отдельный дефект переанонса записей SQLite. -Полный аудит двух каталогов ещё не завершён. Последнее продолжение и проект исправления — в конце. +Статус: encrypted_file, граница voice_file и переанонс записей SQLite исправлены. +Полный аудит двух каталогов ещё не завершён. Последнее продолжение и результаты исправления — в конце. Ниже сохранены исходное воспроизведение, согласованный проект и результаты исправления encrypted_file. Подтверждённый дефект: исходник уничтожается через другое имя того же файла @@ -363,3 +363,45 @@ media_crypto.h и file_transfer.h можно отметить [V]; media_deliver нужно исправление этого пути и завершение сверки описаний. Остальные прежние отметки не закрывают весь аудит. Остались контракты attachment/attachment_send/voice, связанные encrypted/lifecycle документы и устаревший _desc.txt (RTT-подбор, direct-only репликация и её интервалы расходятся с текущим кодом). + +Результаты исправления SQLite-переанонса — 2026-10-24 + +- Проверка остаётся внутри существующего обхода media_files. UUID допускаются только + как BLOB ровно16 байт; chunk — INTEGER в0..UINT32_MAX, читается через int64. + Исходные SQL-типы получены до преобразований. Проверенные UUID копируются + в локальные16-байтные массивы до вложенных запросов/отправок. +- chat_id имеет тип TEXT, длину1..20; разбор по объявленной длине отвергает embedded NUL, + знаки/пробелы/суффиксы, ноль/leading zero и переполнение. Допускается весь ненулевой uint64, + включая UINT64_MAX. Условие gid<=(UINT64_MAX-digit)/10 до операции исключает переполнение. +- Непроверенные фиксированные memcpy и сужающие cast устранены. Некорректная строка + пропускается с WARN: id/поле, типы/длины, исходный chunk. Хорошие соседние строки продолжают обрабатываться. +- prepare/bind/завершающий step/finalize проверяются. Отказ SQL логирует фазу/коды + и неполный обход; обычный complete-лог не выдаётся. Счётчики rows/eligible/skipped + описывают обработку, а не гарантированную доставку. Уже корректно отправленные пакеты не откатываются. +- Архитектура сохраняет существующие void API, wire-формат, источник ролей и единичные анонсы; + нет общего снимка/новых ресурсов, транзакций или состояния. Statement закрывается и при ошибке bind/step. +- test_media_delivery_sql: 36 случаев полей,32 недопустимых строки не отправляются, + четыре допустимые сохраняют точные UUID/group/chunk/timestamp. Проверены границы + UINT32_MAX/UINT64_MAX, все заявленные длины UUID и неверные SQL-типы, embedded NUL. + В смеси valid/invalid/valid отправлены только два корректных анонса. +- Linux: пять внедрений prepare/bind/first-step/step после первой строки/finalize. + До отказа сохранены0/0/0/1/2 корректных отправки, statement не остаётся активным; + проверяется ERROR с фазой и отсутствие ложного complete. После каждого отказа + обычный повтор успешно отправляет обе строки с исходными UUID и номерами блоков. + После захвата файлового лога тест явно восстанавливает console_enabled. +- ./build.sh --no-gui -j4 PASS; в изменённых C-файлах предупреждений нет. + Профиль12/12 PASS: delivery_sql, query, blocks, replication, index/index_regressions, + delivery_download, download_timeout, delivery_integration/full/chat, services. + После изменения только вывода диагностики SQL-тест повторно прошёл отдельно. +- ASAN/UBSan/LSan4/4 PASS: delivery_sql/query/blocks/replication, detect_leaks=1. + Свежая копия /tmp/utun-media-announcement-sanitizers содержит текущий код; + CPPFLAGS=-fsanitize=address,undefined применён и к встроенным зависимостям. + Обычные объекты проекта не смешивались с sanitizer-объектами. + Первый configure внутри sandbox отклонён LeakSanitizer из-за ptrace; + сборка и тесты успешно выполнены вне sandbox. + +Логи: /tmp/media-announcement-fix-build.log, /tmp/media-announcement-fix-profile-results.log, +/tmp/media-announcement-fix-sql-final.log, /tmp/media-announcement-sanitizer-build.log, +/tmp/media-announcement-sanitizer-tests-build.log, /tmp/media-announcement-sanitizer-results.log. +Полный make check и Windows/FreeBSD не запускались. Завершение фикса не означает завершения +сверки оставшихся заголовков и документов двух каталогов. diff --git a/doc/tasks.md b/doc/tasks.md index ec7f38604..8e54329e4 100644 --- a/doc/tasks.md +++ b/doc/tasks.md @@ -4,18 +4,23 @@ ## Текущие задачи -[ ] **media_delivery: проверять записи SQLite перед переанонсом локальных блоков** — подтверждено 24.10.2026. - announce_local_blocks не проверяет длины media_id/block_id, диапазон chunk и полный chat_id. +[+] **media_delivery: проверять записи SQLite перед переанонсом локальных блоков** — исправлено 24.10.2026. + Прежний announce_local_blocks не проверял длины media_id/block_id, диапазон chunk и полный chat_id. Реальный обработчик отправил все7 повреждённых записей: UUID длиной1/17 байт, chunk=-1/2^32, chat_id=111junk. При UUID длиной1 байт остальные15 байт сетевого поля взяты за границей BLOB; chunk=-1 превращается в4294967295, 2^32 — в0, 111junk — в группу111. Стенд использует настоящие SQLite/Ed25519; отправка перехвачена, пакеты в реальную сеть не уходят. Воспроизведение: /tmp/media-announcement-audit.c и .mk; лог: /tmp/media-announcement-audit.log. - План: проверять типы/точные длины UUID, chunk через int64 и канонический ненулевой десятичный chat_id - до копирования/кастов/отправки. Плохие строки логировать и пропускать; проверять bind/step/finalize. - Сохранить текущий void API, поштучные анонсы и формат wire; общий снимок всех файлов не нужен. + Реализованы проверки типов/точных длин UUID, chunk через int64 и канонического ненулевого decimal chat_id + до копирования/кастов/отправки. Плохие строки пропускаются с WARN; prepare/bind/step/finalize проверяются. + UUID копируются до вложенных SQL. Сохранены void API, поштучные анонсы и формат wire. + test_media_delivery_sql: 36 случаев полей (32 отказа/4 корректных), смесь2/3 и5 SQL faults с recovery. + Проверяются точные wire UUID/group/chunk, отсутствие оставшихся statements и ERROR вместо успешного лога при отказе SQL. + Сборка PASS; профильные12/12 и ASAN/UBSan/LSan4/4 PASS, detect_leaks=1, все встроенные зависимости инструментированы. + Логи: /tmp/media-announcement-fix-profile-results.log, /tmp/media-announcement-fix-sql-final.log, + /tmp/media-announcement-sanitizer-results.log. Полный check и Windows/FreeBSD не запускались. Архитектура, границы воспроизведения и регрессии: [media_async_audit_findings.txt](media_async_audit_findings.txt). - Рабочий код не изменён: остановлено по AGENTS.md:10. Сверка описаний двух каталогов ещё не завершена. + Сверка описаний двух каталогов ещё не завершена. [+] **media_async voice_file: согласовать верхнюю границу длительности с метаданными** — исправлено 24.10.2026. Прежняя проверка samples/channels/rate >86400 пропускала полные кадры 24ч+20..980мс,