Почему автор защищённого файлового хранилища выбрал SQLite вместо серверной СУБД
Разработчик экспериментального зашифрованного хранилища проверил работу баз данных поверх gocryptfs и FUSE. После проблем с размонтированием он остановился на SQLite с обычным журналированием и описал правила разделения файлов, секретов и жизненного цикла контейнера.
Главное
В проекте зашифрованного файлового хранилища данные находятся за слоем gocryptfs, который предоставляет приложению смонтированную расшифрованную файловую систему. Автор сначала попробовал разместить каталоги PostgreSQL и MySQL в таком окружении. Частые операции с журналами и небольшими блоками добавляли нагрузку на FUSE, а размонтирование во время работы серверных процессов приводило к сбоям. Это результат его эксперимента, а не утверждение о невозможности любой серверной СУБД поверх FUSE.
SQLite упростила архитектуру тем, что не требует отдельного процесса сервера базы данных. Однако выбор самой СУБД не решил автоматически проблему согласованности файлов. Автор начал с режима WAL и проверил принудительное размонтирование открытого хранилища. После обратного монтирования тестовая база не открылась: помимо основного файла, в этом режиме используются дополнительные файлы журнала и общей памяти, чья согласованность была нарушена.
Подробности
Для своего сценария разработчик предпочёл классическую схему отката транзакций. Он сравнил варианты DELETE, TRUNCATE и PERSIST, различающиеся обращением с файлом журнала после завершения записи, и выбрал DELETE. По его наблюдениям, именно такая конфигурация выдержала практические испытания стабильнее. При этом она не превращается в универсальную гарантию сохранности при любом аварийном отключении: результат зависит от поведения файловой системы и порядка завершения операций.
Приложение собирается и запускается через Makefile, Dockerfile и стартовый скрипт, после чего HTTP-запросы принимает FastAPI под Uvicorn. Автор решил оставить один рабочий процесс Uvicorn: SQLite всё равно допускает только одну конкурирующую операцию записи, а увеличение числа процессов усложнило бы управление открытым хранилищем. Асинхронная обработка при этом нужна для запросов, ожидающих завершения файловых операций.
Что это меняет
Внешнее состояние разделено на том с зашифрованными файлами и отдельный том с секретами. Каталог cipherdir хранит шифротекст, а расшифрованная точка mountpoint существует для приложения лишь при открытом хранилище. На первом запуске владелец задаёт мастер-пароль; созданная парольная фраза gocryptfs сохраняется в зашифрованном виде, а не открытой строкой на диске. Контейнер предполагается пересоздаваемым без потери ценных данных.
Следующая важная задача — корректное закрытие: приложение должно прекращать обращения к базе и файлам до размонтирования, а не надеяться на автоматическое восстановление после исчезновения тома. Автор ещё планирует проработать управление жизненным циклом и аварийное закрытие. Поэтому опубликованный опыт ценен как последовательность инженерных решений и ограничений, но не как законченная независимая оценка безопасности продукта.
Первоисточник
Материал подготовлен STRUCTURE по открытой публикации Habr. Текст и иллюстрации первоисточника не воспроизводятся целиком.