Простейшее хранилище данных

user f81fe7cac9 SVI Доработка тестов; 81.9% 9 сар өмнө
cmd fe93cf77b7 SVI Исправления, тесты; 76.2% 9 сар өмнө
doc fe93cf77b7 SVI Исправления, тесты; 76.2% 9 сар өмнө
internal f81fe7cac9 SVI Доработка тестов; 81.9% 9 сар өмнө
pkg f81fe7cac9 SVI Доработка тестов; 81.9% 9 сар өмнө
vendor 361803397e SVI Обновление вендоринга 9 сар өмнө
web 87c4122edb SVI Переделки под единообразную структуру; 76.2; 9 сар өмнө
.env 06d969a08a SVI Исправления,тесты, документация;85.0% 10 сар өмнө
.gitignore 658044dedd SVI Игнор служебных файлов 10 сар өмнө
LICENSE c7b7a4db5b Initial commit 1 жил өмнө
Makefile 361803397e SVI Обновление вендоринга 9 сар өмнө
README.md 87c4122edb SVI Переделки под единообразную структуру; 76.2; 9 сар өмнө
dev.sh fe93cf77b7 SVI Исправления, тесты; 76.2% 9 сар өмнө
go.mod 361803397e SVI Обновление вендоринга 9 сар өмнө
go.sum 361803397e SVI Обновление вендоринга 9 сар өмнө
make.py 87c4122edb SVI Переделки под единообразную структуру; 76.2; 9 сар өмнө

README.md

gostore

Cетевое хранилище на golang.

Описание

Хранилище ключ-значение работает поверх HTTP1.1/ip4.

Хранилище включает несколько возможностей, разбитых по группам.

Структура хранилища

flowchart TD
  IService
  IStore
  IServHttp

  IServHttp --> IService
  IStore --> IService

Работа через прокси

Запросы сделанными классическими специально, чтобы гарантировать правильную работу через прокси.

Особенности работы

Поддерживается KeepAlive с ожиданием следующего запроса 10 сек. Клиент должен присылать запросы не реже, чтобы поддерживать открытым соединение.

Если необходима работа через внешние сети, то следует использовать nginx proxy manager со включенными сертификатами LetsEncript перед сервисом gostore.

Максимальный размер значения ключа не может быть более 10 МБ (но можно настроить в коде).

Пределы использования

Примерные лимиты эффективности хранилища находится в следующих пределах

  • эффективный размер 20 ТБ (допустимо до 60 ТБ);
  • эффективное количество ключей 10Г (допустимо 20ТБ).

Необходимо помнить, что в любом случае физические параметры оперативной памяти и дисковой подсистемы сильно ограничены.

Планируется проектирование хранилища для работы в составе нескольких репликаций и множественное шардирование.

Команды сборки

make         # Сборка сервиса для прода
make build   # -//-
make dev.run # Сборка с и запуск  детектором гонок для отладки
make mod     # Обновление зависимостей