Простейшее хранилище данных

user cee4d3b9fb SVI Доработка тестов; 81.2% преди 9 месеца
cmd fe93cf77b7 SVI Исправления, тесты; 76.2% преди 9 месеца
doc fe93cf77b7 SVI Исправления, тесты; 76.2% преди 9 месеца
internal cee4d3b9fb SVI Доработка тестов; 81.2% преди 9 месеца
pkg cee4d3b9fb SVI Доработка тестов; 81.2% преди 9 месеца
vendor 361803397e SVI Обновление вендоринга преди 9 месеца
web 87c4122edb SVI Переделки под единообразную структуру; 76.2; преди 9 месеца
.env 06d969a08a SVI Исправления,тесты, документация;85.0% преди 10 месеца
.gitignore 658044dedd SVI Игнор служебных файлов преди 10 месеца
LICENSE c7b7a4db5b Initial commit преди 1 година
Makefile 361803397e SVI Обновление вендоринга преди 9 месеца
README.md 87c4122edb SVI Переделки под единообразную структуру; 76.2; преди 9 месеца
dev.sh fe93cf77b7 SVI Исправления, тесты; 76.2% преди 9 месеца
go.mod 361803397e SVI Обновление вендоринга преди 9 месеца
go.sum 361803397e SVI Обновление вендоринга преди 9 месеца
make.py 87c4122edb SVI Переделки под единообразную структуру; 76.2; преди 9 месеца

README.md

gostore

Cетевое хранилище на golang.

Описание

Хранилище ключ-значение работает поверх HTTP1.1/ip4.

Хранилище включает несколько возможностей, разбитых по группам.

Структура хранилища

flowchart TD
  IService
  IStore
  IServHttp

  IServHttp --> IService
  IStore --> IService

Работа через прокси

Запросы сделанными классическими специально, чтобы гарантировать правильную работу через прокси.

Особенности работы

Поддерживается KeepAlive с ожиданием следующего запроса 10 сек. Клиент должен присылать запросы не реже, чтобы поддерживать открытым соединение.

Если необходима работа через внешние сети, то следует использовать nginx proxy manager со включенными сертификатами LetsEncript перед сервисом gostore.

Максимальный размер значения ключа не может быть более 10 МБ (но можно настроить в коде).

Пределы использования

Примерные лимиты эффективности хранилища находится в следующих пределах

  • эффективный размер 20 ТБ (допустимо до 60 ТБ);
  • эффективное количество ключей 10Г (допустимо 20ТБ).

Необходимо помнить, что в любом случае физические параметры оперативной памяти и дисковой подсистемы сильно ограничены.

Планируется проектирование хранилища для работы в составе нескольких репликаций и множественное шардирование.

Команды сборки

make         # Сборка сервиса для прода
make build   # -//-
make dev.run # Сборка с и запуск  детектором гонок для отладки
make mod     # Обновление зависимостей