Простейшее хранилище данных

user cee4d3b9fb SVI Доработка тестов; 81.2% 9 months ago
cmd fe93cf77b7 SVI Исправления, тесты; 76.2% 9 months ago
doc fe93cf77b7 SVI Исправления, тесты; 76.2% 9 months ago
internal cee4d3b9fb SVI Доработка тестов; 81.2% 9 months ago
pkg cee4d3b9fb SVI Доработка тестов; 81.2% 9 months ago
vendor 361803397e SVI Обновление вендоринга 9 months ago
web 87c4122edb SVI Переделки под единообразную структуру; 76.2; 9 months ago
.env 06d969a08a SVI Исправления,тесты, документация;85.0% 10 months ago
.gitignore 658044dedd SVI Игнор служебных файлов 10 months ago
LICENSE c7b7a4db5b Initial commit 1 year ago
Makefile 361803397e SVI Обновление вендоринга 9 months ago
README.md 87c4122edb SVI Переделки под единообразную структуру; 76.2; 9 months ago
dev.sh fe93cf77b7 SVI Исправления, тесты; 76.2% 9 months ago
go.mod 361803397e SVI Обновление вендоринга 9 months ago
go.sum 361803397e SVI Обновление вендоринга 9 months ago
make.py 87c4122edb SVI Переделки под единообразную структуру; 76.2; 9 months ago

README.md

gostore

Cетевое хранилище на golang.

Описание

Хранилище ключ-значение работает поверх HTTP1.1/ip4.

Хранилище включает несколько возможностей, разбитых по группам.

Структура хранилища

flowchart TD
  IService
  IStore
  IServHttp

  IServHttp --> IService
  IStore --> IService

Работа через прокси

Запросы сделанными классическими специально, чтобы гарантировать правильную работу через прокси.

Особенности работы

Поддерживается KeepAlive с ожиданием следующего запроса 10 сек. Клиент должен присылать запросы не реже, чтобы поддерживать открытым соединение.

Если необходима работа через внешние сети, то следует использовать nginx proxy manager со включенными сертификатами LetsEncript перед сервисом gostore.

Максимальный размер значения ключа не может быть более 10 МБ (но можно настроить в коде).

Пределы использования

Примерные лимиты эффективности хранилища находится в следующих пределах

  • эффективный размер 20 ТБ (допустимо до 60 ТБ);
  • эффективное количество ключей 10Г (допустимо 20ТБ).

Необходимо помнить, что в любом случае физические параметры оперативной памяти и дисковой подсистемы сильно ограничены.

Планируется проектирование хранилища для работы в составе нескольких репликаций и множественное шардирование.

Команды сборки

make         # Сборка сервиса для прода
make build   # -//-
make dev.run # Сборка с и запуск  детектором гонок для отладки
make mod     # Обновление зависимостей