forum.opennet.ru

"Первый релиз wZD 1.0.0, сервера компактного хранения мелких ..."

Форум Разговоры, обсуждение новостей
Версия для распечатки	Пред. тема \| След. тема

Исходное сообщение

[ Отслеживать ]

Заметили полезную информацию ? Пожалуйста добавьте в FAQ на WIKI.

. "Первый релиз wZD 1.0.0, сервера компактного хранения мелких ..."	+/–
Сообщение от funny.falcon (?), 20-Янв-20, 19:13
BBolt - это mmap-ed хранилище. В один тред не будет ни какой конкурентности при чтении холодных данных. Мало того, Go runtime не способен отреагировать на затупивший page fault, как он мог бы среагировать на затупивший syscall. Потому, для хорошей производительности ещё и придется вручную GOMAXPROCS увеличивать.
Ответить \| Правка \| Наверх \| Cообщить модератору

Оглавление

Первый релиз wZD 1.0.0, сервера компактного хранения мелких ..., opennews, 19-Янв-20, 19:25 [смотреть все]

А задумка-то у автора не плохая, взял и решил проблему кластерных фс как 2х2 Ме, raver, 19-Янв-20, 21:53 (8) //
- Зачем клиенту делать то, что из коробки делает HTTP 2 в канале и сама файловая с, xm, 19-Янв-20, 22:31 (9) //
  - Не в защите транспортного уровня дело, а чтобы предоставить такую возможность, х, syslinux, 19-Янв-20, 23:49 (10) //
    - Шифровать это один вопрос, а сжатие - другой По поводу шифрования, если это хран, xm, 20-Янв-20, 00:04 (11)
      - А что сжатие - все тоже самое - сжали у себя конкретный файл или значение и отпр, syslinux, 20-Янв-20, 00:13 (12)
        
        Нет, всё не то же самое, потому что сжимать сжатое смысла, как правило, нет, как, xm, 20-Янв-20, 00:16 (14)
        
        а Вы посылаете текстовый файл 100KB , он запишется как есть, тип сжатия 0 посыл, syslinux, 20-Янв-20, 00:29 (15)
        
        Беда нашего образования в том, что писать оно учит, а вот читать и, тем более, п, xm, 20-Янв-20, 00:38 (17)
        
        Не все фс умеют сжимать Это опция, а не обязаловка Кому надо, будет использовать, syslinux, 20-Янв-20, 00:43 (18)
        
        Не совсем понятно зачем серверу знать про компрессию если он всегда хранит файл , Sokoloff, 20-Янв-20, 15:14 (29)
        
        gt оверквотинг удален Сделано будет просто для унификации как и с типом шифров, syslinux, 21-Янв-20, 15:32 (38)
      - Так так оно и есть сейчас, за исключением того что хранилка будет получать от кл, syslinux, 20-Янв-20, 00:15 (13)
Попробуйте, там суть в том, что в каждой папке появляется свой bolt архив Нет с, syslinux, 19-Янв-20, 20:14 (3)
Можно в него какой-нибудь архив freedb запихнуть Там файлы меньше сектора на ди, Аноним, 19-Янв-20, 19:25 (1)
Любопытно, а зачем это здесь Тут к месту была бы асинхронность, kai3341, 19-Янв-20, 20:02 (2) //
- Оно на Go, там асинхронность то есть В сам болт архив все равно писать можно то, syslinux, 19-Янв-20, 20:18 (4)
- В зависимости от используемых стратегий синхронизации потоков, такой код априори, Аноним, 19-Янв-20, 20:26 (6) //
  - Практически описали рантайм Go Правда, они решили сосредоточиться на зеленых п, funny.falcon, 20-Янв-20, 19:14 (34)
- BBolt - это mmap-ed хранилище В один тред не будет ни какой конкурентности при , funny.falcon, 20-Янв-20, 19:13 (33) //
  - GOMAXPROCS автоматом ставится по количеству CPU начиная с версии Go 1 5 Как бы,, syslinux, 21-Янв-20, 17:37 (47)
в общем, понятно - у них лопнула moosefs совершенно не предназначенная для тако, Аноним, 19-Янв-20, 20:20 (5) //
- Надо потестить, судя по опциям там таймауты то есть чтобы наружу ставить, но там, ala, 19-Янв-20, 20:44 (7)
Использую для аналогичного sea weedfs, уже несколько лет работает в проде не б, n80, 20-Янв-20, 00:33 (16) //
- И как оно Мы в свое время побоялись её на прод пускать С какими проблемами при, Аноним, 20-Янв-20, 13:33 (26) //
  - А чего бояться, тестировать надо и, пожалуй, хотя бы ознакомиться с кодом, благ, n80, 20-Янв-20, 15:02 (28) //
    - Спасибо На днях потестирую , Аноним, 20-Янв-20, 18:38 (32)
Я, может, чего-то не понимаю, но что мешает использовать в таком же режиме loop-, Аноним, 20-Янв-20, 09:37 (19) //
- то что ты, наверное, не хочешь создавать стопиццот loop-файлов вручную и обеспеч, Аноним, 20-Янв-20, 09:46 (20) //
  - Не всегда базовую технологию можно выбирать Так что это костылик, позволяющий жи, Александр Литягин, 20-Янв-20, 10:16 (21) //
    - Ну насчет прям костылика я с вами не очень согласен, если вы читали todo, то там, syslinux, 20-Янв-20, 11:39 (24)
- Я что-то не понимаю - что мешает просто использовать ФС с tail packing и предост, Аноним, 20-Янв-20, 11:38 (23) //
  - Это не ФС для начала, сравнение не корректное ФС не ограничивается одним или па, syslinux, 20-Янв-20, 11:42 (25)
  - вероятно - то что раз люди вынуждены использовать moose - у них уже давным-давно, пох., 21-Янв-20, 15:41 (39)
- Для некоторых задач у ФС слишком большие по сравнению с такими специализированн, n80, 20-Янв-20, 15:14 (30) //
  - А, и чуть не забыл у обычных ФС нет встроенной репликации между серверами Можн, n80, 20-Янв-20, 15:16 (31)
  - Так всякие raw-разделы ещё в OracleDB были Просто мне кажется, что если ты упира, Аноним, 20-Янв-20, 22:40 (35) //
    - С OracleDB почти не имел дела, но сразу два момента 1 тут всё-таки про свободно, n80, 21-Янв-20, 03:00 (36)
      - Куда положить 250 млн картинок объемом 80 TB просто как пример В какую еще базу, syslinux, 21-Янв-20, 12:00 (37)
        
        в оракловую, например Не вижу особых проблем, кроме цены решения Такая картинка, пох., 21-Янв-20, 15:45 (40)
        
        В wZD 32 байта, оно хранится прямо в файле который заливается, память не исполь, syslinux, 21-Янв-20, 16:29 (42)
        
        нет, мне было интересно именно для moose до переноса всего в архивы - чтобы пони, пох., 21-Янв-20, 16:49 (44)
        
        Да, все верно Изначально был, потом убрал, чтобы он диски SSD мне не убивал Не , syslinux, 21-Янв-20, 17:12 (45)
        
        gt оверквотинг удален , syslinux, 21-Янв-20, 17:20 (46)
        
        Ну, для меня решение из этой новости или всё тот же SeaWeedFS 8212 тоже в опр, n80, 21-Янв-20, 16:22 (41)
        
        Принял Спасибо за уточнение как вы делаете Значит предусмотрю изменение TTL бе, syslinux, 21-Янв-20, 16:36 (43)
Это для тех у кого ФС до сих пор не умеет в tail packing , Аноним, 20-Янв-20, 11:37 (22) //
- Наверное, это для тех, кто в курсе минимального размера фрагмента суб блока и р, анонн, 20-Янв-20, 13:48 (27)
Завез я уже поддержку HTTPS, Keepalive, авторизацию per vhost, включение отключе, syslinux, 23-Янв-20, 07:45 (48)
очень похоже на Grafana Loki Так же boltdb в качетсве хранения данных, только т, hes, 15-Янв-21, 17:33 (51)

Форумы | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру