The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]

Выпуск распределенной системы хранения конфигурации etcd 2.0

30.01.2015 21:58

Проект CoreOS, развивающий основанное на идеях контейнерной изоляции серверное окружение, представил первый стабильный релиз проекта etcd, в рамках которого развивается высоконадёжное распределённое хранилище параметров конфигурации, задаваемых в форме ключ/значение. Код etcd написан на языке Go и распространяется под лицензией Apache.

Etcd позволяет организовать единое хранилище конфигурации для группы серверов, которое реплицируются на все узлы и поддерживается в синхронизированном состоянии с использованием протокола Raft. Наличие копии данных на всех хостах позволяет исключить потерю конфигурации при выходе из строя отдельного узла. Основным назначением etcd является предоставление унифицированного механизма хранения конфигурации и информации о работающих сервисах для изолированных контейнеров с типовой начинкой. В etcd также могут сохраняться временные данные, для которых предусмотрена возможность определения времени жизни записи. Отдельно развивается надстройка etcd-lock для обеспечения блокировки записей.

Для доступа к конфигурации предоставляется простой интерфейс, основанный на использовании HTTP и JSON. Для доступа к базе можно использовать утилиту etcdctl или любой http-клиент, такой как сurl или wget (например, для запроса ключа можно использовать команду "curl -L http://127.0.0.1:4001/v2/keys/mykey"). Для наглядного управления базой данных и внесения изменений в ручном режиме предусмотрен web-интерфейс etcd-browser. Аутентификация выполняется на основе SSL-ключей. При помощи FUSE-модуля etcd-fs возможен доступ к хранилищу в виде файловой системы.

Основные новшества выпуска etcd 2.0:

  • Внутренний протокол улучшен в направлении защиты от случайной неправильной настройки;
  • Добавлена команда "etcdctl backup", предназначенная для создания резервной копии хранилища;
  • Добавлены команды "etcdctl member list/add/remove" для упрощения управления кластером etcd;
  • Повышена надёжность хранения данных на диске. Добавлен контроль целостности по контрольным суммам и хранение в форме дополняемого лога.
  • Улучшен алгоритм достижения консенсуса при определении актуального состояния данных после выхода из строя отдельных узлов хранилища;
  • Ускорено проведение тестирования состояния узлов;
  • Задействованы официально закреплённые организацией IANA за etcd номера портов TCP 2379/2380.


  1. Главная ссылка к новости (https://coreos.com/blog/etcd-2...)
  2. OpenNews: Проект CoreOS рассматривает возможность ухода от использования Btrfs
  3. OpenNews: Представлены Ubuntu Core и Snappy, предоставляющие новый метод поставки приложений
  4. OpenNews: Проект CoreOS представил Rocket, конкурирующий с Docker инструментарий управления контейнерами
  5. OpenNews: Первый стабильный выпуск серверной Linux-системы CoreOS
  6. OpenNews: Red Hat представил Atomic, концепцию модульной ОС на базе изолированных контейнеров
Лицензия: CC-BY
Тип: Программы
Короткая ссылка: https://opennet.ru/41575-etcd
Ключевые слова: etcd
При перепечатке указание ссылки на opennet.ru обязательно
Обсуждение (28) Ajax | 1 уровень | Линейный | +/- | Раскрыть всё | RSS
  • 1.1, Аноним (-), 23:10, 30/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • –7 +/
    Круто!

    Интересно, а виндовый реестр умеет такое (распределенность)?

     
     
  • 2.18, tensor (?), 19:28, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Active Directory? И то, с натяжкой.
     
     
  • 3.19, nnoname (?), 20:00, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • –7 +/
    умеет с превосходством, имхо конечно.
     
  • 3.22, Аноним (-), 22:39, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +4 +/
    Ад - аналог не etcd, а x500 (openldap, 389ds, opends, apacheds и т.д.). Это разные области и один другим не заменишь.
     

  • 1.3, Crazy Alex (ok), 23:43, 30/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    Что-то я из новости не понял, какие у этой штуки отличительные особенности и почему для этой цели использовать какую-нибудь готовую распределённую key-value хранилку. Уж этого добра наплодили массу.
     
     
  • 2.13, cmp (ok), 12:30, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +/
    Потому что адепты go, ждем когда запилят его поддержку в ядре))
     
     
  • 3.14, Аноним (-), 13:42, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +/
    ...на Go ;)
     
  • 2.23, Аноним (-), 22:45, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +/
    > Что-то я из новости не понял, какие у этой штуки отличительные особенности
    > и почему для этой цели использовать какую-нибудь готовую распределённую key-value хранилку.
    > Уж этого добра наплодили массу.

    Если кратко, то etcd и ему подобные легковеснее и удобнее для эксплуатации, но при этом не подходят для хранения огромных объемов инфы. Т.е. самое то для хранения настроек (единицы -десятки мегабайт) в больших часто меняющихся гридах (сотни и тысячи узлов).

     
     
  • 3.25, Crazy Alex (ok), 00:13, 01/02/2015 [^] [^^] [^^^] [ответить]  
  • –2 +/
    Когда у тебя сотни и тысячи узлов - какая, на фиг,легковесность? Берём что-нибудь вроде Project Voldemort - да и всё.
     
  • 3.33, Аноним (-), 12:57, 09/06/2016 [^] [^^] [^^^] [ответить]  
  • +/
    А давно известный Network Information Services (NIS) для этого плохо подходит? http://www.freebsd.org/doc/ru_RU.KOI8-R/books/handbook/network-nis.html
     
  • 2.29, анон (?), 22:59, 01/02/2015 [^] [^^] [^^^] [ответить]  
  • +/
    А перечислите весь список, пжалуста? Их не так много на самом деле. Точнее даже напротив, примерно 0.7: etcd не может в acl, consul писали какие-то упорыши, да kv там дополнительный, а не основной функционал. Кто ещё? Зукипер скорее мертв.
     

  • 1.5, Аноним (-), 00:15, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • +2 +/
    Что у нас по плану идёт после контрейнеризации?
     
     
  • 2.12, Andrey Mitrofanov (?), 10:49, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +4 +/
    > Что у нас по плану идёт после контрейнеризации?

    Монетизация следующего баз-ворда, Пинки.

     

  • 1.6, Аноним (-), 00:21, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • –8 +/
    Мммда... Писать данную штуку минут 20 ... Даже на новость не тянет.
     
     
  • 2.7, Нанобот (ok), 00:39, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +4 +/
    там полтора мегабайта кода. чтобы написать такое за 20 минут, нужно нажимать кнопики со скоростью ~1300 символов в секунду.
     
     
  • 3.16, Аноним (-), 17:12, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • –1 +/
    > чтобы написать такое за 20 минут, нужно нажимать кнопики со скоростью ~1300 символов в секунду.

    Откойте для себя мир копипаста, сэр.

    Искренне ваш, Кэп

     
  • 2.31, Led (ok), 21:21, 03/06/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > Писать данную штуку минут 20

    За 20 минут можно не только пописать, но и покакать. А ну освобождай горшок - там полгуппы в очереди!

     

  • 1.9, ano (??), 08:31, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • –1 +/
    Да ну, просто хранилка же. Я поначалу возбудился, думал, можно /etc примонтировать и сделать распределёнку конфигурации.
     
     
  • 2.10, Аноним (-), 09:13, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +3 +/
    Тебе мало AD яйца надавил?
     
     
  • 3.26, gaga (ok), 11:25, 01/02/2015 [^] [^^] [^^^] [ответить]  
  • –1 +/
    а что не так с ад? по-моему, очень удобная штука, особенно по сравнению с openLdap.
     
     
  • 4.32, Led (ok), 21:23, 03/06/2016 [^] [^^] [^^^] [ответить]  
  • +/
    Твое вендовозное "мнение" никого не интересует.
     
  • 2.27, epicfile (?), 15:20, 01/02/2015 [^] [^^] [^^^] [ответить]  
  • +/
    Вообще-то можно, см. https://github.com/xetorthio/etcd-fs
    Но вряд ли это решение можно назвать production ready
     

  • 1.11, Аноним (-), 09:28, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    > Поддерживается в синхронизированном состоянии с использованием протокола Raft.
    > NOTE: This project is unmaintained. If you are using goraft in a project and want to carry the project forward please file an issue with your ideas and intentions. The original project authors have created new raft implementations now used in etcd and InfluxDB.

    ...при этом ссылка "new raft implementations" выдаёт 404.

    Глобально, надёжно.

     
  • 1.17, Аноним (-), 19:26, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • –1 +/
    д3билам выше поясняю: etcd - аналог ZooKeeper
     
     
  • 2.21, Аноним 2.0 (?), 22:21, 31/01/2015 [^] [^^] [^^^] [ответить]  
  • +/
    *Отдельно* развивается надстройка etcd-lock для обеспечения блокировки записей.
     
     
  • 3.24, Crazy Alex (ok), 00:11, 01/02/2015 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Чудесно, оно ещё и аналог вполне живого и матёрого проекта.
     

  • 1.20, Аноним 2.0 (?), 22:20, 31/01/2015 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    *Отдельно* развивается надстройка etcd-lock для обеспечения блокировки записей.
     
     
  • 2.28, Аноним (-), 22:39, 01/02/2015 [^] [^^] [^^^] [ответить]  
  • +/
    > *Отдельно* развивается надстройка etcd-lock для обеспечения блокировки записей.

    Осталось поженить это с системды. :)))))))

     

     Добавить комментарий
    Имя:
    E-Mail:
    Текст:



    Спонсоры:
    Inferno Solutions
    Hosting by Hoster.ru
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2020 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру