OpenIO - OpenIO

OpenIO
ПромышленностьИнформационные технологии, Хранилище данных, Обработка данных
Основан2015
Штаб-квартира
Франция
ВладелецOVH
Интернет сайтwww.openio.io

OpenIO была основана в 2015 году Лораном Денелем (Исполнительный директор ), Жан-Франсуа Смигельски (Технический директор ) и пять других соучредителей, чтобы предложить объектное хранилище решение[модное слово ] для построения гипер-масштабируемый ИТ-инфраструктуры для широкого спектра применений.[1] Они использовали программное обеспечение с открытым исходным кодом, разработанный с 2006 года, на основе сеточная технология который обеспечивает динамическое поведение и поддерживает разнородное оборудование.[2] В октябре 2017 года OpenIO завершил раунд финансирования в размере 5 миллионов долларов.[3] В июле 2020 года OpenIO был приобретен OVH.[4]

Товар

OpenIO - это программно определяемый объектное хранилище решение[модное слово ] что поддерживает S3 и может быть развернут на территории, облачный или на край, на любом миксе оборудования. С самого начала он был разработан для обеспечения производительности и рентабельности в любом масштабе.[5], и он был оптимизирован для Большое количество данных, HPC и AI.[6]

OpenIO хранит объекты внутри в виде плоской структуры в широко распределенном каталоге с косвенные указания, это позволяет пути запроса данных быть независимым от количества узлов и не влиять на производительность из-за увеличения емкости. Серверы массово организованы в виде сетки узлов. распределен, где каждый узел участвует в службах каталогов и хранилищ, что гарантирует отсутствие единая точка отказа и что новые узлы автоматически обнаруживаются и сразу становятся доступными без необходимости повторной балансировки данных.[7]

Программное обеспечение построено на основе Сознательная сетка, технология, которая обеспечивает оптимальное размещение данных на основе показателей в реальном времени и позволяет добавлять или удалять устройства хранения с автоматической производительностью и оптимизация воздействия нагрузки.[8][9] Для защиты данных OpenIO имеет синхронный и асинхронный репликация с несколькими копиями и стирающее кодирование реализация на основе Рид-Соломон которые могут быть развернуты в одном центре обработки данных или географически распределены или растянуты кластеры.[10][11]

В программе есть GridForApps функция, которая улавливает все события, происходящие в кластере, и может передать их в куча или приложениям, работающим на узлах OpenIO. Это позволяет событийный вычисления непосредственно в инфраструктуре хранения.[12][13]

OpenIO имеет собственный объект API и SDK за Python, C и Ява, он объединяет HTTP REST / API и имеет сильную совместимость с Amazon S3 API и OpenStack Swift API.[7] Компания также предлагает проприетарный Файловая система коннектор для доступа к данным, хранящимся в хранилище объектов OpenIO, с помощью методов доступа к файлам: он основан на ПРЕДОХРАНИТЕЛЬ и представляет POSIX Файловая система, которую можно использовать в локальных сетях через NFS, SMB и FTP.[14]

OpenIO совместим с x86 и ARMv7 /ARMv8 серверы работают Linux[15] и имеет низкие требования к оборудованию[16], его также можно установить на Малиновый писающий[17][18] и на накопителях со встроенным сервером.[19][20][21]

Открытый исходный код доступен на Github и это лицензировано под AGPL3 для серверного кода и LGPL3 для клиентского кода.

Спектакль

OpenIO утверждал, что достиг скорости записи 1,372 Тбит / с (171 ГБ / с) на кластере из 350 физических машин.[22] Тестовый сценарий, проводимый в производственных условиях со стандартным оборудованием (стандартные серверы со скоростью 7200 об / мин. Жесткие диски ), заключалась в резервном копировании 38 PB Hadoop datalake с помощью команды DistCp.[23] Такой уровень производительности, по мнению аналитиков, очень высок.[24], приход нового поколения объектное хранилище технологии, ориентированные на высокую производительность и гипермасштабируемость.

Смотрите также

Рекомендации

  1. ^ «Обзор объектного хранилища OpenIO». OpenIO.
  2. ^ Николас, Филипп (15.07.2016). "Мальчики-историки: хранилище предметов ... с самого начала". Реестр.
  3. ^ Дилле, Ромен (2017-10-24). «OpenIO собирает 5 миллионов долларов для создания собственного Amazon S3 на любом устройстве хранения». TechCrunch.
  4. ^ «С приобретением OpenIO амбиции OVHcloud заключаются в создании лучшего предложения объектного хранилища на рынке». OVHcloud. 2020-07-22.
  5. ^ Меллор, Крис (05.12.2015). «Цель Openio - открыть пространство для хранения объектов». Реестр.
  6. ^ «OpenIO | Высокопроизводительное объектное хранилище для больших данных и искусственного интеллекта». OpenIO.
  7. ^ а б «Основные концепции OpenIO». Документация OpenIO.
  8. ^ «Объектное хранилище OpenIO для больших данных». OpenIO.
  9. ^ «Почему мы разработали объектный магазин с сознанием». Блог OpenIO. 2017-07-18.
  10. ^ «Функции управления данными OpenIO». Документация OpenIO.
  11. ^ «Политики хранения OpenIO». Документация OpenIO.
  12. ^ Делапорт, Гийом (17.05.2017). «Простое индексирование метаданных через Grid для приложений». Блог OpenIO.
  13. ^ Делапорте, Гийом (07.06.2017). «Обнаруживайте закономерности на изображениях в большом масштабе с помощью Tensorflow и OpenIO GridForApps». Блог OpenIO.
  14. ^ "Архитектура коннектора файловой системы OpenIO (OIO-FS)". Документация OpenIO.
  15. ^ «Поддерживаемые OpenIO дистрибутивы Linux». Документация OpenIO.
  16. ^ «Руководство по определению размеров OpenIO». Документация OpenIO.
  17. ^ Таунсенд, Кейт (14 марта 2017 г.). «Raspberry Pi в центре обработки данных: уникальный вариант для хранения объектов и периферийных вычислений». TechRepublic.
  18. ^ «OpenIO на Raspberry Pi». Документация OpenIO.
  19. ^ Кранц, Гарри (2017-02-06). «При запуске объектного хранилища с открытым исходным кодом OpenIO добавляет оборудование». SearchStorage.
  20. ^ Меллор, Крис (2016-09-21). «OpenIO хочет превратить вашу крутящуюся ржавчину в узлы хранения объектов». Реестр.
  21. ^ Меллор, Крис (2017-10-03). «Это реальная жизнь? Это просто фантастика? Самообрабатывающиеся флешки, нам понадобится больше емкости». Реестр.
  22. ^ Меллор, Крис (2019-10-15). «OpenIO« решает »проблему с гипермасштабируемостью объектного хранилища». Блоки и файлы.
  23. ^ "Terabit Challenge | OpenIO Object Storage". OpenIO.
  24. ^ Энрико, Синьоретти (2019-11-08). «S3, доступ к файлам и высокая производительность… это не ваше старое хранилище объектов». Гигаом.