Ceph: Разработка и реализация масштабируемых систем хранения

Если вы разработчик, системный администратор, профессионал в области систем хранения или инженер облачных решений, который желает разобраться с тем как оснастить некий кластер Ceph, данный Путь изучения идеально вам подойдёт. Он поможет вам изучить те способы, при помощи которых функционал Ceph поможет вам решить ваши проблемы хранения данных. Предпочтительным будет наличие базовых знаний по системам хранения и GNU/Linux.

Глава 1 {CC2e~1}. Ceph: введение и за его пределами охватывает некое введение в Ceph, постепенно подводя к RAID и его проблемам, а также рассматривает обзор архитектуры Ceph. Наконец, мы также проходим вопросы установки и настройки Ceph. {Прим. пер.: глава почти полностью дублирует CC2e~1, введу отсутствия её перевода у нас отсылаем к CC-1, а также LC2e-1, LC2e-2, LC2e-3 }

Глава 2 {CC2e~2}. Работа с блочными устройствами Ceph, покрывает введение в Блочные устройства Ceph и предоставление блочных устройств Ceph. Мы также рассмотрим моментальные снимки и клоны RBD, а также реализацию решений восстановления после сбоев с зеркалированием RBD. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~2, так как у нас нет её перевода, отсылаем к СC-2, а также LC2e-9-2 }

Глава 3 {CC2e~3}. Работа с Ceph и OpenStack, охватывает настройку клиентов Openstack для применения ими Ceph, а также варианты хранения для Openstack с применением cinder, glance и nova. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~3, так как у нас нет её перевода, отсылаем к LC2e-10 }

Глава 4 {CC2e~4}. Работа с хранилищем объектов Ceph, занята глубоким погружением в хранилище объектов Ceph, в том числе установку и настройку RGW, доступ к S3 и OpenStack Swift . Наконец, мы установим RGW при помощи подключаемого модуля Hadoop S3A. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~4, так как у нас нет её перевода, отсылаем к СC-3, а также LC2e-9-4 }

Глава 5 {CC2e~5}. Работа с объектным хранилищем Ceph множества сайтов v2, поможет вам проникнуть глубже в новый Multi-site v2 при настройке двух кластеров для зеркалирования объектов между ними и некого решения восстановления объекта после сбоя. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~5, так как у нас нет её перевода, отсылаем к MC-11, СC-3, а также LC2e-9-4, хотя, возможно, стоит перевести эту главу.}

Глава 6 {CC2e~6}. Работа с файловой системой Ceph, предоставляет некое введение в CephFS, развёртывание MDS и CephFS посредством kerenel, FUSE и NFS-Ganesha. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~6, так как у нас нет её перевода, отсылаем к СC-3, а также LC2e-9-3 }

Глава 7 {CC2e~8}. Работа в кластере Ceph и управление им рассматривает управление службой Ceph при помощи systemd, а также вертикальное увеличение и уменьшение масштаба кластера Ceph. Эта глава также содержит инструкции по замене отказавшего диска и обновлению Ceph. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~8, так как у нас нет её перевода, отсылаем к СC-5, СC-6, а также LC2e-6 и MC-11. }

Глава 8 {CC2e~9}. Под капотом Ceph изучает карту CRUSH Ceph, внутреннее понимание установки соответствия CRUSH, а также настройки CRUSH с последующей аутентификацией и авторизацией Ceph. Эта глава также охватывает динамическое управление кластером и понимание PG Ceph. Наконец, мы создаём те особенности, которые требуют специальных аппаратных средств. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~9, так как у нас нет её перевода, отсылаем к СC-7, а также LC2e-8, LC2e-5 и MC-10. }

Глава 9 {CC2e~11}. Менеджер виртуального хранения Ceph обсуждает VSM (Virtual Storage Manager), охватывая введение в него и его архитектуру. Мы также проходим развёртывание VSM, а далее само создание кластера Ceph с применением VSM для управления этим. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~11, так как у нас нет её перевода, отсылаем к СC-9. }

Глава 10 {CC2e~12}. Ещё о Ceph охватывает эталонное тестирование Ceph, поиск неисправностей Ceph при помощи сокета администратора, API и инструментарий ceph-objectstore. Данная глава также рассматривает развёртывание Ceph при помощи Ansible и профилирование памяти Ceph. Более того, она покрывает проверку жизнеспособности вашего кластера Ceph при помощи Ceph Medic и новую экспериментальную основу хранения BlueStore Ceph. {Прим. пер.: глава на первый взгляд полностью дублирует CC2e~12, так как у нас нет её перевода, отсылаем к СC-10, LC2e-11, а также MC-9 и MC-10. }

Глава 11 {MC-2}. Развёртывание Ceph это серьёзная пошаговая инструкция по настройке кластера Ceph. В этой главе описывается инструментарий ceph-deploy для проверки и прохода с покрытием Ansible. Также содержится раздел по управлению изменениями, в котором поясняется насколько это существенно для стабильности больших кластеров. {Прим. пер.: глава на первый взгляд полностью дублирует MC-2. }

Глава 12 {MC-3}. BlueStore объясняет как Ceph должен иметь возможности предоставления атомарных операций для своих данных и метаданных и как было построено файловое хранилище для предоставления таких гарантий поверх стандартных файловых систем. Мы также обсуждаем имеющиеся при таком подходе проблемы. Затем эта глава делает введение в BlueStore и объясняет как он работает и те проблемы, которые он разрешает. Это также содержит его компоненты и то, как они взаимодействуют с различными типами устройств хранения. У нас также имеется некий обхор хранилищ ключ- значение, включая RocksDB, которое применяется в BlueStore. Будут обсуждены некоторые из имеющихся настроек BlueStore и то, как они взаимодействуют с различными аппаратными конфигурациями. {Прим. пер.: глава на первый взгляд полностью дублирует MC-3. }

Глава 13 {MC-4}. Удаляющее кодирование для лучшей эффективности хранения обсуждает как работает удаляющее кодирование и как оно реализовано в Ceph, в том числе пояснения параметров пула RADOS профилей удаляющего кодирования. Ссылки на изменения в редакции Kraken высвечивают возможность перезаписи добавлением в коней в пулах с удаляющим кодированием. Также будут даны пояснения по вопросам производительности. Они будут содержать ссылки на BlueStore, поскольку оно требуется для достижения достаточной производительности. Наконец, у нас имеется пошаговые инструкции по реальной настройке удаляющего кодирования в некотором пуле, которые можно применять в качестве механического справочника для системных администраторов. {Прим. пер.: глава на первый взгляд полностью дублирует MC-4. }

Глава 14 {MC-5}. Разработка при помощи librados объясняет как применяется Librados для построения приложений, которые могут напрямую взаимодействовать с неким кластером Ceph. Она затем переходит к некоторым различным примерам использования Librados в различных языках программирования для того чтобы снабдить вас основным пониманием того как это можно применять, причём включая атомарные транзакции. {Прим. пер.: глава на первый взгляд полностью дублирует MC-5. }

Глава 15 {MC-6}. Распределённые вычисления при помощи классов RADOS Ceph объясняет основные преимущества перемещения обработки непосредственно в OSD для действенного осуществления распределённых вычислений. Затем она охватывает вопросы того как начать работу с классами RADOS путём построения образцов на Lua. Затем она обсуждает как встроить ваш собственный класс C++ RADOS имеющееся дерево исходного кода Ceph и провести эталонное тестирование производительности обработки в своём клиенте противопоставляя её вычислениям в OSD. {Прим. пер.: глава на первый взгляд полностью дублирует MC-6. }

Глава 16 {MC-8}. Множество уровней в Ceph поясняет как работает в Ceph множество уровней RADOS, где его следует применять и его ловушки. Она предпринимает пошаговую настройку множества уровней кластера Ceph и наконец рассматривает варианты тоной настройки для извлечения наилучшей производительности для множества уровней.Некий пример использования Graphite продемонстрирует ценность такой способности манипуляции перехватываемыми данными для предоставления выразительного вывода в виде графиков. {Прим. пер.: глава на первый взгляд полностью дублирует MC-8. }

Глава 17 {MC-10}. Поиск неисправностей поясняет как несмотря на значительную автономность Ceph в заботе о самой себе и восстановлении после сбоев, в некоторых случаях требуется вмешательство персонала. Мы взглянем на распространённые ошибки и сценарии отказов, а также на то как возвращать обратно Ceph в полностью жизнеспособное состояние, отыскивая в ней неисправности. {Прим. пер.: глава на первый взгляд полностью дублирует MC-10. }

Глава 18 {MC-11}. Восстановление после сбоев описывает такие ситуации, при которых Ceph пребывает в том состоянии, когда присутствует полная утрата обслуживания или возникла утрата данных. Для восстановления доступа к вашему кластеру и, будем надеяться, восстановления данных требуются менее известные технические приёмы. Эта глава вложит вам в руки такие знания чтобы попытаться провести восстановление в подобных ситуациях. {Прим. пер.: глава на первый взгляд полностью дублирует MC-11. }

Глава 19 {LC2e-6}. Работа и сопровождение проводит глубокую и широкую инвентаризацию повседневных действий. Мы рассматриваем управление топологиями, службами и установками настроек Ceph, помимо её сопровождения и отладки. {Прим. пер.: глава на первый взгляд полностью дублирует LC2e-6. }

Глава 20 {LC2e-7}. Мониторинг Ceph выразительная коллекция команд, практических приёмов и программного обеспечения инструментальной панели в помощь удержанию на глазу жизнеспособности кластеров Ceph. {Прим. пер.: глава на первый взгляд полностью дублирует LC2e-7. }

Глава 21 {LC2e-11}. Настройка производительности и надёжности предоставляет некую коллекцию установок Ceph, сетевых сред, файловых систем и лежащих в основе операционных систем для оптимизации производительности и стабильности кластера. Также изучается эталонное тестирование производительности кластера. {Прим. пер.: глава на первый взгляд полностью дублирует LC2e-11. }

Данная книга требует чтобы у вас были достаточные ресурсы для запуска среды лаборатории Ceph целиком. Тот минимум оборудования или виртуальной машины, который требуется таков:

Для следования всем инструкциям в главах требуются различные компоненты программного обеспечения:

Вы можете выгрузить все файлы примеров кода для данной книги из своей учётной записи www.packtpub.com. Если вы приобрели эту книгу в ином месте, будьте добры, пройдите в www.packtpub.com/support и зарегистрируйтесь чтобы иметь эти файлы высланные непосредственно вам по электронной почте.

Вы можете выгрузить все файлы кодов пройдя следующие шаги:

После того, как необходимые файлы выгружены, убедитесь что вы раззиповали или раскрыли их в нужную папку при помощи самой последней версии:

Пакет кода также размещён на GitHub по адресу https://github.com/PacktPublishing/Ceph-Designing-and-Implementing-Scalable-Storage-Systems. Также у нас имеются и другие пакеты кода из нашего богатого каталога книг и видео, доступные по адресу https://github.com/PacktPublishing/. Следите за изменениями!

Обращения наших читателей всегда приветствуются.

Обычная обратная связь: Пошлите электронное письмо на адрес feedback@packtpub.com с упоминанием заголовка книги в теме вашего сообщения. Если у вас имеются вопросы относительно любых сторон данной книги, обратитесь, пожалуйста, по адресу questions@packtpub.com.

Ошибки: Хотя мы и предприняли все меры чтобы гарантировать точность содержимого, ошибки могут иметь место. Если вы обнаружили ошибку в данной книге, мы будем вам признательны если вы сообщите нам о ней. Посетите, пожалуйста, www.packtpub.com/submit-errata, выбрав вашу книгу, кликнув на ссылку Errata Submission Form, и заполнив подробности найденной вами ошибки.

Пиратство: Если вы столкнётесь с какой-либо незаконной копией наших работ в любой форме в Интернете, пожалуйста, предоставьте нам сразу адрес местонахождения или имя веб-сайта, чтобы мы могли принять меры. Пожалуйста, обратитесь по адресу copyright@packtpub.com со ссылкой на материалы содержащие признаки нарушения авторских прав. {Прим. пер.: Согласно закону об авторском праве РФ, авторские права на перевод принадлежат авторам этого перевода. Данным переводом, по нашему мнению, мы служим популяризации основных стратегических направлений развития тем Packt. В случае наличия конструктивных предложений, готовы к тесному сотрудничеству.}.

Если вы желаете стать нашим автором: Если у вас существует тема, в которой у вас имеется опыт и вы заинтересованы либо в написании, либо во вкладе в книгу, обратитесь к руководству по адресу authors.packtpub.com.

Оставляйте, пожалуйста, отзывы. Если вы прочли и воспользовались данной книгой, почему бы вам не оставить отзыв на том сайте, на котором вы её приобрели? Потенциальные читатели затем смогут увидеть и применить ваше беспристрастное суждение чтобы принять решение о приобретении, мы в Packt сможем понять что вы думаете о нашем продукте, а наши авторы увидят обратную связь относительно своей книги. Мы заранее благодарим вас!

Для получения дополнительной информации о Packt посетите, пожалуйста packtpub.com.