Seminar CEPH Aufbau

CEPH-Grundlagen

• RBD, RADOS-Gateway und CephFS
• CEPH in den gängigen Linux-Distributionen, die optimale Ceph-Plattform
• OSD (Object Storage Device), MDS (Metadata Server) und MON (der Ceph-Monitor) im Überblick
• Ceph-Kernel-Module, automatisches Laden

CEPH-Einrichtung 

• Hardware-Empfehlungen und Design-Strategien
• Benötigte Pakete / Repositories, Prioritäten für Ceph- und OS-Repos
• Zeitsynchro: NTPD in realen und virtuellen Clusterknoten 
• Installation der Pakete, Einrichtung eines 3-Knoten-Ceph-Clusters mit CEPH
• Automatisiertes Deployment über mehrere Nodes mit ceph-deploy, Pre-Flight-Checks

Administration, Systemintegration und Werkzeuge 

• CEPH-Dämonen: ceph-osd, ceph-mds und ceph-mon
• systemd-Integration für Auto-Respawning: Best Practices und zukünftige Strategien
• CEPH-Kommandozeilen-Tools: ceph, rbd, rados - welches Tool für welchen Zweck
• Überwachung des Clusterzustands und des Status von OSD, MDS und MONs
• Erweiterte Verwaltung von Pools und Images, Snapshot-Management, Klonen, Best Practices
• Verwalten von ACLs und Schlüsselringen
• Native Client-Mounts
• Datenreplikation und Failover, Ändern des Replikationslevels
• Fehlersuche: Wiederherstellung von OSD-, MDS-, MON- oder PG-Ausfällen
• Speichererweiterung: CEPH-Knoten online hinzufügen 
• Selektives Hinzufügen von weiteren OSDs, MDSs und MONs

Erweiterte Administration und Konzepte

• Die Dispatcher: PG (Placement Groups) in Theorie und Praxis, Berechnung der optimalen Anzahl von PGs 
• Manipulation von Crush-Maps über CLI
• Crushmaps im Detail: Buckets, Tunables, Rulesets und mehr
• Crush-Maps für reale, redundante Topologien planen und implementieren
• Manuelle Crush-Map-Bearbeitung: Einlesen, Dekompilieren, Anpassen und Neuimplementieren von Crush-Maps
• Sicherstellen von Redundanz: auf welchem OSD ist ein bestimmtes Objekt gespeichert? 
• Storage / Cache Tiering und Erasure Coding ("Raid 5") im Ceph-Cluster
• Entwicklung eines Tiering-Modells mit replizierten und erasure-codierten Pools
• Policies für Object Movement ('heiße' <-> 'kalte' Daten)
• Erasure-Code-Profile im Detail: Daten und Kodierungs-Chunks
• Explizite Zuordnung von OSDs zu bestimmten Pools (repliziert / erasure) unter Berücksichtigung der räumlichen Redundanz: Cache / schneller Pool (SSD) <-> langsamer Pool (normale Festplatten) mit spezieller Crush Map 

Management von CEPH-Clustern und konkrete praktische Anwendungsszenarien

• "Reine" Speicherung
  •      NFS über RBD
  •      CEPH / RBD-Integration in Corosync / Pacemaker-Cluster 
  •      CEPH als hochverfügbares RBD / NFS-Speicher-Backend für ESXi / vSphere 
  •      Ceph / RBD als iSCSI-Target mit LIO, Target CLI, mögliche Cluster-Integration
• CEPH und die Cloud: das Rados Gateway / Ceph Object Gateway
  •      CivetWeb statt Apache in CEPH 9.x 'Infernalis'
  •      Setup-Test über curl und https
  •      Rados-Gateway-Verwaltung: S3- und Swift-Benutzer
  •      Client-Zugriff a la 'Dropbox' / 'Google Drive' 
  •      Fehlersuche 
• KVM / Libvirt
  •      Direkte Bereitstellung von VMs auf RADOS
  •      Migration von libvirt KVMs auf RADOS (RBD)
  •      Hot Failover / Live-Migration von VMs im CEPH-Cluster
  •      Konzeptionelle Betrachtung: Überwachung von Anwendungen in KVM-VMs über Pacemaker remote
• Performance