32C3 - Streaming CDN

• nginx → HLS, icecast → webm, opus, mp3

  • HTTPS support auf allen Edge-Relays
  • 2x haproxy für Loadbalancing und Webseite
  • Relive in HD
  • fempeg als Media mirror

  Relay register Transcoding

• missed proxyignoreheaders Cache-Control; on master servers

  • icecast soft limit for max open files was overwritten by init script
  • not enough bandwith calculated (fnord news show drops)
  • Mail Passwords in pad?
  • disk space on media mirrors (fempeg)
  • m3u8 gziped on chaching server

  == Hardware-Anforderungen

  • 2 CPU-Cores (mit AES-NI Support)
  • mind. 2GB Ram
  • mind. 100GB Festplatte
  • Netzwerk:
    • 1x GBit Netzwerkinterface mit IPv4 und IPv6 Konnektivität
    • am besten ohne Firewall, zur Not mit freischaltung für Ports: 22 (SSH), 80 (HTTP), 443 (HTTPS), 1935 (RTMP), 8000 (Icecast)

  == Installer-Image

http://c3voc.de/share/32c3/relay/

• [meise][✓ meise, 2015-11-28]relay register wieder an den Start bringen

  • [florolf][✓ florolf, 2015-11-22]Hetzner anschreiben
  • [✓ meise, 2015-12-09]https Konfiguration im ansible finalisieren
  • [✓ florolf, 2015-12-01]Install-Image auf Jessie aktualisieren
    • [✓ florolf, 2015-12-01]Preseed-Skript entsprechend anpassen
    • [✓ derpeter, 2017-06-21]ansible checken
  • [✓ florolf, 2015-12-01]nginx-rtmp, (icecast), etc. für Jessie bauen
  • [✓ derpeter, 2017-06-21]Wie viel Platz hat relive das letzte jahr gebraucht?
  • [meise][✓ meise, 2015-11-28]Box von atze anfragen
  • [florolf][✓ derpeter, 2017-06-21]mal mit equi ueber netzwerk reden
  • [✓ derpeter, 2017-06-21]Konzept für Erzeugung von WEBM und Subformate

• [✓ meise, 2015-12-26]Zertifikate für alle geplanten relays besorgen

  • [✓ meise, 2015-12-26]Grundinstallation der Relays vornehmen
  • [✓ meise, 2015-12-05]lb1.het.c3voc.de auf jessie aktualisieren
  • [✓ meise, 2015-12-10]webseite auf lb1.fem + lb1.het deployen
  • [✓ meise, 2015-12-07]Plattenplatz auf den 1und1-Kisten erweitern für unsere Anforderungen
  • [✓ meise, 2015-12-26]live.dus auf jessie neu installieren
  • [ischluff][✓ derpeter, 2017-06-21]Encoding-Tests mit verschiedenen Bandbreiten
  • [ischluff][✓ derpeter, 2017-06-21]CDN Monitoring-Skripte anpassen/überarbeiten
  • [✓ meise, 2015-12-10]HAProxy multi process stats
  • [✓ meise, 2015-12-10]lb monitoring client einbinden
  • [✓ derpeter, 2017-06-21]HAProxy accesslogs noch ohne ip adressen
  • [✓ derpeter, 2017-06-21]HAProxy: »SSLv3 support requested but unavailable.« oO

• [✓ meise, 2015-12-27]0/0 Einträge aus iptables-Regeln entfernen
• [✓ meise, 2015-12-27]icecast_relay_on_demand in group_vars/relays auf 0 setzen
• [✓ derpeter, 2017-06-21]nach TODO imm ansible suchen
• [✓ derpeter, 2017-06-21]passwörter auf den relays noch einmal durchwechseln z.B. icecast
• [✓ meise, 2015-12-26]usa in colo deployen: 10ge public, 1ge public, 1ge intern
• [✓ meise, 2015-12-26]fempeg in colo deployen: 10ge public, 1ge intern
• [✓ meise, 2015-12-26]router vm mit sicherheits patches aktualisieren
• [✓ derpeter, 2017-06-21]usa root passwort auf das keypass pw ändern
• [✓ meise, 2015-12-26]subtitles vm auf usa deployen. br-pbl auf 1ge public interface bereits vorhanden

• [✓ meise, 2015-12-29]fempeg zertifikat für mirror.32c3.c3voc.de erstellen und hinterlegen, dns record setzen und mirror zum mb hinzufügen, rsync von www-data aktivieren

2x   1mbit H264 HQ
2x   1mbit WebM
   ----------------
     ~ 5Mbit * 4 = 25Mbit pro edge relay

2x 128kbit Mp3
2x 96kbit  Opus
  --------------
   ~ 0.5 Mbit * 5 = 2,5Mbit

2x 3Mbit H264 (geschätzt)
   ------------
   ~ 6Mbit * 1 = 6Mbit

2x 3Mbit   Webm
2x 1mbit   WebM
2x 128kbit Mp3
2x 96kbit  Opus
   ---------------
   6Mbit + 2Mbit + 0.5 * 5 = 43Mbit pro edge relay

2x 3Mbit   HD
2x 1mbit   SD
   ---------------
   6Mbit + 2Mbit * 5 = 40Mbit pro edge relay   

ruby measure_bw.rb 31.172.30.138 195.54.164.164 46.4.3.195 141.24.40.53 217.160.107.68 74.208.155.193 5.9.196.94