Hue Performance Issues

Hue wird in zahlreichen Big-Data-Projekten (Achtung: Buzz-Word-Session started jetzt :-)) eingesetzt und ist ein meiner Meinung nach gelungenes Tool um Hive, Spark etc. über ein Web-UI anzusprechen. In einer unserer CDH-Umgebung stieße wir auf einiges an Performanceproblemen, nachdem nach einer mehr…

sshuttle - transparenter proxy meets vpn & ssh

Bei meinen aktuellen Tunnelarbeiten bin ich auf das kleine, leichtgewichtige Tool sshuttle gestossen. sshuttle ist eine Mixture aus transparentem Proxy, VPN und SSH. Due Funktionsweise ist hierbei wie folgt, sobald sshuttle gestartet wird, erzeugt es eine SSH Session zum spezifizierten Remotehost. N…

Hadoop Web UI via FoxyProxy & ssh

Im Rahmen eines Big Data Projektes wurde ich gebeten externen Entwicklern Zugriff auf die Web UIs des Resourcemanager & Co. zu geben. Problem an der Stelle war, das die eigentlichen Hadoop Nodes über die privaten IPs / Hostnamen kommunizieren bzw. die Web Interfaces diese referenzieren und somit…