Projekte der letzten Jahre

  • Date Engineer in der Finanzbranche (Airflow, Apache nifi, Spark, Python, Grafana)
  • Aufbau einer Docker/Kubernetsplattform im profesionellen Rechententrumsumfeld (Docker, Kubernet, CentOS)
  • Beratung beim Aufbau eines Backoffice-Werzeugs (nodejs, mongodb, jquery)
  • Aufbau einer Reporting und Abrechnungsplattform im Gesundheitsbereich  (nodejs, mongodb, sepa.xml, Edifact)
  • Migration und Ausbau einer Reportinglösung (Python, LaTeX, Linux, mongodb, nodejs)
  • Entwicklung einer Applikation zum Datenaustausch und eines Workflows zur Datenanreicherung von Produktdaten (nodejs, mongodb, Javascript)
     
  • Crawlen von Massendaten für ein US-amerikanisches Unternehmen (Apache Hadoop, Nutch, ca. vierzig Server, 1 Mrd. Webseiten/Monat, individuelle Parser und Export Applikationen, Java, CentOS) (siehe auch Vortrag auf dem SuMa-Kongress 2015)
     
  • Aufbau und Betrieb eines Hadoop-Clusters mit Internet-Crawler, wöchentlichen Massendatenauswertungen, individuelle Parser und Export Applikation (Apache Hadoop, Nutch, Hive, Solr, Java, ca. zwanzig Server, CentOS)
     
  • Entwicklung und Betreuung verschiedener (Mini-)Suchmaschinen und Meta-Suchmaschinen (Apache Hadoop, Nutch, Solr, Debian, Gentoo, Solaris)
     
  • Aufbau und Betreuung von Kundensystemen und Fremdapplikationen (Gentoo, Solaris, Apache, Drupal, Postgres, Solr, Tomcat, Perl, Python, Java).
     
  • Erstellung Backup-Konzept für SLES9/Oracle 10g Server
     
  • Betreuung eines Datawarehouse zur Nutzungsprofilanalyse von Webseiten (Legacy-Applikation auf Basis von Oracle 8i)
     
  • Internetbasierten Früherkennung von Ereignissen (Analyse, Programmierung eines Demonstrators, Auswertung und Interpretation).
     
  • Auf- und Ausbau einer Suchmaschine für Verbraucher (Apache Nutch, Apache Hadoop).
     
  • Entwicklung, Betreuung und Pflege von Internetsuchmaschinen, insbes. „metager.de“, „clewwa.de“, Abschluss des Projekts „Forschungsportal.net“

 

Weitere Informationen zu meinem Werdegang finden Sie auch bei Xing und Gulp