Projekte der letzten Jahre

  • Entwicklung einer Applikation zum Datenaustausch und eines Workflows zur Datenanreicherung von Produktdaten (nodejs, mongodb, Javascript)
     
  • Crawlen von Massendaten für ein US-amerikanisches Unternehmen (Apache Hadoop, Nutch, ca. vierzig Server, 1 Mrd. Webseiten/Monat, individuelle Parser und Export Applikationen, Java, CentOS) (siehe auch Vortrag auf dem SuMa-Kongress 2015)
     
  • Aufbau und Betrieb eines Hadoop-Clusters mit Internet-Crawler, wöchentlichen Massendatenauswertungen, individuelle Parser und Export Applikation (Apache Hadoop, Nutch, Hive, Solr, Java, ca. zwanzig Server, CentOS)
     
  • Entwicklung und Betreuung verschiedener (Mini-)Suchmaschinen und Meta-Suchmaschinen (Apache Hadoop, Nutch, Solr, Debian, Gentoo, Solaris)
     
  • Aufbau und Betreuung von Kundensystemen und Fremdapplikationen (Gentoo, Solaris, Apache, Drupal, Postgres, Solr, Tomcat, Perl, Python, Java).
     
  • Erstellung Backup-Konzept für SLES9/Oracle 10g Server
     
  • Betreuung eines Datawarehouse zur Nutzungsprofilanalyse von Webseiten (Legacy-Applikation auf Basis von Oracle 8i)
     
  • Internetbasierten Früherkennung von Ereignissen (Analyse, Programmierung eines Demonstrators, Auswertung und Interpretation).
     
  • Auf- und Ausbau einer Suchmaschine für Verbraucher (Apache Nutch, Apache Hadoop).
     
  • Entwicklung, Betreuung und Pflege von Internetsuchmaschinen, insbes. „metager.de“, „clewwa.de“, Abschluss des Projekts „Forschungsportal.net“

 

Weitere Informationen zu meinem Werdegang finden Sie auch bei Xing.