Data Engineer

Projekt:
Einführung des Data Lakes und der Big Data & Analytics Plattform Migration Big Data Plattform von On-Prem in die (Azure-)Cloud
Technical Product Owner Enterprise Data Catalog & Data Governance Tool (Alation)
Unterstützung / Beratung Fachabteilungen bei der Nutzung des Data Lakes, der Analyse-Tools und des Data Catalogs

Aufgaben:
Betreuung des Enterprise Data Catalogs & Data Governance Tools
Beschäftigung mit Data Lineage und Data Governance innerhalb des Data Catalogs
Programmatische Erweiterungen des Data Catalogs (z.B. Integration von Glossaries mittels REST-API oder Routinen zur Überwachung der Daten-Qualität)
Migration des Catalogs in die Cloud
Migration von Big-Data Anwendungen nach Microsoft Azure / HDInsight / Databricks
Einführung von Near-Sourcing Mitarbeitern
Aufbau und Erweiterungen im Big-Data-Umfeld
Unterstützung Fachabteilungen bei Umsetzung von UseCases im Big-Data Umfeld.
Alle Arbeiten erfolgten nach SCRUM

Umfeld:
Hadoop (Hortonworks / Cloudera), YARN, Hive, Hive LLAP, HBase, Spark, Solr, Kafka, Alation, RStudio, Python, Scala, Azure Cloud / HDInsight / ARM, Scrum, Ansible, Docker, Kubernetes, Azure DevOps, Visual Studio Code, REST API, Postman, Python, Python Django

## Projekt

Migration von J2EE-Anwendungen einer Landesbank von WNI[^Wincor Nixdorf] zur FITS.  

### Aufgaben

- Erstellung automatischer Deployments mittels Ansible Playbooks
- Konfiguration der WebSphere-Umgebung mittels Python-Skripte und Property-Based-Verfahren
- Anbindungen der Applikationen an Datenbanken und Queueing-Systeme
- Monitoring der Komponenten
- Dokumentation und Betriebsübergabe

### Technisches Umfeld

WebSphere Application Server (ND), git, Gitlab CI, Docker, Ansible, Python, diverse DB, Websphere MQ

## Projekt

Aufbau einer mandantenfähigen neuen Kernbank-Umgebung für Privatbanken.

### Aufgaben

- Schnittstellen-Entwicklung und Konfiguration für das Kernbanken-System
- Report-Erstellungen
- Dokumentation und Betriebsübergabe

### Technisches Umfeld

Avaloq, Div. Avaloq-Schnittstellen, SQL, Oracle, Cognos, Python und Shell-Programmierung

## Projekt

Aufbau technisches DWH inklusive ETL-Prozesse.  Aufbau Reporting im IT-Betrieb für diverse Fragestellungen.  
Aufbau der DWH-Lösung in einer Big-Data-Umgebung (Hadoop).  

### Aufgaben

- Aufbau technisches DWH.
- Datenaufbereitungen (ETL) im technischen Umfeld mittels Kettle (Pentaho Data Integration).
- Datenlieferungen aus Monitoring-, Scheduling-, Deployment-, Event-Verarbeitungs- SAN-, Backup-, DB-Applikationen und direkt aus Applikationen
- Aufbau von Automatisierungen (Integration ins Scheduling, Funktionalitätserweiterungen mittels Java)
- Report-Erstellung mittels Eclipse-BIRT / Cognos für IKS, Capacity-, Availability und Licence-Management
- Aufbau eines Hadoop-Clusters und Toolevaluierungen
- Erstellung der Reporting Lösung in einem Hadoop-Cluster

### Technisches Umfeld

Eclipse, SQL-Explorer, div. SQL-Varianten (Oracle, DB2, MS-SQL, Sybase-SQL, MySQL) BIRT, Pentaho PDI Kettle, Informatica Powercenter, Cognos, Java, Perl
Hadoop (HDFS / YARN), Sqoop, Hive, Pig, HBase

## Projekt

Migration(en) und Redesign der Event-Verarbeitung.  
Produktevaluation für Event-Verarbeitung.

### Aufgaben

- Migration Event-Verarbeitungstool von TEC nach Omnibus
- Migration einer Regel-Datenbank vom Trouble-Ticket-Tool ins Netcool Omnibus
- Redesign der technischen Event-Verarbeitung
- Produktevaluation für Event-Verarbeitung
- Integration ins Business Service Management Reporting

### Technisches Umfeld

Tivoli Netcool Omnibus, Tivoli Event Console (TEC), Kyberna Ky2Help, AIX, Java, Sybase, Oracle, PL/SQL, BIRT

## Projekt

Design, Entwicklung und Einführung einer Provisioning Lösung für Unix-Server im Avaloq-Umfeld.

### Aufgaben

- Projektleitung und Mitarbeit bei der Einführung des Unix-Provisionings
- Anpassen des Provisionings an die Umgebungen und Betriebsabläufe (Test-Umgebungen, Produktions-Umgebung)
- Entwicklung von TPM-Workflows
- Integration der ersten (Pilot-)Applikationen in die Provisioning Lösung (Avaloq-R und Avaloq-Z)
- Reporting
- Migration der Provisioning-Lösung

### Technisches Umfeld

Tivoli Provisioning Manager, Eclipse, Avaloq, AIX, Subversion, Maximo, BIRT, Cognos

## Projekt

Ablösung einer Monitoring-Installation primär unter Kostenaspekten (Open-Source-Lösung)

### Aufgaben

Evaluation von Monitoring-Lösungen
Ablösung vom IBM Tivoli Monitoring durch Groundwork
Reporting

### Technisches Umfeld
Tivoli Monitoring, Groundwork (Nagios), PostgreSQL, Cognos. BIRT