Senior Data Engineer

Senior Data Engineer

Willkommen! Schön, dass du hier bist 🥳

Lasst uns die Standards für Cybersicherheitsexpertise neu definieren und Unternehmen mit hochgradig ansprechenden Hacking-Erlebnissen mit der Community verbinden. (Weitere Einblicke in die Kultur von Hack The Box finden Sie auf unserer Karriereseite).

✨Die Kernaufgabe des Senior Data Engineer:

Sie werden unsere Datenpipelines auf GCP besitzen und weiterentwickeln – neue erstellen, bestehende härten, die Datenqualität verbessern und saubere, vertrauenswürdige Daten im gesamten Unternehmen verfügbar machen. Sie arbeiten End-to-End an Streaming- und Batch-Pipelines, von CDC und der Erfassung von Ereignissen über die Transformation und Bereitstellung bis hin zur Feature-Schicht, die unsere ML- und KI-Produkte antreibt.

Ihr Alltag umfasst das Entwerfen von ELT/ETL-Prozessen auf BigQuery und ClickHouse, das Erstellen von Echtzeit-Pipelines auf Pub/Sub und Kafka mit Dataflow (und wo es passt, Flink/Spark), die Orchestrierung von Workflows mit Airflow und die Sicherstellung, dass Daten ordnungsgemäß bereinigt, modelliert und für Analysen, ML-Training und Online-Inferenz bereitgestellt werden. Sie arbeiten mit ML-Ingenieuren an Feature-Pipelines, überwachen Daten-Drift und stellen sicher, dass Modelle gut versorgt und bei Bedarf neu trainiert werden. Sie werden REST-APIs konsumieren und erstellen, uns in Drittanbieter-SaaS-Quellen integrieren und Infrastruktur als Code behandeln.

🏢 Standort & Arbeitsmodus:

Optionen: Vorzugsweise Griechenland

Vollständig Remote / Hybrid (2 Tage im Büro, 3 Tage remote, plus ein Monat Arbeit von überall) – Nur in Griechenland: Bei Einstellungen in Griechenland sind wir offen für Kandidaten aus allen Regionen. Diejenigen, die sich innerhalb von 55 km von unserem Büro in Athen befinden, folgen einem hybriden Arbeitsmodell. Für Kandidaten, die sich außerhalb dieses Radius befinden, steht eine vollständig Remote-Vereinbarung zur Verfügung.

🍺 Die Gemeinschaft, der Sie beitreten werden:

Sie werden Teil des Data, Analytics & AI-Teams sein und eng mit Infrastruktur-, Softwareentwicklungs-, Produkt- und ML/AI-Ingenieuren zusammenarbeiten. Wir befinden uns mitten in einer GCP-nativen Modernisierung – der Migration von Snowflake zu BigQuery, Bigtable, Pub/Sub und Dataflow –, daher suchen wir jemanden, der eine Meinung zu sauberer Architektur hat, allergisch gegen Over-Engineering ist und sich wohlfühlt, Systeme End-to-End zu betreuen. Wenn das Stilllegen eines Legacy-Data-Warehouses und das Einrichten seines Ersatzes wie eine gute Zeit klingt, werden Sie sich hier wohlfühlen.

⚔️ Technologie-Tools & Waffen, die Sie verwenden werden:

• Cloud & Data Warehouse: GCP, BigQuery, Bigtable, Cloud Storage
• Streaming & Messaging: Pub/Sub, Kafka
• Verarbeitung: Dataflow (Apache Beam), mit Flink/Spark, wo angebracht
• Orchestrierung: Airflow (Cloud Composer)
• Analytischer Speicher: ClickHouse
• Sprachen: Python, SQL
• Modellierung & Qualität: dbt, Data Quality Gates
• Container & CI/CD: Docker, Kubernetes, GitHub Actions / Äquivalent
• Legacy (wird ausgemustert): Snowflake

🚀 Die Abenteuer, die Sie als Senior Data Engineer bei Hack The Box erwarten:

• Entwerfen und Erstellen von Batch- und Streaming-Pipelines auf Dataflow, Pub/Sub und Kafka, die BigQuery, Bigtable und ClickHouse speisen
• Helfen Sie bei der Migration von Snowflake auf unseren GCP-nativen Stack – und beseitigen Sie dabei Schatten-Pipelines
• Verwalten Sie die Orchestrierungsschicht in Airflow, einschließlich SLAs, Wiederholungsversuchen und Data Quality Gates
• Modellieren Sie Daten für Analysen und für ML – einschließlich Feature-Pipelines, die sowohl für das Training als auch für die latenzarme Online-Inferenz verwendet werden
• Arbeiten Sie mit ML-Ingenieuren an Feature Stores, Drift-Überwachung und Retraining-Workflows zusammen
• Erfassen Sie Anforderungen von Stakeholdern und übersetzen Sie diese in pragmatische, gut definierte Datenprodukte
• Verbessern Sie kontinuierlich die Datenqualität, Zuverlässigkeit, Beobachtbarkeit und Kosteneffizienz
• Identifizieren Sie neue Datenquellen, die sich für die Akquisition lohnen, und integrieren Sie sie sauber

🏆 Fähigkeiten, Kenntnisse und Erfahrungen, die erforderlich sind, um die Rolle des Senior Data Engineer bei Hack The Box zu meistern:

• Starke Fähigkeiten in Datenmodellierung und Data-Warehouse-Architektur (dimensionale Modellierung, ereignisgesteuerte Muster, Lakehouse-Muster)
• Praktische Erfahrung mit GCP-Datendiensten – BigQuery ist ein Muss; Pub/Sub, Dataflow, Bigtable, Cloud Composer sind starke Pluspunkte
• Produktionserfahrung mit Streaming-Pipelines auf Dataflow/Beam, Flink oder Spark Structured Streaming, die von Kafka und/oder Pub/Sub aufgenommen werden
• Solides SQL und starkes Python – Sie schreiben produktionsreifen Code, nicht nur Notebooks
• Erfahrung mit ClickHouse oder einer anderen spaltenorientierten OLAP-Engine in der Produktion
• Workflow-Orchestrierungserfahrung mit Airflow (oder Prefect/Dagster)
• Vertraut mit dbt oder gleichwertigen Transformations-Frameworks
• Erfahrung bei der Migration von Legacy-Data-Warehouses (Snowflake, Redshift, Synapse) zu Cloud-nativen Stacks ist ein Plus
• Arbeitskenntnisse von ML in der Produktion – Feature Engineering, Feature Stores, Model Deployment, Drift-Überwachung, Retraining
• Docker & Kubernetes Erfahrung
• CI/CD-Denkweise, Infrastruktur-als-Code-Sensibilität und eine Vorliebe für einfache, beobachtbare Systeme
• Bonus: CDC-Tools (Datastream, Debezium), Vertex AI / Feature Store

Was Ihr Hack The Box-Abenteuer bereithält:

• 🎯 Sie haben die aufregende Gelegenheit, zu einem Produkt beizutragen, das von den Nutzern und der Cybersicherheits-Community gleichermaßen sehr geschätzt wird
• 🎯 Sie erleben eine sehr unterstützende und fürsorgliche Umgebung, die Wachstum, Flexibilität und Autonomie fördert
• 🎯 Sie begeben sich auf eine spannende Reise des kontinuierlichen Lernens und der Problemlösung und entwickeln sich weiter, während unser Unternehmen wächst
• 🎯 Am wichtigsten ist, dass Sie bei HTB eine tolle Zeit haben werden 🥳, denn Spaß ist eine wesentliche Zutat in unserem Erfolgsrezept! Warten Sie nur, bis Sie unsere globalen Treffen sehen!

💰 Die Juwelen, die Sie als Senior Data Engineer genießen werden:

• Private Krankenversicherung
• Bezahlter Elternurlaub
• 25 Urlaubstage
• Kostenloses Mittagessen & Snacks im Büro
• 120 € Ticket Restaurant von Edenred
• Dediziertes Budget für Schulungen und berufliche Weiterentwicklung, Teilnahme an Konferenzen
• Voller Zugang zu den Lab-Angeboten von Hack The Box; damit Sie lernen können, wie man hackt 😉
• Modernste Ausrüstung (Mac, iPhone und Mobilfunktarif)
• Flexibles WFH (Hybrid-Modell) – Vollständig Remote ist ebenfalls eine Option, wenn Sie kein Einwohner von Attika sind

Unser Leistungspaket bietet starke Unterstützung für unser Team, kann jedoch je nach Standort und Art der Anstellung variieren (z. B. UK, Griechenland oder Anstellung über einen Employer of Record).

🗺️ Die Quest, Hack The Box's Senior Data Engineer zu werden:

• Level 1: Um das Ziel von Level 1 zu erreichen, reichen Sie Ihre Bewerbung ein.
• Level 2: Treffen Sie das Talent Acquisition Team. Ziel des Levels: Heben Sie Ihre bisherigen Erfolge, Ambitionen und Werte hervor.
• Level 3: Treffen Sie das Einstellungsteam. Ziel des Levels: Verbinden Sie sich mit dem Einstellungsteam und teilen Sie Ihre Erfolge mit ihm.
• Level 4: Erledigen Sie 2 Aufgaben, die den alltäglichen Aufgaben und Verantwortlichkeiten entsprechen. Teil der Aufgabe ist die Besprechung mit dem Einstellungsteam in einer Debriefing-Sitzung, um das Team durch Ihren Denkprozess zu führen.
• Level 5: Glückwunsch! Nicht viele erreichen dieses Level 💪. Ziel des Levels: Führen Sie ein konstruktives Abschlussgespräch mit der Geschäftsleitung, um die Rolle und Ihre Zukunft bei HTB zu erkunden.
• Level 6: Sie haben offiziell ein Angebot von HTB erhalten! Um das letzte Level und die Quest abzuschließen, müssen Sie nur noch das Angebot annehmen.
• Quest abgeschlossen. Glückwunsch, Sie gehören offiziell zu uns 🥳🎉🎇Ihre nächste Quest: Schließen Sie das Onboarding ab.

Hacken Sie Ihre Karriere noch heute. Begleiten Sie uns auf diesem epischen Abenteuer der Cybersicherheit bei Hack The Box! 🚀🔒💻

Bei Hack The Box sind wir auf der Suche nach den außergewöhnlichsten und enthusiastischsten Talenten, die sich unserem Team anschließen. Unabhängig davon, ob Sie sich als Gamer bezeichnen oder nicht, wir schätzen, was Sie einzigartig macht, und möchten mehr über Sie erfahren. Dieses Stellenangebot bietet nur einen Einblick in das unglaubliche, gamifizierte Erlebnis, das unsere Geschäfts- und Privatkunden auf unseren Plattformen genießen. Wenn Sie also bereit sind, sich auf eine Reise des Wachstums und des Abenteuers zu begeben, können wir es kaum erwarten, Sie kennenzulernen!

Über Hack The Box

Hack The Box ist das Cyber Performance Center mit der Mission, eine menschenzentrierte Plattform zu bieten, um leistungsstarke Cybersicherheitsexperten und -organisationen zu schaffen und zu erhalten.

Hack The Box ist die einzige Plattform, die Upskilling, Personalentwicklung und den menschlichen Fokus in der Cybersicherheitsbranche vereint und wird weltweit von Organisationen vertraut, um ihre Teams zu Höchstleistungen anzutreiben. Hack The Box bietet eine All-in-One-Umgebung für kontinuierliches Wachstum, Bewertung und Rekrutierung und Lösungen für alle Cybersicherheitsdomänen.

Hack The Box wurde 2017 gegründet und vereint die größte globale Cybersicherheits-Community mit mehr als 3 Millionen Plattformmitgliedern. Hack The Box wächst schnell international und hat seinen Hauptsitz im Vereinigten Königreich mit zusätzlichen Büros in den USA, Australien und Griechenland.

🚨 Aufregende Neuigkeiten:

• Erhalten Sie die wichtigsten Updates zu den neuesten Entwicklungen von HTB im letzten Jahr!
• Wir sind sehr stolz darauf, mitteilen zu können, dass alle drei HTB-Einheiten in Großbritannien, den USA und Griechenland als Great Place to Work zertifiziert wurden (Okt. 2023 - Okt. 2024).
• Darüber hinaus wurde die griechische HTB-Einheit 2024 vom Great Place to Work Institute als zweitbester Arbeitsplatz in Griechenland und als zehntbester Arbeitsplatz in Europa (unter kleinen und mittleren Arbeitsplätzen 💪) gelistet.
• Werfen Sie einen Blick darauf, wie es ist, Teil von HTB zu sein, und auf unser globales Retreat 2023. Erhalten Sie weitere Einblicke in unsere HTB-Kultur und Mitarbeitererfahrung, indem Sie den Abschnitt „Über uns“ unserer Website, unsere Karriereseite und Glassdoor besuchen.

Bei Hack The Box verpflichten wir uns, ein vielfältiges, integratives und gerechtes Arbeitsumfeld zu fördern. Wir glauben, dass Vielfalt unsere Leistung, unsere Dienstleistungen und die Gemeinschaften, denen wir dienen, bereichert. Daher stellen wir sicher, dass alle Bewerbungen ausschließlich nach Verdienst, Fähigkeiten und Qualifikationen berücksichtigt werden. Wir diskriminieren nicht aufgrund von Rasse, Hautfarbe, Religion, Geschlecht, Geschlechtsidentität oder -ausdruck, sexueller Orientierung, nationaler Herkunft, Genetik, Behinderung, Alter oder Veteranenstatus. Wir sind bestrebt, ein faires und respektvolles Arbeitsumfeld zu schaffen, das unsere Werte widerspiegelt.