Databricks Lakehouse Platformを基盤に、Apache Sparkやクラウド技術を用いたデータパイプラインを設計・実装・改善するシニアデータエンジニアです。分析、機械学習、BIを支えるバッチ・ストリーミング処理、品質管理、性能最適化にも携わります。
この求人について
東京のエンジニアリング部門で、海外クライアント向けのスケーラブルなデータプラットフォーム開発に携わるシニアデータエンジニアの募集です。エンジニア、データサイエンティスト、アーキテクトなどと連携し、業務要件およびデータ要件を本番運用可能なデータソリューションへ具体化します。
主な業務は、Databricks Lakehouse Platform、Apache Spark、Delta Lakeを用いたデータパイプラインの設計、実装、保守です。分析、機械学習、ビジネスインテリジェンスを支えるバッチ処理およびストリーミング処理のワークフローを開発・最適化します。Databricks環境におけるデータ処理の性能とコスト効率の改善、データ品質・ガバナンス・セキュリティに関する実践の導入支援も担当します。ナレッジ共有に参加し、ジュニアエンジニアの育成も支援します。
DatabricksおよびApache Sparkの実務経験が必要です。PySparkまたはScalaを用いた経験、AWS、Azure、GCPなどのクラウド上でデータプラットフォームを構築した経験、分散データ処理、データモデリング、性能最適化への理解が求められます。Gitなどのバージョン管理ツールとCI/CDパイプラインの利用経験、AirflowまたはDatabricks Workflowsなどのオーケストレーションフレームワークに関する知識も要件です。国際的な環境で協業するため、高い日本語・英語のコミュニケーション能力が必要です。
勤務形態は出社とリモートワークを組み合わせたハイブリッド勤務で、応募には日本在住であることが明記されています。給与は経験・スキルを考慮し、日本のテクノロジー市場水準に沿って提示されます。資格取得支援、Udemy Businessを含む継続学習リソース、定期的なフィードバックと評価制度が用意されています。
これは企業の公式求人情報をもとにAIで作成した要約です。情報が不完全、古い、または誤っている可能性があります。応募前に必ず公式の求人情報ですべての内容をご確認ください。
関連する求人
企業のデータ・AI変革を支援し、Databricks Lakehouse Platformを用いたデータ基盤の設計、導入、最適化をリードします。顧客への助言、技術ワークショップ、実装支援、チーム育成や提案活動も担います。
SmartNewsのコンシューマープロダクトデザインチームで、日本のユーザーがニュースに触れる体験を設計します。AIによる要約や個人向け発見機能、LLMを活用した機能を企画・試作し、ニュースフィード、記事閲覧、広告連携、ナビゲーションのUX改善まで担当します。静的な画面設計にとどまらず、コードを用いた動作するプロトタイプの開発にも取り組むポジションです。
MujinのDevOpsチームで、C/C++向けの大規模ビルドシステムとCI基盤を設計・最適化します。ビルドツールやコンテナ環境を運用し、技術提案、移行、コードレビューを通じて開発チームの生産性を高めます。
月着陸船の軌道系誘導航法制御（GNC）ソフトウェアを担当。宇宙機向けアルゴリズムの設計・実装・検証、シミュレーション、フライト解析、運用支援まで幅広く行います。C/C++、Python、Gitを使用します。
人事領域向け「AI Suite for HR」のサービス・プロダクトを立ち上げ、開発・運用まで担うプロダクトマネージャー。ロードマップ策定、開発プロセス管理、顧客課題に基づく企画と技術判断を進めます。PMまたは同等経験とWebアプリ開発経験が各2年以上必要です。