データアーキテクト・開発リーダー
■AI検索サービスの根幹となるデータアーキテクチャの設計、およびデータ管理プロセスの最適化・自動化のリードをご担当いただきます。 【具体的には】 1.AIモデルのためのデータ基盤構築・パイプライン設計:50% AI/MLモデルの学習・推論に必要なデータを、高品質かつタイムリーに供給するための基盤を作っていただきます。 ・データ収集/加工:多様なログデータや商品データを収集し、モデルが学習可能な形式へ加工(ETL/ELT)するパイプラインの設計/構築 ・特徴量管理(Feature Store):特徴量の作成/管理を一元化し、学習時と推論時のデータ不整合(Training-Serving Skew)を防ぐ仕組みの導入 ・データ品質管理:データの欠損や異常を検知し、常にクリーンなデータを維持するための監視/通知システムの構築 2.データ管理プロセスの最適化および自動化推進:30% 属人化しがちなデータ抽出・加工作業を排除し、自動化されたワークフローを確立していただきます。 ・データ運用の自動化:手動SQLやスクリプトに依存しているデータ作成フローを、Workflow Engine(Airflow等)を用いて自動化/コード化(IaC) ・MLOps基盤の強化:データサイエンティストがスムーズにモデル実験/デプロイを行えるよう、インフラ側からの環境整備 ・メタデータ管理:どのデータがどこにあり、どう加工されたかを追跡可能にするデータカタログの整備 3.チームマネジメント・戦略策定:20% ・セクションリーダーとしてメンバー(正社員・パートナー)のタスク管理、技術指導、評価 ・事業目標に基づいた中長期的なデータ戦略/アーキテクチャロードマップの策定