シニアソフトウェアエンジニア – AI評価

役割概要

シニアソフトウェアエンジニア – AI評価 役割について もし、あなたのエンジニアリングスキルが世界最先端のAIシステムの実際の動作を直接左右できるとしたら？この機会は、AIパフォーマンスを測定する評価インフラを設計・構築・スケールするためのシニアソフトウェアエンジニアを求めるものです — 生のモデル出力と現実世界の信頼性の間に存在する重要なレイヤーです。

担当業務

• 多様なタスクやドメインにわたってAIモデルの性能を評価するためのスケーラブルな評価パイプラインとフレームワークを設計・構築します
• 大規模言語モデルやその他のAIシステムの自動テストハーネス、スコアリングシステム、ベンチマークツールを開発します
• 評価データセットを大規模に処理・分析・可視化する高品質なプロダクションコードを作成します
• 研究チームが評価を実行・追跡・比較できるAPIやダッシュボード、内部ツールを作成・保守します
• AIリサーチャーやデータサイエンティストと連携し、評価手法を信頼性の高い再現可能なソフトウェアに変換します
• システムパフォーマンス、データ処理速度、インフラコストを最適化します
• 明確なドキュメントを作成し、コードレビューに参加して高いエンジニアリング基準を維持します
• プロとしてのソフトウェアエンジニアリング経験5年以上、プロダクションシステムの構築とリリースの実績

要件と条件

• 勤務地：リモート
• 稼働：週20〜40時間
• AIリサーチャーやデータサイエンティストと連携し、評価手法を信頼性の高い再現可能なソフトウェアに変換します
• プロとしてのソフトウェアエンジニアリング経験5年以上、プロダクションシステムの構築とリリースの実績
• Pythonの高い習熟度 — データ処理ライブラリ（pandas、NumPy）やWebフレームワーク（FastAPI、Flask、Django）の経験を含む
• 大規模データセットの処理とデータパイプライン構築の経験
• 優れた文章によるコミュニケーション能力 — 業務を明確に文書化し、非同期で連携できること
• リモート環境で自律的・安定的に業務できること

追加情報

• 体系的なエンジニアリングアプローチによって、AIの出力のエッジケース、障害モード、信頼性の問題を特定します
• 評価プラットフォームのアーキテクチャと技術的方向性に貢献します
• ソフトウェアアーキテクチャ、デザインパターン、エンジニアリングのベストプラクティスに関する確かな理解
• クラウドインフラ（AWS、GCP、またはAzure）とコンテナ化されたデプロイメントへの対応力