仕事内容:
◇◇ 業務内容 ◇◇
生成AI・LLMを活用したサービスにおいて、品質評価基盤の設計から改善まで幅広く担当いただきます。評価環境の整備や分析を通じて、AIプロダクトの品質向上を支援します。
- LLM回答品質の評価環境設計・構築
- RAGシステムの評価設計および検証
- Pythonによる評価ツールの開発
- AIモデルの精度分析・品質検証
- 評価データセットの整備
- Accuracy・Hallucination・Latencyなどの品質指標の可視化
- 品質改善に向けた提案および開発チームとの連携
アピールポイント:
- AIサービスの品質向上に直結する業務へ携われる
- 評価基盤の設計から改善提案まで幅広く担当できる
- AIエンジニアや開発チームと連携しながら業務を進められる
求める人材:
◆◆ 求めるスキル・経験 ◆◆
【必須】
- Pythonによる開発経験(2年以上)
- QAまたは品質保証業務の実務経験
- 生成AIまたはLLMを活用した開発経験
- Gitを利用したチーム開発経験
- SQLを利用した実務経験
【歓迎】
- OpenAI API、Azure OpenAI、Anthropic、Geminiなどの利用経験
- RAG構築経験
- LangChain、LlamaIndex、Difyなどの利用経験
- 機械学習モデル評価経験
- AWS、Azure、GCP利用経験
- MLOpsまたはLLMOps経験
勤務時間・曜日:
平日、日中稼働できる方(コアタイムあり)
休暇・休日:
土日祝休み
給与:
月給:43万円~77万円
※経験・スキルを考慮のうえ決定
その他:
・日本在住の方
・一人月で稼働可能な方
・45歳未満の方
・リモート勤務も可能
雇用形態: 業務委託