テスト・デバック・検証・品質評価に関連した他の仕事を探す
見積もり募集の結果
見積もり募集の内容
- 依頼主の業種
- IT・通信・インターネット
-
提示した予算
-
300,000円 ~ 500,000円
-
依頼概要
-
今回募集しているLLMQAエンジニアは、LLM/AIエージェントの品質保証を行うエンジニアで、LLMOpsのサイクル(データセット準備、評価指標によるオフライン/オンライン評価、運用監視など)に習熟し、データセット作成からLangSmithなどのツール設定、評価指標の選定までを行い、LLMプロダクトの評価を行うエンジニアです
本ポジションを経験したことのある人は市場には稀有なため、品質に興味のあるAIエンジニアや、未経験でもAIに興味のあるQAエンジニアの方を募集しています。
【業務内容】
■ LangSmith、LangWatchなどのLLMOpsツールのセットアップ、契約進行
■オフライン評価の実施(Evals、Dataset)
■オンライン評価環境の構築(monitor、など)
■モデルチューニング、プロンプトエンジニアリングAI製品開発チームや関連部署と連携しながら、テスト計画の策定からリリース後の品質改善までを幅広くお任せします。LLMOpsサイクルのうち、とりわけユースケース定義や評価指標、データセット準備から運用監視までを行います。
【 期間 】
制限なし(ミニマム1ヶ月〜)
【 契約金額(税抜) 】
時給 3000円〜
週20時間以上のコミットをお願いします。(長期またはフルタイムで稼働できる方優遇)
【 応募資格(必須)】
・AIが好きで仕方ない、勝手に触ってしまう、勉強してしまう(キャッチアップできる)
・AIプロダクトにおいて評価の重要性を深く認識している
・AIエージェントの開発経験(Difyなどノーコードツールでも可能)およびデバッグ経験
【歓迎条件】
・web2の開発経験およびテスト経験,運用保守経験
・アジャイル開発やDevOpsなど改善を繰り返すタイプの開発手法の実践経験
・英語読解能力(DeveloperDocや最新情報が英語であることが多いため)
・AIプロダクトやMLシステムのテスト経験
【 応募方法 】
・簡単な自己紹介や実績をご提示ください。
・条件提示にてお見積もり金額を入力してください。
ご質問がありましたら、気軽にお問い合わせください。
応募をお待ちしております!
▼一緒に働くチームの特徴
◎スタートアップ出身と大企業出身メンバーの組み合わせ
失敗を恐れず不確実性の高い領域にアジャイルに対応していく素質を持ったメンバーと、冷静沈着に仕組みを整えスケール前提でヒトやコトに向かう経験豊富な素質を持ったメンバーが混在しています。このコンビネーションが、不確実性の高い領域でスピード感を持って事業をスケールしていくには最適な布陣だと確信しています。
◎多様なバックグラウンド
・興味関心 : 品質保証がもたらす価値に興味がある、海外での雇用創出に興味がある、新領域web3に興味がある、急成長事業に興味がある、テストケースを実装するのが好き、面白そうだから働いてみたい など様々な興味関心を持ったメンバーが在籍しています。あなたの興味関心にもピッタリな役割を見つける努力をします。
・年齢性別 : DAIJOBU社では年齢や性別を考慮することはありません。“良いメンバー“を徹底的に採用してきた結果、女性比率は3分の1、20代から40代まで幅広いメンバーがDAIJOBUに集まっています
・居住地, 働き方 : 日本のみならずイギリス、オランダ、ナイジェリアと全世界にメンバーが住んでおり、フルリモートフルフレックスで自由な働き方を実現できます。主婦や育休中の方、副業の方にも働きやすい環境で、その点にはすごくこだわっています!
◎本質志向
第三者検証会社の価値ってなんなんだろう、なにをユーザーや顧客は求めているんだろう、そもそもなんのために今このタスクをやっているのだろうと、物事の本質に立ち返って議論をすることが好きなチームです。存在意義や価値を徹底的に考えることで、顧客やユーザーに付加価値を提供していきます
-
アサインする人が決まったため
この仕事に似たテスト・デバック・検証・品質評価の他の仕事を探す