ウーブン・バイ・トヨタ

Social Infrastructures & Platforms

AI品質評価エンジニア・AI製品開発

$10000–15000k ~AI est. Tokyo, Japan Remote Friendly
Market Sentiment
HIGH DEMAND

Neural analysis suggests this role is
optimal for Mid candidates.

The Brief

“AI 品質評価エンジニア・AI 製品開発 at ウーブン・バイ・トヨタ. Skills: AI quality assurance, LLM testing, Process automation. Organize quality for AI products. Perform scenario testing”

Industry & Context.

Social Infrastructures & Platforms
Problems you'll solve

Root cause analysis

Eligibility Requirements

Monthly trips to Woven City

What They're Looking For.

Must Have

3+ years LLM QA/testing experience, Test design experience, Ability to set judgment criteria, Test/evaluation process automation experience, Experience improving quality with dev teams, Business level English, Business level Japanese

Nice to Have

Scenario testing experience, Red teaming experience, User feedback analysis experience, Log analysis experience, Basic NLP understanding

What You'll Do.

Organize quality for AI products

Perform scenario testing

Perform exploratory testing

Analyze LLM output trends

Identify LLM failure patterns

Design quality evaluation using user feedback

Standardize evaluation processes

Organize evaluation processes for reuse

Automate quality evaluation flows

Collect evaluation data

Aggregate evaluation data

Establish regular quality checks

Build feedback loops with engineers

Operate feedback loops with engineers

Document quality issues

Document quality risks

Share quality issues with team

Share quality risks with team

How You'll Work.

Team & Collaboration

Product development teams; MLOps teams; Data engineers

Full Job Description

## Description ウーブン・バイ・トヨタについて ウーブン・バイ・トヨタは、トヨタの100年に一度のモビリティ・カンパニーへの変革に寄与していきます。「自分以外の誰かのために」発明を続けたという歴史からインスピレーションを受けた私たちのミッションーそれは、モビリティの定義を拡げ、そしてモビリティが社会に貢献する方法を拡張し、人を想うイノベーションで、モビリティの常識に挑み続けることです。 私たちは4つの柱を中心に活動しています:自動運転・先進運転支援システム技術のAD/ADAS、SDV(ソフトウェア定義車両)のための車両ソフトウェア生産プラットフォームであるArene、モビリティのテストコースであるWoven City、そして協業基盤を支えるデジタル・インフラストラクチャのCloud & AIです。また、ビジネスに不可欠な機能がこれらのチームの実装を下支えし、一丸となって「事故ゼロ社会」と「幸せの量産」の実現に向けて取り組んでいます。 ========================================================================= ## チームについて トヨタはモビリティの意味を再定義します。ヒト、モノ、情報、そしてエネルギーを動かし、モビリティの常識に挑み続けます。Woven Cityでは、このような様々なモビリティを生み出し、試すテストコースとして、ヒト中心の街・実証実験の街・未完成の街をコンセプトに、幸せの量産を目指します。 Woven Cityには未来のモビリティへの想いを共有する多様な仲間が集まります。Inventors(インベンターズ/発明家)、住民、ビジターは、ヒト・モビリティ・社会インフラが連携する街の形をしたテストコースで、生活をしながら様々なプロダクトやサービスを実証します。 Woven Cityに関する詳細は、以下をご覧ください:https://www.woven-city.global/jpn/ ## 求める人材 AIプロダクトにおける最初の専任QAエンジニアとして、LLMを用いたプロダクトの不確実性や非決定性を前提に、品質を検査するだけでなく仕組みとして成立させることに関心のある方を求めています。 本ポジションでは、単発のテスト実施にとどまらず、ユーザフィードバックや評価結果を継続的に品質改善へつなげるための評価フローの標準化・自動化を重要なミッションとしています。そのため、プロダクト開発チームだけでなく、MLOPS/データエンジニアと密に連携しながら、QAの観点を持ち込んでフィードバックループ全体を再設計・実装・運用していただきます。特に、実ユーザからのフィードバックが十分でない状況においても、QA主導で品質改善が回る最初のフィードバックループを担うことを期待しています。 このポジションのレポートラインはファンクションのリーダーとなり、勤務形態はハイブリッドです。また、月数回のウーブンシティへの出張があります。 ## 業務内容 AIプロダクトにおける品質の整理(正確性、一貫性、安全性、公平性、UXなど) シナリオテスト、探索的テスト、レッドチーミングの実施 LLM出力の傾向分析および失敗パターンの特定 ユーザフィードバック(ログ、評価、問い合わせ等)を活用した品質評価の設計 評価プロセスの標準化・再利用可能な形での整理 可能な範囲での品質評価フローの自動化 評価データの収集・集計 定常的な品質チェックの仕組み化 開発/MLOPS/データエンジニアと連携したフィードバックループの構築・運用 品質課題やリスクのドキュメント化およびチームへの共有 ## 必須条件 LLMを用いたプロダクトのQA/テストの3年以上の実務経験 テスト設計(観点整理、テストケース作成)の経験 曖昧な仕様や正解が一意でない対象に対して、判断軸を立てて評価できる能力 テストや評価プロセスの自動化経験 開発チームと協働しながら品質改善を進めた経験 ビジネスレベルの英語力と日本語力 ## 歓迎条件 シナリオテスト、レッドチーミングの実践経験 ユーザフィードバックやログを用いた評価・分析の経験 自ら課題を見つけて手を動かせる姿勢 特に日本語における、自然言語処理に関する基礎的な理解 ## Additional Information ========================================================================= 注意事項 ・通常、すべての面接はGoogle Meetで実施いたします。 ・現在募集中の求人票は英語版と日本語版の両方で掲載しております。つきましては、いずれか一方のみにご応募いただきますようお願い申し

Free ATS check

Applying for this AI 品質評価エンジニア・AI 製品開発 role?

Most applicants get filtered before a human reads their resume. See if yours makes the cut.

How to Apply on Lever

  • Lever uses a streamlined one-page form — apply in under 5 minutes.
  • LinkedIn import works well; review parsed data before submitting.
  • The cover letter field is optional but visible to reviewers — use it to differentiate.
  • Referral codes from employees can significantly boost visibility of your application.

ANONYMOUS · UNFILTERED

What do employees actually say about ウーブン・バイ・トヨタ?

Real rants from real employees. Read before you apply.

Read Company Rants →