模型数据运营（评估与研判中心）-TikTok安全产品

1、基于公司战略需要，承接产品研发AI专项，进行LLM模型训练数据样本集标注、模型迭代效果评估、行业应用调研，以及安全合规保障等任务，与上游产品技术通力合作，共同推进业务目标达成；

2、标准定义：负责全风险域（色情、暴恐、涉政、谩骂等）Golden Set的定义与准入标准；你需要将定性的政策文档转化为Data Ops团队可执行的定量标注SOP；

3、Ground Truth交付：对队列交付中的重要环节负责，包括但不限于需求分析、承接、方案定制及训练、质检、交付等，具备突发疑难问题的解决能力；

4、裁决机制运营：建设内部案例的裁决机制，对齐对不同程度风险问题的一致性判断；

5、基于对LLM安全流程设计的理解和社区准则的理解，设计适合LLM执行的规则路由逻辑，并不断优化迭代，提升模型表现和资源使用效率；

6、建设AI内容质量管理体系，并对质量结果负责，持续进行问题诊断、数据分析、模型优化等工作。

1、本科以上学历，3年以上模型运营相关工作经验，具备搜索、人工智能相关的产品/技术背景优先；

2、具备较强的社区规则制定团队&产品&技术协同合作的能力，擅长收集分析定位问题，制定改进方案和优先级，并推进问题的实施，跟进改进效果并进行衡量；

3、关注互联网产品，了解AI行业的动态趋势，对主流ChatGPT、Gemini等相关产品有所了解且有实际训练经验者优先；

4、对数据敏感，有良好的数据分析能力，善于总结问题并能积极推进问题的解决；

5、对社区安全有较好理解，具有较强的风险意识和责任心，能够敏锐发现业务内容及流程问题，并制定解决方案；

6、具备商务英语听说读写能力，可适应英文工作环境。