Valarian Technologies привлекает инженера-исследователя для разработки и сопровождения масштабируемых Python‑оценочных рангов, измеряющих выполнение задач, качество траекторий, использование инструментов и стоимость. Ваша работа включает применение статистических методов и разработку автоматических judging‑систем с точки зрения человеческого эталона.
Ключевые задачи включают анализ согласованности между аннотаторами, обнаружение ошибок и предложение архитектурных улучшений в контурах агентов,
#J-18808-Ljbffr
AI Evaluation Engineer: Python, LLM Metrics (Hybrid) employer: Valarian
Valarian Technologies is an exceptional employer, offering a dynamic work culture that prioritises innovation and security in the fast-paced tech landscape of London. Employees benefit from comprehensive growth opportunities, including hands-on experience with cutting-edge technologies and a commitment to professional development, all while contributing to meaningful projects that enhance secure software delivery in regulated environments.
