Facebook и Google разработают свой бенчмарк для искусственного интеллекта
Чтобы разработчики проверяли, всё ли они делают правильно
Объединение из 40 технологических компаний, включая Facebook and Google, анонсировало выпуск набора тестов для искусственного интеллекта, своеобразного бенчмарка.
Создатели алгоритмов искусственного интеллекта, подвергая их эталонному тесту, смогут определять оптимальные решения для продуктов и быть уверенными в том, что они делают всё правильно.
Бенчмарк под названием MLPerf Inference v0.5 будет оценивать три наиболее важных показателя: способность искусственного интеллекта классифицировать изображения, распознавать объекты и осуществлять машинный перевод. Для алгоритмов на разных платформах будут существовать разные типы тестов.
Создатели проекта MLPerf Inference v0.5 считают, что, создавая общие метрики для оценки новых систем машинного обучения, они устанавливают равные возможности для всех разработчиков, даже самых маленьких команд.