AI4Bharat, поддерживаемый IIT Madras, и Josh Talks AI объявили во вторник о запуске Voice of India — первой в стране независимой мультимодальной платформы для оценки систем искусственного интеллекта (ИИ), предназначенной для проверки работы ИИ в реальных условиях Индии.
Эта платформа представляет собой новый элемент в экосистеме ИИ Индии. Несмотря на значительные инвестиции страны в языковые технологии, вычислительную инфраструктуру и модели ИИ, критически важной составляющей оставалась независимая инфраструктура для проведения таких оценок.
Целью Voice of India является становление надежной эталонной точки для оценки ИИ в стране. Это позволит правительствам, предприятиям, исследователям и разработчикам ИИ независимо проверять, как системы ИИ функционируют с учетом лингвистического разнообразия Индии, включая различные языки, акценты и диалекты, а также в различных средах развертывания.
Прослушать эту статью
Профессор Митеш Кхапра из AI4Bharat в IIT Madras отметил, что Индия имеет уникальную возможность не только создавать ИИ для всего мира, но и помогать определять, как мир будет проводить его оценку. Он заявил: «Оценка определяет, что будет создано. Поскольку системы ИИ все глубже интегрируются в общество, тщательная оценка становится столь же важной, как и сама разработка моделей. Через Voice of India мы надеемся предоставить научному сообществу, индустрии и политикам научно обоснованные рамки оценки, отражающие лингвистическое многообразие Индии».
Вместо того чтобы полагаться исключительно на метрики производительности или бенчмарки, разработанные для западных контекстов, платформа предлагает научно строгие оценки, специфичные для Индии, которые отражают использование ИИ по всей стране.
Платформа Voice of India AI Evaluation Platform была создана в результате сотрудничества между AI4Bharat при IIT Madras и Josh Talks AI. Ее задача — обслуживать более широкую экосистему ИИ в сферах правительства, предприятий, академической среды и промышленности. Она спроектирована как открытая, нейтральная и научно строгая платформа, позволяющая разработчикам ИИ сравнивать свои системы, одновременно помогая покупателям принимать более обоснованные решения о внедрении.
В рамках запуска AI4Bharat и Josh Talks AI представили набор бенчмарков в рамках фреймворка Voice of India, включая бенчмарк, ориентированный на финансы, для оценки производительности ИИ в ключевых банковских рабочих процессах.
Суприйя Паул, соучредитель Josh Talks AI, подчеркнула: «Индия имеет шанс, который наступает раз в поколение, внести нечто уникальное в глобальный ИИ — возможно, не самые большие модели, а инфраструктуру оценки, которая делает ИИ заслуживающим доверия для всего мира. Платформа Voice of India AI Evaluation Platform — это шаг к построению такого будущего».
Значимость этого запуска заключается в том, что предприятия и государственные учреждения, внедряющие ИИ в Индии, впервые смогут сравнивать модели, используя независимые оценки, специфичные для развертывания, вместо того чтобы полагаться только на бенчмарки от поставщиков.
Платформа вводит трехэтапную систему оценки, которая включает оценку отдельных моделей, сквозную оценку развертывания в реальных рабочих условиях и периодические аудиты после развертывания. Это позволяет организациям оценивать не только то, как ИИ работает в контролируемых средах, но и как он функционирует для реальных пользователей в реальных сценариях.



