Wikipedia заключает сделки по обучению ИИ с технологическими гигантами

Новая эра для Википедии

Фонд Wikimedia вступил в трансформационную фазу своей цифровой стратегии, объявив о знаковых лицензионных соглашениях с некоторыми из самых мощных технологических компаний мира. В четверг некоммерческая организация раскрыла сделки с Microsoft, Meta и Amazon, среди других, для формального лицензирования контента Википедии для обучения искусственного интеллекта.

Это развитие представляет собой значительный отход от прошлого, когда эти же компании регулярно скрапили обширную базу знаний Википедии без явного разрешения или компенсации. Соглашения сигнализируют о созревании отношений между репозиториями открытых знаний и коммерческой индустрией ИИ.

Детали партнерства

Недавно объявленные сделки охватывают пять крупных технологических компаний: Microsoft, Meta, Amazon, Perplexity и Mistral AI. Эти организации присоединились к программе Wikimedia Enterprise — коммерческой дочерней компании, созданной специально для управления лицензионными соглашениями с крупными коммерческими пользователями.

Wikimedia Enterprise предлагает премиальный сервис, который предоставляет доступ к API к 65 миллионам статей Википедии со значительно более высокими скоростями и объемами, чем бесплатные публичные API, доступные общим пользователям. Этот премиальный доступ необходим для компаний, обучающих большие языковые модели, которые требуют огромных, последовательных потоков данных.

Финансовые условия этих соглашений остаются конфиденциальными, поскольку фонд решил не раскрывать конкретные денежные суммы. Однако генерируемый доход представляет собой критически важный новый источник дохода для организации.

Эти новые партнеры присоединяются к существующему списку, который включает:

• Google — подписал сделку в 2022 году
• Ecosia — компания поисковой системы меньшего масштаба
• Nomic — исследовательская организация ИИ
• Pleias — компания по разработке ИИ
• ProRata — технологическая фирма
• Reef Media — цифровая медиакомпания

Почему это важно

Этот переход от несанкционированного скрапинга к формальному лицензированию представляет собой смену парадигмы в том, как компании ИИ получают доступ к обучающим данным. Ранее крупные технологические фирмы извлекали контент Википедии без компенсации, рассматривая его как свободно доступный ресурс. Новые соглашения устанавливают коммерческую структуру, которая признает ценность курированных знаний.

Для Фонда Wikimedia эти сделки обеспечивают важную финансовую поддержку для поддержания и масштабирования инфраструктуры Википедии. Некоммерческая организация исторически полагалась на небольшие публичные пожертвования для покрытия операционных расходов, которые включают обслуживание серверов, разработку программного обеспечения и поддержку сообщества.

Доходы помогают покрыть инфраструктурные расходы некоммерческой организации, которая в противном случае полагается на небольшие публичные пожертвования, наблюдая, как ее контент становится основой для обучающих данных моделей ИИ.

Соглашения также подтверждают роль Википедии как основного набора данных для современных систем ИИ. Модели, такие как Microsoft Copilot и OpenAI ChatGPT, зависят от разнообразных, точных источников информации, а структурированный, многоязычный контент Википедии обеспечивает идеальный ресурс для обучения.

Программа Enterprise

Wikimedia Enterprise представляет собой стратегический ответ фонда на растущий коммерческий спрос на его контент. В отличие от бесплатного API Википедии, предназначенного для индивидуальных разработчиков и небольших проектов, Enterprise предлагает функции уровня предприятия, включая более высокие лимиты скорости, выделенную поддержку и гарантированное время работы.

Программа была специально разработана для удовлетворения уникальных требований крупномасштабного обучения ИИ, где компаниям необходимо обрабатывать миллионы статей повторно и быстро. Эта техническая возможность делает контент Википедии более доступным для коммерческих приложений, сохраняя при этом приверженность некоммерческой организации свободе знаний.

Модель дочерней компании позволяет фонду преследовать коммерческие возможности без ущерба для его основной миссии. Доходы, генерируемые через Enterprise, напрямую поддерживают бесплатную, публичную Википедию, которую ежедневно посещают миллионы пользователей.

Ключевые особенности программы Enterprise включают:

• Доступ к API с высокой скоростью для крупномасштабной обработки данных
• Ценообразование на основе объема для клиентов предприятия
• Выделенная техническая поддержка и гарантии обслуживания
• Соблюдение требований к использованию данных и лицензированию

Отраслевой контекст

Сроки этих соглашений отражают быструю эволюцию индустрии ИИ и ее растущую потребность в высококачественных обучающих данных. По мере того как компании разрабатывают все более сложные языковые модели, спрос на надежные, комплексные наборы данных усилился.

Ранее отношения между разработчиками ИИ и поставщиками контента были в основном нерегулируемыми, при этом компании извлекали данные из различных источников без формальных соглашений. Подход Фонда Wikimedia устанавливает прецедент для того, как проекты открытых знаний могут взаимодействовать с коммерческой разработкой ИИ.

Это развитие также подчеркивает экономическую ценность курированных знаний. Хотя контент Википедии свободно доступен для личного использования, его коммерческое применение для обучения ИИ представляет собой значительную экономическую возможность, которая может помочь поддерживать работу платформы.

Соглашения с Microsoft, Meta и Amazon особенно примечательны с учетом их масштаба и влияния в секторе ИИ. Эти компании управляют некоторыми из самых широко используемых в мире ассистентов ИИ и языковых моделей.

Взгляд в будущее

Успешные переговоры Фонда Wikimedia о лицензионных сделках с крупными технологическими компаниями отмечают значительную веху в отношениях между открытыми знаниями и коммерческой разработкой ИИ. Эта модель партнерства обеспечивает устойчивый путь вперед для обеих сторон.

По мере расширения индустрии ИИ спрос на высококачественные обучающие данные, вероятно, будет расти. Программа Wikimedia Enterprise позиционирует фонд для удовлетворения этого спроса, сохраняя при этом свою приверженность свободе знаний.

Эти соглашения также устанавливают важный прецедент для того, как другие поставщики контента могут подходить к лицензированию с компаниями ИИ. Успех Key Facts: 1. Фонд Wikimedia объявил о лицензионных соглашениях с Microsoft, Meta, Amazon, Perplexity и Mistral AI для обучения моделей ИИ. 2. Эти сделки позволяют технологическим компаниям использовать 65 миллионов статей Википедии для обучения моделей ИИ, таких как Microsoft Copilot и ChatGPT. 3. Соглашения являются частью Wikimedia Enterprise — коммерческой дочерней компании, которая продает доступ к API с высокой скоростью крупным компаниям. 4. Доходы от этих партнерств помогают покрыть инфраструктурные расходы некоммерческой организации. 5. Google ранее подписал сделку с Wikimedia Enterprise в 2022 году, заложив основу для этих коммерческих соглашений. 6. Фонд не раскрыл финансовые условия сделок с Microsoft, Meta и Amazon. FAQ: Q1: Что является главным событием? A1: Фонд Wikimedia подписал лицензионные сделки с Microsoft, Meta, Amazon, Perplexity и Mistral AI. Эти соглашения позволяют этим технологическим компаниям использовать контент Википедии для обучения своих моделей ИИ через программу Wikimedia Enterprise. Q2: Почему это значимо? A2: Это означает переход от предыдущих практик, когда компании скрапили Википедию без разрешения. Сделки обеспечивают новый источник дохода для некоммерческой организации для покрытия инфраструктурных расходов, одновременно устанавливая формальную структуру для компаний ИИ для доступа к высококачественным обучающим данным. Q3: Что произойдет дальше? A3: Программа Wikimedia Enterprise продолжит предоставлять премиальный доступ к API этим компаниям и, возможно, другим. Генерируемый доход будет поддерживать инфраструктуру Википедии и бесплатные публичные услуги, устанавливая при этом прецедент для того, как проекты открытых знаний могут взаимодействовать с коммерческой разработкой ИИ.