AI компании вече плащат на Wikipedia за съдържанието на е-енциклопедията

Докато компаниите за генеративен изкуствен интелект търсят по-качествени данни за обучение, една от най-старите институции в интернет тихо променя финансовия си модел. Фондация Wikimedia, която управлява Wikipedia, потвърди сключването на нови споразумения с големите играчи в областта на изкуствения интелект, включително Amazon, Meta, Microsoft, Mistral AI и Perplexity. Договорите формализират платения достъп до огромната информационна съкровищница на енциклопедията - съдържание, което отдавна функционира едновременно като отворен ресурс и магнит за автоматизираните уеб "скрепери".

Фондацията заяви, че договорите дават на участващите компании достъп до структурираните данни в Уикипедия в мащаби и със скорост, съобразени с техните изисквания. Организацията не разкрива финансовите условия. Дори и така, този ход бележи повратна точка за един от най-посещаваните уеб сайтове в света, който преминава от модел, изграден основно върху малки дарения, към търговски партньорства с компании, разработващи следващото поколение големи езикови модели.

Ръководителите на фондацията твърдят, че тази стратегия е в отговор на нарастващите технически изисквания към платформата. Автоматизираното извличане на информация - често маскирано като обикновен трафик - се е засилило, тъй като разработчиците на изкуствен интелект събират онлайн текст за обучение на своите модели. В резултат на това натоварването на сървърите на Уикипедия е нараснало значително, дори след като броят на читателите е намалял с около 8% през последната година.

Wikimedia управлява една от най-сложните сървърни екосистеми в интернет, в която се поддържат повече от 65 милиона статии на около 300 езика, редактирани от около 250 000 доброволци. Главният изпълнителен директор на Фондация Wikimedia Мариана Искандер заяви пред Associated Press, че поддържането на инфраструктурата от данни, поддържаща както хората читатели, така и машинния достъп, е свързано със значителни разходи.

„Нашата инфраструктура не е безплатна“, каза Искандер. „Поддържането на сървърите и другата инфраструктура, която позволява както на частни лица, така и на технологични компании да черпят данни от Уикипедия, струва пари.“

Основателят на Wikipedia Джими Уелс приветства партньорствата като практично решение. Той заяви, че моделите, обучени на базата на Wikipedia, се възползват от човешкия процес на редактиране, който филтрира дезинформацията и налага стандартите за проверка.

Дебатът за повторното използване на данните е оспорван в цялата технологична индустрия. Докато библиотеките за изображения и издателите водят съдебни дела срещу неразрешеното използване на данни за обучение, Wikimedia е поела по различен път. Вместо да ограничава достъпа, фондацията се насочва към съвместна работа и компенсация, отчитайки как отворената структура на Wikipedia я е превърнала в централен елемент от екосистемата на изкуствения интелект - и как поддържането на тази отвореност изисква финансиране.