Fundația Wikimedia a observat o creștere semnificativă a solicitărilor automate, destinate antrenării inteligenței artificiale, care pune presiune importantă asupra serverelor Wikipedia.

Începând din ianuarie 2024, volumul de date multimedia solicitat de aceste programe a crescut cu 50%, generând costuri semnificative pentru Wikimedia.

Deși platforma contribuie substanțial la accesul la cunoștințe, volumul mare de cereri automate nu aduce beneficii directe comunității.

Impactul programelor automate asupra infrastructurii Wikimedia

Wikimedia, care găzduiește platforme precum Wikipedia și Wikimedia Commons, care adună o vastă colecție de materiale media sub licențe libere, se confruntă cu o problemă tot mai frecventă în mediul open-source: extragerea automată de informații (scraping).

Programe automate, colectând date pentru antrenarea modelelor de inteligență artificială, accesează masiv și rapid resursele de pe platformele Wikimedia. În ciuda beneficiilor evidente pentru dezvoltarea inteligenței artificiale, volumul mare de cereri automatizate amenință sustenabilitatea infrastructurii comunității.

Problema devine evidentă în situații de trafic intens, cum ar fi moartea fostului președinte american Jimmy Carter, în decembrie 2024. Pagina Wikipedia a fost supusă unui număr enorm de accesări.

Totuși, o solicitare importantă a provenit din vizualizarea unui film lung de 1,5 ore de pe Wikimedia Commons, dublând traficul normal și supraîncărcând temporar anumite conexiuni.

Interesant este că o mare parte din lățimea de bandă era deja folosită de programele automate înainte ca utilizatorii reali să acceseze conținutul.

Soluții pentru echilibrarea accesului la infrastructură

Fundația Wikimedia subliniază că accesul liber la informații presupune costuri pentru susținerea infrastructurii necesare acestui acces.

Deși numeroase companii care utilizează inteligența artificială se bazează pe informațiile oferite de platforme precum Wikimedia, acestea nu contribuie financiar la suportul infrastructurii necesare acestui acces liber. Acest fapt creează un dezechilibru între cerere și resurse, amenințând sustenabilitatea platformelor open-source.

În acest context, Wikimedia a implementat inițiativa WE5, care stimulează o utilizare responsabilă a resurselor.

Obiectivele acesteia sunt de a încuraja dezvoltatorii să utilizeze metode de acces mai eficiente, asigurând accesul la cunoștințe fără a afecta resursele platformei.

Colaborarea dintre dezvoltatorii de AI și furnizorii de resurse este crucială pentru crearea de API-uri dedicate, finanțarea infrastructurii sau perfecționarea metodelor de acces.

Lipsa unei colaborări eficiente poate afecta capacitatea unor platforme de a susține servicii robuste.