I giganti della tecnologia si rivolgono a Karya per dati di alta qualità nell'era dell'IA

Nella tranquilla città di Agara, circondata da risaie e campi di arachidi nel sud-ovest di Bangalore, Preethi P. è seduta alla sua macchina da cucire. Normalmente, passa le giornate a cucire vestiti e riparare indumenti, guadagnando meno di 1 dollaro al giorno per il suo lavoro. Tuttavia, oggi è diverso. Preethi sta leggendo frasi nella sua lingua nativa, il kannada, in un'app per smartphone. È una delle 70 lavoratrici assunte da Karya, una startup dedicata alla raccolta di dati testuali, vocali e immagine nelle lingue vernacolari dell'India.

Preethi e i suoi colleghi fanno parte di un'ampia forza lavoro globale che opera in paesi come India, Kenya e Filippine, responsabile della raccolta e dell'etichettatura dei dati essenziali per i chatbot di IA e gli assistenti virtuali. A differenza di molti altri appaltatori di dati, Karya paga generosamente i suoi lavoratori, specialmente secondo gli standard locali. Dopo soli tre giorni di lavoro con Karya, Preethi ha guadagnato 4.500 rupie (54 dollari), più di quattro volte il suo guadagno mensile come sarta. Questo reddito le ha permesso di pagare la rata del prestito per le riparazioni della casa, portando sollievo alla sua famiglia. Il modello di Karya mostra come la tecnologia possa migliorare le comunità rurali.

Fondata nel 2021, l'emergere di Karya ha coinciso con l'impennata delle tecnologie di IA generativa come ChatGPT, intensendo la fame di dati delle aziende tecnologiche. L'India, in particolare, dovrebbe avere quasi un milione di lavoratori nell'annotazione dei dati entro il 2030, secondo Nasscom. Karya si distingue offrendo alla sua forza lavoro prevalentemente femminile e rurale salari che possono essere fino a 20 volte il salario minimo prevalente, garantendo dati di migliore qualità in lingua indiana per le aziende tecnologiche.

I giganti della tecnologia si rivolgono a Karya per dati di qualità

Alcuni dei principali attori di Silicon Valley stanno collaborando ora con Karya per affrontare la sfida di reperire dati di alta qualità per i loro prodotti di IA. Microsoft, ad esempio, ha utilizzato Karya per acquisire dati vocali locali. La Fondazione Bill & Melinda Gates sta collaborando con Karya per mitigare i pregiudizi di genere nei dati che alimentano i modelli linguistici di grandi dimensioni, fondamentali per i chatbot di IA. Anche Google di Alphabet si affida a Karya per raccogliere dati vocali in 85 distretti indiani, con piani di espansione a tutti i distretti e lingue.

Molti servizi di IA sono stati sviluppati prevalentemente utilizzando dati in lingua inglese, portando a una mancanza di rappresentanza per gli utenti non anglofoni, in particolare in paesi come l'India. Manish Gupta di Google evidenzia la netta sfida, dove oltre 70 lingue indiane parlate da milioni di persone hanno zero corpus digitale. Questo divario porta i sistemi di IA a faticare con la grammatica e il vocabolario nelle lingue del Sud Asia. Gli sforzi di Karya sono essenziali per affrontare queste disparità.

L'importanza di dati diversificati e di alta qualità non può essere sottovalutata. I modelli linguistici di grandi dimensioni addestrati su dati inadeguati possono produrre disinformazione, stereotipi dannosi e persino discorsi d'odio. Garantire la rappresentanza nei dati di addestramento è vitale, e Karya sta svolgendo un ruolo cruciale in questo senso.

L'impatto sociale di Karya

Karya, una startup a impatto sociale con sede a Bangalore, non solo sta ampliando il pool di lingue rappresentate, ma sta anche prendendo di mira i lavoratori nelle aree rurali che altrimenti potrebbero essere trascurati. L'app dell'azienda è progettata per funzionare senza accesso a internet e offre supporto vocale per coloro con una alfabetizzazione limitata. Oltre 32.000 lavoratori crowdsourced in India hanno effettuato l'accesso all'app, completando 40 milioni di compiti digitali retribuiti, tra cui riconoscimento di immagini, annotazione video e annotazione vocale.

Per il fondatore di Karya, Manu Chopra, la missione va oltre i dati. Cresciuto nella povertà a ovest di Delhi, ha compreso l'impatto che la tecnologia potrebbe avere sull'alleviamento della povertà. Il modello di Karya permette ai lavoratori di guadagnare un reddito equo, aiutando infine a combattere la povertà nelle comunità rurali.

Il successo di Karya in India sta ispirando l'azienda a esplorare opportunità oltre i suoi confini. La startup è in discussioni per offrire la sua piattaforma come servizio a organizzazioni in Africa e Sud America, che possono replicare il modello per empowerment delle proprie comunità.

Oltre 30.000 donne istruite nelle zone rurali dell'India stanno lavorando attivamente con Karya su progetti mirati a ridurre i pregiudizi di genere nei dataset di IA. Questa iniziativa, sostenuta dalla Fondazione Bill & Melinda Gates, è uno sforzo significativo nelle lingue indiane e servirà da base per la costruzione di dataset che promuovano l'equità di genere nei sistemi di IA.

Un percorso verso un futuro migliore

In villaggi come Yelandur, le donne partecipano con entusiasmo ai progetti di Karya, spinte dal desiderio di guadagnare e istruire i propri figli. Man mano che la tecnologia continua a progredire, iniziative come Karya non stanno solo rimodellando l'industria dei dati, ma stanno anche aprendo le porte a un futuro migliore per le comunità rurali in tutto il mondo.

L'approccio innovativo di Karya alla raccolta dati sta trasformando il panorama dell'IA affrontando al contempo questioni sociali critiche come la povertà e i pregiudizi di genere. Man mano che le aziende tecnologiche riconoscono sempre più il valore dei dati di alta qualità, il modello di Karya serve da faro di progresso e inclusività nel settore tecnologico.