Who We Are: Costruiamo un'infrastruttura che fornisce enormi quantità di dati web alle aziende che addestrano i più potenti modelli AI. Siamo il team che aiutalimentare e sostenere Grass, una rete di condivisione della banda che ci permette di gestire un enorme crawler distribuito, offrendoci un accesso unico ai dati web pubblici di alta qualità su scala globale. Inoltre, abbiamo costruito gasdotti per l'ingestinatura, segmentazione e annotazione di miliardi di video, trascrizioni e file audio, creazione di set di dati per laboratori di frontiera. Noi siamo magri, tecnici e ci muoviamo velocemente. Nessun burocrazia, nessun processo decisionale lento; solo un team di costruttori che spingeranno ad espandere ciò che è possibile per i dati web aperti e AI. Panoramica: Come Ricerca Crawling Engineer, si progetta e gestisce sistemi di acquisizione di dati web su larga scala per la ricerca e sviluppo di modelli.

• Forte esperienza di programmazione in uno o più di: Go, Rust, Python, Java, o C++ • Esperienza di costruzione di web crawler o di grandi condotte di dati • Solida comprensione di HTTP, networking e comportamento del browser • Familiarità con sistemi distribuiti e processi paralleli • Esperienza di lavoro con grandi set di dati (preferibilmente scala TB.B.L.PB) • Capacità di debug instabili o adversari Ambienti preferiti / Bonus: • Esperienza con condotte NLP o curazione di set di dati per ML • Familiarità con sistemi di preformazione LLM o di recupero • Esperienza con browser senza testa (ad esempio, Chrome DevTools Protocol, Playwright, Puppeteer) • Conoscenza dei sistemi proxy, rotazione IP e orchestrazione su larga scala • Background in qualità dei dati o benchmarking • Esperienza di funzionamento su cloud o intercabili: Cosa è questo ruolo in grado di collegamento e di collegamento in rete • Esperienza di rete di rete di

• Estrarre dati strutturati da siti dinamici, di dimensioni JS-heavy su scala • Migliorare la deduplicazione e il punteggio di qualità attraverso i set di dati multimodali Perché lavorare con noi: • Opportunità. Siamo all'avanguardia nello sviluppo di un grafico di cingoli e conoscenze su scala web che migliori l'accesso ai dati web pubblici e estende il valore dell'intelligenza artificiale alle persone. • Cultura. Siamo un team snello con un bar alto. Veniamo a lavorare non per essere confortevoli, ma per scoprire di cosa siamo capaci e per fare il lavoro che conta. Non stiamo chiedendo per le persone che mantengono le cose in movimento. Stiamo chiamando per le persone che fanno tutti intorno a loro meglio. • Priorizziamo basso ego e alta produzione. Questo è un team completamente remoto. • Compensa. Ricevegliamo uno stipendio competitivo, benefici e pacchetto di equità. Troviamo lavori in Regno Unito su Arbepernownow.