Welo Data, la divisione di Welocalize dedicata ai dati per l'intelligenza artificiale, cerca un Senior Prompt Engineer di madrelingua italiana per il progetto Lion: una collaborazione freelance part-time riservata a chi risiede in Italia.

Ruolo
La persona gestirà da capo a fondo la migrazione tecnica di template di valutazione verso autorater basati su LLM, usando gli strumenti interni del cliente. Le attività comprendono la generazione di prompt di base con strumenti di Automatic Prompt Generation per cluster di template parent-child, la supervisione degli strumenti di Automated Prompt Optimization segnalando stalli e plateau, la scrittura e il raffinamento manuale dei prompt per gestire anti-pattern e casi limite dove gli strumenti non bastano. Sono previsti anche il monitoraggio delle esecuzioni shadowbot per tracciare i disaccordi tra valutazioni umane e LLM, il confronto delle versioni dei prompt con i gold data misurando F1, precision e recall rispetto alla baseline umana, e la redazione della documentazione di certificazione per il lancio. Sono richiesti almeno 4 anni di esperienza come Prompt Engineer, una laurea in informatica, data science, linguistica computazionale, HCI, scienze cognitive o ambiti affini, italiano madrelingua e inglese fluente.

Tecnologie
LLM con output strutturati e rigorosi, task di classificazione complessi, chain-of-thought e few-shot prompting, strumenti di APG e APO. SQL o altri strumenti di analisi dati per individuare pattern di errore e analizzare le performance dei modelli. È un plus la familiarità con interfacce LLM enterprise come la Goose API.

Informazioni su Welo Data

Welo Data è la divisione di Welocalize dedicata ai dati per l'intelligenza artificiale. Supporta aziende tecnologiche e sviluppatori di modelli linguistici nella creazione, annotazione e valutazione dei dati necessari per addestrare e migliorare gli LLM, con un'attenzione particolare alla qualità, alla copertura multilingue e alla sensibilità culturale. Il lavoro spazia dalla raccolta e validazione dei dati alla valutazione delle risposte dei modelli, fino alla progettazione di prompt e di sistemi di valutazione automatica.

Welocalize è un gruppo internazionale attivo da molti anni nella localizzazione e nella traduzione, e porta in Welo Data una rete globale di linguisti, esperti di dominio e specialisti tecnici che lavorano in decine di lingue. Molte collaborazioni sono progetti freelance, spesso part-time, rivolti a professionisti con competenze linguistiche e tecniche specifiche che risiedono nei paesi e nelle aree linguistiche richiesti dal progetto. Per chi lavora nel mondo dell'AI significa contribuire direttamente alla qualità di modelli usati da milioni di persone, confrontandosi con strumenti proprietari, metriche di valutazione rigorose e flussi di lavoro in continua evoluzione, all'interno di team distribuiti in tutto il mondo.

Visita il sito web →