Ako som získal dve zmluvy hodnotiteľa AI bez technického diplomu

Laptop s kartami porovnania vedľa seba a rubrikou pre prácu RLHF a hodnotenie AI

Práca hodnotiteľa AI je najtichšia dobre platená mikroúlohová koľajnica v ekosystéme. Narazil som na ňu náhodou začiatkom roka 2024 a do konca roka som nazbieral niečo cez 4 300 eur u dvoch špecializovaných dodávateľov. Nikto na bežných fórach o mikroúlohách o tom nehovorí, pretože tí, ktorí sa dostanú dnu, to väčšinou nechávajú pre seba.

Čo tá práca v skutočnosti obnáša

V praxi prečítate prompt, prečítate dve alebo tri modelové odpovede a zaradíte ich podľa rubrike. Niekedy napíšete lepšiu verziu sami. Niekedy anotujete, ktorá z dvoch odpovedí je bezpečnejšia, pravdivejšia alebo užitočnejšia. Typy úloh, ktoré som riešil, boli: zaraďovanie preferencií, overovanie faktov, bezpečnostné označovanie a prepisovanie. Žiadna nevyžadovala technické vzdelanie. Všetky vyžadovali zrozumiteľný písomný anglický prejav a schopnosť zdôvodniť hodnotenie v dvoch až štyroch vetách bez zbytočného plnenia.

Odkiaľ zákazky skutočne pochádzajú

Nie z veľkých bežných platforiem. Dve zmluvy, ktoré som získal, pochádzali od špecializovaných dodávateľov, ktorí fungujú ako sprostredkovatelia medzi AI laboratóriami a individuálnymi hodnotiteľmi. Predstavte si ich ako personálne agentúry. V mojom prípade: jeden dodávateľ so sídlom vo Veľkej Británii, ktorý spracúva preferenčné dáta pre veľké laboratórium, a jeden európsky dodávateľ, ktorý prevádzkuje bezpečnostné hodnotenia pre iné laboratórium. Oboch som našiel vyhľadávaním na LinkedIn pre pozície označené ako *Data Analyst Part Time* s kľúčovými slovami *preference data* alebo *RLHF* a potom priamym podaním žiadosti. Pre širší postup hľadania tichej práce, ktorú nikto neinzeruje, má Freelance hub celú moju stratégiu.

  1. Vyhľadávanie na LinkedIn: filter pre skrátený úväzok, zmluvy, práca na diaľku; kľúčové slová *RLHF*, *AI annotation*, *preference data*, *rater*.
  2. Stránky spoločností: identifikujte 8 až 12 špecializovaných dodávateľov, sledujte ich, podajte žiadosť na každú otvorenú pozíciu hodnotiteľa.
  3. Screener: očakávajte 90-minútovú neplatené písomné zadanie, zvyčajne 4 až 6 cvičení zaraďovania.
  4. Pohovor: 20 až 30-minútový hovor s programovým manažérom. Netechnický, zameraný na myslenie v rámci rubriky.
  5. Platená kvalifikačná dávka: 2 až 5 hodín platenej práce hodnotené podľa interných referenčných hodnôt. Splňte ju a ste dnu.

Peniaze bez módnych buzzwordov

Na mojich dvoch zmluvách boli sadzby 18 a 22 eur za hodinu. Platobné podmienky boli net 15 pre prvého dodávateľa a net 30 pre druhého, obaja platili prevodom SEPA s fakturovaním DPH podľa môjho štatútu živnostníka. Objem sa veľmi líšil; jeden mesiac som zaznamenal 41 platených hodín, nasledujúci mesiac sedem. Zaobchádzajte s tým ako s vysoko sadzibnú, málo spoľahlivou koľajnicou a funguje to. Zaobchádzate s tým ako s náhradou platu a rozbije vám rozpočet.

Pre porovnanie s inými freelance koľajnicami, ktoré bežia paralelne, je Prolific vs Userlytics sprievodné čítanie. Pre myšlienkový postoj za vrstvením niekoľkých malých príjmových tokov tak, aby žiadny jednotlivý nemusel niesť celú záťaž, platí rovnaká logika v článku o dividendových aplikáciách.

Červené vlajky, ktoré mi stáli čas

Požiadal som jedenásť dodávateľov pred mojou prvou ponukou. Traja boli podvody alebo podobné MLM schémy, dvaja nikdy neodpovedali, štyria ma previedli screenerom a potom ma ignorovali. Zvyšní dvaja platili. Červené vlajky, ktoré teraz okamžite odfiltroujem: neplatené screener dlhšie ako dve hodiny, sadzby inzerované nad 40 dolárov za hodinu pre generalistov hodnotiteľov, každý dodávateľ, ktorý žiada testovaciu platbu alebo kontrolu kreditu, a každá pozícia, ktorá vyžaduje zaplatenie za školiaci kurz. Legitímni dodávatelia platia kvalifikačnú dávku, vždy.

Johnov vzácny tip

Napíšte jedno čisté vzorové hodnotenie a potom ho opätovne používajte

Screener vás takmer vždy požiada o zaradenie dvoch výstupov modelu a zdôvodnenie vášho hodnotenia. Napísal som jednu šablónovú evaluáciu, 180 slov, štruktúrovanú ako *čo prompt žiadal, ako každá odpoveď s tým naložila, prečo zaraďujem A pred B*. Opätovné použitie tejto štruktúry na každom screeneri skrátilo moju dobu písania z 90 minút na 40 minút a na štyri z piatich žiadostí som dosiahol potrebné skóre.

Čomu by som sa vyhol

Nepodpisujte NDA bez prečítania doložky o zákaze konkurencie. Jeden dodávateľ mi ponúkol zmluvu za 24 eur za hodinu, ktorá by ma uzamkla od akejkoľvek inej práce na anotovaní AI na 12 mesiacov po ukončení zmluvy. Odišiel som, prijal ponuku za 18 eur za hodinu bez takejto doložky a zachoval som možnosť pridať druhú zmluvu o šesť mesiacov neskôr. Flexibilita stála za tých 6 eur.

Často kladené otázky

Potrebujem technické vzdelanie na hodnotenie výstupov AI?

Nie, ale potrebujete zrozumiteľný písomný prejav v angličtine a trpezlivé oko pre nuansy. Moje zázemie je obchodovanie so športovými stávkami, nie strojové učenie, a screenerom som prešiel na druhý pokus. Čo skutočne záleží, je schopnosť zdôvodniť hodnotenie v jednom čistom odseku.

Ako dlho trvá od podania žiadosti po prvú platenú úlohu?

Tri až šesť týždňov podľa mojich skúseností. Onboarding prebieha cez náborového pracovníka, písomný screener, krátky pohovor a potom platenú kvalifikačnú dávku. Čokoľvek rýchlejšie ako tri týždne je zvyčajne nižšie platený program, ku ktorému by ste mali byť skeptickí.

Je príjem dostatočne stabilný na plánovanie?

Nie mesačne. Programy sa rozbehujú a spomaľujú vo vlnách štyroch až ôsmich týždňov. Videl som ponuku 30 hodín týždenne a potom nula na dva týždne. Vnímajte to ako vysokosadzibnú, málo spoľahlivú koľajnicu, nie ako mzdu.