Poviem vám, prečo považujem túto stránku za nerentabilnú a prečo je hlúpe strácať tu svoj osobný čas. Tiež ukážem pár úloh a aké sú.

A tak už prvá snímka obrazovky naznačuje, čo táto stránka predstavuje. A áno, dizajn je tu len banálny, no, nie je to ani o ňom. Tu už pozerám na ceny ... a jednoducho niet slov. Vo všeobecnosti to bude informatívnejšie, poďme!

• 1. Kritika

Často si všímam recenzie o YandexToloka na Aireku a rozhodol som sa to aj tak vyskúšať a zistiť, aké úlohy tam sú a aké sú dobré.

Úprimne povedané, nie som veľmi spokojný s tými úlohami. . Zdá sa mi, že tam platia príliš málo a od Autorov požadujú veľa. Aj keby sme súdili podľa skutočnosti - dolár stúpol! To znamená, že úlohy sú lacné a je príliš lenivé tráviť na nich čas.

Skrátka, snažil som sa splniť jednu úlohu za 20 centov a pravdu povediac, nemal som trpezlivosť. Tu potrebujete zbierať zbierky, liezť na stránky, otvárať karty a odkazy. Prečo je to potrebné? Môžete zachytiť vírusy a môžete sa zmiasť... Všeobecne povedané, Nemám rád, keď je veľa vecí, ktoré treba robiť , najmä za 12 rubľov (20 centov). Je to príliš nudné a dlhé, najmä preto, že na splnenie tejto úlohy sú určené 3 hodiny.

• 2. Sadzby

Sakra. Myslíte si, že tieto sadzby sú normálne? Zaplatiť 1 cent, áno, Pane, toto je maličkosť... Už lepšie recenzie viac na Airecommende napíš a získaj viac pasívny príjem ak strácaš čas.

2 centy, 7 centov atď. No, toto je smiešne, vážne. Prečo hrať rolu robotov? Ospravedlňte ma, samozrejme, ak tu pracujete. Ale tieto úkony beriem ako na pracovný stroj, čiže tu treba neustále klikať, niečo hľadať, kombinovať - ​​proste to časom omrzí.

A áno, čítal som aj recenzie v tomto vlákne, že tu možno nájsť až 10 dolárov za úlohu. Kde? Nevidím nič viac ako 20 centov.

• 3. Porno?

Úprimne, prečo vôbec robiť takéto úlohy? Tu stačí skontrolovať snímky obrazovky, či neobsahujú pornografické fotografie alebo ich rady. A je to len učenie. Všeobecne povedané, tu určité množstvo a zaplatiť pevnú sumu.

Toto je učebná úloha. Ale hneď hovorím, ako ten, ktorý fungoval na captchas, testoch, listoch atď. - časom to omrzí. Možno som si predtým myslel, že je to v pohode, aspoň nejaký ten cent, ale teraz mám úplne iný názor. Najlepšie je správne riadiť svoj čas.

• 4. Výber peňazí

Došlo tu k nejakému incidentu. Raz som napísal recenziu o Peniaze Yandex a budem úprimný, nech už to bolo čokoľvek, vôbec nie som kamarát s peňaženkou Yandex. Aby som odtiaľ vybral peniaze, budem musieť šliapať z Ukrajiny do Ruska. Všeobecne povedané, je problém s poskytovaním pasových údajov pre cudzincov.

*Takže na čo narážam je:

--- Po prvé Nemôžem si odtiaľ vybrať peniaze ---

--- Po druhé , neexistuje WebMoney, ani kiwi ---

--- tretí, nemôžem ich dostať von ---

• 5. Hodnotenie

Vždy ma udivovalo, že na mnohých stránkach, vrátane tejto, musíte naozaj tvrdo pracovať, aby ste dosiahli požadované hodnotenie. Koniec koncov, každý by mal dokonale rozumieť a pochopiť, že od toho závisí počet úloh, ako aj zvýšený plat. Som však veľmi sklamaný, že tu musíte pracovať príliš tvrdo a nie každý sa to odváži.

Vo všeobecnosti sa mi tu absolútne nepáči systém hodnotenia. Je príliš ťažký a jeho prelomenie k požadovanému výsledku zaberie veľa času. Preto tu prechádzam a úplne proti takémuto násiliu na sebe. Za 20 centov nie je ťažké orať.

Nakoniec poviem, že som úplne proti tomu, aby som tu pracoval. Tu je plat mizerný, a čo je ešte viac, musíte vykonať príliš veľa operácií v každej úlohe, aby ste dostali tento malý plat.

A áno, YandexTololka je pravdepodobne dobrá, ak na nej získate určité hodnotenie. ale na tento moment ja tam nevidim vyhliadky do budúcnosti . Verím, že je to zastaraná stránka a budete tam strácať čas.

Najlepšie je popracovať napríklad na copywritingu alebo výmene komentárov.

Prepustili sme nová kniha„Obsahový marketing v v sociálnych sieťach: Ako sa dostať do hlavy predplatiteľov a zamilovať si svoju značku.

Prihlásiť sa na odber

Yandex.Toloka je služba od spoločnosti Yandex, ktorá umožňuje používateľom zarábať hotovosť a vývojárov na zlepšenie systému.

Osoba môže získať odmeny za vykonávanie rôznych úloh: od vyhľadávania firemných údajov a hodnotenia kvality obsahu až po analýzu webových zdrojov.

Sadzba za splnenie jednej úlohy je približne 0,3 dolára a aby ste mohli začať, musíte si v prvom rade zaregistrovať účet a v druhom rade absolvovať školenie, ktoré určí, či sa človek k úlohám dostane alebo nie.

Čo je Yandex Toloka

Toloka je nástroj, ktorý vám umožňuje riešiť širokú škálu pomerne jednoduchých úloh na zlepšenie internetu vo všeobecnosti, a najmä vyhľadávacieho nástroja Yandex, pričom dostávate peniaze ako odmenu. Algoritmus práce je tu zostavený takto:

• Zákazník zverejní úlohu v službe, ktorú je potrebné vyriešiť (ak vyhľadávacie roboty nezvládam to).
• používateľ, registrovaný a vykonáva sa školenie na vykonávanie tejto úlohy. V dôsledku práce sú na účet pripísané peniaze, ktoré je možné neskôr vybrať. Úlohy sa spravidla týkajú analýzy a hodnotenia akéhokoľvek materiálu, či už ide o obrázky, články alebo videá uverejnené na stránke.

Ak chcete začať, osoba sa musí zaregistrovať Poštová služba Yandex, s ktorým je prepojený účet v Toloke. Používa sa aj číslo mobilný telefón– na potvrdenie registrácie sa odošle SMS s kódom. Vek používateľa musí byť aspoň osemnásť rokov, pretože niektoré prezerané informácie majú pornografický obsah.

Yandex.Toloka je jedinečný nástroj, ktorý umožňuje na jednej strane zlepšiť internet pomocou skríningu nevhodný obsah a na druhej strane zarobiť Obyčajní ľudia pri vykonávaní jednoduchých úloh, ktoré z jedného alebo druhého dôvodu vyhľadávacie algoritmy nedokážu zvládnuť.

Úlohy v Yandex Toloka

Na získanie prístupu k pravidelnému plneniu úloh je dôležité absolvovať školenie vo forme testu: človek dostane otázky a limitovaný čas na odpovede. Podľa recenzií používateľov, testovacie úlohy pomerne zložité a nie vždy je možné pochopiť, aký druh formátu odpovede musíte zadať. Systém však poskytuje tipy - pomocou nich môžete rýchlo pochopiť princípy fungovania Toloka.

Celkovo má človek 20 možností na 40 minút. Počas tejto doby pomocou prijatých spoločností a Kľúčové slová, je potrebné uviesť čo najpodrobnejšie a najsprávnejšie odpovede. Ak sa pomýlite, systém to oznámi a presne uvedie, kde sa používateľ mýli. Poskytne sa aj podrobný komentár vysvetľujúci správnu odpoveď. Yandex.Toloka má sekciu štatistík, kde sa môžete dozvedieť viac o svojich úspechoch. Konkrétne si môžete pozrieť tu:

• Počet a typ dokončených úloh.
• Celková suma akumulovaných prostriedkov.
• Úlohy, ktoré kontroluje moderátor, a tie, ktorých výsledok bol zamietnutý alebo neakceptovaný.

Úlohy môžete dokončiť pomocou osobný počítač a mobilný telefón, no kategórie sú dostupné len na jednom zariadení – PC alebo smartfóne. Sú platení inak: existuje práca, ktorá sa odhaduje na 0,001 USD a za niektoré úlohy v Yandex.Toloka môžete zarobiť 0,7 USD. V priemere môže človek zarobiť v priemere 5 dolárov za pracovný deň.

Môžete sa zaregistrovať ako dodávateľ a zákazník. V druhom prípade osoba zaúčtuje úlohy a zaplatí za ich splnenie. Nie je možné byť zároveň zákazníkom aj interpretom. Vo väčšine prípadov sú zákazníkom rôzne divízie spoločnosti Yandex, pretože potrebujú pomoc pri sledovaní webových zdrojov s vysoko kvalitným a zakázaným obsahom.

Z dlhodobého hľadiska to bude prospešné nielen vyhľadávač, ale aj všetkým používateľom, pretože na prvých stranách Výsledky vyhľadávania budú hodnotené iba stránky, ktoré sú relevantné pre vyhľadávacie dopyty, čo zvýši kvalitu reklamné kampane a prilákať do služby ďalšie publikum.

Aká je podstata práce na Yandex Toloka

Spočiatku sa môže zdať, že v Toloke je veľmi málo úloh. Feed obsahuje okolo tridsať úloh počas pracovných dní, cez víkendy ešte menej. Nie je však dôvod na obavy – väčšinu úloh je možné vykonať niekoľko desiatokkrát. Tým sa zvyšuje množstvo dennej práce, a teda aj výška zárobku. Najbežnejšie typy úloh sú:

• Pozrite si video a analyzujte, ako sa jeho obsah zhoduje s hlavným dopytom.
• Po preskúmaní niekoľkých výsledkov vyhľadávania sa rozhodnite, ktorá možnosť je pre používateľov relevantnejšia.
• Stotožnenie obsahu s kategóriou „pre dospelých“.
• Určite stupeň zložitosti vyhľadávacieho dopytu a relevantnosť výsledkov vyhľadávania pre aktuálne kľúčové slovo.
• Hodnotiť kvalitu obrázkov v inzerátoch, ich súlad s textom inzerátu a deklarovanými parametrami.
• Uveďte, či sa obsah článku zhoduje s názvom.
• Skontrolujte fungovanie stránky tak, že sa pokúsite kontaktovať manažérov prostredníctvom zadaných kontaktných údajov, ako aj nájsť fotografie organizácie na internete.

Toto nie je to najzaujímavejšie, čo môže služba ponúknuť. Existujú napríklad úlohy, na ktoré musíte ísť zadanú adresu a odfotografujte organizáciu sídliacu na daných súradniciach (toto je ponúkané len užívateľom žijúcim v tomto meste). Sadzba za takúto prácu je malá - nie viac ako 0,5 dolára. Za tieto peniaze musí človek nájsť požadovanú adresu, dostať sa k nemu, urobiť potrebné úkony (odfotiť) a nahrať výsledok do aplikácie. Vyžaduje si to veľa času a úsilia a nakoniec sa to vôbec nevypláca.

Ostatné úlohy, ktoré nevyžadujú fyzickú aktivitu, sú cenovo oveľa lacnejšie, ale dajú sa vykonať viackrát a prinášajú dvojnásobný zisk. Kontrola výsledkov a prevod zarobených peňazí prebieha takmer okamžite. V niektorých prípadoch musí používateľ počkať na dokončenie oneskorenej kontroly. Prostriedky môžete vybrať na elektronické peňaženky vrátane Yandex.Money.

Proces kontroly pracovného toku

Pracovný tok v službe je riadený pomocou štandardného hodnotiaceho algoritmu Yandex. Po odoslaní hotového výsledku používateľom ho systém opraví a odošle na úvodnú kontrolu. Ak práca spĺňa požadovanú kvalitu, človek dostane príležitosť zaujať vysoké pozície na vrchole, kde sa zhromažďuje hodnotenie všetkých účastníkov Toloka. Existuje niekoľko typov hodnotenia:

1. Zručnosti interpreta. To je základ pre výpočet ratingu. Je to takmer rovnaké pre všetky účty, ktoré úspešne prešli testovaním. Používateľ môže získať od nuly do 100 jednotiek.
2. Absolútne hodnotenie. Tu je kumulatívne hodnotenie činnosti umelca. Čím vyššie je absolútne hodnotenie, tým je účet pri hodnotení smerodajnejší.
3. Relatívne hodnotenie. Ukazuje, aké miesto zaujíma interpret medzi celkovým počtom všetkých registrovaných užívateľov. Čím vyššie relatívne hodnotenie, tým vyššia pozícia účtu v zozname.

Koľko môžete zarobiť v Yandex Toloka

Úroveň zárobkov používateľov závisí od ich aktivity a pozície v systéme hodnotenia. V priemere môže človek dostať od 5 do 10 dolárov a viac za pracovný deň. Hlavnými faktormi úspechu sú tu najmä:

• Počet úloh dostupných pre konkrétneho používateľa.
• Množstvo času, ktorý môže exekútor prideliť pracovnému postupu.

Zarobené prostriedky sú pripísané na interný účet služby. Existuje niekoľko spôsobov, ako vybrať peniaze z Yandex.Toloka: do Yandex.Wallet, PayPal a PrivatBank. pozadu túto operáciuúčtuje sa provízia a výstupná suma môže byť nižšia. Odporúča sa použiť peňaženku Yandex, pretože tu je najmenšia úroková sadzba na výber peňazí.

Na internete je veľa služieb podobných Yandex.Toloka. Medzi najznámejšie a najdôveryhodnejšie patria Wmmail, Socpublic, Seosprint a Profitcentr. Všetky sú umiestnené ako spoľahlivé platformy na zarábanie peňazí na poprave. jednoduché úlohy na internete.

Vyhľadávače sa neustále snažia zlepšovať svoje algoritmy, ale roboty nie vždy dokážu určiť relevantnosť obsahu.



Niekedy je potrebné zapojiť ľudí, aby určili, či sa materiál poskytuje používateľom na rôzne požiadavky. Služba Toloka spoločnosti Yandex bola vytvorená špeciálne na tento účel.

Toloka v ruštine, jednoduchý zárobok

Táto služba sa objavila už dávno, no pre nedostatok úloh ju využívalo málo ľudí. Teraz je veľa práce a je to iné. Je ľahké vykonávať, takže odmeny nie sú veľké.

Ak chcete podrobne hovoriť o práci s Yandex.Toloka, Pripravili sme sprievodcu krok za krokom:

Len tak ruské upratovanie pomáha zbierať peniaze na internete. Systém je zatiaľ dostupný len pre obyvateľov Ruska, Ukrajiny, Bieloruska, Turecka a Kazachstanu.

V budúcnosti sa systém určite rozšíri a bude dostupný aj v iných krajinách. Podľa skúsených používateľov, za deň je celkom reálne vyzbierať 5-10 dolárov.

V Yandex.Toloka nie sú vždy úlohy, preto sa snažte stránku obnovovať častejšie, aby ste nezmeškali skvelé ponuky.

Už vyššie bolo povedané, že úlohy súvisiace s mobilnými zariadeniami prinášajú viac peňazí. Ak ich chcete vykonať, nainštalujte si ich do smartfónov špeciálna aplikácia.

Ťažkosti pri plnení úloh mobilné zariadenia by sa nemali vyskytovať, pretože sú tiež jednoduché:

Zatiaľ sa nedá povedať, že by sa Toloka mohla stať hlavným zdrojom zisku, no je isté, že sa ňou dá zarobiť.

Nezabudnite, že sa musíte pokúsiť dokončiť objednávky, inak bude vaše hodnotenie nízke a úlohy prestanú prichádzať. Môžete si to overiť vo svojom profile.

Analógy Yandex Toloka

Žiaľ, objednávok je v systéme príliš málo a musia dlho čakať. Nestrácajte čas, používajte iné systémy s jednoduchými úlohami.

Vzniklo ich pomerne veľa a nazývajú sa klikací sponzori. Tam môžete byť požiadaní nielen o porovnanie výsledkov vyhľadávania, obrázkov, videí alebo vyjadrenie názoru na niektoré spoločnosti.

Na poštových serveroch sú tisíce úloh, môžete ich vykonávať nepretržite, nikdy neskončia. Je to tiež jednoduché, po bežnej registrácii prejdite do sekcie úloh a vyberte príslušnú prácu:

Prostredníctvom takýchto systémov sa inzerujú rôzne stránky a objednávajú sa všetky druhy cheatov. Čaká na vás pri každej objednávke Detailný popis, ako aj špecifikáciu toho, čo je potrebné odoslať na kontrolu. Po preštudovaní požiadaviek začnite kliknutím na tlačidlo:

Tento príklad vyžaduje jednoduchá registrácia a zostava by mala obsahovať prihlasovacie meno, ktoré je zadané pri vytváraní profilu. Takúto objednávku zvládne aj začiatočník a po kliknutí na zelené tlačidlo sa ihneď zobrazí formulár, kde je uvedený prehľad (v našom prípade ide o prihlásenie):

Kliknite na „Odoslať správu“ a do niekoľkých hodín sa prostriedky pripíšu k zostatku. Všetko je veľmi jednoduché a peniaze sa sťahujú aj do rôznych platobných systémov. Ak máte záujem o vedľajšiu prácu, využite tieto projekty:

1. Wmmail je spoľahlivý a najstarší box, do ktorého nedávno pridali výstup do Yandex.Money, Payeer a telefónne číslo.

Vyhľadávacie technológie

Za rok a pol v Yandex na zlepšenie vyhľadávacie algoritmy a technológie strojovej inteligencie sa využíva platforma Toloka. Môže sa to zdať prekvapujúce, ale moderné technológie strojové učenie v rôznej miere potrebujú ľudské hodnotenia.

Ľudia hodnotia relevantnosť referenčných dokumentov pre vyhľadávacie dopyty tak, aby sa podľa nich riadili vzorce hodnotenia vyhľadávania; ľudia prepisujú zvukové nahrávky na text, takže algoritmus rozpoznávania hlasu je naladený na tieto údaje; ľudia kategorizujú obrázky tak, že po precvičení s týmito príkladmi neurónová sieť potom to urobil bez ľudí a lepších ľudí.

To všetko sa dá urobiť v Toloka, čo je crowdsourcingová platforma, ktorá vám pomôže nájsť tých, ktorí vyriešia váš problém. Dnes ide do beta stavu a je teraz otvorený pre všetkých externých zákazníkov. Je teda čas povedať vám podrobne o samotnej platforme a s akými neočakávanými ťažkosťami sme sa pri práci na nej stretli, podeliť sa o svoje postrehy a vysvetliť, ako vám môže Toloka konkrétne pomôcť.

Úlohy, o ktorých sme hovorili vyššie, sa tradične riešia v Yandex s pomocou vyškolených odborníkov - posudzovateľov. Hodnotitelia sledujú, ako sa výsledky vyhľadávania zhodujú s dopytom, nachádzajú spam medzi nájdenými webovými stránkami, klasifikujú ho a riešia podobné problémy v iných službách.

Iróniou je, že čím viac nových technológií uvádzame na trh, tým viac rastie potreba ľudského hodnotenia. Nestačí jednoducho určiť relevantnosť stránky pre vyhľadávací dopyt. Je dôležité pochopiť, či je stránka posiata škodlivé reklamy? Obsahuje stránka obsah pre dospelých? A ak áno, znamená požiadavka používateľa, že hľadal práve takýto obsah? Aby ste automaticky zohľadnili všetky tieto faktory, musíte zhromaždiť dostatočný počet príkladov na školenie. vyhľadávač. A keďže sa všetko na internete neustále mení, tréningové zostavy je potrebné neustále aktualizovať a aktualizovať. Vo všeobecnosti sa len pri vyhľadávacích úlohách potreba hodnotenia človekom merala v miliónoch za mesiac a každý rok toto číslo len rastie.

Prilákať stále viac a viac posudzovateľov v každej z krajín, kde Yandex pôsobí, je organizačne náročné. Nie všetky nové úlohy si však vyžadujú špeciálne školenie. Mnohé úlohy zvládne takmer každý a často je ešte užitočnejšie zbierať názory. bežných používateľov, nie je odborne vyškolený na hodnotenie rebríčka. Toto oddelenie obáv nás viedlo k záveru, že okrem posudzovateľov potrebujeme ďalší flexibilnejší a škálovateľnejší zdroj ľudských hodnotení.

crowdsourcing

Okrem zložitých úloh vykonávaných posudzovateľmi sme sa potrebovali naučiť zbierať milióny jednoduché odhady v ktorejkoľvek krajine záujmu. Väčšina úloh, o ktorých hovoríme, je pomerne jednoduchá a malá: ich dokončenie nezaberie viac ako 30 sekúnd. Ale počet týchto úloh je veľmi veľký. Obyčajné burzy na voľnej nohe, kde môžete priamo kontaktovať viacerých účinkujúcich a osobne im vysvetliť podstatu zadania, nám nevyhovovali. Pre priemyselnom meradle museli sme prilákať tisíce účinkujúcich, zaplatiť za ich prácu bez papierovania a kontrolovať výsledok.

Najbližším analógom toho, čo sme skutočne potrebovali, boli crowdsourcingové platformy Amazon Mechanical Turk, Clickworker a CrowdFlower. S ich pomocou spravidla akademickí výskumníci v oblasti strojového učenia a veľkí vyhľadávacie spoločnosti ako Bing.

Všetky tieto platformy však nefungovali v krajinách, ktoré nás zaujímajú. Okrem toho sa nám už podarilo nazbierať nejaké skúsenosti, aby sme problém vyriešili svojpomocne.

Toloka

V základnej logike práce akejkoľvek crowdsourcingovej platformy a najmä Toloky nie je nič zložité. Na jednej strane pracujeme s interpretmi, rozdeľujeme úlohy, realizujeme platby a na druhej strane pomáhame zákazníkom dosahovať výsledky s minimálnym úsilím.

Mimochodom, čo je to slovo „Toloka“? Nad názvom rozmýšľali pomerne dlho, hľadali medzinárodné možnosti, no napokon to dopadlo úplne naopak. Nápad nazvať službu „Toloka“ sa zrodil v našej kancelárii v Minsku, kde sa mimochodom sústreďuje jadro vývoja platformy. Toto slovo (v bieloruskom jazyku „talaka“) je v Bielorusku asi 30-krát bežnejšie ako v Rusku a znamená spoločný užitočná práca na celkový výsledok, a to sa dobre hodí k crowdsourcingu. Aj keď výber mena zďaleka nie je najviac ťažká otázka, s ktorým sme sa stretli pri vývoji služby.

Aké môžu byť úlohy? Potenciálne môžu byť akékoľvek, pokiaľ ide o počiatočné údaje, rozhranie, očakávané reakcie. Jeden potrebuje nahrať obrázky a požiadať o ich klasifikáciu, iný musí zobraziť audio prehrávač a požiadať o napísanie toho, čo je na nahrávke počuť, tretí musí ukázať mapu s polohou používateľa.

Niekoľko príkladov

Preto bola zvolená cesta maximálnej flexibility: pomocou json pre vstupné a výstupné parametre a html/css/js pre rozhranie môže zákazník vytvoriť takmer akúkoľvek úlohu. A pre tie úlohy, ktoré si vyžadujú prácu „v teréne“ (napríklad prejdite na adresu a skontrolujte si relevantnosť informácií o organizácii), sme pripravili mobilná verzia Toloki pre Android.

Flexibilita v nastaveniach má a zadná strana- vysoký prah vstupu. Nie každý vie, ako vytvoriť rozhranie. Tento problém riešime s hotové šablóny, celková suma ktoré plánujeme zvýšiť.

Ako zaplatiť tolokerom? Úspešný výber ťažko zarobených peňazí je jednou z hlavných motivácií pre človeka, aby sa vrátil a pokračoval v plnení úloh. Zložitý a zdĺhavý postup stiahnutia môže platformu pochovať. Preto sme vybudovali systém, v ktorom stačí pridať peňaženku na PayPal alebo Yandex.Money. Vo fáze ladenia procesov na strane Toloka môže výber peňazí trvať až 30 dní, teraz to trvá niekoľko dní alebo dokonca minút. Zároveň sú tolokeri aj zákazníci oslobodení od papierovania.

Ako zabezpečiť kvalitu výkonu? Táto otázka je hlavná bolesť hlavy akúkoľvek platformu crowdsourcingu. V Toloke, ako v každej spoločnosti, sú usilovní a pozorní ľudia a sú leniví, bezohľadní ľudia, ktorí vedia písať scenáre. Hlavnou úlohou je udržať tie prvé v službe a tie druhé čo najskôr nájsť a obmedziť. Aby sme to dosiahli, naučili sme Toloka analyzovať správanie interpretov. Zákazníci majú teraz možnosť automaticky identifikovať a obmedziť tých tlačiarov, ktorí napríklad reagujú príliš rýchlo, alebo ktorých odpovede nesúhlasia s odpoveďami ostatných. Pridali sme aj možnosť využívať kontrolné úlohy („honeypots“) a povinné prevzatie pred platbou. Okrem toho je možné zjednodušiť prijímanie. Zadávajte úlohy jednému používateľovi a hodnotte ich výsledky ostatným.

Mimochodom, čo vieme o samotných tolokeroch?

Tolokers

V Toloke sa registrujú a vykonávajú rôzne úlohy. Väčšinu účinkujúcich (aj úloh) máme v Rusku, na Ukrajine a v Turecku. Väčšinu tolokerov tvoria mladí ľudia do 35 rokov (spravidla študenti technických univerzít alebo matky na materskej dovolenke). V podstate interpreti považujú Toloku za dodatočný zdroj peniaze, hoci mnohí hovoria, že radi robia užitočnú prácu, aby bol internet čistejší. Tu je napríklad to, čo o sebe píšu, keď diskutujú o Toloke na internete:

Do mojej peňaženky už padlo 790,41 rubľov. Ak niečo, tak v regióne, kde žijem, je plat napríklad mladého odborného učiteľa 2 800 rubľov. Upozorňujeme, že toto všetko je naplnené medzičasmi, v voľný čas, medzi predstavením hlavného diela, keď som si chcel oddýchnuť a trochu sa prepnúť.

A vôbec sa necítite ako hlúpy klikajúci robot. Existuje určitý zmysel pre užitočnosť ich práce.

Toloka v Yandex

Upratovanie je teraz takmer 270 tisíc účinkujúcich z piatich krajín sveta, 80 tisíc úloh vykonaných denne, 400 už bolo testovaných odlišné typyúlohy, 1 bilión zhromaždené hodnotenia.

V čase otvorenia sme začínali s tromi hlavnými typmi úloh a je zaujímavé, že sú stále najobľúbenejšími úlohami väčšiny tolokerov: hodnotenie kvality vyhľadávania obrázkov, označovanie obsahu pre dospelých a párové porovnávanie objektov (napríklad stránok v rôznych prevedeniach).

Používanie crowdsourcingu na zhromažďovanie skóre v týchto projektoch umožnilo tímom výrazne skrátiť čas potrebný na zostavenie metrík skóre. Tam, kde hodnotitelia potrebujú na vyhodnotenie súboru predmetov niekoľko dní, tolokeri to zvládnu za pár hodín. Znížením nákladov na odhad bolo možné výrazne zväčšiť veľkosť tréningových sád a zlepšiť kvalitu klasifikačných algoritmov. Napríklad po prechode na Toloka sa kvalita definície obsahu pre dospelých zvýšila o 30 %.

Desiatky rôznych tímov Yandex slúžia ako zákazníci na hodnotenia v Toloke. Táto služba zhromažďuje údaje pre technológie počítačového videnia a rozpoznávanie reči, zlepšujú sa technológie odporúčaní, dopĺňa sa základ adresára organizácií a rieši sa mnoho ďalších interných úloh. Ale stále nestačia na to, aby všetkým tolokerom poskytli úlohy. Musíme ísť ďalej.

Prví externí zákazníci

Po dohode s niekoľkými externými partnermi sme zorganizovali uzavreté alfa testovanie na kontrolu súladu platformy s externými potrebami. Externí zákazníci Prišli s oboma typmi úloh, ktoré poznáme, aj s novými špecifickými pre ich podnikanie. Počas testovania boli spustené úlohy na dešifrovanie cenoviek tovaru s fotografiami, audit predajní, kategorizáciu tovaru a hľadanie vlastností.

Na záver by som chcel hovoriť o hlavných odporúčaniach, na základe ktorých sme sformulovali vlastnú skúsenosť práca s posunovačmi.

Múdrosť davu (múdrosť davu) nie je vôbec filozofický fenomén, ale celkom štatisticky overiteľný jav. Aj keď názor jednej osoby nie je dostatočne kompetentný a jej hodnotenie nie je dostatočne presné, kombinácia hodnotení od mnohých rôznych ľudí môže poskytnúť presnejšie výsledky ako hodnotenie jedného profesionálneho odborníka. Hlavnou vecou je správne zorganizovať proces zhromažďovania a agregácie jednotlivých odhadov.

1. Crowdsourcing je veľmi mocný nástroj, je skvelé, keď rozprávame sa o veľkých objemoch a potrebe škálovať a štandardizovať procesy. Ale ak máte jednorazová úloha, co vyriesi jeden clovek za par hodin, takto sa to potom riesi lahsie.
2. Opakovane bolo overené, že každý zložitý problém možno a treba rozložiť na súbor malých nezávislých čiastkových úloh. To výrazne zlepší kvalitu výsledných údajov bez zvýšenia nákladov na celkovú prirážku.
3. Väčšina úloh v crowdsourcingu sa spúšťa s prekrývaním (keď viacerí umelci vykonávajú rovnakú prácu). Populárna mylná predstava je, že čím viac sa prekrýva, tým vyššia je kvalita výsledkov. Spravidla to tak nie je. Presnosť sa pomerne rýchlo stabilizuje, keď sa prekrývanie zväčšuje, a existuje len málo pracovných miest, ktoré oprávňujú prekrývanie viac ako 5 ľudí na jedno pracovné miesto.
4. Nie celkom intuitívny fakt: cena za úlohu v crowdsourcingu nemá takmer žiadny vplyv na kvalitu získaných známok. Často môže prebíjanie dokonca poškodiť kvalitu, pretože tlačiaci v honbe za peniazmi prestanú venovať dostatočnú pozornosť úlohám.
5. Ale hlavná vec, od ktorej skutočne závisí kvalita hodnotenia, je organizácia úlohy. Čím jasnejšie sú pokyny napísané a rozhranie je navrhnuté, tým vyššia je kvalita výsledku. A nezabudni na testovacie úlohy(„honeypots“), ktoré pomôžu identifikovať bezohľadných tolokerov.
6. Väčšina projektov v Toloke nevyžaduje od interpreta špeciálne znalosti. Napriek tomu niekedy musíte tolokerov „vycvičiť“, aby vykonali úlohu presne tak, ako to zákazník potrebuje. V tomto prípade by ste mali vytvoriť špeciálne tréningové bazény a použiť ich dodatočné nastavenia(napríklad povoliť priradenie k úlohe iba tým tolokerom, ktorí úspešne absolvovali školenie).
7. Správne zacielenie úloh na určitých interpretov často pomáha výrazne zlepšiť výsledky značkovania. Napríklad, ak potrebujete vyhodnotiť pantolety, aby ste označili katalóg topánok, potom je lepšie okamžite dať túto úlohu chodkyniam.
8. Nie všetky úlohy môžu byť ponechané na milosť a nemilosť múdrosti davu. Vždy bude existovať úloha, ktorá si vyžaduje odborné školenie a maximálnu starostlivosť. Ale takmer vždy v týchto prípadoch je možné pomocou predfiltrovania davu zjednodušiť život profesionálnym odborníkom, výrazne znížiť náklady na získanie odhadov a zvýšiť priepustnosť váš pracovný postup.

Boli by sme vďační komunite Habrahabr za spätnú väzbu na prácu beta verzie Toloka. Naďalej pracujeme na tom, aby každý zákazník mohol získať ten najkvalitnejší výsledok bez nutnosti písania kódu a každý zodpovedný vykonávateľ – povzbudenie a dostatočný počet úloh. A vaša spätná väzba pomôže nášmu tímu v tejto práci. Vďaka!

stupeň: 3

Nie... Nenechal som sa najať za centy. Naozaj, veľa práce za pár drobných a nestojí to za to. Pripomínalo mi to nejaký seosprint, ale z Yandexu. Som z nich veľmi sklamaný a vzhľadom na to, že sú hrozné ako PS, vo všeobecnosti sa ukáže nejaký horor. Je veľa úloh, za ktoré platia menej ako dolár, je málo úloh, kde je platba solídna a párkrát som to videl. Áno, kecy sa to robia rýchla ruka a nie viac, ako tomu rozumiem. Čo sa týka štruktúry ako celku - všetko sa nakopí a vyberiete si sami, ako v nejakom second-hande... Filtre sú slabé, určite treba rozšíriť skríning navrhovanej práce, lebo nemáte chcem sa vobec hrabať v týchto sračkách a celkovo je to nejaká bieda a nie je jasné pre koho to bolo robené ... áno aj na hlúpom seosprinte a pod. sa pracuje lepšie ako v tomto tupom , nepochopiteľné miesto, kde nie je jasné, čo sa deje. Áno, existuje propagácia PF, ale Yandex neumožňuje takýto pohyb, a preto sa stránky dostanú do filtra, to znamená, že samotní zákazníci idú online, už je to smiešne.

stupeň: 5

Pravdepodobne jeden z prvých, ktorí sa prihlásili. Bolo zaujímavé zistiť, aké úlohy budú v systéme, ako sa vyhodnocujú atď. Staňte sa predsa hodnotiteľom Yandexu. Tým pádom som sa nechal tak uniesť, že som sa na pár hodín zasekol pri upratovaní:D Zarobil som až 10 dolárov. Prvé dni boli pekné zaujímavé úlohy s cenami do 2 USD za kus. Pozrel som sa druhý deň, služba je stále nažive, je tam veľa úloh, ceny od 0,1 $. Celkom skutočným spôsobom zarobiť peniaze pre študentov a ženy v domácnosti. Dôležitý bod! Ak chcete vybrať prostriedky, musíte prejsť cez identifikáciu peňaženky Yandex.Money. Môžete tiež pridať svoj PayPal.

stupeň: 4

Na Toloke pracujem už druhý týždeň, o službe som sa dozvedel už dávno. Ale len nedávno začalo tvrdo pracovať. Existuje veľa úloh, so zvýšením hodnotenia z 300 sa stretávajú aj zaujímavé úlohy od zákazníkov, ktorí nie sú od spoločnosti Yandex. S rastom hodnotenia a zručností pribúdajú úlohy a podľa toho sa zvyšuje aj platba. Služba pre tých, ktorí sú pozorní, vnímajú bežne monotónnu prácu. V priemere môžete vybrať 5 dolárov denne. Cez víkendy je veľmi málo úloh, najmä večer. Nedávno som videl úlohy s davovým testovaním, kde je už platba vyššia, ale treba myslieť aj mozgom, a nie len vystrkovať relevantnosť do automatu.

stupeň: 5

Nepoužil som Toloka ako pešieho agenta, pretože som bol príliš lenivý. Môžem vám však povedať o úspešnej skúsenosti s plnením úloh online. Nechýba porovnanie stránok, kontrola relevantnosti vyhľadávacie dopyty, určenie pri vydávaní obrázkov prípadných nedostatkov na zadaní. Zárobky sú tu, aj keď nie sú vysoké, ale, priatelia, je aj dosť tých, ktorí chcú - veď na plnenie úloh potrebujete len hlavu a prístup na internet. Dokázal som zarobiť tri stovky za pár dní, ale čím rýchlejšie sa naučíte návod a naplníte ruku, tým vyšší bude váš zárobok. Odporúčam pre tých, ktorí sú z nejakého dôvodu pripútaní k domu a sú schopní monotónnych činností.

stupeň: 4

Zatiaľ je to tak najlepšie zárobky, hľadá ďalších. La-la nebudem, všetko je vidieť na obrazovke. Zaujímajú ma najmä zadania v teréne, fotka budovy, fasáda predajne, harmonogram prác. V mojom meste som si pozrel mapu, 237 úloh od 10 do 15 centov. Zatvoril som svoju oblasť a objavili sa na nej nové. Hrať - nechcem. Nováčikom sa to nepáči? Pri vstupe je úroveň zručností 150. Takmer všetky úlohy sa vykonávajú prostredníctvom školenia 1-3 kusov a skúšky, sú 0 centov. A úroveň zručností okamžite klesá s nešikovným výkonom, klesol som na 40. Teraz mám 270. 38 dolárov som zarobil od polovice decembra bez námahy. Urobil som kartu Yandex, zaplatil som za ňu 300 rubľov z peňazí, ktoré som zarobil. Má tri roky. Z bankomatu Sber si môžete vybrať až 10 000 mesačne bez provízie. V obchodoch akceptujú, žiadajú, platia. Na pivo a šek som z dôchodku neminul ani cent.

stupeň: 2

Táto služba na ktorom nezarobíte veľa, ale čas stratiť áno. Trvalé technické problémy a extrémne nízke hodnotenie zadaní určite nemajú.
Zo všetkých týchto úloh sa oči rýchlo unavia, sú jednotvárne a nudné, a to všetko za pár drobných.
Po dvoch týždňoch som to všetko vzdala a neľutujem. Jediná škoda stráveného času bolo stráviť tri-štyri hodiny denne a nezarobiť ani jeden dolár. Ako sa ukázalo, niektoré úlohy nie sú platené vôbec.
Spočiatku sa zdá, že Yandex. Toloka môže zarobiť dobré peniaze a v krátkom čase, ale v tento prípad prvý dojem klame.

stupeň: 5

Pracujem ako posudzovateľ pre Yandex na základe zmluvy (nie v Toloke), takže poznám celú kuchyňu, ako sa hovorí, zvnútra. Čo môžem povedať konkrétne o Toloke?
Projekt stojí za to. Žiadna zhoda pre centové škatule. Aj keď vezmem do úvahy, že v samotnej Toloke som pracoval len pár týždňov a ceny za úlohy sú tam oveľa nižšie ako ceny hodnotiteľov na plný úväzok, podarilo sa mi vybrať viac ako päťdesiat dolárov. Pre projekt tejto úrovne si myslím, že je to celkom hodné. Navyše so zvýšením hodnotenia sa otvára prístup k drahším úlohám. A čo je najdôležitejšie, odtiaľ môžete priamo získať prácu ako hodnotiteľ Yandex, kde sa už vypláca veľmi, veľmi dobrý plat.

stupeň: 3

zvedený pozitívne recenzie a platobné obrazovky. Registrovaný.
Záver nie je môj.
Po prvé, plat je príliš nízky. Začína na 0,01 centov. Úlohy sú, samozrejme, ľahké. A čím sú ľahšie, tým je platba nižšia. Existuje len veľmi málo hodnotných z hľadiska platby a zaujímavých.
Po druhé, úlohy sú nenáročné bez intelektuálneho zázemia. Len nuda.
Táto práca môže byť vhodná len pre školákov a ženy v domácnosti.
Táto stránka ma sklamala. Čakal som viac. Neviem, odkiaľ ľudia berú peniaze. Podľa mojich skúseností tam môžete zarobiť príliš málo peňazí a stráviť veľa času.

stupeň: 2

Aj keď o Yandex Toloka nie je toľko negatívnych recenzií (myslím, že väčšinu z nich blokuje), nepáči sa mi to. Myslím si, že toto je povolanie pre tých, ktorí sa nudia bez práce, ktorí nemajú žiadne profesionálne zručnosti, ktoré by sa dali použiť na zarábanie peňazí na internete. Pokiaľ ide o Toloku, tu veľa nezbohatnete, rovnako ako na iných projektoch Yandex. Pracovné podmienky a platy sú navyše v skutočnosti veľmi odlišné od deklarovaných podmienok. Väčšina úloh je extrémne jednoduchá - musíte analyzovať a vyhodnotiť prezentovaný obsah porovnaním, ale platia za to len centy.

stupeň: 5

Pri hľadaní všetkých nových stránok, ktoré by fungovali, som narazil na túto. Samozrejme ma hneď zaujali recenzie, ktoré hovorili o tom, že sa tu dá dobre zarobiť. Ľudia uverejňovali fotografie svojich zárobkov a ja som im veril. Išiel za „veľké peniaze“ a ľahká práca. Nejako to s týmto zdrojom nevyšlo, ale stiahol som svoje groše. Na stránke nie je toľko práce, pravdepodobne veľa závisí od hodnotenia. Samotné hodnotenie je tu záhadou. Stále nechápem, ako to klesá. Len sedíte a robíte úlohy a potom raz a vaše hodnotenie už kleslo. Platba za úlohy je tu od 0,01 centov a vyššie. Úlohy v teréne sú platené najviac, to znamená, že musíte chodiť a vykonávať rôzne akcie. To je vhodné pre ľudí, ktorí žijú vo veľkých mestách. A tak sú tu dokonca zaujímavé úlohy, a nie veľmi. Ide o anotáciu zvukových záznamov, premietanie fotografií, hodnotenie áut. Výbery sa uskutočňujú na YandexMoney, PayPal a pre obyvateľov Ukrajiny na kartu PrivatBank. Počas mojej práce, čo je asi 5 dní, som vybral len 11 hrivien, veľmi málo.

stupeň: 3

Príjmy Yandex Toloka nie sú najlepšie, pretože nie je jasné, ako tam vyberať peniaze, a je veľmi ťažké tam zarobiť. Ďakujeme za žiadnu investíciu.
Na účte mám 131 rubľov. Neviem, ako ich dostať von. Plánujem opustiť túto stránku.
Rozumiem týmto zárobkom z Yandexu, ale sú nejaké nepochopiteľné.
Našiel som lepší a príjemnejší príjem ako tento. Tam zarobím oveľa viac a ľahšie. Samozrejme, tieto zárobky obdivujem, ale na splnenie môjho sna to nebude valiť. Túto stránku hodnotím priemerne.

stupeň: 5

Aby som zarobil viac-menej normálne, veľmi starostlivo vyberám navrhované úlohy. Z väčšej časti sa snažím brať s okamžitou kontrolou. Peniaze sú na účet pripísané po vykonaní, dajú sa ihneď vybrať. Ale nejako minimálna suma výber prostriedkov je dynamický. Minimálne 1 dolár, potom z nejakého dôvodu 2 doláre. Vzťah s exekúciou určité úlohy Alebo čas pobytu v službe nestihol. Zadania s oneskoreným overením beriem len vtedy, ak je dobrá platba, inak nemá zmysel šaškovať. Empiricky som našiel spoľahlivých zákazníkov, ktorí píšu jasné úlohy a prácu rýchlo kontrolujú. Pohodlná funkcia- skríningové úlohy 18+. Zaplatia za to úplne minimum a môžete vidieť všelijakú špinu. Služba často nefunguje s Prehliadač Mozilla, ostatní sú v pohode. Pravidelne chodím na fórum, veľa som sa tam naučil užitočná informácia pre prácu. Výber peňazí je možný len do peňaženky označenej všetkými pravidlami. Za mesiac to vyjde až na 3 000 rubľov, stačí zaplatiť za telefón a internet. Najväčším plusom je, že na prácu nepotrebujete mať žiadne špeciálne zručnosti.

stupeň: 5

Toloka pomáha zarobiť, aj keď nie veľké peniaze, ale bez ťažkostí a námahy. V skutočnosti ide o mechanickú prácu, ktorá si vyžaduje poriadnu dávku pozornosti. Zo smartfónu pracujem kedykoľvek a kdekoľvek, hlavná je dostupnosť dobré spojenie s internetom. Windows telefón nebude fungovať, Toloka funguje iba so smartfónmi so systémom Android a iOS. Všetky úlohy sú jednoduché, hlavnou vecou je prísne dodržiavať podrobné pokyny. Čím vyššie je percento chýb, tým nižšie je hodnotenie, respektíve prístup k úlohám s dobrou mzdou sa automaticky zatvára. Možností ako zarobiť je veľa, vyberám si len to, čo sa mi páči. Medzi poslednými úlohami bolo už len potrebné nafotiť šeky z istého supermarketu, v ktorom dodnes nakupujem každý deň. Každá fotografia bola zaplatená dolárom. Snažím sa neopustiť Toloku na dlhú dobu, inak hodnotenie klesne a jeho obnovenie si vyžaduje veľa času a úsilia.

stupeň: 4

Snažil som sa zarobiť peniaze na Toloke. Táto aktivita je určite pre tých, ktorí sú pripravení bojovať čistý internet bez pornografie a neskutočného množstva reklamy za centovú odmenu. Alebo pre milovníkov monotónnej monotónnej práce. Všetky úlohy s dobrým platom sa dajú splniť len zo smartfónu a potom treba niekam ísť, odfotiť alebo niečo skontrolovať. Vhodné len pre obyvateľov veľkých miest. Zachránený iba počúvaním záznamov, priniesol 150 rubľov denne. Ale niekedy toho môžete počuť natoľko, že chcete okamžite so všetkým skončiť. A dikcia našich spoluobčanov zanecháva veľa želaní. Ak chcete získať prístup k dobré úlohy musíte si urobiť bezplatný test. A nie skutočnosť, že prístup k práci sa otvorí po. Požiadavky na niektoré úlohy nijako nezodpovedajú cene, dokonca neboli ani prevzaté. Peniaze sa okamžite stiahnu do identifikovanej peňaženky Yandex, hoci pravidlá ich vystrašia na 30 dní. Môžete použiť PayPal, ale neskúšal som to. Prístup k úlohám s dobrým platom zabezpečuje hodnotenie umelca. Ale s jeho pribúdaním je všetko veľmi ťažké. Dlho nevstúpiš - padá. Pracujete veľa bez zárubní - všetky rovnaké, nevysvetliteľné skoky. A pravidlá sa často menia.

Video recenzia