Jak delegować zadania społeczności bez zatrudniania kolejnych moderatorów
Trzy sposoby na skrócenie kolejki przeglądu społeczności, odczytane z kodu Zealy: zaprojektuj pracę tak, by zniknęła, przekaż ją recenzentowi lub przekaż ją AI — i ile kosztuje każdy z nich.
Autor: Mathis Grosjean

Na tej stronie
Dla kogo to jest: założyciel lub lider społeczności, którego kolejka przeglądu rośnie szybciej niż zespół, wpatrujący się w kilka tysięcy oczekujących zgłoszeń i zastanawiający się, czy odpowiedzią jest drugi moderator, trzeci, czy list rezygnacyjny.
Krótka odpowiedź: Prawdopodobnie nie kolejna osoba — ale nie z pochlebnego powodu. Większość kolejki nie powinna istnieć. W Zealy pięć typów zadań jest zaprojektowanych tak, by wymagały przeczytania odpowiedzi przez człowieka — a zadanie daty dołącza do nich w domyślnym ustawieniu — podczas gdy wszystko inne rozstrzyga się samo w momencie zgłoszenia przez członka. Delegowanie regule bije delegowanie osobie, które bije delegowanie maszynie, w tej kolejności, ponieważ tylko pierwsze usuwa pracę, zamiast ją przenosić.
Ujawnienie: Zealy publikuje ten tekst i Zealy sprzedaje opisaną w nim platformę. Każde twierdzenie o tym, co robi Zealy, zostało odczytane z własnego kodu źródłowego Zealy 16 sierpnia 2026, a nie ze stron marketingowych ani dokumentacji Zealy. Obejmuje to miejsca, w których Zealy czegoś oczywistego brakuje, oraz dwie strony własnej dokumentacji Zealy, które są błędne, a które poprawiamy w tej samej zmianie co ten post.
Ostatnia weryfikacja: 16 sierpnia 2026.
Czy musisz zatrudnić więcej moderatorów?
Prawdopodobnie jeszcze nie. W Zealy pięć typów zadań jest zbudowanych tak, by trafiać do ludzkiego recenzenta: tekst, URL, liczba, przesyłanie pliku i ankieta — a zadanie z datą dołącza do nich w swoim domyślnym ustawieniu. Wszystko inne weryfikuje się samo i nigdy nie trafia do kolejki. Zanim dodasz ludzi, sprawdź, które z twoich questów naprawdę wymagają osoby, która przeczyta odpowiedź.
Niemal każda rozmowa o „toniemy w zgłoszeniach” zaczyna się od przepustowości — ilu recenzentów, ile godzin, jak szybko każdy zamyka pozycję — podczas gdy wielkość kolejki została ustalona tygodnie wcześniej w edytorze questów przez tego, kto wybrał typ zadania. Quest, który prosi o zrzut ekranu, tworzy kolejkę. Quest, który prosi kogoś o dołączenie do serwera Discord, nie tworzy jej, bo odpowiedź jest sprawdzana na miejscu w Discordzie. Ta sama kampania, ta sama nagroda, zupełnie inny koszt operacyjny.
Uczciwa kolejność jest więc taka: usuń pracę, deleguj to, co zostaje, zautomatyzuj to, co pozostało. Zespoły niezawodnie robią to w odwrotnej kolejności — i tak płacisz za wyższy plan, żeby przyspieszyć pracę, którą mogłeś usunąć.
Trzy sposoby delegowania kolejki recenzji
Kolejkę weryfikacji możesz oddelegować na trzy sposoby: do reguły, czyniąc zadanie samoweryfikującym się; do osoby, korzystając z roli weryfikatora w Zealy; lub do maszyny, korzystając z weryfikacji AI lub agenta MCP. Reguły eliminują pracę, ludzie stosują osąd, maszyny stosują zapisany prompt na dużą skalę.
| Kieruj do | Co obsługuje dobrze | Czego nie potrafi | Ile cię to kosztuje |
|---|---|---|---|
| Do reguły — automatyczna walidacja lub typ zadania samoweryfikującego się | Wszystko z jedną sprawdzalną odpowiedzią: odwiedzony link, dołączony serwer, działanie on-chain, quiz, odpowiedź liczbowa | Jakakolwiek ocena. Nie odróżni przemyślanej odpowiedzi od leniwej i nie sprawdza zawartości przesłanego pliku | Czas projektowania i prawdziwa pułapka: poprawna odpowiedź pozostawiona pusta zatwierdza każde zgłoszenie |
Do osoby — reviewer rola | Ocena, ton, przypadki brzegowe, odwołania — wszystko, gdzie pomyłka kosztuje cię kontrybutora | Nie da się tego ograniczyć do jednego questa ani jednego modułu, a nic nie powstrzymuje dwóch recenzentów przed otwarciem tego samego roszczenia | Możliwość przyznawania bonusowego XP do 20 000 na roszczenie — a jedno wywołanie może objąć 1 000 roszczeń — plus koordynacja, którą teraz musisz prowadzić ręcznie |
| Do maszyny — przegląd AI lub agent MCP | Objętość względem zapisanego standardu: czy ta odpowiedź zawiera to, o co prosi prompt | Nie wyświetla rekomendacji do potwierdzenia — przegląd AI sam zapisuje werdykt, a członek czyta uzasadnienie modelu | Plan Plus lub Enterprise dla przeglądu AI, zaufanie na poziomie administratora dla agenta i wszystko, co twój prompt psuje na dużą skalę |
Ścieżka pierwsza: zaprojektuj pracę przeglądową tak, by zniknęła
Zacznij tutaj: to jedyna ścieżka, która usuwa pracę, zamiast ją przenosić. Pięć typów zadań Zealy jest zaprojektowanych tak, by wymagać człowieka — tekst, URL, liczba, przesyłanie pliku i ankieta — a data domyślnie działa tak samo. Wszystko inne zostaje rozliczone, gdy członek zgłosi zadanie. Przepisanie zadania tekstowego na sprawdzanie linku opróżnia kolejkę.
Sprawdziliśmy to, czytając funkcję, która decyduje, czy zadanie jest automatycznie weryfikowane, a następnie porównując każdy walidator środowiska uruchomieniowego w usłudze zadań. Te pięć — text, url, number, file, poll — każda zwraca status oczekującej weryfikacji, chyba że zadanie jest wyraźnie ustawione na automatyczną walidację. Pozostałe zwracają sukces lub błąd synchronicznie, więc nie ma na co czekać ani w jakiej kolejce czekać.
Dwa uczciwe wyjątki, ponieważ kod przeczy sam sobie i wolimy to powiedzieć, niż to uporządkować:
- Zadania daty. Jedna lista traktuje je jako zawsze automatyczne, podczas gdy walidator, który faktycznie działa, respektuje ustawienie automatycznej walidacji zadania, które edytor domyślnie pozostawia wyłączone. Nie powiemy, że zadania daty są automatyczne, gdy kod przeczy sam sobie. Przetestuj jedno, zanim na nim polegniesz.
- Proof of Humanity. Rozwiązuje się automatycznie w czasie działania, ale nie pojawia się na żadnej liście — podobnie jak typ zadania partnerskiego — więc zadanie zawierające tylko to zadanie jest zgłaszane jako nie automatycznie zwalidowane. Zachowuje się lepiej, niż reklamuje. (To, co wychwytuje, jest omówione w jak przeprowadzić airdrop, który nie zostanie wyfarmiony — to filtr botów, a nie filtr sybili.)
Przepisanie, które naprawdę skraca kolejkę
Najpierw spójrz na swoje zadania tekstowe. Większość zadaje pytanie z jedną poprawną odpowiedzią, sformułowane jako esej. „Powiedz nam, czego nauczyłeś się z dokumentacji” to kolejka. „Wklej hash transakcji” to zadanie tekstowe lub URL z poprawną odpowiedzią, które samo się czyści. „Zrób zrzut ekranu swojej pozycji” to kolejka, a zadanie plikowe nie ma żadnej weryfikacji treści, więc recenzent otwiera każdy obraz. „Który z tych trzech to nasz model opłat” to quiz, a quizy nigdy nie trafiają do człowieka.
Zasada, której byśmy bronili: jeśli możesz z góry zapisać odpowiedź, zadanie nie powinno trafiać do kolejki. Jeśli nie możesz, obsadź je personelem, zamiast udawać, że prompt to załatwi.
Pułapka: pusta poprawna odpowiedź zatwierdza wszystko
To akapit w tym artykule, który najprawdopodobniej oszczędzi ci złego tygodnia. Automatyczna walidacja zadań tekstowych, URL, liczbowych i datowych porównuje zgłoszenie członka z poprawną odpowiedzią, którą konfigurujesz, a wszystkie cztery porównania kończą się natychmiast, gdy ta poprawna odpowiedź jest pusta. Nie zawodzi bezpiecznie i nie ostrzega. Zatwierdza wszystko.
Dwa powiązane zachowania, które warto znać, zanim zaczniesz masowo przełączać przełączniki. Ankieta z włączoną automatyczną walidacją zatwierdza wszystko z założenia — to nie błąd, bo ankieta nie ma złej odpowiedzi, ale przełączenie automatycznej walidacji w całym module, by oczyścić zaległości, rozdaje nagrody z ankiety wszystkim. A automatyczna walidacja przesyłania pliku zatwierdza przesłanie, nie zawartość; przechodzi każdy plik.
Jeśli z tego wpisu wyniesiesz jeden nawyk operacyjny, niech to będzie ten: po włączeniu automatycznej walidacji zgłoś zadanie samodzielnie z celowo błędną odpowiedzią i potwierdź, że zostaje odrzucone.
Jedna kontrola duplikatów usuwa pracę; druga tylko ją oznacza
Alerty dla weryfikujących oznacz zgłoszenie jako duplicate (inny członek przesłał tę samą treść do tego samego zadania) lub reused (ten członek przesłał to wcześniej), tylko w zadaniach tekstowych i plikowych, z okresem wstecznym 180 dni. Mają charakter informacyjny — nic w ścieżce kodu zapisującej werdykt ich nie odczytuje. Mówią coś człowiekowi; niczego nie rozstrzygają. A w zadaniach plikowych dopasowanie jest słabsze, niż to brzmi: przesłane pliki są porównywane po zapisanym URL, a każde przesłanie dostaje nowy klucz, więc ponowne przesłanie identycznego pliku nigdy nie zostaje zarejestrowane jako duplikat.
Odrzucanie duplikatów przy zgłoszeniu to osobne, opcjonalne ustawienie, które odrzuca powtórzoną odpowiedź tekstową błędem, zanim trafi do Twojej kolejki. Domyślnie jest wyłączone w zadaniach tekstowych i URL, normalizuje przez przycinanie, scalanie białych znaków i zamianę na małe litery — więc parafraza je omija — i blokuje dowolny członek przed ponownym użyciem tego tekstu, w tym ten, kto napisał go pierwszy. To właśnie to skraca kolejkę.
Ścieżka druga: deleguj do osoby z rolą recenzenta
Rola recenzenta w Zealy to wąska delegacja: otwiera dziewięć z 225 powierzchni tras w API Zealy ograniczonych rolami, wszystkie dotyczące recenzowania, a recenzent nie może zatwierdzać własnych zgłoszeń. Przekazujesz ją za pomocą linku zaproszenia, który zawiera rolę, termin ważności i maksymalną liczbę użyć.
W Zealy nie ma roli o nazwie moderator. Rola to reviewer, a łącznie jest pięć ról: admin, editor, reviewer, guest oraz banned. (Własna dokumentacja Zealy dotycząca zarządzania członkami mówi, że są cztery. Pomija banned, która jest prawdziwą rolą akceptowaną przez endpoint zmiany roli. Ta strona jest poprawiona w tej samej zmianie co ten post.)
Pięć ról tworzy ściśle liniową drabinę — admin powyżej editor powyżej reviewer powyżej guest powyżej banned — a każde sprawdzenie uprawnień w produkcie zadaje jedno pytanie: czy rola tego członka jest co najmniej na tym poziomie? Uczciwy opis modelu uprawnień Zealy jest więc taki, że go nie ma. Brak zestawów uprawnień, brak ról niestandardowych, brak możliwości ograniczenia roli do jednego questa, modułu lub kampanii. Przeszukaliśmy definicje modelu i bazy danych pod kątem pojęć permission, ability i grant; jedyne dopasowania to niepowiązane kolumny OAuth.
Oto co drabina rozdziela na tych 225 powierzchniach z ograniczeniem ról:
| Minimalna rola | Powierzchnie ograniczone na tym poziomie | Co to daje |
|---|---|---|
admin | 140 | Wszystko, w tym role, zaproszenia, powierzchnie rozliczeniowe i akcje destrukcyjne |
editor | 58 | Konfiguracja questów, modułów i sprintów, nieopublikowane questy i resetowanie zgłoszeń questów |
guest | 17 | Powierzchnie zwykłego członka |
reviewer | 9 | Lista recenzji, zatwierdzanie werdyktów, alerty recenzji, zdarzenia recenzji, statystyki recenzji na użytkownika, listy nagród questów, zwycięzcy nagród |
banned | 1 | Nic |
Ponieważ drabina jest liniowa, recenzent otrzymuje również wszystko, co jest ograniczone do poziomu gościa. Ale te dziewięć powierzchni to cała delegacja i wszystkie są pracą recenzencką, dlatego awansowanie kogoś na recenzenta jest znacznie lepszą odpowiedzią niż awansowanie go na administratora, aby mógł pomóc.
Zwróć uwagę na wiersz edytora. Edytor to znacznie szersze uprawnienie niż recenzent: obejmuje wszystko, co może zrobić recenzent, plus konfigurację questów, modułów i sprintów, widoczność nieopublikowanych questów i resetowanie zgłoszeń. Własna dokumentacja członków Zealy opisuje to jako konfigurowanie questów, sprintów i członków oraz widzenie wszystkich stron, co brzmi węziej, niż jest w rzeczywistości; ta strona jest poprawiana w tej samej zmianie co ten post. Awansuj kogoś na edytora, gdy buduje kampanie, a na recenzenta, gdy tylko czyta zgłoszenia.
Jak przydzielać rolę i ile cię to kosztuje
Zmiany ról mogą wprowadzać tylko administratorzy, a administrator nie może zmienić własnej roli. Mechanizmem, który warto wykorzystać, jest link zaproszenia, który niesie ze sobą rolę, termin ważności i maksymalną liczbę użyć. Wykorzystaj wszystkie trzy: zaproszenie wygasające po 48 godzinach z maksymalnie jednym użyciem to zupełnie inny obiekt niż link leżący w grupie na Telegramie przez osiem miesięcy.
Potem bądź szczery co do kosztów. Recenzent może przypisać do 20 000 bonusowego XP do każdego zatwierdzonego roszczenia, żadna kontrola roli tego nie ogranicza, a jedna akcja zbiorcza może objąć 1000 roszczeń — więc jedno zatwierdzenie zbiorcze może wygenerować do 20 milionów XP. Delegowanie recenzji deleguje uprawnienie do przyznawania XP. Dla większości społeczności jest to w porządku, a nawet pożądane, ponieważ bonusowe XP to sposób, w jaki recenzent nagradza doskonałe zgłoszenie — ale jeśli Twoje XP zasilają ranking, który wypłaca tokeny, dałeś tej osobie dźwignię na wypłaty. Zealy rejestruje pełny ślad audytowy dla każdego werdyktu, więc można to wykryć po fakcie, a nie zapobiec temu. Jeśli Twój kandydat pochodzi z programu dla kontrybutorów, jak prowadzić program ambasadorów kryptowalut opisuje, ile kosztuje Cię ta rola.
Recenzenci nie mogą recenzować własnych roszczeń — po cichu
Własne roszczenia recenzenta są wyłączone z tego, co może zatwierdzić, egzekwowane w warstwie usług i ponownie w czterech osobnych zabezpieczeniach SQL. Dobrze. Zastrzeżenie jest tu najciekawsze: filtr działa po cichu. Recenzent, który zbiorczo zaznaczy partię zawierającą własne roszczenie, nie otrzyma błędu. To roszczenie jest usuwane z partii i pozostaje oczekujące, a nikt nie jest informowany. Jeśli recenzent zapewnia, że coś zatwierdził, a to nadal czeka w kolejce, sprawdź to najpierw.
Dwóch recenzentów w jednej kolejce się zderzy
W kolejce recenzji Zealy nie ma przejmowania, blokowania ani przypisywania. Przeszukaliśmy repozytorium pod kątem blokad recenzentów, przejmowania zgłoszeń, przypisywania recenzji i koncepcji przypisanego użytkownika w API, backendzie i aplikacji webowej; wyszukiwanie przypisań nie zwróciło niczego. Jedyną blokadą w systemie jest krótki mutex zapisu, który zapobiega podwójnemu zapisowi, a nie rezerwacji kolejki.
Konsekwencja nie jest taka, jak można by przypuszczać. Dwóch recenzentów w tej samej kolejce widzi te same zgłoszenia i obaj czytają to samo przesłanie. Jeśli się zgadzają, drugi otrzymuje błąd, ponieważ Zealy odmawia ustawienia zgłoszenia na status, który już ma, a czas poświęcony na czytanie przepada. Jeśli się nie zgadzają, nie ma żadnego błędu: drugi werdykt zastępuje pierwszy, nagrody są odpowiednio wycofywane lub przyznawane ponownie, a nikt nie jest informowany, że współpracownik już podjął decyzję. Cichy przypadek to niezgodność, czyli ten, który najbardziej chciałbyś oznaczyć. Nie ma też sposobu przypisania recenzenta do konkretnego zadania lub modułu — nie można w produkcie wyrazić „Ana obsługuje zgłoszenia projektowe, Ben obsługuje dowody on-chain”.
Koordynowanie recenzentów to dziś w Zealy problem ludzki. Powiedz to swojemu zespołowi na głos, zamiast pozwalać mu dowiedzieć się o tym w kłótni na Discordzie. Podziel kolejkę w przypiętej wiadomości: według modułu, według dnia albo jedna osoba od najstarszych, a druga od najnowszych — najprostszy możliwy podział, a i tak ogranicza kolizje.
Recenzja zbiorcza: jeden werdykt dla maksymalnie 1000 zgłoszeń
Recenzja zbiorcza Zealy przyjmuje do 1000 zgłoszeń w jednym wywołaniu, a ograniczenie dotyczy tego, co to wywołanie niesie: jeden status, jeden komentarz, jedną ocenę i jedną wartość bonusowego XP dla całej partii. W akcji zbiorczej nie ma werdyktu dla poszczególnych pozycji. To czyni ją świetną dla jednorodnego zestawu — każde zgłoszenie do zepsutego questa, każde zgłoszenie do zadania, które unieważniłeś — i niebezpieczną dla mieszanego, ponieważ komentarz, który przeczyta 1000 członków, to to samo zdanie. Sortuj bezlitośnie, zanim zaznaczysz.
Ścieżka trzecia: przekaż werdykt maszynie
Recenzja AI Zealy uruchamia Google Gemini 2.5 Flash Lite na podstawie promptu, który piszesz, dla każdego questa, w planach Plus i Enterprise na dzień 16 sierpnia 2026. Nie proponuje werdyktu do potwierdzenia. Zapisuje werdykt, a jego uzasadnienie staje się komentarzem, który czyta członek.
Przeczytaj to dwa razy, ponieważ własna dokumentacja recenzji Zealy opisywała recenzję AI jako zapewniającą inteligentne rekomendacje, które pomagają przetwarzać recenzje. To jest błędne i zostało poprawione w tej samej zmianie co ten post. W ścieżce kodu nie ma etapu potwierdzenia przez człowieka: model zwraca wynik, Zealy zapisuje zatwierdzenie lub odrzucenie z dedykowanego konta systemowego, a uzasadnienie modelu trafia do skrzynki odbiorczej członka.
To jest naprawdę inna decyzja produktowa niż recenzja wspomagana przez AI i zasługuje na inny poziom staranności z Twojej strony:
- Włącz to dla każdego zadania, włączając recenzję AI w zadaniu i pisząc niepusty prompt. To nie jest przełącznik dla całej społeczności, co jest właściwym poziomem szczegółowości: możesz zautomatyzować jedno zadanie o dużym wolumenie bez automatyzowania swoich decyzji ocennych.
- Napisz prompt jako standard odrzucenia, a nie wrażenie. Model tworzy wiadomość o odrzuceniu skierowaną do członka, więc wszystko, co niejasne w Twoim promptcie, staje się niejasnym, a przez to irytującym komentarzem do czyjegoś zgłoszenia.
- Cron ponownie kolejkuje zaległe zgłoszenia co 15 minut, przejmując zgłoszenia do recenzji AI, które czekają w stanie oczekiwania ponad godzinę bez recenzenta. Zaległości nie gniją po cichu.
Jedno zastrzeżenie dotyczące pomiaru, jeśli go używasz. Werdykty AI są przypisywane do konta systemowego z rolą administratora, więc w społeczności korzystającej z przeglądu AI pojawia się ono w analityce najlepszych recenzentów jak każdy inny recenzent. Zanim powiesz zespołowi, ile zgłoszeń przetworzyli wasi ludzie, wyklucz je.
Plany sprawdzone 16 sierpnia 2026
Przegląd AI jest dostępny w planach Plus i Enterprise, a strona cennika Zealy podaje, że nie jest dostępny w planach Free i Standard. W darmowej społeczności sprawdzonej przez własne API możliwości Zealy 16 sierpnia 2026 zgłoszono niedostępność z powodem requires_plus_or_enterprise. Sprawdź tę możliwość we własnej społeczności, zamiast zakładać ją na podstawie nazwy planu.
Plus kosztuje 359 USD miesięcznie przy rozliczeniu rocznym, a Enterprise jest wyceniany indywidualnie przy rozliczeniu rocznym. Plan Free kosztuje 0 USD i obejmuje 1000 zgłoszeń zadań miesięcznie oraz nieograniczoną liczbę członków; Standard kosztuje 149 USD miesięcznie przy rozliczeniu rocznym. Ceny nie obejmują VAT ani innych obowiązujących podatków od sprzedaży, a wszystkie pochodzą z strony cennika Zealy, sprawdzonej 16 sierpnia 2026 r.
Decyzja, która ma znaczenie: przy 200 zgłoszeniach tygodniowo przejście na wyższy plan, by je zautomatyzować, to zły interes w porównaniu z popołudniem spędzonym na przekształceniu zadań tekstowych w weryfikowalne. Przy tysiącach otwartych zgłoszeń tygodniowo, ze spisanym standardem, to dobry interes.
Delegowanie agentowi przez MCP
Druga droga maszynowa to agent. Zealy udostępnia weryfikację przez swój serwer MCP, a kształt tej delegacji jest celowo bardziej restrykcyjny niż w przypadku człowieka.
- Agent może przesłać do 1 000 zgłoszeń w jednym wywołaniu, ten sam limit co przy przeglądzie zbiorczym, z tym samym ograniczeniem jednego werdyktu dla całej partii.
- Agent potrzebuje
adminroli, podczas gdy człowiek dokonujący przeglądu potrzebuje jedyniereviewer. Publiczna ścieżka przeglądu odrzuca decyzję przeglądu MCP od czegokolwiek mniejszego, więc nie ma wersji wąskiego uprawnienia dostosowanej do agenta — co jest odwrotnością modelu minimalnych uprawnień, którego można by oczekiwać. - Każdy zapis wymaga nowego tokenu potwierdzenia przez człowieka. Nie sesja, nie wcześniejsza zgoda — nowe potwierdzenie przy każdym wywołaniu.
- Pieniądze są poza zasięgiem. Sprawdzenie przy każdym publicznym przeglądzie administracyjnym blokuje przenoszenie przez agenta każdego roszczenia zawierającego nagrodę w postaci NFT, tokena, USDC lub Zaps. Agent może wyczyścić Twoją kolejkę XP; nie może przenieść roszczenia, które wypłaca środki. Jeśli prowadzisz dystrybucje, jak dystrybuować tokeny do aktywnych członków społeczności obejmuje, kto faktycznie co wysyła.
- Agenci mogą tworzyć wyłącznie zaproszenia dla gości, nigdy zaproszenia dla recenzentów. Agent nie może obsadzić Twojej kolejki za Ciebie.
Gdy odpowiedzią naprawdę jest inna osoba
Zatrudnij lub zrekrutuj, gdy osąd jest produktem: subiektywna jakość, normy społeczności, odwołania, przypadki brzegowe i wszystko, gdzie błędne odrzucenie kosztuje Cię współtwórcę. Dodaj osobę, gdy w Twojej kolejce jest prawdziwa niezgodność, a nie wolumen. Wolumen to problem projektowy; niezgodność to problem kadrowy.
Test, który zastosowalibyśmy przed dodaniem weryfikującego: weź 20 oczekujących zgłoszeń i pozwól dwóm osobom zweryfikować je niezależnie. Jeśli zgodzą się co do 19, twoja kolejka to wolumen, a wolumen rozwiązuje się regułami i promptami. Jeśli zgodzą się co do 13, twoja kolejka zawiera prawdziwą ocenę, a żadne ustawienie automatycznej walidacji ani prompt modelu nie sprawi, że ta niezgodność zniknie — tylko stanie się niewidoczna.
Trzy sytuacje, w których człowiek jest właściwą odpowiedzią i nie próbowalibyśmy cię od tego odwieść:
Zgłoszenia kreatywne i długie, gdzie kryterium nagrody jest jakość. Jeśli płacisz za dobrą pracę, a nie za ukończoną pracę, ktoś musi wielokrotnie decydować, co oznacza dobra, i tego bronić.
Wszystko z możliwością odwołania. Odrzucony członek, który się skarży, potrzebuje człowieka, który może odwrócić decyzję, a odwrócenie weryfikacji jest też tym, co usuwa rolę Discord już przyznaną przez zatwierdzenie — weryfikujący zmieniający zgłoszenie z sukcesu na porażkę robi to samo. Nic innego nie sprawdza ponownie tych przyznań; są jednorazowe.
Wypłaty o wysokiej wartości. Jeśli werdykt decyduje, kto otrzymuje tokeny, postaw na tym człowieka. Własne reguły agenta Zealy już kodują tę opinię: maszyna nie może zmienić stanu zgłoszenia z nagrodą finansową.
Co mierzy Zealy, a czego nie mierzy
Zealy pokazuje liczbę oczekujących recenzji, ścieżkę audytu dla każdego werdyktu, najlepszych recenzentów według liczby i według wskaźnika zatwierdzeń, sumy gwiazdek i oznaczeń na członka oraz eksport CSV do 10 000 wierszy. Nie oblicza czasu do recenzji, opóźnienia kolejki, SLA ani przepustowości. Przeszukaliśmy bazę kodu pod kątem tych nazw i nie znaleźliśmy żadnej.
Jesteśmy precyzyjni, ponieważ wersja tego artykułu, którą pierwotnie planowaliśmy, opierała się na danych o czasie kolejki recenzji, a takie dane nie istnieją. Przeszukaliśmy pakiety Zealy pod kątem czasu do recenzji, opóźnienia recenzji, średniego czasu recenzji, czasu trwania recenzji, przepustowości recenzji i recenzji na godzinę. Zero trafień, brak przedziałów starzenia, brak pulpitu przepustowości. Więc gdy dostawca mówi ci, że jego klienci skrócili czas recenzji o jakiś procent, zapytaj, który system wygenerował tę liczbę. My nie mogliśmy wygenerować naszej i nie zamierzamy jej wymyślać.
Dwie kolejne rzeczy do poprawnego odczytania:
„Najlepsi recenzenci według wskaźnika zatwierdzeń” to wskaźnik zatwierdzeń, a nie wskaźnik dokładności. Mówi, jaki udział werdyktów recenzenta stanowiły zatwierdzenia. Nie mówi nic o tym, czy te werdykty były słuszne. Recenzent, który zatwierdza wszystko, osiąga 100%.
Czas do recenzji jest wyliczalny, tylko nie jest raportowany. Eksport CSV recenzji zawiera znaczniki czasu utworzenia i aktualizacji każdego roszczenia, ale nie zdarzenia recenzji, więc dla roszczenia zrecenzowanego raz i pozostawionego bez zmian różnica między nimi to twój czas do recenzji, a mediana jest o jeden arkusz kalkulacyjny stąd. Roszczenia, które były ponownie recenzowane, wymagają historii dla każdego roszczenia, aby były dokładne. To prawdziwa luka w Zealy i wolimy ją zapisać, niż ją omijać.
Arytmetyka wyraźnie oznaczona jako arytmetyka
Nie ma tu danych Zealy, więc to rama do wypełnienia własnymi liczbami. Każde dane wejściowe to założenie, które podajesz, a nie nasz pomiar.
weekly human-review load
= claims per week
× share of claims on text / URL / number / file / poll tasks
× share of those not auto-validated
× your own seconds per review
Załóż 2000 zgłoszeń tygodniowo, jedną trzecią w typach zadań wymagających człowieka, żadnych automatycznie zatwierdzanych, po 40 sekund każde: około 7,4 godziny tygodniowo, w całości z podanych przez Ciebie liczb. Nie chodzi o odpowiedź. Chodzi o to, że drugi i trzeci czynnik stają się widoczne, a to dwa, które możesz zmienić bez zatrudniania kogokolwiek.
Gdzie inne narzędzia przewyższają Zealy w tym zakresie
Bot Zealy na Discordzie nie prowadzi moderacji. Nigdy nie wyrzuca, nie banuje ani nie wycisza nikogo, nie wysyła też wiadomości powitalnych, nie obsługuje ról reakcji, zgłoszeń ani logowania. Narzędzia moderacyjne Discorda i natywne boty Discord zbudowane wokół nich zajmują się tym zadaniem. Klucze API Zealy są również znacznie bardziej granularne niż jego role dla ludzi.
W pierwszej kwestii przeszukaliśmy źródła bota Zealy na Discordzie pod kątem wywołań kick, ban, timeout, bulk-delete, guild-ban, AutoMod, moderate-members i audit-log oraz wiadomości powitalnych, ról reakcji, kanałów głosowych, zgłoszeń i logowania. Jedyne dopasowania to linie wyłączające buforowanie. Jego instalacja oferuje nawet ograniczony zestaw uprawnień obok opcji pełnego administratora — Zarządzanie rolami, Wzmiankowanie wszystkich i Wysyłanie wiadomości — czyli dokładnie zestaw uprawnień czegoś, co niczego nie będzie moderować. Jeśli Twoim problemem są osoby zachowujące się niewłaściwie w Twoim serwerze Discord, Zealy to niewłaściwe narzędzie: nasz przewodnik po narzędziach do zaangażowania i rozwoju na Discordzie to lepszy punkt wyjścia — obejmuje boty moderacyjne i natywne ustawienia Discorda, które załatwiają większość z tego za darmo — a dokumentacja integracji z Discordem opisuje, co faktycznie robi bot Zealy.
W drugim punkcie porównanie jest żenujące i wewnętrzne. Model kluczy API Zealy ma 40 odrębnych uprawnień, w tym osobne do odczytu zgłoszeń, eksportu zgłoszeń i zapisu zgłoszeń, a jego dwa presety do budowania questów nie mają żadnego uprawnienia do zgłoszeń. To prawdziwy model najmniejszych uprawnień: maszynie rozmawiającej z Zealy można dać uprawnienie do odczytu kolejki zgłoszeń, a nie do decydowania o nich.
Człowiek nie może. Człowiek dostaje pozycję na pięciostopniowej drabinie, więc jeśli chcesz, aby ktoś segregował i oznaczał bez zatwierdzania, nie ma sposobu, by to wyrazić. API to potrafi; model ról nie. Gdy ludzie proszą nas o niestandardowe role, to jest właśnie ta luka, na którą trafiają, a wskazanie naszego własnego modelu kluczy API to najuczciwszy sposób, by to przyznać. I jeszcze raz, bo to kwestia operacyjna: każde narzędzie zbudowane jako kolejka pracy rozwiązuje przepustowość wielu osób przez przypisanie. Zealy rozwiązuje to przypiętą wiadomością na kanale zespołu.
Jak to skonfigurować w Zealy, po kolei
Sprawdź, które questy używają pięciu typów zadań ludzkich. Przekonwertuj, co się da. Ustaw poprawnie odpowiedzi, bo pusta zatwierdza wszystko. Następnie zaproś jednego lub dwóch recenzentów przez limitowany, wygasający link, ustal na głos, kto pracuje nad którym modułem, i dopiero wtedy zdecyduj, czy przegląd AI jest wart aktualizacji planu.
1. Policz kolejkę według typu zadania, nie według rozmiaru, a potem przekonwertuj to, co się da. Liczy się, ile oczekujących zgłoszeń dotyczy zadań tekstowych, URL, liczbowych, plikowych i ankietowych, a z tych, ile zadaje pytanie z poznawalną odpowiedzią. Pytanie z jedną poprawną odpowiedzią staje się quizem lub zadaniem tekstowym z poprawną odpowiedzią; zrzut ekranu potwierdzający wykonanie staje się zadaniem on-chain, linkowym lub integracyjnym, gdziekolwiek działanie zostawia ślad, który Zealy może sprawdzić.
2. Przetestuj każdą włączoną automatyczną walidację, a następnie włącz odrzucanie duplikatów tam, gdzie kopiuj-wklej jest trybem awarii. Zgłoś zadanie sam z błędną odpowiedzią i potwierdź, że nie przechodzi; ten dwuminutowy nawyk wyłapuje pułapkę pustej poprawnej odpowiedzi. Odrzucanie duplikatów jest domyślnie wyłączone w zadaniach tekstowych i URL i nie wyłapie parafrazy.
3. Promuj recenzentów, a nie edytorów, za pomocą linku z limitem zaproszeń. Ustaw termin ważności i maksymalną liczbę użyć oraz poinformuj tę osobę na piśmie, że rola może przyznać do 20 000 bonusowych XP na jedno roszczenie, w ramach nawet 1000 roszczeń w jednej akcji, oraz że widzisz każdy werdykt.
4. Podziel kolejkę w przypiętej wiadomości. Według modułu, według dnia lub od najstarszych do najnowszych względem od najnowszych do najstarszych. Produkt nie zrobi tego za Ciebie, a dwie osoby w jednej niepodzielonej kolejce będą duplikować pracę.
5. Dopiero teraz rozważ przegląd AI. Jeśli standard można opisać, wolumen jest wysoki, a Ty korzystasz z Plus lub Enterprise, napisz prompt jako komunikat odrzucenia, który byłbyś gotów wysłać, ponieważ właśnie tym się on staje. Zacznij od jednego questa i przeczytaj pierwsze pięćdziesiąt komentarzy, które napisze, zanim włączysz go gdziekolwiek indziej.
6. Eksportuj co miesiąc i oblicz własny czas do przeglądu. Zealy tego nie obliczy. Odejmij znacznik czasu utworzenia każdego roszczenia od jego znacznika czasu aktualizacji w eksporcie CSV; jest to dokładne dla roszczeń sprawdzonych raz, a roszczenia sprawdzone ponownie wymagają historii przeglądu. Dziesięć minut w arkuszu kalkulacyjnym powie Ci, czy cokolwiek z tego zadziałało.
Przewodnia myśl jest taka, że „czy muszę kogoś zatrudnić” to niemal zawsze niewłaściwe pytanie, zadane o jedną decyzję projektową za późno. Najpierw deleguj do reguły, bo to jedyna droga, na której praca znika, a nie się przenosi. W drugiej kolejności deleguj do osoby i bądź z nią szczery co do mocy XP i kolizji. Na końcu deleguj do maszyny i tylko wtedy, gdy potrafisz zapisać standard. Aby poznać szerszy kontekst, moduł podstaw zarządzania społecznością to materiał towarzyszący, a dokumentacja Zealy dotycząca recenzji omawia mechanikę kolejki. A jeśli nie wybrałeś jeszcze narzędzi, nasz przegląd oprogramowania do zarządzania społecznością wycenia szerszą kategorię, z uwzględnieniem pracy moderacyjnej.