Maaari Bang Talagang Patakbuhin ng Isang AI Agent ang Iyong Komunidad?
Oo para sa mga mekaniks, hindi para sa mga desisyong mahirap bawiin — at ang 'panatilihin ang tao sa loop' ay hindi rin ang solusyon. Ipinapakita ng 8,000-ban na bug ng Discord kung bakit.
Ni Mathis Grosjean

Sa pahinang ito
Maikling sagot: kayang patakbuhin ng isang AI agent ang mga mekaniks ng isang komunidad ngayon — pag-draft, pag-iskedyul, pagbasa, pag-summarize, pag-ruta, at pagsagot sa mga tanong na may dokumentadong sagot na. Hindi dapat ipaubaya sa kanya ang mga desisyong mahal at mahirap bawiin kapag nagkamali, at ang dahilan ay hindi dahil tanga ang mga modelo. Ito ay dahil hindi sila mapagkakatiwalaan sa isang partikular na nasusukat na paraan, at ang hakbang ng pagsusuri ng tao na inaasahan ng mga tao bilang safety net ay software din na maaaring magkamali. Ang ikatlong bahagi ang kadalasang nakakalimutan: ang "laging panatilihin ang tao sa loop" ay hindi rin ang tamang pagwawasto. Ang praktikal na tanong ay aling mga desisyon, sa anong antas ng kumpiyansa, at may anong paraan ng pag-apela.
Pagsisiwalat: Inilalathala ng Zealy ang pahinang ito at ibinebenta ng Zealy ang pinag-uusapan. Ang Zealy ay isang platform ng komunidad at quest, naglalabas ang Zealy ng MCP server na nagpapahintulot sa isang AI agent na pamahalaan ang isang komunidad sa Zealy, at naglalabas ang Zealy ng AI reviewer na nagpapasya sa mga claim ng quest. Tatlo ang lumilitaw sa ibaba, kasama ang lugar kung saan hindi nagkakasundo ang dalawa sa kanila at ang dalawang lugar kung saan mas maganda ang disenyo ng isang kakumpitensya kaysa sa amin.
Huling na-verify: 18 Agosto 2026.
Ano ba talaga ang kayang gawin ng isang AI agent sa isang komunidad ngayon?
Maaasahan na kayang gawin ng isang AI agent ang mga mekaniks: pag-draft ng mga post at tugon, pag-iskedyul ng mga ito, pagbasa ng isang channel at pag-summarize nito, pag-ruta ng isang ulat sa tamang tao, at pagsagot sa mga tanong na may dokumentadong sagot na. Ito ang mga trabahong nakikita, mura at madaling itama bago may masaktan kapag mali ang output.
Hindi maliit na bagay ang listahang iyon. Karamihan sa trabaho sa komunidad ay mekanikal, at karamihan sa mga team ng komunidad ay nahuhuli dito. Kung ang isang agent ang mag-draft ng lingguhang recap mo at apat na minuto lang ang ginugugol ng isang tao para ayusin ito kaysa sa apatnapung minuto para isulat ito, tunay na panalo iyon na may limitadong panganib.
Isinulat namin ang post na ito dahil mali ang pagsagot sa tanong. Sa paghahanap ng can ai run my community noong 18 Agosto 2026, lahat ng resultang nakuha namin ay blog ng vendor o product page ng vendor — heightsplatform.com, mightynetworks.com, social.plus, circle.so, socialglow.com, aismartventures.com. Wala ni isa sa mga resultang nakuha namin ang sumagot sa tanong ng "hindi" o "bahagya". Inulit lang ng lahat ito bilang listahan ng feature. Obserbasyon iyon tungkol sa mga resultang nakuha namin sa isang araw, hindi isang pahayag tungkol sa lahat ng naisulat kailanman.
Mas tapat ang mga vendor ng kategoryang ito kaysa sa ipinahihiwatig ng kanilang mga landing page. Ang gabay ng Sprout Social sa pagbuo ng mga AI agent para sa social media, ni McCall Lanman, na inilathala noong Abril 16, 2026, ay tumutukoy sa kategorya sa pamamagitan ng kawalan ng tao: "Ang AI agent ay isang software program na gumagamit ng large language model (LLM) bilang utak nito para awtonomong kumpletuhin ang mga gawain, gumawa ng mga desisyon at makipag-ugnayan sa mga panlabas na tool—nang walang taong gumagabay sa bawat hakbang." Sa ibaba ng parehong pahina, sinasabi nitong ibalik ang tao: "Approval workflows: I-ruta ang mga sensitibong tugon sa isang human manager bago ipadala—tinatawag itong human-in-the-loop." At malinaw: "Kung walang guardrails, kahit isang mahusay na ginawang agent ay gumagawa ng off-brand o mapaminsalang output."
Hindi iyon pagkukunwari. Iyon ang aktwal na kahirapan ng kategorya na lumilitaw sa isang marketing page, at sulit sabihin nang may kabaitan. Kung gusto mong tukuyin nang maayos ang termino mismo, ang aming pillar sa agentic marketing ay humuhusga dito batay sa makinarya kaysa sa ambisyon.
Bakit hindi kakayahan kundi hindi pagiging maaasahan ang tunay na limitasyon
Ang problema sa pagbibigay sa isang agent ng desisyong nangangailangan ng paghuhusga ay hindi dahil tanga ang mga modelo. Ito ay dahil hindi sila pare-pareho, at ang hindi pagiging pare-pareho ay mas mahirap pamahalaan kaysa sa kilalang kahinaan. Ipinapakita ng pananaliksik sa multi-turn na pag-uusap na karamihan ng pagbaba ay nasa variance kaysa sa hilaw na kakayahan.
Ang papel ay "LLMs Get Lost In Multi-Turn Conversation" nina Philippe Laban, Hiroaki Hayashi, Yingbo Zhou at Jennifer Neville, arXiv:2505.06120, isinumite noong 9 Mayo 2025. Iniulat ng abstract nito na "lahat ng nangungunang open- at closed-weight LLM na sinubukan namin ay nagpapakita ng makabuluhang mas mababang performance sa multi-turn na pag-uusap kaysa sa single-turn, na may average na pagbaba na 39% sa anim na generation task."
Ang mas mahalagang pangungusap ay ang susunod: "Ang pagsusuri sa 200,000+ simulate na pag-uusap ay hinahati ang pagbaba ng performance sa dalawang bahagi: maliit na pagkawala sa aptitude at makabuluhang pagtaas sa hindi pagiging maaasahan." At may hugis ang failure mode — "kapag nagkamali ng liko ang mga LLM sa isang pag-uusap, naliligaw sila at hindi na nakakabawi".
Basahin ang mga caveat bago gamitin ang 39% na iyon kahit saan. Mga simulate na pag-uusap ang mga ito sa anim na generation task, sinukat sa mga modelo ng 2025, at ang 39% ay average sa mga gawaing iyon kaysa sa katangian ng anumang produktong mabibili mo ngayon. Bumuti na ang mga modelo mula noon. Ang pangmatagalang natuklasan ay hindi ang numero, kundi ang pagkakahati.
Narito kung bakit ang decomposition ang buong argumento. Ang tool na basta hindi pa sapat ay isang problema sa scheduling: maghihintay ka, o paliitin mo ang gawain. Ang tool na tama sa karaniwan at mali nang hindi mahulaan ay isang problema sa pamamahala, at iba ito. Hindi mo ito masasolusyunan sa pamamagitan ng pag-check sa mahihirap na kaso, dahil hindi mo alam nang maaga kung alin ang mahirap na kaso. Ang gawain sa komunidad ay multi-turn sa kalikasan — nagtatanong ang isang miyembro, naglilinaw, sumasalungat, nagdadagdag ng konteksto makalipas ang tatlong mensahe — na siyang eksaktong setting na sinukat ng papel.
Ang human in the loop ng Discord ay isang piraso ng software, at may bug ito
Inilathala ng Discord, sa present tense, na ang isang miyembro ng Trust & Safety team nito ay laging nire-review ang na-flag na content bago gumawa ng anumang aksyon. Isang bug ang nag-ban sa mahigit 8,000 account gayunpaman. Ang human in the loop ay isang code path, at ang mga code path ay nabibigo tulad ng software, hindi tulad ng tao.
Iniulat ito ng TechCrunch noong 7 Hulyo 2026, sa isang piyesa ni Lauren Forristal na may headline na "Inamin ng Discord na ang AI moderation bug ay maling nag-ban ng mga user dahil sa hindi mapaminsalang mga larawan". Ang core nito: "Kinilala ng Discord na ang isang bug sa AI moderation system nito ay maling nag-ban ng mahigit 8,000 user sa nakalipas na dalawang buwan, matapos ang hindi mapaminsalang mga larawan—kabilang ang mga spreadsheet, chessboard, game texture, pati na ang puti at gray na transparent na background—ay maling na-flag bilang mapaminsalang content."
Sulit basahin nang eksakto ang sukat kaysa i-round up. "Kinumpirma ng kumpanya na ang isyu ay nakaapekto sa mga account mula Mayo, na may karagdagang 200 user na na-ban sa weekend bago natukoy at naayos ng team nito ang problema. Lahat ng apektadong account ay kasalukuyang nire-restore."
Ngayon ang bahaging nagbabago sa kung paano mo dapat isipin ito. Ang sariling support account ng Discord, na sinipi ng TechCrunch mula sa thread nito noong 7 Hulyo 2026, ay inilarawan ang disenyo: "Ini-flag ng aming mga system ang content sa pamamagitan ng pagtutugma nito sa mga kilalang mapaminsalang materyal. Ang ganitong uri ng similarity matching ay maaaring magdulot ng false positives, kaya laging nire-review ng isang miyembro ng aming Trust & Safety team ang na-flag na content bago gumawa ng anumang aksyon."
At ang sariling buod ng TechCrunch sa nangyari: "Sinusuri ng isang human moderator ang content, pero dahil sa isang bug, agad na na-ban ng system ang mga apektadong account."
Totoo ang dalawa nang sabay. Ang review step ay dinisenyo, naidokumento, at inilarawan sa publiko sa present tense — at hindi ito tumakbo. Hindi nagsinungaling ang Discord, at hindi ito ang argumento ng post na ito na nagsinungaling ito. Mas makitid at mas hindi komportable ang punto: ang human-in-the-loop ay isang piraso ng software at nabibigo tulad nito. Ito ay isang conditional, isang queue, isang service call, isang feature flag. Lahat ng iyon ay maaaring magkamali, at kapag may isang nagkamali, tahimik na nawawala ang safety property na inaasahan mo habang ipinapakita pa rin ito ng architecture diagram.
Pansinin din kung ano ang mga failing input. Mga spreadsheet. Mga chessboard. Kulay abong transparent na background. Wala sa listahang iyon ang mukhang edge case na may magsusulat ng test para dito, na siyang karaniwang kalagayan ng isang similarity-matching system na humaharap sa totoong mundo.
Kung ang buong assurance mo sa iyong mga miyembro ay "may taong nagche-check", wala kang ginawang claim tungkol sa mga tao. Gumawa ka ng claim tungkol sa isang code path, at dapat mong masabi kung kailan ito huling tumakbo.
Bakit hindi rin ang "laging maglagay ng human in the loop" ang aral
Ang maayos na pagwawasto sa vendor hype ay ang sabihing dapat aprubahan ng isang tao ang lahat. Hindi iyon ang sinasabi ng Digital Trust & Safety Partnership, na sumusulat para sa mga kumpanyang gumagawa nito sa malaking scale. Iniulat nito na karaniwan ang automated enforcement na walang human review kapag mataas ang confidence, at hindi rin infallible ang human review.
Ang pinagmulan ay "Mga Pinakamahusay na Kasanayan para sa AI at Automation sa Trust & Safety", Digital Trust & Safety Partnership, Setyembre 2024. Ito ang pinakamakapangyarihang dokumento sa larangang ito na maaaring i-download ng kahit sino, at mas komportable ito sa automation kaysa inaasahan ng karamihan.
Sa tanong kung maiiwasan mo ba talaga ang automation: "Ang AI at automation ay hindi isang panacea—may kasama silang ilang hamon at limitasyon at nananatiling kailangan ang partisipasyon ng tao. Gayunpaman, ang pagtugon sa pang-aabuso na may kaugnayan sa nilalaman at pag-uugali sa malaking sukat ay hindi posible para sa maraming digital na produkto at serbisyo nang walang kahit anong antas ng AI at automation." Pansinin ang saklaw sa pangungusap na iyon — "para sa maraming digital na produkto at serbisyo", hindi para sa lahat. Ang komunidad na may apat na raang tao ay wala sa parehong kalagayan ng isang platform na may apat na raang milyon.
Sa kung ano talaga ang ginagawa ng mga kumpanyang miyembro: "lahat ng kasosyong kumpanya ng DTSP na kinapanayam para sa ulat na ito ay patuloy na umaasa sa parehong mga awtomatikong tool at pagsusuri at pagmamatyag ng tao upang gumawa ng angkop na aksyon, lalo na kapag kailangan ang mas masusing pagtingin sa pagtatasa ng nilalaman o pag-uugali."
At pagkatapos ang dalawang pangungusap na pumipigil sa artikulong ito na palitan ang hype ng vendor ng mas maayos na pagpapasimple:
- "Karaniwan para sa mga trust and safety team na paganahin ang awtomatikong aksyong pagpapatupad nang walang pagsusuri ng tao kapag ang isang sistema ay lubos na kumpiyansa sa pagtatasa nito."
- "Madalas ipinapalagay na ang isang tagasuring tao ay mas tumpak at maaasahan kaysa sa isang AI system; gayunpaman, ang pagsusuri ng tao ay hindi rin nagkakamali."
Binabanggit din ng ulat ang hugis ng tradeoff na aktwal mong ginagawa kapag inaayos mo ang alinman sa mga ito: "Ang pag-optimize para sa recall (paghuli ng mas maraming potensyal na paglabag) ay maaaring magpataas ng parehong true positives at false positives, na posibleng humantong sa over-action. Sa kabaligtaran, ang pag-optimize para sa precision (mas tumpak na pag-detect ng mga paglabag) ay maaaring magpababa ng false positives ngunit maaari ring magpataas ng false negatives (under-action)."
Kaya ang disenyong inilalarawan ng ulat ay hindi "hayaan ang agent na magdesisyon" ni "isang tao ang nag-aapruba sa lahat". Ito ay confidence-tiered: "Kapag mas mababa ang antas ng confidence, ang automated system ay maaaring gumawa ng pansamantalang enforcement action (hal., pansamantalang pag-downrank sa content o pagbawas sa discoverability ng account), at i-route ang kaso para sa human review upang aprubahan o baguhin ang aksyon."
Ito ay tunay na kakaibang mental model mula sa karaniwang dinadala ng karamihan ng community owner, at ito ay mas mabuti. Ang low-confidence path ay hindi humihinto at naghihintay. Ginagawa nito ang pinakamaliit na reversible action na available at pagkatapos ay nagtatanong sa isang tao. Ang downranking ay hindi ban. Ang quest claim na hinawakan para sa review ay hindi claim na tinanggihan. Kung makakaimbento ka ng gitnang aksyon, hindi mo na kailangang pumili sa pagitan ng bilis at kaligtasan sa bawat kaso.
Aling mga desisyon ang maaari mong ipaubaya sa makina ngayon
Pag-uri-uriin ang mga desisyon ayon sa nangyayari kapag mali ang makina, hindi ayon sa kung gaano kahirap ang mga ito. Ang maling draft ay ina-edit. Ang masamang summary ay binabasa muli. Ang maling ban ay nagkakahalaga ng account ng isang miyembro, at nagkakahalaga sa iyo ng support thread, reputasyon, at posibleng ruling. Ang reversibility ang axis na mahalaga.
Ang talahanayang ito ay paghuhusga ng Zealy, hindi natuklasan mula sa alinman sa mga pinagmulan sa itaas. Ito ang sasabihin namin sa isang community owner na nagtanong sa amin noong 18 Agosto 2026.
| Desisyon | Ang sagot namin ngayon | Ano ang dapat totoo bago mo ito i-automate |
|---|---|---|
| Pag-draft ng post, quest description o reply | Oo | May taong nagbabasa nito bago ito ipadala. Wala nang ibang kailangan. |
| Pag-summarize ng channel, ng isang linggo, o ng submission queue | Oo | Nananatiling maaabot ang raw material, para masuri ng mambabasa ang summary laban dito. |
| Pag-route ng report, tanong o claim sa tamang tao | Oo | Mura at nakikita ang maling routing, at ang queue ay hindi black hole. |
| Pagsagot sa tanong na may dokumentadong sagot | Oo, nang may pag-iingat | Ang sagot ay nakasulat sa isang lugar na kontrolado mo, at ang maling sagot ay maaaring itama nang pampubliko at mabilis. |
| Pag-tag, pag-rank o pag-order ng queue para sa tao | Oo | Nakikita pa rin ng tao ang mga item na huling ni-rank ng modelo. Ang pag-order ay hindi pag-filter. |
| Pag-apruba o pagtanggi sa submission na may payout | Lamang kung may appeal path | Sinasabihan ang miyembro ng dahilan, maaaring baligtarin ng tao ang verdict, at may nanonood sa reversal rate. |
| Pag-alis ng content o pag-restrict ng account | Lamang kung may reversible na gitnang aksyon | May low-confidence path na gumagawa ng mas maliit kaysa sa buong aksyon, gaya ng inilalarawan ng DTSP report. |
| Pag-ban nang tuluyan sa isang miyembro | Hindi | Hindi namin mapangalanan ang antas ng confidence na gagawing ligtas ito nang walang tao, at ang Discord incident ang dahilan. |
| Pagggastos ng pera o paglipat ng rewards | Hindi | Walang sinusuportahan sa artikulong ito ang pag-automate nito, at ang pagkabigo ay hindi nababaligtad sa paghingi ng paumanhin. |
Ang pattern sa gitnang column ay hindi "mahirap na bagay para sa tao". Ang pag-rank ng queue ay mas mahirap na cognitive task kaysa sa pag-ban ng isang tao. Nasa tuktok ito ng listahan dahil ang maling pag-rank ay walang gastos na hindi mo maibabalik sa isang segundo, at ang maling pag-ban ay nagkakahalaga ng isang tao.
Isang praktikal na paalala na hindi kasya sa talahanayan. Halos lahat ng community na nag-aautomate ng desisyon ay nakakalimutang sukatin ang reversal rate pagkatapos, ibig sabihin may appeal path pero walang nagbabasa ng nalilikha nito. Kung may isang bagay kang itatayo mula sa artikulong ito, itayo ang counter. Kung sinusukat mo ang panig-tao ng gawaing iyon, paano mag-delegate ng community tasks ay sumasaklaw sa labor cost na hindi lumalabas sa pricing page.
May dalawang AI path ang Zealy, at magkaiba ang sagot nila sa tanong na ito
Sa MCP server ng Zealy, walang pagbabagong ginagawa ng agent ang magkakabisa hanggang may taong magsabi. Sa loob ng produkto ng Zealy, ang AI review ng Zealy ay direktang nagdedesisyon sa quest claim: minamarkahan nito ang claim na successful o failed at ipinopost ang dahilan nito sa miyembro. Dalawang AI path sa isang kumpanya, magkasalungat ang sagot sa parehong tanong.
Unahin ang pangalawa, dahil ito ang argumento laban sa amin. Sa Plus at Enterprise plans, maaari mong i-on ang AI review para sa isang quest at magsulat ng prompt na naglalarawan kung ano ang valid na submission. Isinasaad ng dokumentasyon ng Zealy mismo ang kahihinatnan nang walang paglalambot: ang AI ang nagdedesisyon sa claim. Hindi ito nag-iiwan ng rekomendasyon para kumpirmahin ng tao. Minamarkahan nito ang claim na successful o failed, at ang dahilang ibinibigay nito ay ipinopost bilang review comment na binabasa ng miyembro sa inbox nito. Ang mga verdict nito ay iniuukol sa isang Zealy AI reviewer na lumalabas kasama ng iyong team sa top-reviewers analytics. Kung gusto mong tao ang gumawa ng huling desisyon, iwanang off ang AI review para sa quest na iyon. Nasa dokumentasyon ng reviews ng Zealyang lahat ng iyon, at nandoon na ito mula pa noon.
Kung ikukumpara sa talahanayan sa itaas, iyon ay automated na approve-or-reject sa desisyong nagbibigay ng XP at role rewards — at, dahil sinasabi ng dokumentasyon ng Zealy na responsibilidad ng community ang mag-distribute ng anumang ibang uri ng reward, sa desisyong nagtatakda kung kanino pa may utang ang community. Totoo ang mga mitigation — maaaring i-undo ng reviewer ang anumang verdict, na nagre-reset sa claim pabalik sa pending, at sinasabihan ang miyembro ng dahilan sa halip na tahimik na biguin — ngunit ang modelo ang gumagawa ng desisyon, at ang appeal ay nagsisimula sa pagpansin ng miyembro.
Ang iba pang AI path ng Zealy ay kumuha ng kabaligtaran na posisyon. Sa ibabaw ng Zealy MCP server, malayang nagbabasa ang isang agent at hindi ito makakapagbago ng anuman nang walang taong mag-aapruba sa eksaktong pagbabagong iyon muna. Ang mekanika ng gate na iyon, tool sa tool, ay nasa paano i-audit ang access ng isang AI agent sa iyong komunidad, na naglilista ng surface sa halip na ilarawan ito.
Hindi namin aayusin ang kontradiksyong iyon sa loob ng isang blog post, at ang pagpapanggap na ito ay isang magkakaugnay na pilosopiya ay mas masama pa kaysa sa paglilimbag nito. Dalawang team, dalawang threat model, dalawang sagot. Ang masasabi namin ay hindi random ang pagkakahati: ang MCP path ay isang panlabas na agent na kumikilos gamit ang awtoridad ng isang administrator sa buong komunidad, at ang review path ay isang saklaw na paghuhusga sa isang submission laban sa prompt na mismong isinulat ng komunidad. Magkaibang panganib ang mga iyon. Kung magkaiba nga ba ang mga ito nang sapat para bigyang-katwiran ang magkasalungat na default ay isang makatarungang tanong na maaaring itanong sa amin, at kung sinusuri mo ang Zealy dapat mong itanong ito.
Ang pangkalahatang punto ay nananatili kahit lampas sa aming sariling produkto. Kapag sinabi ng isang vendor na ang kanilang AI ay may taong nasa loop, itanong kung alin sa kanilang mga AI feature ang tinutukoy nila. Walang isang patakaran ang mga kumpanya. May isang patakaran sila kada team na naglabas ng isang bagay.
Kung saan mas mahusay ang Discord at Cove kaysa sa Zealy
Ang AutoMod ng Discord ay tumatakbo sa loob mismo ng Discord at hinaharangan ang isang mensahe bago pa ito makita ng kahit sino; hindi nakaupo ang Zealy sa message path ng Discord at hindi nito mapipigilan ang anuman bago ito maipost. Nagpapadala ang Cove ng Moderator Console na itinayo sa premisang may mamimiss ang sarili nitong automation. Walang katumbas ang Zealy.
Dalawang magkaibang kalamangan iyon at parehong sulit unawain.
Ang sa Discord ay positional. Ang sariling Auto Moderation documentation ng Discord ay inilalarawan ang feature bilang isa "which allows each guild to set up rules that trigger based on some criteria", at ang BLOCK_MESSAGE action nito bilang isa na "blocks a member's message and prevents it from being posted". Iyon ang buong kalamangan sa isang sugnay: nangyayari ang interbensyon bago ang publikasyon sa halip na pagkatapos. Kumokonekta ang Zealy sa Discord, nagbibigay ng roles at nagbe-verify ng mga task; hindi kami ang chat server, at walang dami ng AI sa aming panig ang makakabago sa kinaroroonan namin. Kung ang problema mo ay "hindi dapat kailanman lumitaw ang isang masamang mensahe", ang tool na makakasolusyon dito ay ang nasa pipeline na. Saklaw ng aming survey ng mga Discord engagement tool kung ano pa ang nabibilang sa layer na iyon.
Ang sa Cove ay arkitektural, at ito ang mas kawili-wili. Inilalarawan ng Cove ang sarili nito sa sarili nitong dokumentasyon bilang "Cove is a no-code platform for Trust & Safety", at pagkatapos ay isinusulat ito tungkol sa sarili nitong automation: "Some harmful content will inevitably slip through your Automated Rules, and it'll get reported/flagged by your users. With our Moderator Console, your moderators can review those reports and take action on them directly in our UI."
Basahin muli ang salitang "inevitably", sa sariling product documentationng isang vendor, tungkol sa produktong ibinebenta nila sa iyo. Dinisenyo ng Cove ang isang surface na ang buong dahilan ng pag-iral ay mali ang automated layer, at itinayo ang workflow para mahuli iyon bilang first-class na bahagi ng produkto sa halip na support ticket.
May undo ang Zealy sa isang review, na hindi parehong bagay. Ang undo ay kontrol para sa taong alam nang mali ang isang verdict. Ang mayroon ang Cove ay isang lugar kung saan dumarating ang mga miss. Kung pumipili ka ng platform bahagya batay sa kung paano nito hinahawakan ang sarili nitong mga pagkabigo, ang pagkakaibang iyon ang dapat mong subukan, at dapat mo rin itong subukan sa amin. Nagsulat kami ng mas malawak na paghahambing ng community management software kung mas maaga ka pa sa desisyong iyon, at ano ang Zealy kung gusto mo ang simpleng paglalarawan ng aming sariling saklaw.
Sino ang sasagot kapag mali ang agent
Ikaw. Noong Pebrero 2024, inutusan ng isang tribunal sa Canada ang Air Canada na magbayad ng danyos matapos magbigay ng maling impormasyon ang chatbot sa website nito sa isang nagdadalamhating pasahero. Nagtalo ang Air Canada, sa mga salita ng tribunal, na ang chatbot ay isang hiwalay na legal na entity na responsable sa sarili nitong mga aksyon. Nag-awad ang tribunal ng CA$812.02 sa kabuuan, CA$650.88 nito ay danyos.
Iniulat ito ng The Register noong 15 Pebrero 2024, sa isang piyesa ni Katyanna Quach na may pamagat na "Air Canada must pay damages after chatbot lies to grieving passenger about discount". Ang tribunal member na nagdesisyon sa kaso ay si Christopher Rivers, at sinipi ng The Register ang ruling na naglalarawan sa posisyon ng airline: "In effect, Air Canada suggests the chatbot is a separate legal entity that is responsible for its own actions."
At ang natuklasan, na siyang pangungusap na dapat makita ng bawat may-ari ng komunidad na nagde-deploy ng agent: "It should be obvious to Air Canada that it is responsible for all the information on its website. It makes no difference whether the information comes from a static page or a chatbot."
Isang caveat sa paraan ng aming pagsipi nito. Sinisipi namin ang reporting ng The Register sa halip na ang ruling mismo, na hindi namin binasa, at hindi kami naglilimbag ng case citation.
Maliit ang mga halaga at hindi gayon ang prinsipyo. Ang isang agent na nagsasalita sa iyong komunidad ay ikaw na nagsasalita sa iyong komunidad. Pananagutan ka ng mga miyembro sa sinabi nito, at kahit isang tribunal ay ganoon din. Naaangkop iyon sa refund policy na inimbento nito, sa patakarang sinabi nito na hindi mo kailanman isinulat, at sa ban na ipinamigay nito. Sinubukan ang "The AI did it" bilang depensa at natalo ito.
Paano itakda ang hangganan para sa iyong sariling komunidad
Isulat ang mga desisyong gagawin ng iyong agent, pagkatapos isulat kung ano ang nangyayari kapag mali ang bawat isa at sino ang nag-aayos nito. Kung hindi mo mapangalanan ang taong nag-aayos nito, hindi pa handa ang desisyon na i-automate. Ang nag-iisang ehersisyong iyon ay mas mahalaga kaysa sa anumang confidence threshold na pipiliin mo nang bulag.
Isang maikling bersyon ng sinusuportahan ng ebidensya sa itaas, sa pagkakasunod-sunod na gagawin namin:
- I-automate agad ang mga mekanika. Pag-draft, pag-iskedyul, pag-summarize, pag-routing, pag-tag. Ang downside ay isang masamang draft, at alam mo na kung paano hawakan ang masamang draft.
- Para sa anumang may kahihinatnan, imbentuhin muna ang gitnang aksyon bago imbentuhin ang threshold. Ang low-confidence path ng ulat ng DTSP ay gumagawa ng maliit na maibabalik na hakbang at ipinapasa ang kaso. Isang naka-hold na claim, isang downranked na post, isang restricted-pero-hindi-inalis na account. Kung ang dalawang opsyon mo lang ay "kumilos" at "maghintay", mali ang bawat threshold na pipiliin mo sa isang direksyon.
- Ituring ang iyong human-review step bilang software, at i-test ito tulad ng software. Ang sa Discord ay umiiral sa papel at hindi tumakbo. Itanong kung kailan huling aktwal na nag-fire ang sa iyo, at ano ang magsasabi sa iyo kung tumigil ito.
- Bilangin ang mga reversal. Ang appeal path na walang nagsusukat ay complaint form lang. Ang reversal rate ang tanging tapat na pagbasa na makukuha mo kung sapat na ba ang automated na desisyon, at halos walang gastos ang i-record ito.
- Ipagpalagay na ikaw ang may-ari ng lahat ng sinasabi nito. Sinubukan ng Air Canada ang kabilang posisyon sa harap ng tribunal.
Ang tanong sa pamagat ay may tunay na sagot at hindi ito pag-iling. Ang AI agent ay kayang patakbuhin ang mga mekanika ng iyong komunidad ngayon, nang maayos, at dapat mong hayaan ito. Hindi pa nito kayang maging bagay na nagpapasya kung sino ang aalisin, sino ang babayaran, o ano ang iyong patakaran — hindi dahil bobo ito, kundi dahil hindi ito mapagkakatiwalaan sa paraang hindi mo mahulaan kada kaso, at dahil ang human safety net na ilalagay mo sa likod nito ay isang piraso ng software na may sariling failure modes. Magdisenyo para sa kaso kung saan pareho silang mali, at makakabuo ka ng mas mabuti kaysa sa makukuha mo mula sa hype o backlash.