Ako Huffington Post spracováva viac ako 70 miliónov komentárov ročne

Huffington Post tento rok doteraz nazhromaždil viac ako 70 miliónov komentárov, čím výrazne prekonal celkový počet 54 miliónov z roku 2011.

Aby som uviedol jeden príklad, jeho príspevok ( prvýkrát zverejnené) s dnes už známym videom s komentármi Mitta Romneyho „47 percent“ prilákalo ohromujúcu pozornosť 171 753 komentárov .

Všetky spravodajské weby nejakým spôsobom zápasia s komentármi používateľov, ale moderovanie tohto obrovského množstva správ je jedinečným testom toho, či sa online konverzácie, ako ich poznáme – tucet ľudí, ktorí v blogovom príspevku alebo článku vytvoria niekoľko bodov – môžu nekonečne meniť. väčší bez toho, aby sa zrútil do kakofónie.

Komentáre používateľov k článkom Huffington Post v priebehu rokov vzrástli na približne 8 miliónov v júli a 9 miliónov (bez vyobrazenia) v auguste. (Tabuľka a údaje s láskavým dovolením The Huffington Post)

Spýtal som sa Justina Isafa, riaditeľa komunity v The Huffington Post, niekoľko otázok o tom, ako stránka vytvára hodnotné diskusie a presadzuje komunitné štandardy s až 25 000 komentármi za hodinu.

Poynter: Jednou z veľkých otázok je, „rozsahuje“ sa budovanie komunity okolo online správ? To znamená, že keď 100 000 ľudí komentuje príspevok, naozaj si stále môžete vymieňať nápady a skutočne konverzovať – alebo máte len 100 000 ľudí, ktorí hovoria príliš hlasno, aby ich niekto počúval? Naozaj to vytvára komunitu, ktorá sa navzájom pozná a učí sa navzájom lacné retro jordánky ?

Justin Isaf: Určite môžete mať zmysluplnú komunitu vo veľkom rozsahu. 70 % našich komentárov sú odpovede pre iných ľudí, dokonca aj na články so 100 000 komentármi. Ľudia si skutočne dávajú pozor a vedú zaujímavé diskusie.

Toto je skutočne zaujímavá otázka a rád by som sa nad ňou na chvíľu zamyslel. V skutočnosti existujú dve hlavné výzvy pre komunitu vo veľkom rozsahu. Najväčšou výzvou je problém zlých jabĺk, ktorý je výrečne uvedený v „ Godwinov zákon “ („Ako sa online diskusia predlžuje, pravdepodobnosť porovnania s nacistami alebo Hitlerom sa blíži k 1“). Druhý, ktorý sa stáva skutočným problémom, len ak ste vyriešili prvý, je objav – ako nájdete konverzáciu, ktorá vás ako čitateľa bude zaujímať, keď je k článku 185 000 komentárov.

Justin Isaf predtým pracoval v Change.org pripojil sa k The Huffington Post .

Godwinov zákon je o jednom chlapíkovi, ktorý príde a robí veci menej príjemnými do tej miery, že vaši dobrí členovia jednoducho odídu. Je to väčší problém v rozsahu, ale je to problém na všetkých úrovniach komunity.

Riešením pre nás bolo skutočne tvrdo pracovať na tom, aby bola komunita bezpečná a príjemná, investovaním značného času a energie do predmoderovania, aby sme zabránili vstupu tých zlých hercov... Naša viera sa scvrkáva na veľmi jednoduché „ak ste úmyselne alebo dôsledne čím sa toto miesto stane menej príjemným, vy a vaše komentáre z neho môžu byť odstránené.“

Náš prístup k druhému problému – nájdenie správnej diskusie pre vás – bol spoločný aj technologický. Po prvé, sieť „fanúšikov“ na HuffPost umožňuje ľuďom sledovať, o čom sa rozprávajú ich priatelia, a ľahko sa spojiť s novými ľuďmi, ktorých považujú za zaujímaví. Chceme zabezpečiť, aby sa starí priatelia mohli ľahko nájsť, no zároveň ich predstaviť novým ľuďom, aby neustále rozširovali svoju komunitu a sieť.

Technologické riešenie na pripojenie tých správnych ľudí zahŕňa VEĽA lámania údajov, inteligentné algoritmy a elegantný dizajn. Napríklad náš program Pundit na vertikále Politika – ktorý zvýrazňuje komentáre a konverzácie, ktoré budú vo všeobecnosti zaujímavejšie pre veľké publikum – vedie k niektorým z najpútavejších a najhlbších konverzácií na stránke, aj keď je veľa.

Zameranie sa na tieto dva problémy – vytvorenie bezpečného, ​​príjemného priestoru a pomoc ľuďom nájsť obsah, ktorý je pre nich relevantný – nám umožnilo riadiť rast a rozsah skutočnej komunity. Pomohlo nám to tiež udržať si používateľov úžasne dobre. Viac ako 1 000 členov komunity, ktorí sa zaregistrovali počas prvých 6 mesiacov existencie HuffPost, aj dnes komentuje viac ako raz týždenne.

Je zrejmé, že na udržanie takéhoto úsilia sú potrebné značné zdroje, však? Mohli by ste mi povedať viac o tíme na moderovanie komentárov – počet ľudí, kedy pracujú, čo robia? A aké technologické riešenia, ako sú filtre a algoritmy, pomáhajú automatizovať časť tejto práce?

nižšie: Teraz sme väčší tím s ekvivalentom asi 30 moderátorov na plný úväzok. Pracujú 24 hodín denne, 7 dní v týždni, 365 hodín denne v šesťhodinových zmenách, pričom každá prechádzajú stovkami komentárov za hodinu. Všetci majú sídlo v USA alebo v krajine vydania, na ktorej pracujú, aby získali miestny kultúrny kontext a konverzácie. Je to veľmi špecifický súbor zručností a vyžaduje si určitú mentalitu, aby ste to urobili dobre. Tento tím mám neustále v úžase.

Sú podporované niektorými z najlepších technológií v tomto odvetví. Vysvetlenie všetkých rôznych technológií, ktoré vstupujú do moderovania, by trvalo naozaj dlho, no jadrom je Julia. Je to stroj s umelou inteligenciou, ktorý pomáha modulom. Je to veľmi skvelá technológia, ktorú sme získali asi pred 2 rokmi a odvtedy sme veľa rozšírili.

Rád by som počul viac o „Julia“. Akú úlohu zohráva pri moderovaní komentárov? Odkiaľ sa táto technológia vzala a je k dispozícii niekomu inému na prijatie? Robí sémantickú analýzu? „Učí sa“ časom? Čo inšpirovalo názov?

nižšie: Bola súčasťou akvizícia spoločnosti s názvom Adaptive Semantics ktorý ju vytvoril a pôvodnú technológiu za tým všetkým. Bol to dvojčlenný tím, Jeff Revesz a Elena Haliczer. Elena je teraz viceprezidentkou pre produkt spoločnosti HuffPost a neustály vývoj Julie vykonávajú niektorí veľmi inteligentní ľudia s doktorátmi vo veciach, ktorým nikdy nepochopím.

Julia je algoritmus strojového učenia (JuLiA je skratka pre „Just a Linguistic Algorithm“), ktorý sme sa naučili rozumieť niekoľkým jazykom a ktorý neustále učíme (áno, časom sa učí). Číta všetko zaslané na HuffPost a pomáha moderátorom robiť ich prácu rýchlejšie a presnejšie. So strojom podporovaným moderovaním sme urobili skutočne veľa, čo nám umožňuje predmoderovať 9,5 milióna komentárov mesačne, a Julia je v tom kľúčová.

Som veľkým fanúšikom toho, aby nám stroje pomáhali s úlohami nižšej úrovne, čím sa uvoľňuje čas, zdroje a mozgová sila pre zaujímavejšie a komplexnejšie úlohy. Julia to robí o niekoľko krokov ďalej a pomáha nám s mnohými ďalšími aspektmi HuffPost okrem pomoci pri vyraďovaní zneužívajúcich členov vrátane identifikácie inteligentných konverzácií na propagáciu a obsahu, ktorý našim inzerentom nevyhovuje. Umožnila nám urobiť oveľa viac s oveľa menej.

Takže, vzhľadom na dosť pokročilé schopnosti „Julia“, o čo sa musia ľudskí moderátori postarať? Zaoberajú sa poznámkami v šedej oblasti, o ktorých si počítač nebol istý?

nižšie: Náš ľudský tím sa zaoberá množstvom problémov. Medzi ne určite patria komentáre v šedej oblasti, ktorými si Julia nie je istá, ale aj riešenie vyššej úrovne a moderovania špeciálnej starostlivosti, používateľských problémov, auditu a starostlivosti o kvalitu atď.

Napríklad:

• Julia uvoľnila zdroje, aby mohla prejsť do nášho programu komunitného editora – redaktorov, ktorí sa zameriavajú na vytváranie obsahu a zapojenie nášho publika s jasným cieľom vybudovať hustejšiu komunitu ľudí okolo obsahu, na ktorom im záleží, s rovnako zmýšľajúcimi ľuďmi. Je to veľmi praktické, v podstate ľudské a vytvorilo úžasné skupiny jednotlivcov, ktorí teraz majú domov, kde môžu zdieľať svoju vášeň s podobnými ľuďmi, ktorých by inak možno nikdy nestretli.
• Keď kontroverzné postavy zomrú alebo sú hospitalizované, veľmi sa snažíme zabezpečiť, aby boli vlákna vhodné a aby ich nepreberali ľudia, ktorí príliš hlasno vyjadrujú nechuť k danej osobe. Je to druh starostlivosti, ktorý sa strojom ešte celkom nedostáva, ale stále sú to ľudia s citmi, rodina, priatelia, milovaní, a berieme to ako súčasť našej zodpovednosti zabezpečiť, aby to konverzácie na HuffPost brali do úvahy.
• Na stránke máme niekoľko príbehov a sekcií, ktoré sú smutne kontroverzné a niektoré sú citlivé – naše vertikály Voices, tínedžeri, články o vzhľade ľudí atď. V mnohých prípadoch sa v týchto vertikálach chceme uistiť, že máme väčšiu ľudskú účasť. pretože sa dotýkajú toľkých skutočných životov a ovplyvňujú skutočné pocity. Chceme sa teda uistiť, že sú zapojení ľudia s pocitmi a životmi. Julia je citlivý typ, ale nie vždy to „chápe“, keď je to emocionálne.

Nakoniec, ako si myslíte o pokuse o objavenie tých najlepších komentárov z tisícov, ktoré dostanete? Alebo všeobecnejšie, môžete navrhnúť systém komentárov, ktorý je optimalizovaný pre ľudí, ktorí čítajú komentáre, nie pre ľudí, ktorí komentáre zanechávajú?

nižšie: Vo výbere dizajnu často dochádza k kompromisu – ľudia, ktorí čítajú a ľudia, ktorí konverzujú, majú často odlišné potreby.

Môžete (a mali by ste) určite optimalizovať na čítanie, najmä ak vezmeme do úvahy, že ide o veľkú časť komunity (pozri „ pravidlo 1-9-90 “). Ale zároveň, ak optimalizujete pre ľudí, ktorí nekonverzujú, riskujete, že znížite množstvo vecí na čítanie.

Pristupujeme k tomu, že chceme vybudovať platformu, ktorá je pre členov našej komunity neuveriteľne jednoduchá na vzájomné prepojenie, no zároveň veľmi uľahčuje prvým čitateľom nájsť najlepšie body zapájania a najzaujímavejšie konverzácie.

Je to určite vyváženie a v priebehu rokov sme sledovali kvalitatívne aj kvantitatívne údaje, aby sme sa uistili, že vytvárame najpútavejšiu a najrobustnejšiu platformu a komunitu, akú môžeme. Náš prístup nemusí fungovať v každom prípade, ale pre nás funguje celkom dobre.

Skoršie: HuffPost si cení konverzáciu a komunitu viac ako obsah | HuffPost používa odznaky na to, aby používateľom umožnil ako moderátorov.