Megbízhatók-e az értékelések, mielőtt szakembert fogadsz?

Miért nem elég a csillagszám?

Egy 4,8-as átlag nem árulja el, hogy a vízszerelő tavaly télen időben érkezett-e. Azt sem, hogy a végszámla egyezett-e az előzetes árajánlattal.

Pedig pontosan ezek döntik el, hogy jól választottál-e.

A BrightLocal éves fogyasztói felmérései szerint a vásárlók több mint 90 százaléka elolvas online értékeléseket, mielőtt helyi vállalkozást választ. A gyakorlat mégis mást mutat.

A legtöbben néhány másodpercig nézik az értékelési átlagot, és ennyi.

A csillagszám kényelmes. Csak éppen keveset mond.

Egy doboz falfesték minden vásárlónál ugyanaz: ugyanaz a fedőképesség, ugyanaz a száradási idő, ugyanaz a csomagolás. Egy villanyszerelő munkája viszont minden alkalommal más.

Más lakás, más hiba, más napszak, és sokszor más kolléga érkezik.

A helyi szolgáltatói értékelés ezért nem egy tárgyról szól, hanem egy egyszeri eseményről.

Egy termék csillagai egy állandó minőséget mérnek. Egy szakember csillagai egy változó teljesítmény lenyomatai, amelyek idővel elavulhatnak.

Ez a cikk nem csak a hamis értékelés kiszűréséről szól. A célja az, hogy a teljes értékelési rendszert olvasni tudd: kik írnak, mikor, milyen platformon, milyen szabályok szerint, és melyik jel nyom többet a latban.

A fő kérdés tehát kettős.

Mennyire lehet megbízni az online értékelésekben, és mitől erősebb az egyik jel a másiknál?

Az értékelések megbízhatósága nem igen-nem kérdés, hanem fokozatoké.

Mi teszi megbízhatatlanná a véleményeket?

A legtöbb torz értékelés nem hazugság.

Egyszerűen nem a teljes képet mutatja. A megbízhatatlanság három forrásból táplálkozik: abból, hogy ki ír, abból, hogy ki gyárt, és abból, hogy ki kér véleményt és hogyan.

Ki ír egyáltalán véleményt?

Gondolj vissza az utolsó tíz szolgáltatásra, amit igénybe vettél. Hányról írtál véleményt?

A legtöbb ember őszinte válasza: egyről, vagy egyről sem.

Ez az önszelekciós torzítás lényege.

Véleményt jellemzően az ír, akit valami erősen megmozdított, vagyis vagy nagyon elégedett, vagy nagyon csalódott. A közepesen elégedett többség, akinek a munka „rendben volt”, egyszerűen továbblép.

A kutatók ezt J alakú eloszlásnak nevezik: sok ötcsillagos, kevés közepes és egy kisebb csúcs az egycsillagos végen. Hu, Pavlou és Zhang 2009-es tanulmánya az Amazon termékértékelésein mutatta ki ezt a mintázatot, és a szolgáltatói platformokon ugyanez a logika érvényesül.

Az értékelési átlag nem az összes ügyfél átlaga. Csak azoké, akiknek volt kedvük megszólalni.

Hamis és mesterséges vélemények

2023 óta a nagy nyelvi modellek bárkinek lehetővé teszik, hogy percek alatt húsz, egymástól látszólag eltérő szöveget gyártson. A Google saját beszámolója szerint csak 2023-ban több mint 170 millió szabálysértő értékelést blokkolt vagy távolított el.

A szűrés tehát létezik, de nem tökéletes.

A gépi vagy sablonos szöveg árulkodó jele az általános dicséret konkrétum nélkül: „Profi, gyors, megbízható, csak ajánlani tudom.” Nincs benne helyszín, nincs megnevezett hiba, nincs egyetlen szakmai szó sem.

Gyanús az is, ha a nyelvtan hibátlan, a hangnem egységesen lelkes, és a mondatok ugyanabban a sorrendben követik egymást: érkezés, munka, ár, ajánlás. Ha ugyanez a szerkezet több vállalkozás profilján is felbukkan, és csak a név cserélődik, szinte biztosan sablonról van szó.

Ösztönzött és etikus vélemény kérés

Véleményt kérni teljesen rendben van. A pozitívat jutalmazni már nem.

Az uniós Omnibusz-irányelv (2019/2161/EU) nyomán Magyarországon 2022. május 28. óta a tisztességtelen kereskedelmi gyakorlatokról szóló törvény feketelistája tiltja a hamis fogyasztói vélemények beküldését és megrendelését, valamint a vélemények torzító bemutatását. A vállalkozásnak arról is tájékoztatnia kell, hogy ellenőrzi-e, és ha igen, hogyan, hogy a vélemény valódi ügyféltől származik.

A betartást a Gazdasági Versenyhivatal felügyeli.

A vásárolt vélemény tehát nem szürke zóna.

Ugyanígy tilos az a kedvezmény, amelyet csak ötcsillagos értékelésért adnak, és a Google szabályzata azt a gyakorlatot is tiltja, amikor a vállalkozó előbb rákérdez az elégedettségre, majd csak a boldog ügyfeleket irányítja a nyilvános profilra.

Ha szolgáltató vagy, a tisztességes módszer egyszerű.

Kérj véleményt minden ügyféltől, minden munka után, ugyanazon a csatornán. Fogalmazz semlegesen („Írja meg, hogyan sikerült a munka”), ne így: „Kérjük, adjon öt csillagot.”

A vegyes, de valódi profil hosszú távon többet ér. Az ügyfelek ma már megérzik a túl simára csiszolt képet.

Hogyan ismerd fel a valódi véleményt

Egy valódi vélemény ritkán tökéletes, viszont szinte mindig konkrét. Aki tényleg ott volt, emlékszik a részletekre, és ezek a részletek kiírhatatlanul ott maradnak a szövegben.

A hiteles vélemény jelei:

• Szakmaspecifikus részletek. „Kicserélte a mosogató alatti sarokszelepet” vagy „a FI-relé leoldott a fürdőszobai körön” típusú mondatokat nehéz kitalálni, ha valaki nem élte át a helyzetet.
• Dátum és helyszín említése. „Januárban, egy XIII. kerületi panellakásban” sokkal hihetőbb, mint egy időtlen, helytelen dicséret.
• Valós munkamenet öt-hat mondatban. A hiteles szöveg leírja a problémát, az érkezést, a hibakeresést, a megoldást, az árat, és jó esetben azt is, mi történt utána.
• Árak és eltérések megnevezése. „Az ajánlat 38 000 forint volt, a végösszeg 42 000, mert kellett egy új szifon” típusú mondat egyszerre hiteles és hasznos.
• Kisebb kritika a dicséret mellett. „Húsz percet késett, de előre szólt” az egyik legerősebb hitelességi jel, mert a hamis vélemények szinte sosem tartalmaznak ilyet.
• Saját fotó a kész munkáról. Egy lakásban készült, nem tökéletes megvilágítású kép nehezen hamisítható tömegesen.

Miért ér többet egy részletes szöveg, mint egy puszta ötcsillagos minősítés?

Mert a csillag egyetlen adatpont, a szöveges vélemény részletessége viszont kontextust ad. Olyan ez, mint egy aláírás nélküli ajánlólevél és egy volt főnök hosszú, konkrét referenciája közötti különbség.

Gyanús mintázatok, amelyekre figyelj:

• Azonos mondatszerkezet több profilon. Ha ugyanaz a fordulat („gyorsan kiért, precízen dolgozott, korrekt áron”) három különböző cégnél is megjelenik, sablonról van szó.
• Tömeges beérkezés egy napon. Hónapokig csend, aztán egy kedden tizenöt ötcsillagos vélemény: ez szinte mindig kampány, nem véletlen.
• Profilkép és névtörténet nélküli fiók. Az a felhasználó, akinek egyetlen értékelése van, és nincs mögötte semmilyen aktivitás, gyengébb forrás.
• Földrajzilag lehetetlen aktivitás. Ugyanaz a fiók egy héten belül budapesti festőt, debreceni autószerelőt és szegedi takarítót értékel.
• Csillagok szöveg nélkül, tömegesen. Egy-két néma ötös normális, de ha a vélemények fele csak szám, az értékelési átlag kevesebbet ér.

Két szolgáltató gyors összehasonlítása, az átlagon túl:

• Olvasd el mindkettőnél a legutóbbi tíz véleményt. A friss adat többet mond, mint a teljes történet összesítése.
• Számold meg, hány tartalmaz konkrétumot. Ha az egyiknél nyolcból tízben van részlet, a másiknál kettőben, máris tudod, melyik profil informatívabb.
• Keresd a visszatérő témákat. Ha három ügyfél is pontosságot dicsér, az minta. Ha három is az árak utólagos emeléséről panaszkodik, az is.
• Nézd meg a negatív véleményeket és a válaszokat. Két-két kritikus szöveg és a vállalkozó reakciója gyakran többet ér, mint húsz dicséret.

Ez az egész nagyjából öt perc.

És sokkal megbízhatóbb képet ad, mint két szám egymás mellé tétele.

A csillagos átlag mögött

A 4,6 jobb lehet, mint az 5,0.

Elsőre ellentmondásnak tűnik, de a statisztika pontosan ezt mondja, amikor az értékelések száma nagyon eltérő.

Hány értékelés számít hitelesnek?

Egy négy véleményből álló 5,0-s átlagot egyetlen rossz értékelés 4,2-re ránt le. Egy 120 véleményből álló 4,6-os átlagot ugyanez a rossz értékelés mindössze 4,57-re mozdít.

Az első esetben az átlag a véletlen terméke, a másodikban egy stabil mintázat.

Az alábbi táblázat azt mutatja, mennyire érzékeny az átlag egy új, egycsillagos véleményre a minta méretétől függően.

Gyakorlati ökölszabályként tíz vélemény alatt csak óvatos következtetést vonj le. Húsz és ötven között már értelmes kép rajzolódik ki, száz felett pedig az átlag jellemzően stabil.

Kisebb településen vagy ritka szakmában (kéményseprő, kútfúró) a kevesebb vélemény természetes, ott a szöveg minősége számít többet.

Miért gyanús az 5,0-s átlag?

Senki sem tökéletes.

Egy több tucat munkát lefedő, hibátlan 4,9-5,0-s átlag mögött ezért gyakran valami más áll, mint a hibátlan munka.

Három tipikus ok van.

Az egyik a szelektív megjelenítés: a vállalkozó saját weboldalán csak a legjobb idézetek szerepelnek. A másik a törölt vagy elfojtott negatív vélemény, a harmadik a mesterséges feltöltés, amikor ismerősök vagy fizetett fiókok hígítják fel a profilt.

A vásárlók ezt ösztönösen érzik.

A Northwestern University Spiegel Research Centerének 2015-ös elemzése szerint a vásárlási hajlandóság a 4,0 és 4,7 közötti sávban a legmagasabb, és a tökéletes ötöshöz közeledve csökken, mert a hibátlan kép hihetetlenné válik.

Az átlag helyett ezért három dolgot olvass együtt.

Az értékelési eloszlás megmutatja, hogyan oszlanak meg a csillagok. Az értékelés frissessége azt, hogy a jó hírnév ma is érvényes-e, hiszen egy 2019-es 4,8-as átlag és azóta csend sokat elárul.

Az 1-2 csillagos vélemények aránya pedig azt, hogy a panaszok egyedi esetek-e, vagy visszatérő minta.

Ha a negatív vélemények aránya néhány százalék, és mindegyik más-más problémáról szól, az normális működés. Ha húsz százalék fölött van, és ugyanaz a panasz ismétlődik (késés, utólagos áremelés, félbehagyott munka), az már rendszerszintű jel.

Mennyire átlátható a rendszer?

Ugyanaz a 4,7-es átlag mást ér egy szigorú platformon, mint egy olyanon, ahol bárki bármit beküldhet. A platform szabályai a számok mögötti láthatatlan réteg.

Ha egy platform nem árulja el, hogyan kezeli a véleményeket, az önmagában információ. A törvény is előírja ezt a tájékoztatást, így a hiánya komoly figyelmeztető jel.

A foglaláshoz kötött értékelés ereje

Melyik értékelés a legnehezebben hamisítható? Az, amelyikhez előbb valódi munkát kellett elvégezni.

Miért nyom többet egy igazolt foglalás

A szabadon beküldhető vélemény olyan, mint egy nyitott vendégkönyv a ház előtt: bárki beleírhat, akár be sem lépett. A teljesített foglaláshoz kötött értékelés inkább a beszállókártyához hasonlít.

Csak az kapja meg, aki ténylegesen utazott.

Ez a modell alapjaiban változtatja meg a csalás költségét. Egy hamis vélemény itt nem egy kattintásba kerül, hanem egy kitalált foglalásba, egy lezárt munkába, egy nyomon követhető tranzakcióba.

Tömegesen ez szinte kivitelezhetetlen.

Jó példa erre a FRENDEX modellje, ahol értékelést csak befejezett foglalás után lehet írni. Aki tehát véleményt hagy egy villanyszerelőről, az a platformon keresztül tényleg igénybe vette a szolgáltatást.

Az ilyen rendszer nem garantálja, hogy minden ügyfél objektív, de azt igen, hogy valódi ügyfél beszél.

Ez a különbség a vélemények hitelessége szempontjából óriási. Egy 25 foglaláshoz kötött értékelés gyakran erősebb jel, mint 80 ellenőrizetlen.

Negatív vélemények és vállalkozói válaszok

Egy jól megválaszolt egycsillagos vélemény többet elárul egy szakemberről, mint tíz dicséret. A negatív helyzetben ugyanis az látszik, ami a megrendelőnek is számít: hogyan reagál, ha valami félremegy.

A jó válasz rövid, konkrét és tárgyszerű.

Elismeri a problémát, megmagyarázza, mi történt, és megoldást ajánl (javítás, részleges visszatérítés, újabb kiszállás). A rossz válasz támad, kioktat, személyes adatot fed fel az ügyfélről, vagy szóról szóra ugyanaz minden panasz alatt.

A válaszidő is beszédes.

Ha a vállalkozó egy-két napon belül reagál a kritikára, valószínűleg a hívásaidra is gyorsan reagál. Ha a panaszok hónapokig megválaszolatlanul állnak… nos, az is egyfajta válasz.

És itt jön egy fontos fordulat.

A csak pozitív véleményeket megjelenítő profil önmagában figyelmeztető jel lehet. Nem feltétlenül csalást jelent, de azt mindenképp, hogy a teljes kép rejtve marad előled.

Gyors lista sürgős esetekre

Este 11 óra, ömlik a víz a konyhaszekrény alól.

Nincs idő harminc véleményt elolvasni, és a legközelebbi vízszerelőnek lehet, hogy csak hat értékelése van. Ilyenkor néhány gyors ellenőrzés is sokat számít, akár villanyszerelőről, autószerelőről vagy takarítóról van szó.

Portfólió. Vannak-e valódi, lakásban készült fotók a korábbi munkákról? A stockfotók helyett elvégzett munkák képei kevés vélemény mellett is erős bizalmi jelet adnak.

Ártranszparencia. Fel van-e tüntetve a kiszállási díj, az óradíj vagy legalább egy ársáv? Sürgős esetben a hirtelen felbukkanó „éjszakai pótlék” a leggyakoribb panaszforrás.

Válaszidő. Mennyi idő alatt reagál üzenetre vagy hívásra? Ha a platform mutatja az átlagos válaszidőt, ez vészhelyzetben többet ér, mint a csillagok.

Hitelesített profil. Igazolt-e a személyazonosság vagy a vállalkozás, és foglaláshoz kötöttek-e a meglévő vélemények? Hat ellenőrzött értékelés megbízhatóbb, mint hatvan ellenőrizetlen.

Ez a négy pont két-három perc alatt átnézhető. Kevés értékelés mellett is elég ahhoz, hogy elkerüld a legrosszabb választást.

Nézz túl a csillagokon

A következő döntésnél tegyél egy apró kísérletet.

Ne az átlagot nézd először, hanem olvass el legalább három konkrét, részletes véleményt. Lehetőleg egy negatívat is, a vállalkozó válaszával együtt.

Ha választhatsz, részesítsd előnyben azokat a profilokat, ahol a teljesített munkához kötött, ellenőrizhető értékelések szerepelnek. Ezek mindig erősebb jelek, mint egy szám önmagában, bármilyen szép is az.

Az értékelések megbízhatósága nem egyetlen csillagszámban rejlik.

Hanem abban, ahogyan a darabok összeállnak: hány vélemény van, mikor születtek, mit mondanak, ki írta őket, és hogyan válaszol rájuk a szakember.

Aki ezt a képet olvassa a puszta szám helyett, ritkán fogad rossz szakembert.