In Collective Choice: Rating Systems diskutiere ich Bewertungsskalen verschiedener Art, von der 3-Punkte-Skala von eBay über die doppelte 5-Punkte-Skala von RPGnet bis hin zur 10-Punkte-Skala von BoardGame Geek.
Von den verschiedenen Bewertungsskalen sind 5-Punkt-Skalen wahrscheinlich die häufigsten im Internet. Sie finden sie nicht nur in meinem eigenen RPGnet, sondern auch bei Amazon, Netflix und iTunes sowie auf vielen anderen Websites und Diensten. Leider stehen 5-Punkte-Bewertungsskalen auch bei ihrer Verwendung vor vielen Herausforderungen, und verschiedene Studien deuten auf unterschiedliche Mängel bei dieser speziellen Methodik hin.Erstens hat eine Studie mit Amazon-Daten gezeigt, dass viele undetaillierte Bewertungen (bei denen der Rater keine zusätzlichen Informationen als die von ihm ausgewählte Bewertung hinzufügen muss) eine bimodale Verteilung aufweisen. Mit anderen Worten, die Verteilung der Bewertungen tendiert dazu, sich um zwei verschiedene Zahlen (z. B. 1 und 5) zu gruppieren, anstatt eine Normalverteilung anzubieten, bei der sich die Bewertungen um eine einzelne Zahl (z. B. 3) gruppieren. Daher ist der Median dieser Bewertungen kein genaues Spiegelbild der Produktqualität, sondern eine Aussage widersprüchlicher Meinungen.Zweitens hat unsere eigene Studie mit RPGnet-Daten gezeigt, dass viele detaillierte Ratings (bei denen der Rater zusätzliche Informationen hinzufügt, in diesem Fall eine vollständige Überprüfung) Normalverteilungen bieten, jedoch auf das obere Ende der Skala ausgerichtet sind. Auf RPGnet zum Beispiel entdeckten wir, dass 90% dieses 5-Punkte-Bewertungssystems 3 oder höher mit einem Durchschnitt um 4 war.Randy Farmer von Yahoo schlägt vor, dass diese Skalierungsbeschränkung besonders problematisch für fanbasierte Bewertungen ist, wie sie auf episodischen TV-Sites zu finden sind:
Nur die Fans einer Show bewerten die Episoden, und als Fans werden sie eine Episode niemals mit ein oder zwei Sternen bewerten. Ich habe dies immer wieder im Internet mit den gleichen Ergebnissen gesehen: Jede Episode einer Show ist 4-Sterne +/- .5 sterne. Dies geht bis zur Babylon-5-Website zurück, wahrscheinlich die erste Quelle für diese Art von Daten.
(Und tatsächlich wird die TV-Episode TKO aus der ersten Staffel von Babylon 5 sogar von den Fans als eine völlig grausame Episode angesehen. Dennoch hat es eine 6.1 von 10 „Fair“ Bewertung auf tv.com .)
Selbst wenn eine bimodale Verteilung kein Problem darstellt, führt die Aufwärtsneigung auf einer 5-Punkte-Skala häufig nur zu 2 oder 3 aussagekräftigen Datenpunkten. Dies ist problematisch, da es die Differenzierung minimiert. In vielen Fällen ist ein 5-Sterne-Bewertungssystem, bei dem die meisten Bewertungen entweder 3 oder 4 sind, nicht besser als nur ein Daumen-Hoch- / Daumen-Runter-Bewertungssystem.
Angesichts der Tatsache, dass 5-Punkt-Skalen wahrscheinlich hier bleiben werden, sind wir gezwungen, sie bestmöglich zu nutzen.
Zunächst müssen wir den Bewertern Anreize bieten, damit sie aussagekräftige Bewertungen abgeben. Wir haben bereits gesehen, dass dies durch die Anforderung detaillierter Bewertungen erreicht werden kann: Wenn sich eine Person die Zeit nimmt, Text zu schreiben, und weiß, dass ihr Name daran angehängt wird, macht sie in ihrer Bewertung im Allgemeinen einen besseren Job. Es gibt auch andere mögliche Anreiztechniken, wie das neue XP-System von RPGnet.Zweitens müssen wir Mittel bereitstellen, damit eine 5-Punkte-Skala aussagekräftiger wird, indem wir die Bewerter ermutigen, nicht nur die obere Hälfte der Skala, sondern auch die untere Hälfte zu verwenden. Eine Methode, dies zu erreichen, besteht darin, die Bewertungen zu unterscheiden – wie ich in meinem vorherigen Artikel zu diesem Thema kurz erwähnt habe – und Standards zu fördern, so dass eine „durchschnittliche“ Bewertung 2 oder 3 und nicht 4 beträgt.Als Beispiel dafür, wie diese beiden Ziele mit bereits vorhandenen 5-Punkte-Bewertungsskalen erreicht werden können, habe ich meine eigenen Erfahrungen mit der Verwendung von Bewertungen für zwei beliebte Dienste – iTunes und Amazon – detailliert beschrieben. Durch die Bereitstellung von Anreizen und die Verwendung von Bewertungen habe ich mir aussagekräftigere und nützlichere Ergebnisse geschaffen.
Musikbewertungen – iTunes
Apples iTunes-Software bietet Ihnen die Möglichkeit, einzelne Songs mit einer Bewertung von 0-5 Sternen zu bewerten. Wenn Sie iTunes mit einem iPod verwenden, können Sie die Bewertung eines Titels auf Ihrem iPod ändern, und die Änderung wird bei der nächsten Synchronisierung Ihres iPod in Ihrer iTunes-Datenbank angezeigt. Die Funktion „Shuffle Songs“, die auf moderneren iPods verfügbar ist, bietet die Möglichkeit, Songs mit höheren Bewertungen häufiger abspielen zu lassen. Eine sehr leistungsstarke Funktion, Smart Playlists, kann dynamisch anspruchsvolle Wiedergabelisten basierend auf Bewertungen erstellen. All dies macht das Bewerten von Musik auf iTunes sehr nützlich.
Nachdem Shannon und ich unseren Artikel über Bewertungssysteme geschrieben hatten, untersuchte ich die Bewertungen in meinem iTunes-Katalog. Mit dem fabelhaften XLST iTunes Rating Statistics Tool von Alastair stellte ich fest, dass die Bewertungen, die ich in iTunes erstellt hatte, eindeutig zu hoch waren und dem von uns beschriebenen Muster entsprachen. Ich hatte viel zu viele Songs mit 4 Sternen bewertet, und fast nichts bewertet 1 oder 2. Dies machte meine Bewertungen weniger nützlich.
| Hier sind einige Statistiken aus Ihrer iTunes-Mediathek: 4172 Titel, 412 (10%) bewertet | |||||
| Kumulative% der /th> | |||||
|---|---|---|---|---|---|
| Anzahl | % der bewerteten | Ist | Ziel | Fehlbetrag | |
| Tracks mit 5 Sternen bewertet: | 112 | 27 | 27 | 5 | -22 |
| Tracks mit 4 Sternen bewertet: | 183 | 44 | 72 | 15 | -57 |
| Tracks mit 3 Sternen bewertet: | 92 | 22 | 94 | 50 | -44 |
| Tracks bewertet 2 sterne: | 22 | 5 | 99 | 90 | -9 |
| Tracks bewertet 1 sterne: | 3 | 1 | 100 | ||
In den letzten Monaten habe ich meine iTunes-Bewertungen komplett überarbeitet. Da ich die Benutzeroberfläche nicht ändern kann, habe ich mein Verhalten geändert. Ich nutze auch zwei andere Felder: „checked“, das ich verwende, um meinen Bewertungen mehr Unterscheidungskraft zu verleihen, und „Play Count“, das anzeigt, ob ich etwas bis zum Ende gehört habe oder nicht.
Hier sind die Kriterien, die ich verwendet habe:
Bewertet mit 5 Exemplaren 
: Nur meine Lieblingssongs werden mit 5 bewertet. Sie müssen die folgenden Kriterien erfüllen: Sie geben mir ein gutes Gefühl oder erregen mich, egal wie oft ich sie höre, Ich kann sie normalerweise oft hören, ohne müde zu werden, und sie sind die besten ihres jeweiligen Genres.
Bewertet mit 4 – Großartig 
: Es gibt nur einen kleinen Unterschied zwischen einem Song, der in meinen Bewertungen mit 4 und 5 bewertet wird – normalerweise erregt er mich nicht so sehr oder bringt mich zum Lächeln, oder er ist nicht unbedingt ein Vorbild seines Genres. Ich kann sie jedoch immer noch oft hören, ohne müde zu werden. Artikel, die bewertet werden 4 und 5 sind diejenigen, die ich auf meinem iPod Shuffle trage.
Bewertet 4 – Großartig (Ungeprüft) 
: Es gibt ein paar Songs, die ich für großartig halte, aber die ich nur spielen möchte, wenn ich in der Stimmung dafür bin, oder ich möchte nur in einer bestimmten Reihenfolge spielen, oder sie „spielen nicht gut“ mit anderer Musik. Zum Beispiel liebe ich das Lied „The Highwayman“ von Loreena McKennitt, aber es ist über 10 Minuten lang und ich möchte diese Art von Lied einfach nicht hören, es sei denn, ich bin in der Stimmung dafür. Andere Beispiele sind die 12 Lieder, die Mussorgskys „Bilder einer Ausstellung“ ausmachen – ich möchte, dass sie in der richtigen Reihenfolge gespielt werden, wenn ich sie spiele, und ich möchte wirklich nicht, dass sie in der Mitte meiner anderen Lieder gespielt werden. Leider lässt iTunes Sie nicht nur ungeprüfte Elemente auswählen, daher habe ich keine intelligente Wiedergabeliste für diese. Stattdessen behalte ich sie in einer regulären Wiedergabeliste.
Bewertet 3 – Gut 
: Das sind Songs, die ich mag. Normalerweise kann ich sie regelmäßig spielen, aber nicht zu oft. Songs bewertet 3-5 gehen auf meinem iPod Nano.
Bewertet 3 – Gut (Ungeprüft) 
: Es gibt eine Menge Musik, die ich für gut halte, aber ich möchte nicht die ganze Zeit spielen. Ich habe einen großen Katalog von Tonspuren aus Filmen. Alle, aber ein paar dieser Tracks sind in dieser Kategorie. Auch hier lässt iTunes Sie nicht nur ungeprüfte Elemente in einer intelligenten Wiedergabeliste auswählen, daher habe ich mehrere reguläre Wiedergabelisten für diese Elemente.
Bewertet 2 – Ok 
: Ich habe sehr unterschiedliche Musikgeschmäcker, angefangen mit Jazz, verschiedenen ethnischen und Weltmusik, und auch ziemlich viel Pop, Rap, R&B, Punk und Metal, die ich genieße. Ich genieße sie nicht die ganze Zeit – aber ich mag es, wenn sie ab und zu auftauchen, um Abwechslung zu schaffen. Also bewerte ich diese 2 und lasse sie überprüft. Ich habe einen alten 40GB iPod, den ich auf langen Reisen nehme, und er speichert alles, was ich habe, was überprüft und bewertet wird 2-5.
Bewertet 2 – Ok (Unchecked) 
: Einige Songs sind OK, aber ich muss wirklich in der Stimmung sein, speziell für diesen Song. Jimmy Buffets „Margaritaville“ zu hören, kann an einem faulen Sommertag am Strand ein schuldiges Vergnügen sein, aber ich möchte es nicht regelmäßig hören. Ich habe eine Reihe von speziellen Wiedergabelisten für Songs wie diese bewertet.
Bewertet 1 – Mag nicht 
: Das sind die Songs, die ich nicht mag. Sie sind einfach nicht mein Stil. Viele sind immer noch Qualitätsmusik, sie funktionieren einfach nicht für mich. Ich behalte die meisten davon der Vollständigkeit halber – es könnten nur ein oder zwei Songs auf dem Album sein, und ich möchte das Album komplett halten. Oder ich behalte es, falls sich mein Geschmack ändert. Aber im Allgemeinen, sobald etwas Rate ist 1 Stern, Ich werde es wahrscheinlich nie wieder hören.
Rated 1 – Trash (Unchecked) 
: Dies sind Songs, die ich nicht nur nicht mag, sie sind einfach keine gute Musik. Ich mag die meisten Rap-Musik nicht, aber ich kann sagen, dass die meisten immer noch Qualität. Einige sind Junk – diese bewerte ich 1 und deaktivieren, und sind Kandidaten für die Löschung das nächste Mal, wenn ich meine Sammlung bereinigen.
Unrated & Listened 
, playcount > 0: Wenn ich etwas bis zum Ende gehört habe, es aber noch nicht bewertet habe, wird es in dieser intelligenten Wiedergabeliste angezeigt. In regelmäßigen Abständen überprüfe ich diese intelligente Wiedergabeliste, sortiere nach Wiedergabeliste und versuche, alles zu bewerten, was ich mehr als einmal gehört habe.
Unrated & Unlistened , play count=0: Dies ist der Standardwert, wenn ein neuer Song zu meiner Bibliothek hinzugefügt wird. Jeder Song, der nicht bewertet, geprüft und mit einer Wiedergabeanzahl von 0 versehen ist, wird in meiner „Unrated & Unlistened“ Smart Playlist angezeigt. Wenn ich Lust auf Abwechslung habe, gehe ich diese Playlist durch und bewerte Songs.
Die Änderung meines Bewertungssystems auf diese Weise hat dazu geführt, dass sich meine durchschnittliche Bewertung für Musik von etwa 4 auf irgendwo zwischen 2 und 3 geändert hat. Es wird wahrscheinlich im Laufe der Zeit näher an 2 kommen, wenn ich mehr von meiner Sammlung bewerte. Dies gibt mir eine Menge Unterscheidungskraft, so dass ich intelligente Wiedergabelisten erstellen kann, die für mich gut funktionieren.
| Hier sind einige Statistiken aus Ihrer iTunes-Mediathek: 6519 Titel, 726 (11%) bewertet | |||||
| Kumulative % der /th> | |||||
|---|---|---|---|---|---|
| Anzahl | % der bewerteten | Ist | Ziel | Fehlbetrag | |
| Tracks mit 5 Sternen bewertet: | 74 | 10 | 10 | 5 | -5 |
| Tracks rated 4 stars: | 144 | 20 | 30 | 15 | -15 |
| Tracks rated 3 stars: | 211 | 29 | 59 | 50 | -9 |
| Tracks rated 2 stars: | 270 | 37 | 96 | 90 | -6 |
| Tracks rated 1 stars: | 27 | 4 | 100 | ||
Offensichtlich kann das Bewerten einer großen Musiksammlung zur lästigen Pflicht werden – Sie möchten Ihre begrenzte Musikhörzeit nicht immer damit verbringen, Ihre Bewertungen zu optimieren. Ich habe also einige Ansätze, die es mir erleichtern, meine Musik mit weniger Aufwand zu bewerten:
-
Zuerst sortierte ich meinen Katalog nach meinen alten Bewertungen und modifizierte alles um 1, Beginnend mit allem, was bewertet wurde 2 wird 1, 3 wird 2 usw. Dies gab mir eine gute Basis, um mit
-
Als nächstes erstellte ich intelligente Wiedergabelisten für jede Bewertung, dh „Bewertung 5 – Exemplar“ mit „Nur geprüfte Songs abgleichen“ und „Live-Aktualisierung“ aktiviert. Ich habe dann „Play Count“ als Spalte zu meiner Ansicht hinzugefügt und danach sortiert. Dies gab mir die Songs, die ich am meisten und am wenigsten spielte, und ich passte einige Songs entsprechend an. -
Dann habe ich eine neue intelligente Wiedergabeliste erstellt, die einfach Songs mit den Bewertungen 3 bis 5 wiedergibt und die Liste auf die ersten 100 GB beschränkt, die zufällig ausgewählt wurden (dh alles zufällig), und diese intelligente Wiedergabeliste als „Spielt gut mit anderen“ gespeichert. Ich spiele das gelegentlich im Hintergrund, und wenn ich etwas höre, das mich stört, weiß ich, dass etwas nicht richtig bewertet wird. So kann ich ohne großen Aufwand Bewertungen für Songs ändern, die nicht mehr zu ihrer Bewertung passen, oder Elemente deaktivieren, bei denen die Bewertung angemessen war, aber „nicht gut mit anderen zusammengespielt hat“. -
Ich versuche mir bewusst zu sein, wenn ich meinen iPod benutze, was eine Songbewertung ist, und ändere sie, wenn sie falsch erscheint. Wenn ich den iPod das nächste Mal synchronisiere, werden meine Bewertungen in meinem iTunes-Katalog angepasst.
-
Ich versuche auch, die Anzahl der Wiedergaben zu kennen – diese Zahl steigt nur, wenn Sie einen Song bis zum Ende abspielen. Selbst wenn ich mir die Bewertung nicht ansehen kann (zum Beispiel wenn ich im Auto sitze), kann ich mich zumindest auf den nächsten Song freuen. In regelmäßigen Abständen überprüfe ich die Anzahl der Wiedergabelisten für Songs, die ich bewertet habe, und überlege, sie entsprechend nach oben und unten zu verschieben. Das bedeutet natürlich, dass ich vorsichtig sein muss und den iPod nicht weiterlaufen lassen darf, wenn ich nicht zuhöre.
Ein Tipp für diejenigen unter Ihnen, die sich viel Mühe mit Ihren iTunes-Bewertungen geben: Ich habe auf die harte Tour gelernt, dass die Bewertung im Gegensatz zu den meisten Songinformationen NICHT im Song selbst gespeichert wird Wenn Ihre iTunes-Datenbank beschädigt wird oder Sie Ihre Musik auf einen anderen Server verschieben, verlieren Sie alle Ihre Bewertungen. Eine Möglichkeit, dies zu vermeiden, besteht darin, Ihre Bewertungen regelmäßig in einem Feld zu sichern, das im Song selbst gespeichert ist. Ich persönlich benutze das Feld „Gruppierung“, da es selten verwendet wird, wähle alle Songs mit der gleichen Bewertung aus und klicke auf „Get Info“ und ändere das Gruppierungsfeld in „Meine Bewertung: 5 Sterne“.
Ich habe bisher nur 11% meiner Sammlung bewertet, aber mit diesem System finde ich es viel einfacher, meine Bewertungen zu verwalten. Ich bekomme bereits viele Vorteile davon – ich spiele meine Musik öfter, meine iPods haben normalerweise die Musik, die ich will, und verschiedene Musikerkennungsdienste können meine Bewertungen verwenden, um mir zu helfen, neue Musik zu identifizieren, die ich genießen könnte. Dies bietet den Anreiz, mich bei der Eingabe aussagekräftiger Bewertungen zu halten.
Buchbewertungen – Amazon
Amazon verwendet auch ein 5-Sterne-Bewertungssystem, und Ihre Bewertungen können von Amazon verwendet werden, um Ihnen zu helfen, Bücher zu finden, die Ihnen gefallen könnten. Obwohl ich meine lokalen Buchhandlungen gerne unterstütze, ist es diese Funktion, die mich immer wieder zu Amazon zurückbringt. Wann immer ich bei Amazon stöbere und ein Buch sehe, das ich bereits gelesen habe, versuche ich, mir die Zeit zu nehmen, meine Bewertung zu aktualisieren.
Amazon bietet eine Reihe verschiedener Tools, die Sie bei Ihren Bewertungen unterstützen. Wenn Sie ein Amazon-Kunde sind, können Sie Ihre Empfehlungen verbessern: Bearbeiten Sie Artikel, die Sie besitzen, und sehen Sie alle Bücher, die Sie gekauft haben, und bewerten Sie sie schnell mit einer schönen AJAX-Oberfläche. Sie können auch Elemente überprüfen, die Sie bereits bewertet haben, unabhängig davon, ob Sie sie besitzen oder nicht, unter Ihre Empfehlungen verbessern: Von Ihnen bewertete Elemente bearbeiten.
Amazon hat kürzlich auch einen sehr netten Webdienst namens Your Media Library hinzugefügt, mit dem Sie Ihre Medienbibliothek mit Büchern, Musik und DVDs verwalten können. Ich persönlich habe es nur verwendet, um meine Bücher und DVDs zu verwalten, da ich Rating-Alben nutzlos finde – es sind Songs, die ich lieber bewerte.
Nachdem ich meine bisherigen Bewertungen durchgesehen hatte, entdeckte ich die gleichen Fehler, die ich bei iTunes gefunden hatte – meine Bewertungen waren normalerweise zu hoch; die meisten waren eine 4. Dies wird besonders durch das Popup gefördert, wenn sich der Cursor über den Sternen befindet „1 – Ich hasse es, 2 – Ich mag es nicht, 3 – Es ist in Ordnung, 4 – Ich mag es und 5 – Ich liebe es“. Ich vermute, wenn ich den gleichen Trick verwende, den ich für iTunes verwende, um eine Bewertung von 2 Sternen als „Ok“ zu bezeichnen, könnte ich möglicherweise dazu führen, dass die Empfehlungs-Engine weniger effektiv ist (obwohl sie es möglicherweise besser machen könnte, weiß ich nicht). Ich bin also viel brutaler mit meinen Bewertungen und drücke viel mehr auf 3, so dass meine Bewertungen von 4 und 5 mehr Bedeutung haben.
5 Sterne 
: Das müssen die Vorbilder sein – die besten Bücher, die ich je gelesen habe, würde mich freuen, wieder zu lesen, wäre stolz darauf, in meinem besten Bücherregal zu zeigen, und wird zusätzliche Exemplare kaufen, um sie Freunden zu geben.
4 Sterne 
: Das müssen wirklich gute Bücher sein – die meisten von ihnen bin ich bereit, wieder zu lesen, und ich fördere sie, indem ich anbiete, sie meinen anspruchsvolleren Freunden auszuleihen. Obwohl ich sie vielleicht in meinem Bücherregal aufbewahre, gebe ich sie lieber einem Freund und verkaufe sie dann in einem gebrauchten Buchladen.
3 Sterne 
: Diese Bücher sind anständige Bücher, und ich teile sie mit meinen unersättlichen Leserfreunden. Aber ich drücke sie nicht und ich verkaufe sie viel eher in einem gebrauchten Buchladen als in meinem Regal. Dies ist die Bewertung, die ich zuvor erheblich unterschätzt habe, und ich stelle fest, dass der Schlüsseldiskriminator für mich bisher darin besteht, wie sehr ich dies Freunden empfehlen möchte, die diskriminierendere Leser sind.
2 Sterne 
: Bei dieser Bewertung versagt das Amazon-Bewertungssystem am meisten – es wird angenommen, dass es sich um Bücher handelt, die „ich nicht mag“, aber die meiste Zeit kaufe ich keine Bücher, die ich wahrscheinlich nicht mögen würde, geschweige denn lese sie, daher habe ich nur sehr wenige in dieser Kategorie. Ich habe jedoch entschieden, dass diese Kategorie für Bücher gedacht ist, die einfach nicht gut genug sind oder etwas enttäuschend sind. Nicht schlecht oder unbeliebt, aber nur etwas enttäuschend.
1 Sterne 
: Das ist, wo ich die Bücher, die ich nicht mag, oder schlimmer noch, ich hasse. Nicht viele hier, aber ich bin bereit, mehr zu riskieren als viele Leute, also habe ich welche. Auch Bücher kommen hierher, die einfach nicht zu meinem Interesse passen, wie Liebesromane, die mir empfohlen werden, weil ich einige Crossover-Fantasy-Romantik-Autoren mag.
Seit ich angefangen habe, meine Bücher bei Amazon genauer zu bewerten, habe ich festgestellt, dass ihre Vorschläge für andere Bücher genauer zu lesen sind. So bekomme ich Wert von der Bewertung dieser Bücher, und ich habe Anreiz, weiterhin die Mühe zu machen.
Fazit
Für Bewertungen aller Art ist es wichtig, Menschen einen Anreiz zur Bewertung zu bieten, wobei sowohl der individuelle Gewinn als auch die Statuserkennung starke Motivatoren sind.
Die einfachste Technik, um eine 5-Punkte-Bewertungsskala nützlicher zu machen, besteht jedoch darin, sie „eindeutig“ zu machen. Wenn ein Benutzer für jede Bewertung eine spezifischere Bedeutung hat, werden sich die Bewertungen langsam auf einen genaueren Durchschnitt einstellen, und daher wird mehr von jeder Bewertungsskala verwendet. Wir haben diese Technik kürzlich auch bei RPGnet mit unserem neuen Gaming-Index ausprobiert; und bisher beträgt unsere neue 10-Punkte-Skala – die für jede Zahl unterschiedliche Bedeutungen hat – durchschnittlich 7,27. Das ist immer noch eine ganze Menge über dem realen Durchschnitt von 5,5, aber zumindest ist es unter der 8+ Bewertung, die unsere alte doppelte 5-Punkte-Skala ergab.
Oft verwenden Sie als Verbraucher von Bewertungssystemen Bewertungsskalen, die von anderen entworfen wurden, und nicht solche, die Sie selbst entwerfen. In diesen Fällen ist es oft sinnvoll, eigene Regeln für die Bedeutung jeder Zahl zu entwerfen und dies so zu tun, dass Ihr Median der Durchschnitt der Skala ist und nicht in Richtung eines der Extreme. Wenn Sie dies tun, selbst wenn Sie eine enge 5-Punkte-Skala verwenden, erhalten Sie genügend Differenzierung, damit sie tatsächlich aussagekräftiger ist als ein Daumen nach oben oder ein Daumen nach unten.
Verwandte Artikel aus diesem Blog:
2005-12: Systeme für kollektive Wahl 2005-12: Kollektive Wahl: Bewertungssysteme 2006-01: Kollektive Wahl: Competitive Ranking Systems 2007-01: Experimentieren mit Bewertungen
Verwandte Artikel aus Shannon Appelclines Trials, Triumphs & Trivialitäten:
# 192: Verwalten der Kreativität von Benutzern, Teil Eins #193: Verwalten der Kreativität der Benutzer, zweiter Teil #196: Kollektive Wahl: Bewertungen, wem vertrauen Sie? #198: Kollektive Wahl: Mehr Gedanken über Bewertungen