Parti-Okul Sıralamaları Taraflı, Kendi Kendini Gerçekleştiren Bir Kehanet mi?

Princeton İncelemesi her kolejdeki öğrencilerle şimdi çevrimiçi olarak yapılan ankete dayalı olarak yıllık "En İyiler ..." üniversite listeleri yayınlamaktadır. Anket sürecini şu şekilde tanımlarlar:

Princeton Review anketinde öğrencilere okullarının akademisyenleri / yönetimi, kampüs yaşamı, öğrenci topluluğu ve kendileri hakkında 80 soru sorulur. Bu basımın sıralaması için puanlamalar, 2006-07 ve / veya önceki iki okul yılında kitaptaki 366 okulda (ülkedeki tüm okullarda değil) 120.000 öğrenciyle (kampüs başına yaklaşık 325) yapılan anketlere dayanmaktadır.

İnce baskıyı okuyana kadar kulağa hoş ve güzel geliyor:

Anketimiz niceliksel olmaktan çok nitel ve anekdottur. Herhangi bir kolej için uygun olmayan bir yazı üretmekten korunmak için, her okuldaki idari irtibat kişimize, düzeltmeler, yorumlar ve / veya doğrudan yanıt vermek için geniş bir fırsatla yayınlamayı düşündüğümüz profilin bir kopyasını gönderiyoruz. itirazlar. Değişiklik talepleri aldığımız her durumda, okulun önerilerini topladığımız öğrenci anketi verilerine göre incelemek için dikkatli önlemler alırız ve gerekli olduğunda uygun değişiklikleri yaparız.

Anket bulgularımızın ne kadar temsili olduğu konusunda bizi en çok ikna eden şey şudur: Ankete katılan öğrencilerden - anketi tamamladıktan sonra - önceki yıl okulları hakkında yayınladığımız bilgileri gözden geçirmelerini ve doğruluğunu bize not etmelerini ve geçerlilik. Her yıl yüksek notlar aldık: Bu yıl öğrencilerin yüzde 81'i haklı olduğumuzu söyledi.

Dolayısıyla, temelde anket verilerinin kolejlerin öznel, anlatı niteliğinde bir resmini sağladığını kabul ediyorlar - geniş genellemeler yapabileceğiniz şeyler değil. Ve yine de tam olarak Princeton İncelemesi verileriyle devam eder - anketlerinden geniş genellemeler çıkarır ve üniversiteleri nicel bir şekilde sıralar. Kolejlerin kendileri, okullarının verilen herhangi bir listede görünüp görünmemesi konusunda bilinmeyen ek etkiler uygulayabilir.Sıralama süreci şeffaflıktan uzak ve gizemli görünüyorsa, bu kasıtlıdır.

Araştırmacılar anekdot verilerini nicel verilere nasıl dönüştürebilir? Bilimsel olarak yapamazsınız (örneğin, bunu yapmak için araştırma temelli bir prosedür yoktur, çünkü kelimenin tam anlamıyla bir elma veya portakal karşılaştırmasıdır). Böyle bir kuruluş bu türden bir şey yaptığında, bu tür sıralamaların, diğer insanların gerçekten okula gidenler hakkındaki görüşlerine dayanarak, listeyi bir araya getiren kişilerin görüşleri olduğunu iddia edebilirsiniz.

Bunların hepsi iyi olurdu, bunun dışında gözden geçirmek Bütün bunları, genelleştirilebilir bir anlamı olmadığı zaman genelleştirilebilir bir anlama sahip olduklarını öne süren listelere koyar. "En İyi 20 Parti Okulları" listesi, "alkol ve uyuşturucu kullanımı, her gün çalışma saatleri ve Yunan sisteminin popülerliği ile ilgili anket sorularının bir kombinasyonuna" dayanan bazı insanların fikirlerinden başka bir şey değildir. Okulların sıralamalarını farklı şekilde çarpıtacak şekilde bakmak için kolayca farklı bir yanıt seti seçebilirlerdi.

Daha büyük öğrenci bedenlerine sahip daha büyük okulların, Yunan sistemlerinin boyutu (büyük) ve öğrencilerine sundukları çok çeşitli sosyal ve diğer akademik olmayan fırsatlar (her gün daha az çalışma saati ile sonuçlanır) açısından önemli ölçüde farklılık göstermesi olası değildir. . Bu, öğrencilerin ne kadar içtiklerini söylediklerine bakmakla birleştiğinde böyle bir okulu “parti okulu” olma olasılığını artırıyor mu? Tabii ki değil. Bu sadece okulun hem öğrenmek hem de sosyalleşmek için harika bir yer olduğu anlamına gelebilir.

Geçtiğimiz hafta sonu APS'de "Kendi kendini gerçekleştiren kehanet ve Princeton Review: üniversitede içki içmek için açıklamalar veya reçeteler mi?" Başlıklı bir poster sunuldu. şu gibi ölçen öneriyi kafama koy Princeton İncelemesi bazı şüpheli geçerliliği var. Araştırmacılar, batı New York'ta bulunan orta ölçekli tek bir üniversite için on yıl boyunca gerçek alkol kullanımı verilerine baktılar ve bunu, Princeton İncelemesi. Sıralamaları buldular Princeton İncelemesi inceledikleri alkol kullanım verilerinin hiçbiriyle sistematik bir korelasyona sahip değildir. Buldukları şey, alkol tüketim verilerinin yayınlandıktan sonra yayınlanan sıralamalarla ilişkili olduğuydu - bu da kendi kendini gerçekleştiren bir kehanet olduğunu gösteriyor.

Araştırmacılar, araştırmaları yalnızca bir üniversitede yürütüldüğünden, bulgulardan genelleme yapılmadan önce araştırmanın diğer kolejlerde ve üniversitelerde tekrarlanması gerektiğini belirtti. Ancak bulguların yine de not edilmesi ilginç.

Referans:

Clark, C.D. et. al. (2008). Kendi kendini gerçekleştiren kehanet ve Princeton Review: üniversitede içki içmek için açıklamalar veya reçeteler? Association for Psychological Science, Chicago IL, 24 Mayıs 20. yıllık kongresinde sunulan poster.