نبذة مختصرة : Purpose: Cross-cultural comparisons based on ordinal Likert-type rating scales have been threatened by response style which is systematic tendencies to respond to items regardless of the item content. So, this study aimed to investigate the effect of extreme response style and acquisance response style on TIMSS 2015 data. Method: The sample of this descriptive study included eighth grade students of the countries Japan, Korea, Taipei, Turkey, Oman and Jordan. Students' responses to scale regarding value on mathematics were used. To examine the impact of response styles, partial credit model and partial credit model with response style were analyzed. Also, the estimates obtained from these models were compared. Findings: It was found that response styles existed in TIMSS 2015 data. Furthermore, the number of the students selecting the extreme categories were found to be lower than that of the students selecting relatively middle response categories. Additionally, item thresholds of the extreme categories were found to be distorted leading to biased determination of item response curves. Implications for Research and Practice: The presence of the response style in the large-scale assessment which guides policy makers in their regulations in the educational systems and gives information to teachers in their practices lead researchers to examine and control the effect of them. [ABSTRACT FROM AUTHOR]
نبذة مختصرة : Problem Durumu: Globalleşen dünyada politik gelişmelerle birlikte bilimsel olmayan yapıların belirlenmesine odaklanılmıştır. Bu durumun nedenleri olarak bilişsel yapılar üzerinde etkisinin olması, başarının kestirilmesinde önemli bir rolünün olması, bilişsel yapıların çeşitli bağlamlar ve kültürlerde anlaşılmasını sağlaması sıralanabilir. Özellikle kültürler arası karşılaştırma çalışmalarında, akademik öz - yeterlilik, duyuşsal zeka, tutum gibi çeşitli bilişsel olmayan yapıların ve bu yapıların başarı ile ilgili çıktılarla ilişkisi üzerindeki ilgi giderek artmaktadır. (Richardson, Abraham & Bond, 2012). Bilişsel olmayan yapıların ölçülmesinin avantajlarının yanı sıra, değer, tutum gibi yapıların ölçülmesinde bilişsel yapıların ölçülmesinde söz konusu olmayan bazı sınırlılıklar söz konusudur. Bunlardan biri bu yapıların tepki stillerinin etkisine maruz kalmasıdır (McGrath, Mitchell, Kim, & Hough, 2010). Bilişsel olmayan yapıların ölçülmesinde sıklıkla kullanılan yaklaşım, cevapla yıcılara katılım düzeylerini belirleyecekleri birtakım ifadeler listesi vermektedir. Fakat bu yaklaşım, uç tepki stili (UTS), kabullenici tepki stili (KTS), orta nokta tepki (OTS) stili gibi bazı tepki stillerinin etkisine açıktır (Van Herk, Poortinga, & Verhallen, 2004). Kültürler arası karşılaştırma çalışmalarında sıklıkla karşılaşılan tepki stilleri UTS ve KTS'dir. UTS grup ortalamaların farklılaşmasına, iç tutarlılık anlamında güvenirliğin düşmesine neden olurken KTS tip II hatanın oluşmasına yol açmaktadır. Alan yazında, bu geçerlilik tehdidinin belirlenmesine yönelik kabul edilmiş tek bir yöntem yoktur. Bu yöntemlerden bazılarında çeşitli betimsel istatistikler hesaplanmakta veya bilişsel olmayan yapının ölçülmesinde kullanılan ölçekteki maddelerle ilişkisiz ilave maddeler eklenmektedir. Fakat bu yöntemler, tepki stilinin miktarını belirlemede yetersiz kalmaktadır. Bu yöntemlerin yanı sıra gizil sınıf analiziyle de tepki stillerinin etkisi belirlenebilmektedir. Fakat, bu yöntemin en büyük sınırlılığı tepki stilini süreksiz bir değişken olarak ele almasıdır. Madde tepki kuramına dayalı bazı yöntemlerde ise bu sınırlılık ortadan kaldırılmıştır. Örneğin madde tepki ağacı modellerinde çeşitli tepki stillerinin etkisi rahatlıkla modellenebilmektedir. Fakat, analiz öncesinde oluşturulması gereken ağaç farklı bir şekilde oluşturuldu ise analiz sonuçları yanlış çıkabilmektedir. Böyle bir belirsizlik tepki stilinin etkisinin dahil edildiği kısmi puan modelinde söz konusu değildir. Bu model sayesinde tepki stilinin etkisinin miktarı belirlenebilmektedir. Tepki stilini sürekli bir değişken olarak ele alan bu modelde, bireye ve tepki stiline ilişkin parametreler eş zamanlı olarak kestirilebilmekte ve böylelikle tepki stili ve bireyin tutumu arasındaki ilişkiler belirlenebilmektedir. Araştırmanın Amacı: Bu çalışmanın amacı, tepki stillerinin etkisinin TIMSS 2015'de uygulan matematiğe yönelik verilen değerle ilgili veri setinde etkisinin olup olmadığını ve bu etkinin öğrencilerin değer puanları ve madde parametrelerinde nasıl bir değişime yol açtığını belirlemektir. Araştırmanın Yöntemi: Betimsel modelde bu olan bu araştırmanın örneklemini TIMSS 2015 uygulamasına katılan ülkelerden Japonya (n1= 4745), Kore (n2=5309), Tayvan (n3=5711), Türkiye (n4=6079), Umman (n5=9105) ve Ürdün (n6=7861)'deki sekizinci sınıf öğrencileri oluşturmaktadır. Ülkelerin seçiminde matematiğe yönelik çok fazla değer veren öğrencilerin yüzdesinin en fazla ve en düşük olması durumu dikkate alınmıştır. Bir diğer ifade ile matematiğe fazla değer veren öğrencilerin fazla olduğu ve buna karşın başarıların düşük olduğu öğrencilerin yer aldığı ülkeler ile matematiğe değer veren öğrencilerin çok az olduğu ve buna karşın başarıların yüksekk olduğu öğrencilerin yer aldığı ülkeler seçilmiştir. Veri toplama aracı olarak öğrenci anketinin kullanıldığı bu çalışmada öğrencilerin matematiğe değer verme alt ölçeğine ait maddelere verilen cevaplar analiz sürecine dâhil edilmiştir. Bu doğrultuda, UTS'nin ve KTS'nin etkisini belirlemek amacıyla tepki stilinin etkisinin dâhil edildiği kısmi puan modeli ve tepki stilinin etkisinin dahil edilmedi kısmi puan modeli analiz edilmiştir. Tepki stillerinin birey parametreleri üzerindeki etkisini belirlemek amacıyla kovaryans matrisi ve birey parametrelerine ilişkin varyans değerleri hesaplanmıştır. Bunun yanı sıra, tepki stillerinin madde parametreleri üzerindeki etkisini belirlemek amacıyla madde eşik parametrelerinde düzeltme yapılmıştır. Madde ve birey parametrelerinin kestiriminde R programında "PCMRS" paketi (Schauberger, 2018) ve madde tepki eğrilerinin oluşturulmasında "dplyr" (Wickham, François, Henry, & Müller, 2019), "mirt" (Chalmers, 2012) and "mirtCAT" (Chalmers, 2016) paketleri kullanılmıştır. Araştırmanın Sonuçları ve Önerileri: Araştırmada TIMSS 2015'in matematiğe yönelik değerle ilgili veri setinde tepki stilinin etkisinin olduğu, seçilen ülkelerdeki öğrencilerin matematiğe yönelik değerle ilgili puanlarındaki değişimin bir nedeninin öğrencilerin sergilemiş olduğu tepki stillerinin olduğu sonucuna ulaşılmıştır. Aynı zamanda, seçilen ülkelerdeki öğrencilerin KTS sergileme eğilimlerinin daha fazla olmasında ülkelerin kültürel yapılarının etkili olduğu ifade edilebilir. Bunun yanı sıra, tepki stillerinin özellikle uç noktalardaki eşik parametrelerinin kestiriminde ve bunlara bağlı olan madde tepki eğrilerinin oluşturulmasında yanlılığa neden olduğu sonucuna ulaşılmıştır. İlerleyen çalışmalarda farklı madde formatlarının veya farklı sayıdaki tepki kategorilerin tepki stillerinin varlığı konusundaki etkisi araştırılabilir. Bunun yanı sıra, tepki stilinin bilişsel olmayan farklı yapıların ölçülmesindeki etkisi de incelenebilir. [ABSTRACT FROM AUTHOR]
No Comments.