Araştırmacı, ölçme hatası için düzeltmeler yaparken, uygun türde güvenirlik katsayısını kullanmak için her türlü çabayı göstermelidir. Farklı hesaplama güvenilirliği katsayıları yöntemleri, farklı ölçüm hatası türlerini (kaynaklarını) değerlendirir. Uygun güvenirlik katsayısının tahmini, belirli araştırma alanındaki ölçüm hatası türlerinin belirlenmesini ve her tür ölçüm hatasının güvenirlik katsayısına yansıtılmasına izin veren verilerin toplanmasını gerektirir.

Çoğu güncel meta-analizde, analiz birimi kişidir (veya sıçan veya güvercin veya ) ve ölçülen değişken kişinin bazı davranışlarıdır. Bu vaka için, psikometristler tarafından geliştirilen kapsamlı bir güvenilirlik teorisi vardır ve bu teorinin kapsamlı testleri yapılmıştır.

Bu yazı dizisinde tartışılan durum budur. Ancak diğer alanlarda meta-analizler yürütülmektedir. Örneğin, Rodgers ve Hunter (1986), ölçülerin iş birimi verimlilik ölçüleri olduğu bir meta-analiz yürütmüştür. 

Her iki meta-analizde de, ölçüm birimi bireysel çalışan değil, iş birimiydi (örneğin, bireysel mağazalar veya bireysel banka şubeleri) ve her iki meta-analizde de özel güvenilirlik tahmin prosedürlerinin kullanılması gerekiyordu. Ancak, bu tür durumlar istisnadır. Çalışmadaki analiz biriminin, olağan durum olan kişiler olduğunu varsayalım.

Ölçü genellikle üç yoldan biriyle elde edilir: davranış doğrudan kaydedilir (burada “yanıt verileri” olarak adlandırılan test puanlarında veya kapalı uçlu anket cevaplarında olduğu gibi), bir gözlemci tarafından değerlendirilir (burada “karar veya derecelendirme” olarak adlandırılır) veya bir gözlemci tarafından gözlemlenir ve kaydedilir (burada “kodlanmış yanıt verileri” olarak adlandırılır). Güvenilirlik konuları duruma göre farklılık gösterir.

Yanıt Verileri. Tepki verileri davranışı, ölçülecek değişkenin bu davranışı belirleyen birincil nedensel ajan olduğu varsayımı altında belirli bir değişkenin ölçümü için kullanılır. Davranış diğer nedensel ajanlar tarafından belirlendiği ölçüde ölçüm hatası mevcuttur. Psikometrik teori tarafından en az üç tür hata tanımlanmıştır: rastgele yanıt hatası, özel hata ve geçici hata.

Her yerde bulunan hata ajanı, davranıştaki rastgeleliktir. Adını vermek gibi oldukça pratik tepkiler dışında, çoğu insan eyleminin oldukça büyük bir rastgele öğesi vardır. Buna “rastgele yanıt hatası” denir. Rastgele yanıt hatası, insan sinir sistemindeki gürültü olarak düşünülebilir.

Ölçeklerde güvenirlik ve Geçerlik
Güvenilirlik analizi nasıl yapılır
Geçerlilik ve güvenilirlik KPSS
Geçerlik ve güvenirlik nedir
Cronbach alpha güvenirlik katsayısı
Güvenirlik katsayısı
Güvenilirlik nedir
Güvenirlik katsayısı formülü

Bazen davranış, ölçüm durumuna özgü bir şeyden etkilenir, örneğin bir görüş maddesinde kullanılan belirli kelimelerden birine özel bir tepki. Bu tür duruma veya uyarana özel ajanların etkisine “spesifik hata” (veya spesifik faktör hatası) denir. Spesifik faktör hatası, bir ölçüdeki bireysel öğelerle ilişkilendirilir. (Aslında kişi bazında etkileşimdir.)

Bir değişkeni ölçmek için her farklı ölçeğin, o ölçeğe özgü belirli faktör ölçüm hatası da vardır. Bazen davranış, ruh hali veya hastalık gibi zaman içinde rastgele değişen bir etkiden etkilenir. Zamanla değişen bir faktörün etkisine “geçici hata” denir. Bu üç ölçüm hatası biçiminin her biri, güvenilirliği ölçmek için geleneksel olarak kullanılan tasarımlara farklı şekilde girer.

Bir tasarım, belirli bir ölçüm oturumunda birden fazla yanıt elde ederek hatayı görünür kılar; ölçülecek değişkenin nedensel etkisinin boyutunda eşdeğer olan çeşitli durumlara veya uyaranlara (örneğin öğeler) yönelik davranışları ortaya çıkarır. Bağımsız yanıtlar, rastgele yanıt hatasının bağımsız örneklenmesine ve belirli hatanın bağımsız örneklenmesine izin verir.

Böylece, bu tasarımdan hesaplanan güvenilirlik, rastgele yanıt hatasının ve spesifik hatanın kapsamını tespit eder ve ölçer. Ancak, geçici bir hata varsa, bu tasarım onu ​​algılamayacaktır; bu nedenle, güvenirlik katsayısı, göreli geçici hata miktarı tarafından çok büyük olacaktır.

Daha iyi bir dil, “güvenilirlik” kelimesinin yerine “güvenilirlik tahmini” ifadesinin yerini alacak olsa da, bu güvenilirlik biçimine uygun şekilde “paralel biçimler güvenilirliği” denir ve yanlış bir şekilde “iç tutarlılık güvenilirliği” olarak adlandırılır. Bu güvenirlik biçimi genellikle Cronbach alfa katsayısı veya KR-20 katsayısı (iki ayrı yanıtlanan maddeler için eşdeğer katsayı) kullanılarak değerlendirilir. Cronbach (1947) bu tür güvenirliğe eşdeğerlik katsayısı (CE) olarak atıfta bulunmuştur.

Diğer bir yaygın tasarım, test-tekrar test tasarımıdır. Bir davranış, aynı ölçekle, geçici hata faktörünün tekrarlanmaması için yeterince uzak, ancak ölçülecek değişkende önemli bir değişiklik olmaması için zaman içinde yeterince yakın olan iki noktada ölçülür. İki önlem, rastgele yanıt hata dağılımından yeni (bağımsız) örneklemeye ve geçici hata dağılımından yeni (bağımsız) örneklemeye izin verecektir.

Ancak, belirli bir hata varsa, bu tasarım onu ​​algılamayacaktır; bu nedenle, güvenilirlik katsayısı, belirli hatanın göreli miktarı tarafından çok büyük olacaktır. Her iki zamanda da aynı ölçeğin (alet) kullanılması nedeniyle 1. ve 2. zamanlarında aynı spesifik hatalar meydana geldiğinden, spesifik faktör ölçüm hatası tespit edilmez. Bu güvenilirlik biçimine “test-tekrar test güvenilirliği” denir, ancak daha iyi bir dil “güvenilirlik” kelimesinin “güvenilirlik tahmini” ifadesinin yerini alabilir. Cronbach (1947), bu tür güvenilirlik tahminine kararlılık katsayısı (CS) olarak atıfta bulunmuştur.

Her üç tür ölçüm hatası da mevcutsa, doğru güvenilirlik yalnızca hem belirli hatanın durumsal belirleyicilerinin hem de geçici hatanın zamansal belirleyicilerinin yeniden örneklendiği bir tasarımla elde edilecektir. Bu, “gecikmeli paralel formlar” tasarımıdır. Cronbach (1947) bu tür güvenilirlik tahminine denklik ve kararlılık katsayısı (CES) olarak atıfta bulunmuştur. Ölçünün iki biçimi ve iki durum göz önüne alındığında, üç tür hatanın her birinin kapsamını ayrı ayrı tahmin etmek mümkündür.

Her üç tür hata da mevcutsa, gecikmeli paralel formlar güvenilirliği (CES), paralel formlar güvenilirlik tahmininden veya test-tekrar test güvenilirlik tahmininden daha küçük olacaktır. Yanlış güvenilirlik tahmini kullanmanın etkisi, ölçüm hatasının etkisini hafife almaktır. Bu nedenle, yanlış güvenilirliği kullanan düzeltme, bazı hata kaynaklarının kalibre edilmediği ve sonuç olarak, bu hata kaynağından kaynaklanan zayıflama için korelasyonun düzeltilmediği anlamına gelir.

Yani, yanlış güvenilirliği kullanan düzeltme, düzeltilmiş bağıntının yapılar arasındaki gerçek bağıntıyı buna uygun olarak hafife alacağı anlamına gelir. Bu, elbette, meta-analizdeki ortalama korelasyon tahminlerinde aşağı yönlü bir yanlılığa neden olacaktır.

Birincil araştırmacı veya meta-analist, CES tahminleri mevcut olmadığı için CE veya CS güvenilirlik tahminlerini kullanmaya zorlanırsa, çalışma veya meta-analiz, ölçüm hatası için tam düzeltmenin mümkün olmadığına ve rapor edilen sonuçların doğru olduğuna işaret etmelidir. bu nedenle muhafazakardır (yani, aşağı yönlü bir önyargıya sahiptir). Rapor ayrıca, ölçüm hatası için bu tür eksik bir düzeltmenin, ölçüm hatası için herhangi bir düzeltme yapmamaktan çok daha doğru sonuçlar verdiğine işaret etmelidir.

The post Uygun Güvenilirlik Katsayının Kullanılması – Meta-Analiz Ödevleri – Meta-Analiz Alanında Tez Yaptırma – Meta-Analiz Tez Yaptırma Ücretleri first appeared on Online (Parayla Ödev Yaptırma).

Bağımlı değişkende mükemmel yapı geçerliliğinden sapmalar da olabilir. Bazı sapmalar düzeltilebilir, ancak bazıları düzeltilemez. Eksik geçerliliğin etkisinin ölçülebildiği bir durumu gösterir.Çalışma değişkeninin personel seçimi araştırmasından nedensel olarak alındığı soyut durumu göstermektedir. 

Örneği düşünün: bir personel seçimi doğrulama çalışmasında iş performansını ölçmek için süpervizör derecelendirmelerinin kullanılması.

İdeal ölçü, yapı-geçerli, tamamen güvenilir, iş örneği testi gibi nesnel bir iş performansı ölçüsü olacaktır. Bunun yerine, çalışma ölçü olarak süpervizör algısını (derecelendirmeleri) kullanır. İdeal derecelendirme, bir denetçi popülasyonu arasında bir fikir birliği kararı olacaktır. Bunun yerine, gözlemlenen çalışma değişkeni, acil denetçinin değerlendirmesidir.

Bu nedenle, o denetçinin algılarının kendine has özelliği, gözlemlenen derecelendirmelerdeki ölçüm hatasının bir parçasıdır. İnsan yargısını etkileyebilecek yabancı faktörler arasında arkadaşlık, fiziksel görünüm, ahlaki ve/veya yaşam tarzı gelenekselliği ve daha fazlası yer alır.

Örnek durumunda, bir meta-analizden elde edilen kümülatif ampirik veriler, fiili iş performansı ile fikir birliği derecelendirmeleri arasındaki korelasyonun sadece . Acil denetçi değerlendirmesinin güvenilirliği, derecelendirme aracının kalitesine bağlıdır. Bir toplam derecelendirme için güvenilirlik ortalama .47 olacaktır; tek bir küresel derecelendirme için güvenilirlik ortalama 36 olacaktır. Tek bir küresel derecelendirme ölçüsü kullanmanın geçerliliğinde azalma √ a= .36=.60andb=.52,yani, ρo = abρ = (.60)(.52)ρ = .31ρ’dan, gözlemlenen korelasyonda %69’luk bir azalma ile verilir.

Bu örnekte, bağımlı değişkendeki yeni faktörler sadece amaçlanan bağımlı değişkene yabancı değil, aynı zamanda bağımsız değişkenle ilişkisizdi. Ancak bazı durumlarda, yabancı değişken hem bağımlı hem de bağımsız değişkenlerle ilişkilidir. Bu tür durumlar daha karmaşıktır ve yabancı değişkenin bağımlı değişkenin yapı geçerliliği üzerindeki etkisini düzeltmek her zaman mümkün değildir. Bu vakalar bu çalışmanın kapsamı dışındadır.

Verilerdeki Hesaplama ve Diğer Hatalar

Meta-analizdeki en zor artefakt veri hatalarıdır. Bilimsel sürecin herhangi bir adımında kötü veriler ortaya çıkabilir. Ham veriler yanlış kaydedilebilir veya bilgisayara yanlış girilebilir. Biçim yanlış belirtildiğinden veya bir dönüştürme formülü yanlış yazıldığından bilgisayar yanlış değişkeni ilişkilendirebilir.

Korelasyonun işareti yanlış olabilir, çünkü analist değişkeni ters olarak puanlamıştır, ancak çıktıyı okuyan kişi bunu bilmiyordur veya okuyucu, değişkenin ters olarak puanlandığını düşünmediği halde ters puanlandığını düşünmüştür. Bilgisayar çıktısı tablolara alındığında, korelasyon yanlış kopyalanabilir; işaret kaybolabilir veya rakamlar tersine dönebilir; veya tablo yayınlandığında, dizgici korelasyonu yanlış kopyalayabilir.

Bu tür hatalar, inanmak istediğimizden çok daha sık görülür. Tukey, tüm gerçek veri setlerinin hatalar içerdiğini savundu. Gülliksen (1986) şu açıklamayı yapmıştır:

Hesaplamalarımı çalıştırmadan önce verilerde hata olup olmadığını kontrol etmenin gerekli olduğuna inanıyorum. Her zaman bir hata kontrol programı yazdım ve hesaplamadan önce verileri onun içinden geçirdim. Kendim veya bir başkası için çalıştırdığım her veri setinde, anketlere geri dönmeyi ve bazı kartları yeniden açmayı veya belki de bazı konuları atmayı gerektiren her zaman hatalar olduğunu çok ilginç buluyorum.

Ayrıca, bazı hataların aykırı değerlerle sonuçlanması muhtemeldir ve aykırı değerler varyans üzerinde dramatik bir enflasyonist etkiye sahiptir. Normal bir dağılımda, örneğin, SD, veri değerlerinin en yüksek ve en düşük %5’i tarafından belirlenen %65’tir. Pek çok araştırma literatüründe korelasyonlarda ve d değerlerinde gözlemlenen varyansın önemli bir kısmını muhtemelen çeşitli türlerdeki veri hataları açıklamaktadır.

Dış geçerlilik ne demek
İçerik geçerliliği Nedir
Nicel araştırmada Geçerlik ve güvenirlik
Geçerlilik nedir
Güvenilirlik analizi nasıl yapılır
Güvenilirlik Analizi Nedir
Güvenirlik katsayısı
Geçerlik ve güvenirlik nedir

Bunun sonucu olarak, çok sayıda korelasyon içeren hemen hemen her meta-analiz ve az sayıda çalışma içeren bazı meta-analizler bazı veri hataları içerecektir. Kötü veriler bulunabilirse, atılabilirler. Bununla birlikte, tanımlanabilecek tek kötü veri, dağılımın çok dışında kalan ve açıkça aykırı değerler olan korelasyonlardır. Aykırı değer analizi, çalışma örneklerinin en az orta büyüklükte olduğu durumlarda en iyi sonucu verir. Örnek boyutları küçükse, gerçek aykırı değerleri aşırı büyük örnekleme hatalarından ayırt etmek zordur.

Bu nedenle, mevcut artefakt listesi eksiksiz olsa (değildir) ve bilinen tüm artefaktlar kontrol edilmiş olsa bile (nadiren mümkündür), veri hatalarından dolayı çalışma sonuçlarında yine de farklılıklar olacaktır. Gerçek meta-analizlerde, kötü verilerin yanı sıra bilinmeyen ve kontrol edilemeyen artefaktlar nedeniyle her zaman zayıflama ve yanlış varyasyon vardır.

Bu düşünceler Schmidt ve Hunter’ı (1977) genel bir kural olarak öne süren “%75 kuralını” önermeye yöneltti; eğer herhangi bir veri setinde bilinen ve düzeltilebilir eserler çalışma korelasyonlarındaki varyansın %75’ini oluşturuyorsa, muhtemelen şudur: kalan %25 ise kontrolsüz artefaktlardan kaynaklanmaktadır. Tüm açıklanamayan varyansların gerçek moderatör değişkenlerinden kaynaklandığını varsaymak akıllıca değildir, çünkü çalışmalar arasında varyasyona neden olan tüm artefaktları düzeltmek asla mümkün değildir.

Çalışma Prosedürünün Getirdiği Yabancı Faktörler

Araştırmanın ölçüm süreci veya gözlem prosedürü, araştırma mükemmel bir şekilde yapılmış olsaydı var olmayacak (veya sabit kalacak) bir değişken nedeniyle bağımlı değişkende varyasyona neden olabilir. Örnek olarak, iş performansının eşzamanlı geçerlilik çalışmasında iş deneyiminin etkisini düşünün. Personel seçiminde adaylar bir kohort olarak değerlendirilebilir. Başvuranlar karşılaştırıldığında, sanki aynı anda işe başlayacaklarmış gibi örtük olarak karşılaştırılıyorlar.

Eşzamanlı bir geçerlilik çalışmasında, performans, işte farklı miktarlarda deneyime sahip mevcut tüm çalışanlar üzerinde ölçülür. Bu, çalışanların iş deneyimlerinde farklılık gösterdikleri için performanslarının kısmen farklı olacağı anlamına gelir. Bu, aynı anda işe alınan başvuru sahipleri için geçerli olmayacaktır. Bu nedenle, deneyimdeki farklılıklar, çalışma gözlem prosedürü tarafından yaratılan yabancı bir değişkeni oluşturur.

Bu süreç için soyut yol diyagramı, iş deneyimi durumunu gösterirken gösterilir. Duruma herhangi bir yabancı değişken dahil edilmemiş olsaydı, gözlemlenen korelasyon, bağımsız değişken ile bağımlı değişken arasındaki kısmi korelasyona eşdeğer olurdu ve yabancı değişken sabit tutulur. Yabancı değişken bağımsız değişkenle ilişkili olmadığından, kısmi korelasyon formülü şöyledir.

Bu, deneyimden kaynaklanan zayıflama için bir düzeltme olarak kabul edilebilir. Denklemi tersine çevirirsek, zayıflama formülünü elde ederiz. Kısmi bağıntı için denklemin paydasının tersi a olsun.

Okuyucu, neden her bir bireysel çalışmada sadece kısmi korelasyonu hesaplamadığımızı sorabilir. Aslında, bu sorunu çözecekti. Yani, çalışmada deneyim kaydedilmişse ve çalışma korelasyonu olarak kısmi korelasyon kullanılmışsa, daha fazla istatistiksel düzeltmeye gerek kalmayacaktır.

Bu aynı zamanda istatistiksel düzeltme tarafından üretilen örnekleme hatasındaki artışı da ortadan kaldıracaktır. Bu düzeltme, dikotomizasyona benzer. Orijinal araştırma raporunda doğru korelasyon verilmişse (veya bunu hesaplamak için gerekli ek korelasyonlar verilmişse), olay sonrası istatistiksel düzeltmenin kullanılmasına gerek kalmayacaktır. Bununla birlikte, genellikle durum böyle değildir ve bu nedenle düzeltme gereklidir.

The post Bağımlı Değişkende Kusurlu Yapı Geçerliliği – Meta-Analiz Ödevleri – Meta-Analiz Alanında Tez Yaptırma – Meta-Analiz Tez Yaptırma Ücretleri first appeared on Online (Parayla Ödev Yaptırma).