Karma yöntem araştırmaları, yıllar boyunca nicel ve nitel yaklaşımların birbirini dışlamadığı; tam tersine, birbirini tamamlayarak daha bütüncül bir bakış sunduğu bir yöntem olarak öne çıktı. Ancak bu yöntemleri bir araya getirmek, sadece veri toplama tekniklerini harmanlamak anlamına gelmiyor. Araştırmanın kalitesini belirleyen temel ölçütleri de aynı potada eritmek gerekiyor. İşte bu noktada, “kalite” kavramı yalnızca sayısal güvenirlik ya da anlatısal ikna edicilik değil, ikisinin kesişiminde oluşan çıkarımın niteliğiyle tanımlanıyor.
Her iki yaklaşımın kendine özgü kalite bileşenleri olsa da, karma bir araştırmada asıl mesele bu bileşenleri bütünleştirerek elde edilen çıkarımların tutarlılığını ve anlamlılığını sağlamaktır. Başka bir deyişle, veri türünden bağımsız olarak, ortaya konan bulguların araştırma sorusunu ne kadar güçlü ve bütüncül şekilde yanıtladığı, “çıkarımların kalitesi” dediğimiz o kesişim noktasında belirlenir. Karma yöntem çalışmaları yaparken bu dengeyi gözetmek, sadece yöntemsel değil, aynı zamanda etik bir sorumluluktur.
Bir araştırmayı yöntemsel açıdan değerlendirmek, yalnızca kullanılan araçlara ya da veri kaynaklarına bakmakla sınırlı değil. Araştırmanın her adımı, sorulan sorulardan örnekleme stratejisine, veri analizinin nasıl yapıldığından çıkarımların nasıl sunulduğuna kadar birçok boyutta tutarlılığı ve geçerliliği sağlamayı gerektiriyor. İşte tam da bu nedenle, Mixed Methods Appraisal Tool (MMAT) gibi yapılandırılmış araçlar araştırma kalitesini değerlendirmede oldukça kıymetli hale geliyor. Bu araç sayesinde, karma yöntem araştırmalarının sadece bileşenlerini değil, aynı zamanda bu bileşenlerin birbirleriyle ne kadar uyumlu çalıştığını da gözlemleyebiliyoruz.
aşağıdaki görselde yer alan MMAT tablosu, hem nicel hem nitel hem de karma yöntem araştırmalarının sistematik bir bakış açısıyla değerlendirilmesine olanak sağlıyor. Özellikle her bir yöntem için belirlenen değerlendirme ölçütleri, araştırmanın metodolojik sağlamlığını sorgulamak isteyen araştırmacılar ve hakemler için net bir kontrol listesi işlevi görüyor. Karma yönteme özgü beş madde ise en kritik alanlardan biri: nitel ve nicel verilerin sadece toplanmış olması değil, bütünleştirilmesi, analizdeki uyum ve çıkarımların tutarlılığı gibi bileşenler, çalışmanın bütünsel kalitesini belirliyor. Kısacası, bu tür bir değerlendirme aracı, araştırmacılara kendi çalışmalarını daha bilinçli ve eleştirel bir gözle yeniden değerlendirme fırsatı sunuyor.
Bu değerlendirme ölçütlerini sizlerle görsel olarak paylaşmak istedim. Görselleri daha iyi okuyabilmek için üzeirne tıklayabilir ve yeni bir sayfada daha büyük bir biçimde inceleyebilirsiniz.
Şimdi her bir yöntem için yazarların oluşturduğu ölçütleri tek tek inceleyelim. Nitel araştırmalarla başlayalım. Nitel araştırmalar, sosyal ve insani olguların özünü anlamaya çalışan, katılımcıların deneyimlerini ve anlam dünyalarını merkeze alan güçlü bir yaklaşımdır. Ancak bu çalışmaların akademik dünyada hak ettiği değeri görebilmesi için yalnızca “anlatmak” yetmez; aynı zamanda sağlam bir metodolojik temele dayanması gerekir. Aşağıdaki tablo, nitel çalışmaların en sık kullanılan alt yaklaşımlarını (örneğin etnografi, fenomenoloji, vaka çalışması gibi) hatırlatırken, araştırma kalitesini değerlendirmede bize rehberlik edecek temel soruları da sunuyor.
MMAT çerçevesinde sunulan bu kalite kriterleri, nitel bir çalışmanın sağlam temeller üzerine inşa edilip edilmediğini sorgulamamıza olanak tanıyor. Araştırma sorusuna uygun yaklaşımın seçilmesinden, verilerin açık ve tutarlı biçimde toplanmasına; bulguların yorumlanmasından, kullanılan kaynaklar arasındaki bütünlük ve tutarlılığa kadar uzanan bu beş madde, araştırmanın bütüncül kalitesini ortaya koyuyor. Özellikle son madde – veri kaynakları ile yorumlama arasında tutarlılık – nitel araştırmalarda sıkça gözden kaçabilen ama aslında çıkarımların inandırıcılığı açısından kritik bir rol oynayan bir ölçüttür. Bu tür sistematik değerlendirmeler, yalnızca yapılan çalışmanın değil, araştırmacının düşünme sürecinin de derinleşmesini sağlar.
Nicel verilerle desteklenmesi beklenen deneysel araştırmalarla devam edelim. Deneysel çalışmalar, özellikle nedensel ilişkileri test etmede güçlü bir tasarım sunar. Ancak bu gücün arkasında yatan şey, yalnızca nicel verilerin varlığı değil, aynı zamanda deneyin nasıl kurgulandığı ve yürütüldüğüdür. Gruptaki bireylerin rastgele atanıp atanmadığı, ölçümlerin hangi ölçüde eksiksiz toplandığı, tarafsızlık ilkesine ne ölçüde sadık kalındığı gibi pek çok unsur, çalışmanın geçerliliğini doğrudan etkiler. MMAT’in bu bölümü, tam da bu karmaşık yapıyı daha sistematik biçimde sorgulamamıza olanak tanıyor.
Görselde sunulan ölçütler, deneysel araştırmalarda metodolojik titizliğin olmazsa olmazlarını ortaya koyuyor. Seçkisiz rastgele atamanın açık biçimde yapılması ve gruplar arasında başlangıçta anlamlı farkların bulunmaması gibi iç geçerlikle ilgili önemli konulara vurgu yapılmış. Aynı şekilde, eksiksiz veri toplama oranı ve bağımsız gözlemcilerin kullanılması, bulguların güvenilirliğini artırıyor. En dikkat çeken noktalardan biri ise katılımcıların atandıkları müdahaleye ne ölçüde uyum gösterdiğinin değerlendirilmesi. Bu, yalnızca deneyin etkililiğini değil, aynı zamanda gerçek yaşam koşullarında uygulanabilirliğini de sorgulamamıza olanak tanıyor. Tüm bu unsurlar, deneysel bir çalışmanın bütüncül kalitesini değerlendirirken göz ardı edilmemesi gereken önemli yapıtaşlarını temsil ediyor.
Her zaman seçkisiz atama yoluyla deneysel bir tasarımı uygulamak mümkün olmayabilir. Katılımcıların rastgele atanamadığı, ancak doğal grupların karşılaştırıldığı araştırmalar, özellikle uygulamalı alanlarda oldukça yaygındır. Bu tür çalışmalarda güçlü çıkarımlar yapabilmek için, gruplar arasındaki farkların dikkatle analiz edilmesi ve yöntemsel riskleri en aza indirmeyi gerektiriyor. MMAT’in bu bölümü, seçkisiz atama yapılmayan deneysel araştırmaların hangi ölçütlerle değerlendirilebileceğini sistemli bir biçimde ortaya koyuyor. Böylece, daha önce “seçkisiz atama yapılmadıysa tümüyle zayıftır” biçimindeki genellemeler yerini daha incelikli değerlendirmelere bırakabiliyor.
Bu tabloda sunulan kalite ölçütleri, temsil edici bir örneklem oluşturma, güvenilir ölçüm yöntemleri, kabul edilebilir düzeyde veri kaybı, karıştırıcı değişkenlerin kontrolü ve müdahalenin tutarlılığı gibi ölçütlerden söz ediyor ve bu ölçütlerle ilgili uygulamalar çalışmanın gücünü ve inandırıcılığını doğrudan etkiliyor. Özellikle karıştırıcı (confounder) etkilerin analize dahil edilmesi ve planlanan müdahalenin gerçekten uygulanıp uygulanmadığının raporlanması, bu tür tasarımların güvenilirliğini artıran temel unsurlar arasında yer alıyor. Yöntemsel farkındalık sayesinde seçkisiz çalışmalar da oldukça güçlü bulgular ortaya koyabilir.
Sıra tarama modelli çalışmalarda! Tarama modelli araştırmalar, genellikle toplumun genel bir fotoğrafını çekmek, mevcut durumları anlamak veya gelecekteki eğilimleri öngörmek amacıyla başvurulan nicel araştırma türlerindendir. Her ne kadar yapıları deneysel çalışmalara göre daha basit görünse de, kullanılan örnekleme yöntemi, veri toplama araçları ve analiz süreci bu araştırmaların güvenilirliğini doğrudan etkiler. MMAT’in bu kısmı, özellikle tarama desenlerine sahip çalışmalarda dikkat edilmesi gereken kalite unsurlarını açıkça ortaya koyuyor.
Bu görselde yer alan beş temel ölçüt, nicel yöntemle desteklenen tarama modelli araştırmaların güvenilir ve metodolojik açıdan sağlam olduğunu değerlendirmeye yardımcı oluyor. Örnekleme yönteminin uygunluğu ve örneklemin temsili gücü, sonuçların genellenebilirliği açısından belirleyici unsurlar. Ayrıca değişkenlerin nasıl tanımlandığı ve ölçüldüğü, yanıtlama oranı ve yanıtlamayanların analize etkisi gibi detaylar da araştırmanın bütüncül kalitesini belirler. Analiz stratejisinin karmaşıklığı ya da çok değişkenli yöntemler kullanılıp kullanılmadığı gibi noktalar, bu tür çalışmaların sadece betimsel değil, aynı zamanda çıkarımsal güce sahip olabilmesini sağlar. Yani tarama araştırmaları da, doğru planlandığında oldukça güçlü veriler sunabilir.
Son olarak karma yöntem araştırmalarından söz edelim. Karma yöntem araştırmaları, nitel ve nicel yaklaşımların tek bir çalışmada bilinçli ve sistemli bir biçimde bütünleştirilmesini içerir. Bu bütünleştirme, sadece veri toplama biçimlerini değil; araştırma sorusunun doğasını, analiz stratejisini ve çıkarım sürecini de etkiler. Bu noktada, her iki yöntemin de güçlü yönlerinden faydalanmak hedeflenirken, bütünleştirmenin yüzeysel olmaması kritik bir öneme sahiptir. MMAT’in bu bölümü, karma yöntem çalışmalarında sıklıkla karşılaşılan zayıflıkları görmemizi ve araştırmalarımızı daha tutarlı şekilde yapılandırmamızı kolaylaştırıyor.
Karma yöntemlerin değerlendirilmesinde beş temel ölçüt öne çıkıyor: uygun tasarım gerekçesi, bileşenlerin etkili bütünleştirilmesi, bulguların bu bütünleştirmeye dayanarak yorumlanması, farklılıkların yeterince açıklanması ve her bileşenin kendi yöntemsel kalite standartlarına uyup uymadığı. Görselde de belirtildiği gibi, yalnızca bir bileşen yüksek kalitede olsa bile diğeri düşükse, çalışmanın genel kalitesi zayıf kabul ediliyor. Bu bize şunu hatırlatıyor: karma yöntem, sadece veri çeşitliliği değil, aynı zamanda metodolojik sorumluluğu da beraberinde getirir. Nitel ve nicel bileşenler, hem kendi içinde hem de bir bütün olarak anlamlı ve güvenilir olmalıdır.
Aşağıda karma yöntemler araştırmalarını detaylarıyla konuştuğumuz bir videoyu da paylaşmak istedim. Videoyu izleyerek deneyimlerinizi ve yorumlarınızı bizlerle paylaşabilirsiniz. Kanala abone olabilir ve yeni içeriklerden haberdar olabilirsiniz.
Sevgiler 🙂
Doç. Dr. Fatma Betül KURNAZ