Ölçüt 3. Program Çıktıları
3.2 Program Çıktılarının Ölçme ve Değerlendirme Süreci
Program Çıktılarını (PÇ) ölçme güncelleme süreci detaylı olarak Şekil 3.1’de gösterilmektedir.
Şekil 3.1 aynı zamanda, Şekil 4.1'de verilen sürekli iyileştirmeye dayalı eğitim-öğretim süreci yönetim sisteminin 3. çevrimini göstermektedir. Program çıktılarının ölçme değerlendirme süreci Şekil 3.1’de gösterildiği gibi, öncelikle her dersin öğretim elemanının yarıyıl başında dersin öğrenme çıktılarını (ÖÇ) güncellemesi ile başlar. Ardından derse özgü özelliklere sahip bu ÖÇ'ler ve PÇ'ler arasındaki ilişki matrisinin oluşturulması gerekir (ÖÇ-PÇ Matrisi). Bu matriste hangi ÖÇ'nin hangi PÇ'ler ile ilişkili olduğu gösterilerek, dersin sağlamaya çalıştığı PÇ’ler belirlenir. Bu işlemin ardından, PÇ'lerin hangi ölçüm araçlarıyla (yarıyıl sonu sınavı, laboratuvar, proje, ödev vb.) ölçüleceği saptanır. Yarıyıl sonunda, dersin PÇ'leri sağlama düzeyi DDP kullanılarak %’lik başarım şeklinde hesaplanır. Eğer bir çıktı birden fazla araçla ölçülüyorsa, çıktının başarımı değerlendirme sonuçlarının ortalaması alınarak bulunur.
Program çıktılarımızın sağlanma düzeylerini ölçmek için Microsoft Excel tabanlı Ders Değerlendirme Programı (DDP) kullanılmaktadır. DDP programının iki versiyonu bulunmaktadır ve bu programın nasıl kullanılacağına ilişkin olarak hazırlanan kılavuz ve şablonlar EK III.6-8’de verilmektedir. İlkinde, dersin program çıktılarına ulaşma düzeyi yarıyıl sonu sınavı sonuçları ve harf notları kullanılarak DDP’nin “DDP_ders.xls” (EK III.7) şablonu ile ölçülmektedir. Bu versiyonda PÇ'lerin değerlendirilmesi amacıyla harf notlarıyla ağırlıklandırılmış ileri bir istatistik yöntemi kullanılmaktadır. İkinci versiyonda ise, dersin program çıktılarına ulaşma düzeyi yarıyıl sonu sınavı dışında laboratuvar ve/veya proje(ödev) gibi araçlarla, harf notu girilmeksizin DDP’nin “DDP_lab_pro.xls” (EK III.8) şablonu ile ölçülmektedir (2015-2016 yılı için DDP aracıyla elde edilen PÇ başarımları toplu olarak Tablo 3.15’de görülebilir).
Program çıktılarına ulaşma düzeyleri ayrıca her ders için öğrencilere “MÜDEK Ders Değerlendirme Anket Formu” (EK III.9) uygulanarak da ölçülmektedir. Anketler her ders için değerlendirilerek %’lik başarımlar elde edilir (2015-2016 yılına ilişkin sonuçlar Tablo 3.16’dadır).
DDP ve ders değerlendirme anketleri ile elde edilen % başarım değerleri “MÜDEK Ders Değerlendirme Formu”na (EK III.10) aktarılır. Bu formda yer alan tabloya, Bölüm Başkanlığınca her dersin sağlamaya çalıştığı program çıktıları için belirlenen minimum başarım düzeyleri de eklenerek, bu değerler karşılaştırmalı bir grafikle verilir.
Öğretim elemanı, “MÜDEK Ders Değerlendirme Formu”nu yarıyıl sonu değerlendirmelerini de yaparak doldurur ve yürüttüğü her ders için “EEM Ders Dosyası İçeriği ve Kapak Sayfası” (EK
III.11) belgesinde belirtilen içerikte ders dosyalarını hazırlayarak (Şekil 3.1), elektronik ve basılı formatta ayrı ayrı olmak üzere Elektrik-Elektronik Mühendisliği Bölüm Başkanlığına teslim eder. Bu işlemler ilgili yarıyılda açılan tüm dersler için tekrarlanır.
Her bir ders için elde edilen PÇ sağlanma düzeylerini gösteren veriler, tüm dersler için Bölüm Başkanlığında toplanır ve gerekli analizler yapılarak yıllık bazda değerlendirme raporu hazırlanarak, yıl sonu PÇ sağlanma düzeyleri elde edilir (2014-2015 ve 2015-2016 Akademik yılları için sırasıyla EK IV.11 ve EK IV.12’ye bakınız).
Şekil 3.1 Program Çıktılarını Ölçme ve Güncelleme Süreci
Bölüm Başkanlığınca, 2014-2015 Ders Değerlendirme sonuçları dikkate alınarak (EK IV.11), 2015-2016 akademik yılı için, derslerin sağlamaya çalıştığı PÇ’lere katkısının en az hangi düzeyde olacağı, dersin özellikleri ve sağlamaya çalıştığı PÇ’nin niteliği değerlendirilerek
Dersin PÇ’leri sağlama düzeylerinin, MÜDEK Ders Değerlendirme Anket sonuçları ve DDP çıktıları karşılaştırılarak
değerlendirilmesi ve Ders Değerlendirme Formlarının doldurulması Ders Değerlendirme Programı (DDP) ile
derslerin PÇ’leri sağlama düzeylerinin
3. Ders Tanıtım Formunun güncellenmesi
PÇ’lerin güncellenmesi Bölüm Kurulu
Evet Hayır
Program çıktılarının sağlanma düzeylerinin, tüm derslerin DDP çıktıları
değerlendirilerek belirlenmesi ve
Eğitim ve Program İyileştirme Komisyonu
Derslerin PÇ başarımlarının DDP ile ölçülmesi
Ders değerlendirmelerinin yapılması
▪ Mezun Anketi
Değerlendirme Raporu
▪ İşveren Anketi Değelendirme Raporu
▪ Staj Değerlendirme Formu Raporu
belirlenmiş ve öğretim elemanlarınca bu katkı düzeyleri minimum PÇ başarım değerleri olarak alınmıştır (Tablo 3.17). Buna göre %30 kısmi, %50 orta ve %70 tam katkı düzeylerinin alt sınırları olarak belirlenmiştir (Tablo 3.3 A, B sütunları). Böylece öğretim elemanlarının 2014-2015 akademik yılında MÜDEK Ders Değerlendirme Raporlarını hazırlarken yaşadıkları PÇ hedefi belirleme sorunu çözülmüştür. Bu değerler dersin sağlamaya çalıştığı PÇ’lere yapması gereken minimum katkıyı gösterir (minPÇ) ve ders bazındaki başarımlar bu değer dikkate alınarak Tablo 3.3’de (C, D sütunları) verilen ölçeğe göre değerlendirilir. PÇ başarım ölçümünde ders bazındaki PÇ başarımları esastır ve ölçütümüz, her bir PÇ için yıllık değerlendirmede, bu PÇ’yi sağlamaya çalışan zorunlu derslerden birinde %70 oranında başarımın elde edilmiş olması (en az bir dersin tam katkı düzeyini sağlaması), bu PÇ’nin tam olarak sağlandığını gösterir. Ders değerlendrimelerinden elde edilen bu sonuçlar, mezun anketi değerlendirmeleri (EK IV.3-6), işveren anketi değerlendirmeleri (EK IV.7-8) ve staj değerlendirme formu sonuçları (EK IV.9-10) da dikkate alınarak Eğitim ve Program İyileştirme Komisyonunda görüşülür. Görüşler öğretim elemanları ile paylaşılarak varsa zayıflıkların kaynakları araştırılır ve öneriler geliştirilir.
Bu öneriler Bölüm Kurulunda tartışılır, gerekli iyileştirme kararları alınır. Program çıktılarına ulaşmak için eğitim-öğretim sürecinde özel uygulamalar gerekip gerekmediği sorgulanır. Sürekli iyileştirme yaklaşımıyla öğretim elemanlarına geri dönüşler sağlanır. Bu değerlendirmelerin sonucunda Bölüm Kurulunca program çıktılarının güncellenmesine karar verilirse (3 yılda bir) ve bu karar idari bir süreç gerektiriyorsa, bu işlemler Bölüm Başkanlığınca yürütülür.
Güncelleme geri bildirimleri ile çevrim tamamlanır. Bu sürecin akış şeması Şekil 3.1'de verilmektedir.
Tablo 3.3. PÇ Başarım Değerlendirme Ölçeği
(A)
karşılanamamaktadır. %BD < %minPÇ
Radikal ve kısa dönemde etkili olacak değişiklik önerileri açıklamalar aşağıda verilmektedir.
Her yarıyıl sonunda dersi veren öğretim elemanının, ilgili ders için “DDP Kullanım Kılavuzu”
uyarınca örnek DDP şablonlarını kullanarak, ilgili ölçme araçları için hazırlanmış verileri DDP dosyasına aktarıp ders değerlendirme sonuçlarını elde etmesi gerekir. Bu sonuçlar, dersin o yarıyıl için PÇ % başarım değerlerini verir. Bu sonuçlara dayanarak hazırlanan MÜDEK Ders Değerlendirme Formu (EK III.10), ilgili dersin ders dosyasına konur. Kanıt olarak 2015-2016 Bahar yarıyılına ilişkin 2 dersin (EEM214, EEM464) DDP çıktıları ve MÜDEK Ders Değerlendirme Formları EK IV.13’de verilmiştir. Örneğin, EEM322 dersine ilişkin DDP programı uygulama örnekleri Şekil 3.2 (yarıyıl sonu sınavı değerlendirmesi) ve Şekil 3.3’de (ders dönem projesi değerlendirmesi) gösterilmektedir. Bu dersin MÜDEK Ders Değerlendirme
Formunun ön sayfası da Şekil 3.4’de verilmiştir. EEM322 dersinin PÇ sağlanma düzeylerine ilişkin karşılaştırmalı grafik Şekil 3.5’de yer almaktadır.
Şekil 3.2’deki DDP_ders şablonu incelenecek olursa, yarıyıl sonu sınavında yer alan her sorunun puan değerleri ve öğrencilerin bu sorulardan aldıkları puanların girildiği görülmektedir. Ayrıca yarıyıl sonu sınavında sorulan her sorunun hangi program çıktısıyla/çıktılarıyla ilişkili olduğu belirtilmekte ve öğrencinin bu ders için almış olduğu harf notu son sütuna girilmektedir.
Program aracılığıyla, hem PÇ hem de soru bazlı başarımlar, girilen harf notlarıyla ağırlandırılarak, ileri istatistik yöntemleri ile detaylı hesaplanmaktadır. Dolayısıyla başarım hesaplamaları daha gerçekçi bir şekilde, harf notuna etki eden diğer tüm ölçme araçlarını da (kısa sınavlar, arasınav vb.) kapsamış olmaktadır.
Dersin dönem projesi içinse harf notları girilmemektedir. Burada, DDP_lab_pro program şablonu, girilen nota karşılık gelen üniversite yönetmeliğine uygun katalog harf notlarını, harf notu sütununa kendisi otomatik atamaktadır (Şekil 3.3). Program aracılığıyla, hem PÇ hem de proje değerlendirme ölçütleri bazındaki başarımlar, katalog harf notlarıyla ağırlandırılarak, ileri istatistik yöntemlerle detaylı hesaplanmaktadır.
Şekil 3.4’de ise MÜDEK Ders Değerlendirme Formunun giriş bölümü (ön sayfası), Şekil 3.5’de de dersin sağlamaya çalıştığı PÇ’lerin başarım düzeyleri grafik olarak gösterilmiştir. Şekil 3.5’de her bir PÇ için yer alan ilk sütunlar DDP programı ile elde edilen % başarım değerlerini, ikinci sütunlar MÜDEK Ders Değerlendirme Anketi % başarım değerlerini ve son sütunlar bölümümüz tarafından bu ders için belirlenmiş minimum başarım düzeyini göstermektedir.
DERS DEĞERLENDİRME PROGRAMI Bölüm: Elektrik-Elektronik Mühendisliği
Ders: EEM 322 Denetim Sistemleri
Yılı ve Dönemi: 2015-2016 Bahar
2 21293541 ÇETİNKAYA MEHMET CAN 18 20 14 9 8 69
A-3 21293072 AKKAŞ EMRE 17 20 6 9 6 58
A-4 21293887 GÖĞEN ERALP 12 11 6 11 9 49 B+
5 21293941 GÜLSOY AYGÜL 9 16 13 12 7 57 B+
6 21195024 YALÇINKAYA BENGİSU 14 20 14 4 0 52 B
7 21293037 AKBIYIK BARAN 7 8 7 7 6 35 B
8 21294922 UZUN KÜRŞAT EREN 8 5 7 5 11 36 B
9 21193900 ERGİN UMUT 9 8 17 5 5 44 B
10 21293633 DEMİRCİ GÜNEŞ 16 1 9 9 4 39 B
11 21293109 AKYILDIZ FURKAN YİĞİT 13 8 13 8 3 45 B
12 21195503 GÖZÜBATIK OĞUZHAN 8 9 14 5 12 48 B
13 21294972 VURAL VEYSEL 9 12 7 11 7 46
B-14 20995241 YILMAZ TOLGA 10 13 10 5 3 41 C+
15 21194568 ÖZLÜER ÖZGECAN 5 11 12 7 5 40 C+
16 21194943 UĞURLU GÜNEY 2 20 15 2 2 41 C+
17 21396537 TÜMER MEHMET ALİ 0 17 5 10 7 39 C
18 21393142 ARABACIOĞLU AYKUT 1 5 7 8 3 24 C
19 21093721 ERDEM MEHMET EFE 4 13 14 7 5 43 C
25 21094334 MURATOĞLU TUĞBERK 6 14 6 5 4 35 C
26 21194430 NALÇABASMAZ MERT HİKMET 6 4 4 9 5 28 C
27 20794223 COŞKUN NEDİM EKİN 11 14 11 4 5 45 C
Soruların Başarım Yüzdesi 78 83 81 66 46
Dersin sorulara göre başarım yüzdesi
Şekil 3.2 EEM322 Dersinin Yarıyıl Sonu Sınavının Değerlendirildiği
DDP_ders Şablonu
DERS DEĞERLENDİRME PROGRAMI
Bölüm: Elektrik-Elektronik Mühendisliği
Dersin Kodu ve Adı : EEM 322 Denetim Sistemleri Yılı ve Dönemi: 2015-2016 Bahar
1 21394817 TOROSLU İREM 27 27 36 90
A-2 21293541 ÇETİNKAYA MEHMET CAN 30 30 40 100 A
3 21293072 AKKAŞ EMRE 30 30 40 100 A
4 21293887 GÖĞEN ERALP 27 27 36 90
A-5 21293941 GÜLSOY AYGÜL 27 27 36 90
A-6 21195024 YALÇINKAYA BENGİSU 27 27 36 90
A-7 21293037 AKBIYIK BARAN 27 27 36 90
A-8 21294922 UZUN KÜRŞAT EREN 30 30 40 100 A
9 21193900 ERGİN UMUT 30 30 40 100 A
10 21293633 DEMİRCİ GÜNEŞ 27 27 36 90
A-11 21293109 AKYILDIZ FURKAN YİĞİT 30 30 40 100 A
12 21195503 GÖZÜBATIK OĞUZHAN 30 30 40 100 A
13 21294972 VURAL VEYSEL 24 24 32 80 B
14 20995241 YILMAZ TOLGA 27 27 36 90
A-15 21194568 ÖZLÜER ÖZGECAN 24 24 32 80 B
16 21194943 UĞURLU GÜNEY 29 29 38 95 A
17 21396537 TÜMER MEHMET ALİ 24 24 32 80 B
18 21393142 ARABACIOĞLU AYKUT 30 30 40 100 A
19 21093721 ERDEM MEHMET EFE 24 24 32 80 B
20 21395644 İNAL MEHMET BARIŞ 24 24 32 80 B
21 20594372 ÖZTÜRK HASAN CAN 30 30 40 100 A
22 21194637 SAĞLAM MELİH TUNÇ 24 24 32 80 B
23 21193172 AKAL TOLGA 27 27 36 90
A-24 21193468 BEYRİBEY ÇAĞLAR 27 27 36 90
A-25 21094334 MURATOĞLU TUĞBERK 29 29 38 95 A
26 21194430 NALÇABASMAZ MERT HİKMET 27 27 36 90
A-27 20794223 COŞKUN NEDİM EKİN 9 9 12 30
28 21293231 ATİLLA BERK 24 24 32 80 B
29 21293705 DÖLEK FURKAN 22,5 22,5 30 75
B-30 20993308 BAŞER ORÇUN 16,5 16,5 22 55 D+
31 21094874 TÜRK ÇAĞRI 10,5 10,5 14 35
32 21393021 AĞCA HASAN ONURALP 28,5 28,5 38 95 A
33 21293343 BAYSAL MEHMETALİ 30 30 40 100 A
34 21393864 GÜÇTEKİN DENİZ 25,5 25,5 34 85 B+
35 21293642 DEMİRKOL DERYA 21 21 28 70 C+
36 21194177 KARAÇOBAN FATİH 28,5 28,5 38 95 A
37 0
Soruların Başarım Yüzdesi 85 85 85
Dersin çıktılara göre başarım yüzdesi Program Çıktıları
Soru Numarası Sorudan alınması gereken en yüksek puan
Soruların Başarım Puanları