Eğitim klasöründe her şey yerli yerindeydi. İmza föyleri tam, sunumlar ekli, memnuniyet anketleri dolu; hepsi beş üzerinden 4,8 civarında. Aynı klasörün yanındaki hurda kayıtlarına bakınca eğitimin verildiği konuda üç ay içinde iki hurda açılmıştı. Denetçi tek bir soru sordu: "Bu eğitimin etkinliğini nasıl ölçtünüz?" Klasörde o soruya cevap veren tek bir kayıt yoktu. Eğitim etkinlik değerlendirme formu aslında bu sorunun cevabıdır ve memnuniyet anketi onun yerine geçmez.
Memnuniyet anketi neyi ölçer, neyi ölçmez
Eğitimin bitiminde dağıtılan anket katılımcının o andaki duygusunu ölçer: eğitmen anlaşılır mıydı, salon rahat mıydı, süre yeterli miydi. Bu bilgi işe yarar; eğitmen seçiminde ve lojistikte size yol gösterir. Ancak öğrenmeyi ölçmez, davranış değişimini hiç ölçmez. Sıcak bir eğitmen dinleyiciyi memnun eder ve puanı yükseltir; öğrenilenin sahada uygulanmasıyla arasında doğrudan bir bağ yoktur.
ISO 9001'in yeterlilikle ilgili 7.2 maddesi, yeterliliği kazandırmak için alınan aksiyonların etkinliğinin değerlendirilmesini ister. Yani standart eğitim yapılmasını değil, yapılan eğitimin işe yarayıp yaramadığının değerlendirilmesini istiyor. Bu ayrımı kaçıran firmalarda dosya dolu, sonuç yok.
Anketi büsbütün atmayın ama sorularını değiştirin. "Eğitimden memnun kaldınız mı" yerine "öğrendiklerinizden hangisini önümüzdeki hafta işinizde kullanacaksınız" diye sorun. Bu soruya verilen cevap hem katılımcıyı düşündürür hem de üç ay sonra amirin neye bakacağını belirler. Cevap veremeyen katılımcı sayısı fazlaysa eğitimin içeriği sahayla bağını kurmamış demektir ve bunu üç ay beklemeden öğrenmiş olursunuz.
Etkinliği ölçmenin dört kademesi
Eğitim değerlendirmesinde yaygın kullanılan Kirkpatrick modeli işi dört kademeye ayırır. Hepsini uygulamanız gerekmez; hangi eğitim için hangi kademeye çıkacağınıza karar vermeniz yeter. Aşağıdaki tablo bu kararı kolaylaştırıyor.
| Kademe | Ölçtüğü | Yöntem | Ne zaman | Hangi eğitimde |
|---|---|---|---|---|
| 1 – Tepki | Memnuniyet | Anket | Eğitim sonu | Hepsinde |
| 2 – Öğrenme | Bilgi kazanımı | Sınav, uygulama testi | Eğitim sonu / ertesi gün | Teknik ve yöntem eğitimleri |
| 3 – Davranış | Sahada uygulama | Amir gözlemi, saha kontrolü | 60-90 gün sonra | Operatör ve süreç eğitimleri |
| 4 – Sonuç | Göstergedeki değişim | Hurda, PPM, şikâyet verisi | 6-12 ay sonra | Belirli bir soruna yönelik eğitimler |
Pratikte kural şu olabilir: her eğitimde kademe 1, teknik eğitimlerde kademe 2, bir düzeltici faaliyetten doğan eğitimlerde kademe 3 ve mutlaka kademe 4. Dördüncü kademeyi her eğitim için zorlamak sistemi ağırlaştırır ve altı ay sonra kimse doldurmaz. Bir düzeltici faaliyet nedeniyle verilen eğitimin sonucunu ise zaten ölçmek zorundasınız; aksiyonun etkinliği o kaydın kapanış şartıdır.
Eğitim etkinlik değerlendirme formu örneği: alan alan
Aşağıdaki form, operatörlere verilen "kontrol planı okuma ve uygulama" eğitiminin üç ay sonrası için hazırlanmış gerçek bir örnektir. Üst bölüm kimlik, orta bölüm gözlem, alt bölüm karardır. Orta bölümdeki ifadeler eğitimin hedefinden türetilir; genel cümle yazmayın.
| Bölüm | Alan | İçerik / örnek |
|---|---|---|
| Üst | Eğitim adı ve kodu | Kontrol planı okuma ve uygulama / EG-2025-03 |
| Üst | Katılımcı, sicil, bölüm | Ad Soyad, 1147, Pres 3 |
| Üst | Eğitim tarihi / değerlendirme tarihi | 12.02.2025 / 15.05.2025 |
| Orta | Gözlem 1 | Vardiya başında kontrol planındaki ölçüm sıklığını kendisi kontrol ediyor |
| Orta | Gözlem 2 | Ölçüm sonucunu kayıt föyüne zamanında ve okunaklı yazıyor |
| Orta | Gözlem 3 | Tolerans dışı sonuçta hattı durdurup amirine haber veriyor |
| Orta | Gözlem 4 | Kontrol planı revizyonu değiştiğinde farkı fark ediyor |
| Alt | Toplam / karar | Ortalama 3,25 – Etkin |
| Alt | Etkin değilse aksiyon ve termin | Aksiyon, sorumlu, tarih |
Dört gözlem ifadesi çoğu eğitim için yeterlidir. Altıyı geçerseniz amir formu okumadan doldurur ve elinizde anlamsız bir puan kalır. Formu bir sayfaya sığdırın; iki sayfaya taşan değerlendirme formları sahada doldurulmuyor. Eğitim etkinlik değerlendirme formu ne kadar kısa olursa dolduran kişi o kadar düşünerek dolduruyor; uzun form hızlı ve rastgele işaretleniyor.
Formun bir de kod ve revizyon numarası olsun; doküman sisteminizde kayıtlı bir form olarak dursun. Kulağa ayrıntı gibi geliyor, ama kontrolsüz bir Word dosyası olarak dolaşan değerlendirme formları zamanla üç dört farklı sürüme ayrılıyor ve bölümler farklı ölçeklerle puan veriyor. Aynı formu kullanmayan iki bölümün sonuçlarını karşılaştıramazsınız.
Amirden puanın yanına bir de somut örnek yazmasını isteyin: hangi gün, hangi parçada, neyi gözledi. Bu tek zorunluluk formun ciddiyetini bir anda değiştiriyor. Örnek yazamayan amir aslında gözlemlememiştir ve o boş kutu size değerlendirmenin masa başında doldurulduğunu söyler. Yıllardır uyguladığım en basit kontrol bu; formun kendisini değiştirmeden ölçümün kalitesini yükseltiyor.
Sınav mı, uygulama testi mi
İkinci kademe için çoğu firma çoktan seçmeli bir sınav hazırlıyor. Ofis çalışanlarında bu yöntem işe yarar; operatörlerde çoğu zaman yaramaz. Okuma alışkanlığı olmayan bir kişi konuyu bildiği hâlde sınavdan düşük alabilir, iyi tahmin eden biri ise hiçbir şey öğrenmeden geçebilir. Sonuçta elinizde kişiyi değil sınavı ölçen bir kayıt kalır.
Operatör eğitimlerinde uygulama testi çok daha doğru sonuç veriyor. Masaya üç parça koyun: biri uygun, biri sınırda, biri hatalı. Kişiden ölçüp karar vermesini isteyin. Beş dakikada hem ölçü aletini doğru kullanıp kullanmadığını hem de tolerans yorumunu görürsünüz. Kayda da yazılacak şey nettir: kaç parçada doğru karar verildi, hangi adımda hata yapıldı. Sınav kâğıdı yerine bu tek satır, denetimde çok daha güçlü bir kanıt oluyor.
Bir de eğitmenin kendi değerlendirmesini isteyin. Eğitim sonunda eğitmen, katılımcı grubu için tek cümlelik bir not yazsın: hangi konu zor anlaşıldı, kim ek desteğe ihtiyaç duyuyor. Bu not üç ay sonraki değerlendirmeyi yapan amire de yol gösteriyor.
Üç ay sonra hangi soru sorulur
Zamanlama tartışması genelde şu iki uçta takılır: hemen sorarsak taze olur, geç sorarsak unuturuz. İkisi de yanlış. Davranışın yerleşmesi için zaman gerekir; 60 ile 90 gün pratikte doğru aralıktır. Vardiyalı çalışan bir yerde takvim gününe ek bir şart daha koyun: kişi eğitimden sonra en az on beş vardiya çalışmış olsun. İzin, rapor ya da başka hatta görevlendirme yüzünden bu şart sağlanmadıysa değerlendirmeyi öteleyin ve öteleme nedenini forma yazın.
Sorulacak soru, eğitimin içeriğinden değil hedefinden türer. Eğitimin hedefi "operatör kontrol planındaki ölçüm sıklığını uygular" ise soru da tam olarak bunu ölçer. Hedefi yazılmamış bir eğitimin etkinliği de ölçülemez; bu yüzden değerlendirme formunu eğitimi planlarken yazmaya başlayın, üç ay sonra değil. Plan tarafında bu bağın nasıl kurulacağını yıllık eğitim planı yazımızda anlattık.
Amir değerlendirmesini nasıl puanlarsınız
Amire "bu eğitim işe yaradı mı" diye sorarsanız cevap her zaman evet olur; kimse kendi ekibi hakkında olumsuz konuşmak istemez. Bunun yerine gözleme dayalı ifadelere dört kademeli puan verdirin: 1 gözlenmedi, 2 kısmen gözlendi, 3 gözlendi, 4 gözlendi ve başkalarına da aktarıyor. Ortalama 3 ve üzeri etkin sayılır. Dördüncü kademeyi koymak, gerçekten iyi uygulayanları ayırt etmenizi sağlıyor ve o kişiler bir sonraki eğitimin iç eğitmen adayı oluyor.
Değerlendirmeyi tek kişiye bırakmayın. Kritik eğitimlerde amir gözlemine ek olarak kalite biriminden bir saha kontrolü ekleyin: aynı operatörün son bir aylık ölçüm kayıtlarına bakın, eksik kayıt oranını sayın. İki kaynak birbirini doğrulamıyorsa gerçek durumu araştırmanız gerekir. Bu kontrolü üretim tarafındaki rutin saha turlarınıza yerleştirirseniz ek yük oluşturmaz.
Etkin bulunmazsa ne yapılır
Refleks olarak eğitimi tekrarlamak en sık yapılan hatadır ve genelde aynı sonucu verir. Önce nedenin nerede olduğuna bakın. Dört olasılık var: içerik hedefe uymuyordu, eğitmen anlatamadı, kişi uygulama fırsatı bulamadı ya da saha koşulları öğrenileni uygulamaya izin vermiyor. Dördüncü olasılık düşünüldüğünden çok daha sık çıkıyor.
Somut bir örnek: ölçüm sıklığı eğitimi verilen bir hatta operatörler kuralı biliyor ama uygulamıyordu, çünkü hattın çevrim süresi ölçüm için duraklamaya izin vermiyordu. Burada çözüm eğitim değil, ölçüm istasyonunun yerinin değişmesiydi. Karar ne olursa olsun forma yazılır, bir sorumlusu ve termini olur. Formun altındaki aksiyon satırı boş kalıyorsa o form ölçüm yapıyor ama hiçbir şeyi düzeltmiyor demektir.
QMS'te hatırlatma nasıl kurulur
Etkinlik ölçümünün en büyük düşmanı unutulmaktır. Eğitim şubatta verilir, mayısta kimsenin aklına gelmez, kasımda denetim gelince toplu hâlde doldurulur ve o formların hiçbir değeri olmaz. Çözüm basit: eğitim kaydı açılırken değerlendirme tarihi de o kayıtta belirlensin ve tarih geldiğinde ilgili amire iş düşsün.
PaKalite'de eğitim kaydına katılımcı eklendiğinde her katılımcı için ayrı bir değerlendirme görevi oluşur; tarihi gelince amirin ekranına düşer ve doldurulmayan görev açık kalır. Doldurulan formlardaki "etkin değil" kararları ise otomatik olarak bir aksiyon listesine girer. Bu listenin ay sonunda birlikte gözden geçirilmesi, tek tek formlara bakmaktan çok daha faydalı bir tablo veriyor; yıl sonunda da yönetimin gözden geçirmesi için hazır bir girdi oluşuyor.
Denetçi etkinlik değerlendirmesine iki açıdan bakar. Birincisi kaydın varlığı: her eğitim için bir değerlendirme yapılmış mı, tarihleri makul mü. İkincisi ve asıl önemlisi, "etkin değil" çıkan kayıtların olup olmadığı. Bütün değerlendirmelerin etkin çıktığı bir sistem, ölçüm yapmıyor demektir; denetçi de bunu bilir. Yılda birkaç "etkin değil" kararı ve bunlara bağlı aksiyonlar görmek, kusursuz görünen bir dosyadan çok daha güven veriyor.
Nereden başlarsınız
Eğitim etkinlik değerlendirme formu, sistemin en kolay kurulan ama en çabuk terk edilen parçalarından biri. Bu yüzden kapsamı küçük tutarak başlamak, baştan büyük kurup altı ayda bırakmaktan çok daha iyi sonuç veriyor.
Bütün eğitimler için aynı anda kurmaya çalışmayın. Bu yıl verilen eğitimlerden üçünü seçin — tercihen bir düzeltici faaliyetten doğanları — ve yalnızca onlar için üçüncü kademe değerlendirme yapın. Formu bir sayfada tutun, dört gözlem ifadesi yazın, örnek yazma zorunluluğu koyun ve tarihini eğitim kaydında belirleyin. Üç eğitimden aldığınız sonuç, formun kendisini nasıl düzelteceğinizi de size gösterir.
Bir yıl sonra elinizde işleyen bir düzen olur ve o zaman kapsamı genişletirsiniz. Bu ölçekte yazılıma gerek yok; üç eğitim için takvime bir hatırlatma koymak yeter. Yazılım, eğitim ve katılımcı sayısı arttığında, yani takip edilecek görev sayısı yüzleri bulduğunda anlam kazanıyor. Sistemin bütününde eğitim tarafının nereye oturduğunu görmek için IATF 16949 sayfamızdaki yetkinlik başlığına bakabilirsiniz.