Denetçi eğitim kayıtlarını istiyor. Klasör açılıyor, imza föyleri geliyor. Föydeki tarih 12 Mart, plandaki tarih 26 Şubat; iki hafta fark var ve nedeni açıklanamıyor. Daha kötüsü föyün altında bir kutu var, "etkinlik değerlendirildi" yazıyor ve işaretli. Arkasında ne bir sınav kâğıdı ne bir gözlem formu var. Denetçi tek cümleyle bitiriyor: "Neye göre etkin dediniz?" Eğitim etkinliği nasıl ölçülür sorusunun cevabını yazmadan o kutuyu işaretlemek, bulguyu kendi elinizle hazırlamaktır.
Standart tam olarak ne istiyor
ISO 9001, yetkinlik başlığı altında üç şey ister: gerekli yetkinliği belirleyin, kişilerin bu yetkinliğe sahip olmasını sağlayın ve yetkinlik kazandırmak için aldığınız faaliyetin etkinliğini değerlendirin. Son cümledeki "etkinliğini değerlendirin" ifadesi, eğitimin yapıldığını değil işe yaradığını göstermenizi ister. Katılım föyü eğitimin yapıldığının kanıtıdır; etkinliğin kanıtı değildir.
Bu ayrım kağıt üzerinde küçük görünür ama denetimde en çok bulgu üreten yerlerden biri. Föy var, sertifika var, plan var — etkinlik yok. Eksik olan tek şey, eğitimden sonra kişinin işini farklı yaptığını gösteren bir kayıt.
Dört seviyede ölçüm
Eğitim değerlendirmesi dört seviyede düşünülür: tepki, öğrenme, davranış ve sonuç. Bu dörtlü ayrım eğitim literatüründen gelir ve imalat işletmesinde fazlasıyla işe yarar. Sorun, çoğu firmanın birinci seviyede kalıp diğer üçünü hiç ölçmemesi.
| Seviye | Ne ölçer | Yöntem | Zamanlama | Etkinlik kanıtı mı |
|---|---|---|---|---|
| 1. Tepki | Memnuniyet | Anket | Eğitim sonu | Hayır |
| 2. Öğrenme | Bilgi kazanımı | Sınav, uygulama testi | Eğitim sonu | Kısmen |
| 3. Davranış | İşbaşı uygulama | Saha gözlemi, kontrol listesi | 4-8 hafta sonra | Evet |
| 4. Sonuç | Süreç performansı | Hurda, ret, duruş verisi | 3 ay sonra | Evet, en güçlü |
Memnuniyet anketini etkinlik kanıtı sanmak en yaygın hata. Anket size eğitmenin iyi konuşup konuşmadığını söyler, operatörün kumpası doğru okuyup okumadığını söylemez. Hatta zorlayıcı ve gerçekten öğreten eğitimler çoğu zaman düşük memnuniyet puanı alır. Anketi eğitmen seçimini iyileştirmek için tutun, kayıt olarak dosyalayın, ama etkinlik hanesine yazmayın.
Hangi eğitime hangi yöntem
Her eğitime dört seviyeyi birden uygulamak ne mümkün ne de gerekli. Yöntemi eğitimin türüne ve riskine göre seçin. Aşağıdaki eşleştirmeyi bir otomotiv tedarikçisinde iki yıl boyunca kullandık.
| Eğitim | Ölçüm yöntemi | Kabul kriteri | Ne zaman |
|---|---|---|---|
| Operatör istasyon eğitimi | Uygulamalı yetkinlik onayı | Amir onayı + 20 parça hatasız | Eğitim sonu ve 4. hafta |
| Kumpas / mikrometre ile ölçüm | Kör numune okuma testi | 5 parçanın 5'i tolerans içinde | Eğitim sonu |
| İç denetçi eğitimi | Gözetimli denetime katılım | Baş denetçi değerlendirmesi | İlk denetimde |
| Kontrol planı / talimat revizyonu | Saha gözlemi | Yeni yönteme uygun çalışma | 2. hafta |
| Ürün güvenliği / özel karakteristik | Sınav + saha gözlemi | Sınav 80/100 ve gözlem uygun | Eğitim sonu ve 6. hafta |
| Genel farkındalık eğitimi | Kısa sınav | 60/100 | Eğitim sonu |
Kabul kriteri sütunu olmadan bu tablo işe yaramaz. "Değerlendirildi" demek yerine "5 parçanın 5'i tolerans içinde okundu" demek, hem sizi hem denetçiyi rahatlatır. Kriteri eğitim planlanırken yazın, eğitimden sonra değil; sonradan yazılan kriter her zaman sonucu doğrulayacak şekilde seçilir.
Ölçüm eğitimlerinde en işe yarayan yöntem kör numune testiydi. Beş parçayı önceden koordinat ölçüm cihazında ölçüp değerlerini kasada tutuyorduk. Eğitimden sonra operatöre aynı beş parçayı kumpasla okutup sonuçları karşılaştırıyorduk. Uygulama on dakika sürüyor ve tartışmaya kapalı bir sonuç veriyor. Kaynak sonrası ölçüm yapan bir istasyonda üç operatörün ikisi çapaklı yüzeyden okuma alıyordu; eğitimde anlatılmış ama uygulanmamıştı. Sınav kâğıdı bunu asla göstermezdi.
Süreç verisiyle doğrulama
En güçlü kanıt dördüncü seviyeden gelir: eğitimden sonra sürecin sayıları değişti mi? Burada dikkat edilecek nokta, doğru göstergeyi seçmek. Genel hurda oranı çok kabadır; eğitimin hedeflediği hata kodunu izleyin. Aşağıda kaynak gözenekliliği konusunda verilen bir işbaşı eğitiminin öncesi ve sonrası duruyor.
| Gösterge | Eğitim öncesi 8 hafta | Eğitim sonrası 8 hafta | Kriter |
|---|---|---|---|
| Gözeneklilik hurdası (adet) | 412 | 168 | %30 azalma |
| Gözeneklilik hurdası (ppm) | 3.180 | 1.290 | — |
| Yeniden işlem süresi (saat) | 96 | 41 | — |
| Aynı koddan müşteri şikâyeti | 2 | 0 | 0 |
| Toplam üretim (adet) | 129.500 | 130.200 | Karşılaştırılabilir |
Son satır kritik: üretim hacmi karşılaştırılabilir değilse adetler bir şey söylemez. Ppm cinsinden bakmak bu riski ortadan kaldırır. Bir de aynı dönemde başka bir değişiklik olup olmadığını sorun; kaynak teli değiştiyse ya da yeni bir fikstür devreye girdiyse düşüşü eğitime yazamazsınız. Değerlendirme kaydına "aynı dönemde başka değişiklik yoktur" cümlesini yazmak, üç yıl sonra kaydı okuyacak kişiye çok şey anlatır.
Değerlendirme kaydında ne bulunmalı
Eğitim etkinlik değerlendirme formu tek sayfayı geçmemeli ama şu alanlar bulunmalı: eğitimin adı ve tarihi, katılımcı, değerlendirmeyi yapan kişi ve görevi, değerlendirme tarihi, kullanılan yöntem, kabul kriteri, elde edilen sonuç, karar (etkin / kısmen etkin / etkin değil) ve etkin değilse alınacak aksiyon. Son iki alan çoğu formda yok ve formu değersiz kılan da bu.
Değerlendirmeyi kim yapacak sorusu da baştan çözülmeli. Saha davranışını gözleyecek kişi doğrudan amirdir; insan kaynakları süreci yürütür ama gözlemi kendisi yapamaz. Amir gözlemi tanımlı bir kontrol listesiyle yaptığında ve sonucu somut bir örnekle desteklediğinde kayıt sağlam olur. "Uygun çalışıyor" cümlesi yerine "26.03 vardiyasında üç parçanın ölçümü izlendi, kontrol planındaki yönteme uygun" cümlesi yazılsın.
Sonuç etkin değil çıktığında panik yapmayın; tam tersine, bu kayıt sisteminizin çalıştığını gösterir. İki yıl boyunca bütün eğitimleri etkin çıkan bir firma, ölçüm yapmıyor demektir. Etkinsiz sonuçta sebebi ayırt edin: kişi anlamadı mı, anladı ama uygulayamıyor mu, yoksa süreç uygulamaya izin vermiyor mu? Üçüncüsüyse iş eğitimde değil, talimatta ya da ekipmandadır ve orayı düzeltmeden aynı eğitimi tekrarlamak boşa zamandır. Bu durumda kaydı düzeltici faaliyet tarafına bağlayın.
Yeni personel ve görev değişikliğinde ölçüm
Etkinlik ölçümünün en yoğun olması gereken yer, yeni işe giren ve görev değiştiren personeldir. Buradaki risk en yüksek, kayıt ise genelde en zayıf. Yeni operatörün istasyona çıkması için tek şart oryantasyon föyüne imza atması olmamalı; kademeli bir onay kurgusu gerekir.
Kullandığımız kurgu üç adımlıydı. Birinci gün talimat okuma ve gösterim, ilk hafta gözetim altında çalışma, ikinci hafta sonunda uygulamalı onay. Onay sırasında amir yirmi parçayı izler ve kontrol listesindeki her maddeyi işaretler: doğru sıra, doğru fikstür, doğru ölçüm noktası, doğru kayıt. Bu yirmi parçanın sonuçları da tutulur. Onay verilmeyen operatör istasyonda tek başına çalıştırılmaz ve bu kural vardiya çizelgesine yansır.
Görev değişikliğinde de aynı yol izlenir, çoğu firma burada gevşer. On yıllık bir operatörün başka bir istasyona geçmesi, o istasyon için yeni olduğu gerçeğini değiştirmez. Deneyimin getirdiği tek avantaj sürenin kısalmasıdır, adımın atlanması değil. Denetimde bu ayrımın kaydını en çok vardiya çizelgeleriyle yetkinlik matrisini karşılaştırarak buluyorum: çizelgede o istasyonda görünen ama matriste seviye 0 ya da 1 olan bir isim, hem eğitim hem süreç kontrolü tarafında soru açar. İç denetim programınızı kurarken bu karşılaştırmayı bir kontrol maddesi olarak denetim soru listenize ekleyin.
Operatör yetkinlik onayıyla bağlantısı
İmalatta etkinlik ölçümünün en somut hâli operatör onay sürecidir. Bir operatörün bir istasyonda tek başına çalışabilmesi için eğitimi almış olması yetmez; uygulamalı onaydan geçmiş olması gerekir. Onay kaydı yetkinlik matrisini günceller ve matris de kimin nerede çalışabileceğini belirler. Bu zincir kurulduğunda etkinlik ölçümü ayrı bir iş olmaktan çıkar, üretimin doğal parçası olur.
Otomotivde bu zincir ayrıca beklenir. IATF 16949, ürün kalitesini etkileyen işleri yapan personelin yetkinliğini ve işbaşı eğitimini vurgular; özellikle yeni ya da görev değiştiren personel için işbaşı eğitiminin sağlanmasını ve bu personelin ürün uygunsuzluğunun müşteri üzerindeki etkisi konusunda bilgilendirilmesini ister. Ayrıca iç denetçilerin yetkinliğinin gösterilebilmesi de aynı çerçevenin parçasıdır. Standardın bütünü için IATF 16949 sayfamıza bakın; hangi eğitimlerin planlanacağı tarafını ise eğitim ihtiyaç analizi yazısında ele almıştık.
Denetimde izlediğim yol şu: plandan bir eğitim seçerim, katılım föyünü isterim, föydeki bir kişiyi seçerim ve o kişinin çalıştığı istasyona giderim. Orada iki soru sorarım — biri kişiye, biri amirine. Kişiye eğitimde öğrendiği yöntemi uygulatırım; amire "bu kişinin etkin olduğuna nasıl karar verdiniz" diye sorarım. Cevap bir gözlem kaydına ya da bir teste dayanıyorsa geçer. Dayanmıyorsa, o föydeki kırk kişinin tamamının değerlendirmesi şüpheli hâle gelir. Bir de tarihe bakarım: föy tarihiyle plan tarihi tutmuyorsa bunun bir açıklaması olmalı, plan revizyonu görmek isterim.
Toplu eğitimlerde ne yapacaksınız?
Kırk kişiye verilen bir farkındalık eğitiminde kırk saha gözlemi yapamazsınız; kimse yapamaz. Toplu eğitimlerde eğitim etkinliği nasıl ölçülür, cevabı tek kelime: örnekleme. Katılımcılardan makul bir örneklem seçin — yirmi kişilik gruplarda dört beş kişi yeterli olur — ve seçimi rastgele yapın. Amirlerin "en iyi bildiğini" seçmesine izin verirseniz sonuç her zaman olumlu çıkar ve ölçüm anlamını yitirir.
Örneklem kuralını yazılı hâle getirin: kaç kişi, nasıl seçilecek, hangi kriterle değerlendirilecek. Örneklemdeki kişilerden biri kriteri karşılamıyorsa ne olacağını da baştan tanımlayın. Kullandığımız kural şuydu: örneklemin dörtte birinden fazlası kriteri karşılamıyorsa eğitim grubun tamamı için etkin sayılmaz ve tekrarlanır. Bu kural olmadan "üç kişiden biri olmadı ama genel olarak iyi" gibi bir değerlendirmeye düşülüyor.
Zorunlu ve yasal eğitimlerde ise örnekleme gitmeyin. Ürün güvenliğine, özel karakteristiklere ya da yasal bir şarta dayanan eğitimlerde her katılımcı tek tek değerlendirilir. Burada maliyet tartışması yapmayın; bu eğitimlerin sayısı zaten sınırlıdır ve bir sahaya kaçış olayının bedeli, kırk kişiyi tek tek değerlendirmenin bedelinin yanında konuşulamaz. Eğitim etkinliği nasıl ölçülür, ölçünün her eğitimde aynı olmadığını kabul ettiğinizde netleşiyor: kaynağı riskin bulunduğu yere harcıyorsunuz ve denetimde bu ayrımı yaptığınızı gösterebiliyorsunuz.
Kaydı sistemde yaşatmak
Etkinlik değerlendirmesinin en büyük düşmanı unutulmasıdır. Eğitim yapılır, föy dosyalanır ve dört hafta sonra kimse gözlem yapmayı hatırlamaz. Bu yüzden değerlendirme tarihini eğitim planlanırken belirleyin ve takvime koyun; hatırlatıcı olmadan bu adım hep düşer.
Kayıtlar tek sistemde tutulduğunda zincir kendiliğinden kapanır: eğitim kaydı açılır, değerlendirme tarihi geldiğinde amire iş düşer, sonuç girildiğinde yetkinlik matrisi güncellenir ve etkin değil sonucu bir aksiyon açar. PaKalite'de eğitim, yetkinlik matrisi ve düzeltici faaliyet aynı veri tabanında olduğu için bu zincir kurulabiliyor; bir eğitimin hangi uygunsuzluktan doğduğu ve sonucunda o uygunsuzluğun tekrar edip etmediği aynı ekranda görülüyor.
Küçük ölçekte bunun için yazılım gerekmez; bir takvim hatırlatması ve iki sayfalık form yeterlidir. Ama şu kuralı ölçek fark etmeksizin uygulayın: değerlendirme yapılmadan eğitim kaydı kapanmasın. Bu tek kural, eğitim etkinliği nasıl ölçülür başlığını prosedür maddesi olmaktan çıkarıp gerçek bir kontrole çeviriyor. Ölçüm göstergelerinizin sağlam durması içinse kalite yönetimi sayfamızdaki izleme çerçevesine bakabilirsiniz.