ROC Gilde Opleidingen ONDERZOEK KWALITEIT EXAMINERING

Transcriptie

1 ROC Gilde Opleidingen ONDERZOEK KWALITEIT EXAMINERING Utrecht, februari 2012

2 p. 2 van 40

3 Vaststelling rapport Dit rapport bevat de resultaten van het onderzoek naar de kwaliteit van de examinering dat op 16 en 17 juni én 6 en 7 oktober 2011 plaats vond bij de Stichting Gilde Opleidingen (hierna: ROC Gilde Opleidingen) te Venlo en Roermond. Het rapport is vastgesteld op 20 februari Dit rapport mag alleen in zijn volledige vorm vermenigvuldigd worden zonder toestemming van de inspectie of de instelling. p. 3 van 40

4 p. 4 van 40

5 Inhoudsopgave Samenvatting 7 1 Inleiding Regeling standaarden examenkwaliteit mbo Onderzochte opleidingen Inkoop Toezicht op talen en Leren, Loopbaan en Burgerschap Uitgebreide informatie over het onderzoek Onderbouwing van de beoordeling 10 2 Kwaliteit examinering bij Techniek Algemeen beeld Examenkwaliteit (standaard 3 en 4) Afname, beoordeling en diplomering (standaard 5) Vertrouwen beroepenveld (standaard 1), deskundigheid betrokkenen (standaard 2) en borging kwaliteit (standaard 6) Naleving wettelijke vereisten (standaard 7) 15 3 Kwaliteit examinering bij Hospitality en Wellness Algemeen beeld Examenkwaliteit (standaard 3 en 4) Afname, beoordeling en diplomering (standaard 5) Vertrouwen beroepenveld (standaard 1), deskundigheid betrokkenen (standaard 2) en borging kwaliteit (standaard 6) Naleving wettelijke vereisten (standaard 7) 22 4 Kwaliteit examinering bij Educatie en GPO Algemeen beeld Examenkwaliteit (standaard 3 en 4) Afname, beoordeling en diplomering (standaard 5) Vertrouwen beroepenveld (standaard 1), deskundigheid betrokkenen (standaard 2) en borging kwaliteit (standaard 6) Naleving wettelijke vereisten (standaard 7) 26 5 Conclusies en vervolgtoezicht 27 Bijlage 1 Examenstandaarden en normering 29 Bijlage 2 Exameninstrumenten talen competentiegerichte opleidingen 35 p. 5 van 40

6 p. 6 van 40

7 Samenvatting Dit rapport bevat de resultaten van het onderzoek naar de kwaliteit van de examinering dat op 16 en 17 juni én 6 en 7 oktober 2011 is uitgevoerd bij ROC Gilde Opleidingen. Resultaat van het onderzoek De Inspectie van het Onderwijs (hierna: inspectie) heeft voor het onderzoek naar de kwaliteit van de examinering een aselecte steekproef van opleidingen getrokken. De beoordeling per onderzochte opleiding staat in tabel 0.1. Tabel 0.1 Beoordeling examenkwaliteit bij ROC Gilde Opleidingen Standaard Vertrouwen beroepenveld Borging deskundigheid Inhoudelijke uitstroomeisen Toetstechnische kwaliteit Afname, beoordeling, diplomering /4 3/4 Borging examinering Naleving wettelijke eisen Nederlands standaard 3 en 4 Moderne vreemde talen standaard 3 en 4 Eindoordeel: voldoende of onvoldoende examenkwaliteit Exameneenheid Techniek Medewerker schilderen (Schilder), BBL V V V V V V V V - V Autotechniek (Technisch specialist personenauto's), BBL Installeren (Eerste monteur werktuigkundige installaties), BOL Exameneenheid Hospitality en Wellness V V V V V V V V V V V V V V V V V V - V Voetverzorger, BOL V V V V V O V - - V Reizen (Manager verkoop reizen), BOL O V V V O O V - V O Exameneenheid Educatie en GPO Metaalbewerken (Metaalbewerker), BBL V O V V V V V V - V O = onvoldoende / V = voldoende / - = n.v.t. p. 7 van 40

8 Exameneenheid Techniek Eindoordeel voldoende De examinering van alle onderzochte opleidingen is van voldoende kwaliteit. Exameneenheid Hospitality en Wellness Eindoordeel voldoende De examinering van de onderzochte opleiding Voetverzorger is van voldoende kwaliteit. Eindoordeel onvoldoende De examinering van de onderzochte opleiding Reizen (Manager verkoop reizen) is van onvoldoende kwaliteit. De examenkwaliteit van deze opleiding is onvoldoende, omdat het vertrouwen van het beroepveld in de examenkwaliteit in onvoldoende mate is aangetoond (standaard 1), de afname en beoordeling van de examens niet deugdelijk verlopen (standaard 5) en de examinering onvoldoende is geborgd (standaard 6). Exameneenheid Educatie en GPO Eindoordeel voldoende De examinering van de onderzochte opleiding is van voldoende kwaliteit. Beoordelingskader inclusief normering Het onderzoek is uitgevoerd aan de hand van de examenstandaarden en de bijbehorende normering, die zijn vastgesteld in de ministeriële 'Regeling standaarden examenkwaliteit mbo' (zie bijlage 1). De examenkwaliteit is voldoende wanneer vijf van de zeven standaarden voldoende zijn, waaronder in elk geval standaard 3, 4, 5 en 7. Maximaal twee van de standaarden 1, 2 en 6 mogen onvoldoende zijn om tot een voldoende eindoordeel te komen. Het oordeel voor de talen (CEF en referentie niveau) telt dit onderzoeksjaar niet mee in het eindoordeel van de opleiding. Vervolgtoezicht bij voldoende examenkwaliteit Bij de opleidingen waarvan de examenkwaliteit voldoende is, is het onderzoeksjaar hierbij afgerond. Vervolgtoezicht bij onvoldoende examenkwaliteit Bij de opleidingen waarvan geconstateerd is dat de examenkwaliteit onvoldoende is, doet de inspectie een melding aan de minister van OCW. Daarnaast intensiveert de inspectie het toezicht op de examens bij deze opleidingen. De instelling krijgt de gelegenheid de examinering te verbeteren waarna de inspectie bij deze opleidingen een onderzoek naar de kwaliteitsverbetering uitvoert. Over dit onderzoek maakt de inspectie te zijner tijd nadere afspraken met de instelling. p. 8 van 40

9 1 Inleiding In het middelbaar beroepsonderwijs is de onderwijsinstelling verantwoordelijk voor de examenkwaliteit van de beroepsopleidingen. De inspectie houdt binnen de sector bve toezicht op de kwaliteit van deze examinering. 1.1 Regeling standaarden examenkwaliteit mbo De examenkwaliteit is beoordeeld aan de hand van de zeven standaarden, die in het Toezichtkader bve 2009 staan. Daarnaast is de Aanvulling voor 2010 op het Toezichtkader bve 2009 als kader gebruikt. De standaarden en de normering zijn vastgesteld in de ministeriële 'Regeling standaarden examenkwaliteit mbo'. In bijlage 1 staan de examenstandaarden met de bijbehorende criteria en portretten. In de portretten is beschreven wanneer toereikend aan een criterium is voldaan. 1.2 Onderzochte opleidingen Voor het onderzoek naar de kwaliteit van examinering is een aselecte steekproef getrokken uit het aanbod van eindtermgerichte en/of competentiegerichte opleidingen (zie tabel 1.1). Tabel 1.1 Onderzochte opleidingen bij ROC Gilde Opleidingen Crebo Naam opleiding Leerweg Deelkwalificatie(s)* Exameneenheid en plaatsnaam bezochte locatie(s) Medewerker schilderen (Schilder) BBL Techniek, Roermond Autotechniek (Technisch BBL Techniek, Roermond specialist personenauto's) Installeren (Eerste monteur werktuigkundige installaties) BOL Techniek, Roermond Voetverzorger BOL Reizen (Manager verkoop reizen) BOL Metaalbewerken (Metaalbewerker) BBL * alleen van toepassing bij eindtermgerichte opleidingen Hospitality en Wellness, Venlo Hospitality en Wellness, Venlo Educatie en GPO, Roermond Algemene opmerking Hoewel de opleiding Horeca ondernemer/manager deel uitmaakte van de steekproef heeft het College van Bestuur van Gilde opleidingen tijdens het onderzoek verklaard heeft dat deze opleiding niet meer actief is. Daarom is deze opleiding niet onderzocht. Hoewel de opleiding Financiële beroepen (Assistent accountant) deel uitmaakte van de steekproef bleek tijdens het onderzoek dat er nog niet gediplomeerd is. Daarom is deze opleiding niet onderzocht. 1.3 Inkoop De instelling heeft tijdens de inventarisatiefase aangegeven of er sprake is van (deel)inkoop van en/of -diensten bij een leverancier en zo ja, wat er wordt ingekocht. Het (deels) ingekochte exameninstrumentarium wordt bij de onderwijsinstelling onderzocht, aangezien de leveranciers geen toezichtobject zijn voor de inspectie. p. 9 van 40

10 1.4 Toezicht op talen en Leren, Loopbaan en Burgerschap Bij de competentiegerichte opleidingen waarvan de deelnemers gestart zijn in cohort 2007 of later, onderzoekt de inspectie de voor Nederlands en de moderne vreemde talen. Daarnaast is bij deze opleidingen ook de verantwoording over Leren, Loopbaan en Burgerschap (ook wel: LLB) onderzocht. Voor het toezicht op talen is naast het Toezichtkader bve, ook de brief van de staatssecretaris van OCW van 22 december 2008 (kenmerk BVE/2008/88699) en de brief van 29 januari 2010 (kenmerk BVE/Stelsel ) van toepassing. Voor het toezicht op LLB is het brondocument Leren, Loopbaan en Burgerschap 2007 van toepassing. De instelling levert een verantwoordingsdocument aan voor LLB. 1.5 Uitgebreide informatie over het onderzoek Uitgebreide informatie over de standaarden, de normering, het toezicht op talen, de werkwijze bij inkoop en de opzet van het onderzoek treft u onder andere aan in: het Toezichtkader bve 2009; de Aanvulling voor 2010 op het Toezichtkader bve 2009; het brondocument Leren, Loopbaan en Burgerschap 2007 (inclusief het addendum Nederlands in het kader van burgerschap 2007); de brief van de staatssecretaris van OCW van 22 december 2008 (kenmerk BVE/2008/88699); de brief van de staatssecretaris van OCW van 29 januari 2010 (kenmerk BVE/Stelsel ); Wet Referentieniveaus; website inspectie: Onderbouwing van de beoordeling De resultaten van het onderzoek naar de examenkwaliteit zijn gebaseerd op de aangeleverde zelfbeoordeling inclusief de onderliggende documenten, het onderzoek naar de en de gesprekken met vertegenwoordigers van de instelling. De voorlopige bevindingen van het onderzoek zijn ter afsluiting van het bezoek teruggekoppeld aan het College van Bestuur. In deze rapportage leest u de onderbouwing van het eindoordeel per opleiding. De conclusies van het onderzoek en, indien van toepassing, het vervolgtoezicht staan in het laatste hoofdstuk vermeld. p. 10 van 40

11 2 Kwaliteit examinering bij Techniek In dit hoofdstuk staat de toelichting van de inspectie op de beoordeling van de examenkwaliteit per onderzochte opleiding. Indien het oordeel onvoldoende is, wordt onderbouwd op welke bevindingen dit oordeel is gebaseerd. 2.1 Algemeen beeld In tabel 2.1 staat de beoordeling per onderzochte opleiding. Tabel 2.1 Examenkwaliteit onderzochte opleidingen Standaard Vertrouwen beroepenveld Borging deskundigheid Inhoudelijke uitstroomeisen Toetstechnische kwaliteit Afname, beoordeling, diplomering /4 3/4 Borging examinering Naleving wettelijke eisen Nederlands standaard 3 en 4 Moderne vreemde talen standaard 3 en 4 Eindoordeel: voldoende of onvoldoende examenkwaliteit Medewerker schilderen (Schilder), BBL V V V V V V V V - V Autotechniek (Technisch specialist personenauto's), BBL Installeren (Eerste monteur werktuigkundige installaties), BOL O = onvoldoende / V = voldoende / - = n.v.t. V V V V V V V V V V V V V V V V V V - V Toelichting bij beoordeling examenkwaliteit De examinering van alle onderzochte opleidingen is van voldoende kwaliteit. Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De examenprocessen van afname, beoordeling en diplomering verlopen deugdelijk en de integrale examenkwaliteit is voldoende geborgd. Het beroepenveld heeft vertrouwen in de examenkwaliteit. Betrokkenen bij de examinering zijn voldoende deskundig. De onderzochte opleiding voldoet aan alle wettelijke vereisten rondom examinering. Talen Bij alle competentiegerichte opleidingen zijn ook de voor Nederlands en, waar van toepassing, Engels beoordeeld. Het eindoordeel voor beide talen is voldoende. p. 11 van 40

12 2.2 Examenkwaliteit (standaard 3 en 4) De zijn beoordeeld op de standaarden over de uitstroomeisen (standaard 3) en de toetstechnische eisen (standaard 4). Bij de uitstroomeisen beoordeelt de inspectie de dekkingsgraad en cesuur. Bij de toetstechnische eisen beoordeelt de inspectie de informatie voor de deelnemer, de afnamecondities en de beoordelingsvoorschriften Medewerker schilderen (Schilder), BBL Conclusie en toelichting beroepsgerichte Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De dekkingsgraad en de cesuur zijn voldoende. De informatie voor de deelnemer, de afnamecondities en het beoordelingsvoorschrift zijn eveneens voldoende. Het exameninstrumentarium is ingekocht bij leverancier Savantis en onveranderd ingezet. De inspectie heeft dit instrumentarium op een eerder moment onderzocht en voldoende bevonden. Het oordeel voor het ingekochte exameninstrumentarium is overgenomen in dit rapport. Conclusie en toelichting talen De opleiding Medewerker schilderen (Schilder), BBL is een mbo-opleiding op niveau 2. De inspectie heeft de van Nederlands op CEF-niveau onderzocht. Het eindoordeel voor Nederlands is voldoende. Moderne vreemde talen maakt geen onderdeel uit van het kwalificatiedossier. De Nederlands zijn ingekocht bij leverancier Malmberg en zijn ongewijzigd ingezet. De voor de taalvaardigheden Luisteren, Lezen, Spreken en Schrijven voldoen aan de uitstroom- en toetstechnische eisen. Het exameninstrument voor de taalvaardigheid Gesprekken voeren voldoet niet aan de uitstroomeisen en voldoet wel aan de toetstechnische eisen. Voor de opdrachten voor de taalvaardigheid Gesprekken voeren geldt dat de deelnemer inzicht heeft in een uitgewerkt gespreksverloop. Hierdoor wordt de deelnemer in onvoldoende uitgedaagd om de taalvaardigheid op het vereiste niveau te tonen. Daarnaast is dat de voorbereidingstijd voor de opdrachten Gesprekken voeren te kort, waardoor deze niet realistisch is. De geconstateerde tekortkomingen betreffende de opdracht Gesprekken voeren zijn inmiddels hersteld door de levancier Malmberg. Deze verbeterde opdracht wordt inmiddels ingezet door de instelling. In bijlage 2 staat de tabel met daarin de oordelen Autotechniek (Technisch specialist personenauto's) BBL Conclusie en toelichting beroepsgerichte Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De dekkingsgraad en de cesuur zijn voldoende. De informatie voor de deelnemer, de afnamecondities en het beoordelingsvoorschrift zijn eveneens voldoende. Het exameninstrumentarium is voor een deel ingekocht bij leverancier STEM/IBKI en onveranderd ingezet, en voor een deel zelf ontwikkeld. Het deel dat bij STEM/IBKI wordt ingekocht is door de inspectie op een eerder moment onderzocht en voldoende beoordeeld. Het oordeel voor dit ingekochte deel van het exameninstrumentarium is overgenomen in dit rapport. De zelfontwikkelde instrumenten sluiten aan bij het p. 12 van 40

13 ingekochte deel en passen qua inhoud en toetsvorm bij de werkprocessen. De onderlinge weging van de opdrachten doet geen afbreuk aan de cesuur. De bevatten voldoende informatie voor de deelnemer en de afnamecondities zijn duidelijk beschreven. De zijn voorzien van correcte beoordelingvoorschriften. Conclusie en toelichting talen De opleiding Autotechniek (Technisch specialist personenauto's), BBL is een mboopleiding op niveau 4. De inspectie heeft de van Nederlands en Engels op CEF-niveau onderzocht. Het eindoordeel voor Nederlands en Engels is voldoende. Nederlands De examens zijn ingekocht bij Leverancier Malmberg en worden onveranderd ingezet. De inspectie heeft dit exameninstrumentarium op een eerder moment onderzocht en voldoende bevonden. Het oordeel voor het ingekochte exameninstrumentarium is overgenomen in dit rapport. Engels De voor de taalvaardigheden Luisteren, Lezen en Schrijven voldoen aan de uitstroom- en toetstechnische eisen. De voor de taalvaardigheden Gesprekken voeren en Spreken voldoen niet aan de uitstroom eisen en wel voldoen aan de toetstechnische eisen. De opdrachten voor de taalvaardigheden Gesprekken voeren en Spreken dagen de deelnemer onvoldoende uit de taalvaardigheid op het juiste niveau te tonen. Bijvoorbeeld naspreken van een uitgewerkt gespreksverloop (Gesprekken voeren) of de relatief beperkende opsomming van onderwerpen in de opdrachten voor Spreken. Daarnaast is de voorbereidingstijd voor de opdrachten voor Gesprekken voeren en Spreken te kort dan wel niet realistisch. De geconstateerde tekortkomingen betreffende de opdrachten Gesprekken voeren en Spreken zijn inmiddels hersteld door de levancier Malmberg. Deze verbeterde opdrachten worden inmiddels ingezet door de instelling. In bijlage 2 staan de tabellen met daarin de oordelen Installeren (Eerste monteur werktuigkundige installaties), BOL Conclusie en toelichting beroepsgerichte Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen en aan de toetstechnische kwaliteitseisen. De dekkingsgraaden de cesuur zijn voldoende. De informatie voor de deelnemer, de afnamecondities en het beoordelingsvoorschrift zijn eveneens voldoende. De kwalificerende examinering bestaat uit een proeve van bekwaamheid die afgenomen wordt in het opleidingsbedrijf (simulatie). In het opleidingsbedrijf zijn drie huizen met een verschillende installatie gesitueerd. Iedere deelnemer (maximaal 6 monteurs per groep) voert één separate opdracht uit. De opdracht dekt de tien werkprocessen behorende bij de kerntaak Installeert technische installaties volledig af. De cesuur in de opdracht ligt op een niveau, waarop de deelnemer gemiddeld voldoet aan de vereisten die in de opdracht zijn verwerkt. Er is sprake van een evenwichtige punten toekenning. De opdracht bevat voldoende informatie op grond waarvan de deelnemer weet wat van p. 13 van 40

14 hem verlangd wordt. De opdracht wordt beoordeeld door twee beoordelaars (één van school en één afkomstig uit het bedrijfsleven). Hiertoe hanteren zij een beoordelingsformulier met ingekorte prestatie indicatoren en vier kritische beoordelingsindicatoren. Deze beoordelingscriteria passen bij de prestatie indicatoren zoals die vermeld zijn in het betreffende kwalificatiedossier. Conclusie en toelichting talen De opleiding Installeren (Eerste monteur werktuigkundige installaties), BOL is een mbo-opleiding op niveau 3. De inspectie heeft de van Nederlands op CEF-niveau onderzocht. Het eindoordeel voor Nederlands is voldoende. De Nederlands zijn ingekocht bij examenleverancier Malmberg en ongewijzigd ingezet. De inspectie heeft de van Nederlands op een eerder onderzocht en voldoende bevonden. Het oordeel voor het ingekochte exameninstrumentarium is overgenomen in dit rapport In bijlage 2 staat de tabel met daarin de oordelen. 2.3 Afname, beoordeling en diplomering (standaard 5) De deugdelijkheid van de afname, de beoordeling en de diplomering is beoordeeld op het niveau van de opleiding. Als er geen opleidingen zijn gespecificeerd, dan is de onderstaande conclusie met bijbehorende toelichting van toepassing op alle onderzochte opleidingen. Conclusie en toelichting De onderzochte opleidingen voldoen aan de eisen van deze standaard. De afname, de beoordeling en de diplomering verlopen deugdelijk. Het verloop van de afname en beoordeling staat beschreven in het Handboek examinering. De subexamencommissies hanteren protocollen bij iedere afname en beoordeling. Docenten en vertegenwoordigers van Kenteq bezoeken regelmatig de externe afnamelocaties om het verloop van de examinering te controleren. Het examenbureau controleert de verwerking van de resultaten en diplomering/certificering is een vast agendapunt van de examencommissie. Daarnaast wordt de deugdelijkheid van de administratieve processen zoals certificering/diplomering bewaakt door het Servicecentrum. Leren, Loopbaan en Burgerschap De exameneenheid Techniek heeft in een verantwoordingsdocument vastgelegd hoe zij de examinering voor de zeven kerntaken van het brondocument Leren, Loopbaan en Burgerschap heeft ingericht. 2.4 Vertrouwen beroepenveld (standaard 1), deskundigheid betrokkenen (standaard 2) en borging kwaliteit (standaard 6). Het vertrouwen van het beroepenveld, de deskundigheid van de betrokkenen en de borging van de examenkwaliteit is beoordeeld op het niveau van de opleidingen. Als er geen opleidingen zijn gespecificeerd, dan zijn de onderstaande conclusies met bijbehorende toelichting van toepassing op alle onderzochte opleidingen. Conclusie en toelichting vertrouwen van het beroepenveld (standaard 1) De onderzochte opleidingen voldoen aan de eisen van deze standaard. Het beroepenveld heeft voldoende vertrouwen in de examenkwaliteit. p. 14 van 40

15 De afdelingen werken nauw samen met het verwante beroepenveld. Voor de opleidingen opleiding Medewerker schilderen (Schilder), BBL en Autotechniek (Technisch specialist personenauto's), BBL worden de examens afgenomen in de examencentra van de leveranciers en ook voor een deel in de reële beroepspraktijk. Voor de opleiding Installeren (Eerste monteur werktuigkundige installaties), BOL wordt het examen afgenomen in het leerbedrijf Installatie Werk Zuid Oost. Eenmaal per jaar wordt een leermeesteravond georganiseerd. Tijdens deze leermeesteravond is er gelegenheid feedback te geven op de examinering. Bureau Werk en Stage is het Gildeloket voor alle bedrijven. Hier worden de opmerkingen en vragen van de bedrijven verwerkt en ook gerapporteerd aan de betreffende examencommissie. Uit het jaarlijks uitgevoerde onderzoek naar de tevredenheid van de bpv-bedrijven uitvoeren, blijkt dat het bedrijfsleven voldoende vertrouwen heeft in de kwaliteit van examinering. Conclusie en toelichting deskundigheid van betrokkenen (standaard 2) De onderzochte opleidingen voldoen aan de eisen van deze standaard. De betrokkenen zijn voldoende deskundig. In het Handboek examinering zijn de kwaliteitseisen die gesteld worden aan betrokkenen opgenomen. Elk jaar volgen er docenten scholingen gericht op examentechnische zaken. Daarnaast wordt jaarlijks een deel van de docenten in de gelegenheid gesteld een bedrijfsstage te volgen. Verificatie van de deskundigheid van de externe betrokkenen vindt veelal plaats met betrokkenheid van Kenteq en leidt regelmatig tot scholing van de betrokkenen. Conclusie en toelichting borging van examinering (standaard 6) De onderzochte opleidingen voldoen aan de eisen van deze standaard. De examinering is voldoende geborgd. Tijdens de jaarlijkse zelfevaluatie examinering buigen de betrokkenen zich kritisch over de en de afgenomen examens. Bij het opstellen van de nieuwe OER worden verbetervoorstellen verwerkt voor het nieuwe cohort. Het OER wordt besproken met de werkgevers die zitting hebben in de adviesraad van de sector Techniek. Savantis heeft een audit uitgevoerd bij de opleiding Medewerker schilderen (Schilderen), BBL en IBKI heeft een audit uitgevoerd bij de opleiding Autotechniek (Technisch specialist personenauto s). BBL. Het samenwerkingsverband IZWO wordt betrokken bij de evaluatie over de kwaliteit van examens van de opleiding Installeren (Eerste monteur werktuigbouwkundige installaties). BOL. De dienst Innovatie en Kwaliteit van Gilde Opleidingen heeft interne audits uitgevoerd bij de sector Techniek. De bevindingen hebben geleid tot verbetering van de examenorganisatie. 2.5 Naleving wettelijke vereisten (standaard 7) De inspectie beoordeelt of de instelling de eisen rondom examinering naleeft, zoals die in de WEB zijn opgenomen. Als er geen opleidingen zijn gespecificeerd, dan is de onderstaande conclusie met bijbehorende toelichting van toepassing op alle onderzochte opleidingen. Conclusie: De opleidingen voldoen aan de wettelijke vereisten betreffende: informatie over het examen (in OER of ander document)(art en art van de Wet educatie en beroepsonderwijs); de examencommissie (waaronder art en art vijfde lid van de Wet educatie en beroepsonderwijs); de commissie van beroep examens (art en art van de Wet educatie en beroepsonderwijs); p. 15 van 40

16 de openbare verantwoording (art van de Wet educatie en beroepsonderwijs). p. 16 van 40

17 3 Kwaliteit examinering bij Hospitality en Wellness In dit hoofdstuk staat de toelichting van de inspectie op de beoordeling van de examenkwaliteit per onderzochte opleiding. Indien het oordeel onvoldoende is, wordt onderbouwd op welke bevindingen dit oordeel is gebaseerd. 3.1 Algemeen beeld In tabel 3.1 staat de beoordeling per onderzochte opleiding. Tabel 3.1 Examenkwaliteit onderzochte opleidingen Standaard Vertrouwen beroepenveld Borging deskundigheid Inhoudelijke uitstroomeisen Toetstechnische kwaliteit Afname, beoordeling, diplomering /4 ¾ Borging examinering Naleving wettelijke eisen Nederlands standaard 3 en 4 Moderne vreemde talen standaard 3 en 4 Eindoordeel: voldoende of onvoldoende examenkwaliteit Voetverzorger, BOL V V V V V O V - - V Reizen (Manager verkoop reizen), BOL O V V V O O V - V O O = onvoldoende / V = voldoende / - = n.v.t. Algemene opmerking Voor de opleiding Voetverzorger, BOL geldt dat de deelnemers zijn gediplomeerd zonder dat deze in aanmerking gebracht zijn voor bekostiging. Toelichting bij beoordeling examenkwaliteit De examinering van de opleiding Voetverzorger, BOL is van voldoende kwaliteit. Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De examenprocessen van afname, beoordeling en diplomering verlopen deugdelijk. Het beroepenveld heeft vertrouwen in de examenkwaliteit. Betrokkenen bij de examinering zijn voldoende deskundig. De onderzochte opleiding voldoet aan alle wettelijke vereisten rondom examinering. De integrale examenkwaliteit (standaard 6) is onvoldoende geborgd. De examinering van de opleiding Reizen (Manager verkoop reizen), BOL is van onvoldoende kwaliteit omdat het vertrouwen van het beroepenveld in de examenkwaliteit in onvoldoende mate is aangetoond (standaard 1), de afname en beoordeling van examens niet de deugdelijk verlopen (standaard 5) en de integrale examenkwaliteit onvoldoende is geborgd (standaard 6). Talen p. 17 van 40

18 Bij de opleiding Manager verkoop reizen zijn ook de voor Nederlands en Engels beoordeeld. Voor Nederlands betreft het instrumenten op referentieniveau. In dat geval beoordeelt de inspectie wel de afzonderlijke, maar spreekt geen eindoordeel uit. Voor Engels zijn de op CEF-niveau onderzocht. Het eindoordeel is voldoende. 3.2 Examenkwaliteit (standaard 3 en 4) De zijn beoordeeld op de standaarden over de uitstroomeisen (standaard 3) en de toetstechnische eisen (standaard 4). Bij de uitstroomeisen beoordeelt de inspectie de dekkingsgraad en cesuur. Bij de toetstechnische eisen beoordeelt de inspectie de informatie voor de deelnemer, de afnamecondities en de beoordelingsvoorschriften Voetverzorger, BOL Conclusie Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. Deze conclusie is gebaseerd op de beoordeling van de onderzochte deelkwalificaties. In tabel 3.2 ziet u een overzicht van de beoordeling op het niveau van de deelkwalificatie. De toelichting op deze beoordeling vindt u onder de tabel. Tabel 3.2 Beoordeling deelkwalificaties Voetverzorger, BOL Standaard Inhoudelijke uitstroomeisen Toetstechnische kwaliteit Diagnose stellen, analyseren en behandelingsplan opstellen voetverzorging V V Hygiëne, arbo en milieu V V Maatschappelijk culturele vorming 1 V V Sociale communicatieve en commerciële vaardigheden V V O = onvoldoende / V = voldoende / - = n.v.t. p. 18 van 40

19 Toelichting beoordeling deelkwalificaties Diagnose stellen, analyseren en behandelingsplan opstellen voetverzorging, Hygiëne, arbo en milieu, Maatschappelijk culturele vorming 1 en Sociale communicatieve en commerciële vaardigheden Het exameninstrumentarium voor deelkwalificaties Diagnose stellen, analyseren en behandelingsplan opstellen voetverzorging, Hygiëne, arbo en milieu en Maatschappelijk culturele vorming 1 is ingekocht bij leverancier Philyra en de gerepareerde versies zijn ingezet. Dit ingekochte exameninstrumentarium is door de inspectie op een eerder moment onderzocht en voldoende bevonden. Het oordeel is overgenomen in het rapport. Voor de deelkwalificatie Sociale communicatieve en commerciële vaardigheden geldt dat het exameninstrumentarium ingekocht is bij leverancier Philyra en gewijzigd ingezet is. Dit exameninstrumentarium is door de inspectie onderzocht en voldoende bevonden Reizen (Manager verkoop reizen), BOL Conclusie en toelichting beroepsgerichte Het exameninstrumentarium voldoet aan de uitstroomeisen en de toetstechnische eisen. De opleiding Reizen (Manager verkoop reizen), BOL sluit aan op de niveau 3 opleiding Verkoper reizen waar de kerntaken 1, 2 en 3 geëxamineerd zijn. Het kwalificerende examen van de opleiding Manager is daarom voornamelijk gebaseerd op kerntaak 4 en 5, waardoor alle vijf kerntaken geëxamineerd zijn. De voor kerntaak 4 sluiten qua inhoud en toetsvorm aan bij de werkprocessen en competenties. Diverse werkprocessen uit kerntaak 4 Geeft leiding aan een team verkopers zijn op een creatieve manier met behulp van video opnames ingericht zodat de beoordelaar op afstand de verrichtingen, zoals het voorzitten van een overleg of het voeren van functioneringsgesprekken, van de studenten kan beoordelen. Ook de bijhorende documenten zoals verslagen van werkoverleggen worden beoordeeld. Daarnaast worden een aantal examenopdrachten, zoals het maken van diverse planningen, uitgevoerd en ook nog een aantal kennistoetsen in de vorm van meerkeuze-vragen voor deze kerntaak toegepast. Ook de voor kerntaak 5 sluiten qua inhoud en toetsvorm aan bij de werkprocessen en competenties. Het object van examineing en het ontbreken van enkele competenties vormen een aandachtspunt. De werkprocessen 5.1 tot en met 5.4 worden voldoende gedekt door door de passende toetsen en toetsvormen. Hetzelfde geldt voor de werkprocessen 5.5, 5.6 en 5.7. Over het algemeen komen de competenties in, in enkele creatief gekozen onderwerpen en werkwijzen, voldoende dekkend aan de orde in de examninstrumenten. Het object (de liquiditeitsbegroting) waarmee de competenties van de werkprocessen als Bewaakt budgetten, Analyseert managementinformatie en Rapporteert aan het management worden geëxamineerd is van een (te) hoog niveau en is minder passend binnen deze opleiding. Dit is een aandachtspunt. De onderwerpen bewaken van budgetten en aansturen op het beheersen en reduceren van budgetten zijn in onvoldoende mate herkenbaar opgenomen in de examinering. Dit is een aandachtspunt. De informatie voor de deelnemer, de afnamecondities en het beoordelingsvoorschrift zijn voldoende. De globale beoordelingscriteria, voornamelijk afgaand op de deskundigheid van de beoordelaar, vormen een aandachtspunt. Ondanks dat maar een beperkt aantal mensen bij de examinering van de kerntaken 4 en 5 zijn betrokken en de lijnen kort zijn, is het wenselijk om de beoordelingscriteria gerichter vast te leggen. p. 19 van 40

20 Conclusie en toelichting talen De opleiding Reizen (Manager verkoop reizen), BOL is een mbo-opleiding op niveau 4. De inspectie heeft de van Nederlands op referentieniveau en van Engels op CEF-niveau onderzocht. Voor Nederlands wordt geen eindoordeel gegeven, om dat dit niet van toepassing is op de exameninering van referentieniveaus. Het oordeel voor Engels is voldoende. Nederlands Het exameninstrumentarium is ingekocht bij leverancier De Vries en is onveranderd ingezet. De inspectie heeft dit instrumentarium op een eerder moment onderzocht. Het oordeel voor het ingekochte is overgenomen in dit rapport. De voor de taalvaardigheden Luisteren, Gesprekken voeren, Schrijven en Taalverzorging voldoen niet aan de uitstroom en toetstechnische eisen. De Spreken en Lezen zakelijke teksten voldoen niet aan de uitstroom eisen en voldoen wel aan de toetstechnische eisen. Engels Het exameninstrumentarium voor de taalvaardigheden Lezen, Gesprekken voeren, Spreken en Schrijven is ingekocht bij leverancier De Vries Taaltrainingen en is onveranderd ingezet. Omdat er nog geen exameninstrumentarium voor de taalvaardigheid Luisteren beschikbaar was, is deze taalvaardigheid niet geëxamineerd. De voor de taalvaardigheden Spreken en Schrijven zijn door de inspectie op een eerder moment onderzocht en voldoende bevonden. Deze oordelen zijn overgenomen in dit rapport. De voor de taalvaardigheden Lezen en Gesprekken voeren zijn tijdens het onderzoek onderzocht. De voor de taalvaardigheden Lezen voldoen aan de uitstroom eisen en toetstechnische eisen. De voor de taalvaardigheid Gesprekken voeren passen qua vorm en niveau niet bij de taalvaardigheid Gesprekken CEF B2, de tijdsduur is niet reëel en het scoringsformulier komt niet overeen met het scoringsvoorschrift. De voor de taalvaardigheid Gesprekken voeren voldoen daarom niet aan de uitstroom eisen en de toetstechnische eisen. De instelling had de geconstateerde tekortkomingen gedetecteerd en heeft verbetermaatregelen genomen met doel te geconstateerde tekortkomingen te verbeteren. In bijlage 2 staan de tabellen met daarin de oordelen. 4.3 Afname, beoordeling en diplomering (standaard 5) De deugdelijkheid van de afname, de beoordeling en de diplomering is beoordeeld op het niveau van de opleiding. Als er geen opleidingen zijn gespecificeerd, dan is de onderstaande conclusie met bijbehorende toelichting van toepassing op alle onderzochte opleidingen. Conclusie en toelichting De onderzochte opleiding Voetverzorger, BOL voldoet aan de eisen van deze standaard. De afname, de beoordeling en de diplomering verlopen deugdelijk. De onderzochte opleiding Reizen (Manager verkoop reizen), BOL voldoet niet aan deze standaard. De beoordeling vindt geheel binnenschools plaats. De afname en diplomering van deze opleiding verlopen wel deugdelijk. Omdat de gehele kwalificerende examinering van de opleiding Manager verkoop reizen plaatsvindt binnen de instelling en niet voor een deel in een reële beroepsomgeving en p. 20 van 40

21 er ook geen deskundigen uit het beroepenveld betrokken zijn bij de beoordeling is deze standaard voor de opleiding Manager verkoop reizen als onvoldoende beoordeeld. Vertegenwoordigers uit de beroepspraktijk zijn ook niet betrokken geweest bij de ontwikkeling of validatie van de instrumenten of de inhoud daarvan. Het verloop van de afname en beoordeling staat beschreven in het Handboek examinering. De vaststellingscommissie heeft een belangrijke rol in de controle op de afname, beoordeling en diplomering. Op basis van de resultaten van deelnemersenquêtes en processenverbaal worden de afnamecondities gecontroleerd. Waar mogelijk worden de resultaten toetstechnisch geverifieerd en vastgesteld. Resultaten worden vastgelegd in een cijferadministratiesysteem waarbij voor toekenning van het diploma ook wordt gecontroleerd of voldaan is aan de criteria voor de bpv. De vaststellingscommissie rapporteert aan de examencommissie. Een aandachtspunt is dat uit de taakomschrijving en de inrichting van de examencommissie blijkt dat deze een verifiërende rol heeft en op enige afstand van de examinering staat. Leren, Loopbaan en Burgerschap De exameneenheid Hospitality en Wellness heeft in een verantwoordingsdocument vastgelegd hoe zij de examinering voor de zeven kerntaken van het brondocument Leren, Loopbaan en Burgerschap voor de opleiding Reizen (Manager verkoop reizen), BOL heeft ingericht. 3.4 Vertrouwen beroepenveld (standaard 1), deskundigheid betrokkenen (standaard 2) en borging kwaliteit (standaard 6). Het vertrouwen van het beroepenveld, de deskundigheid van de betrokkenen en de borging van de examenkwaliteit is beoordeeld op het niveau van de opleidingen. Als er geen opleidingen zijn gespecificeerd, dan zijn de onderstaande conclusies met bijbehorende toelichting van toepassing op alle onderzochte opleidingen. Conclusie en toelichting vertrouwen van het beroepenveld (standaard 1) De onderzochte opleiding Voetverzorger, BOL voldoet aan de aan de eisen van deze standaard. De onderzochte opleiding Reizen (Manager verkoop reizen). BOL voldoet niet aan de eisen van deze standaard omdat het vertrouwen van het beroepenveld in de examenkwaliteit niet is aangetoond. Opleiding Voetverzorger, BOL Voor de afdeling Wellness en Beauty geldt dat op verschillende niveaus contacten onderhouden worden met beroepenveld. De sectordirecteur overlegt minimaal twee keer per jaar met de Adviesraad, waarin inmiddels drie leden uit het relevante beroepenveld vertegenwoordigd zijn. Daarnaast participeert de afdeling Wellness en Beauty in diverse netwerken. De bpv-coördinator en de contactpersoon bpv van het kernteam onderhouden frequente contacten met de bpv-bedrijven. Bij alle praktijkexamens van de opleiding Voetverzorger, BOL worden externe examinatoren uit het relevante beroepenveld betrokken. Uit de afstemming met en de betrokkenheid van het beroepenveld blijkt dat het beroepenveld voldoende vertrouwen heeft in de kwaliteit van examinering. Opleiding Manager verkoop reizen, BOL Voor de opleiding Reizen (Manager verkoop reizen), BOL geldt dat de sectordirecteur en de teammanager participeren in diverse overleggen. Uit de gesprekken en de zelfbeoordeling blijkt niet dat examinering en het vertrouwen in de examenkwaliteit daadwerkelijk aan de orde komen in deze overleggen. Het beroepenveld wordt nog nauwelijks betrokken bij de examinering of bij de validatie van p. 21 van 40

22 de inhoud van de examinering. In januari 2010 heeft het laatste overleg met de klankbordgroep plaats gevonden wegens gebrek aan tijd vanuit de vertegenwoordigers van het beroepenveld. Het interne reisbureau Go, opgezet in samenwerking met Toerkoop, is een volwaardig reisbureau en biedt kansen om de examinering praktischer in te richten. De directeur van Toerkoop wordt gezien als een belangrijke partner in dit geheel. Conclusie en toelichting deskundigheid van betrokkenen (standaard 2) De onderzochte opleidingen voldoen aan de eisen van deze standaard. De betrokkenen zijn voldoende deskundig. Voor de betrokkenen bij examinering zijn eisen vastgelegd en de examencommissie hanteert een overzicht van de basisvaardigheden van deze betrokkenen inclusief aantekeningen betreffende een aantal vervolgcursussen. Betrokkenen die niet aan de gestelde eisen voldoen worden alleen onder verantwoordelijkheid van een bevoegde functionaris bij het examenproces betrokken. Conclusie en toelichting borging van examinering (standaard 6) De onderzochte opleidingen voldoen niet aan de eisen van deze standaard. De examinering is onvoldoende geborgd. De examencommissie dient een groot aantal opleidingen met een grote diversiteit. Vooral op basis van de bevindingen en rapportages van de vaststellingscommissies vindt de diplomering plaats. Voor de borging van de kwaliteit van examinering wordt geen gebruik gemaakt van onafhankelijke deskundigen. De borging functioneert onvoldoende. In eerder onderzoek is door de inspectie genoemd dat het ontwikkelen van structurele informatievoorziening op basis van kwantitatieve gegevens, waardoor effectiever gestuurd kan worden, een aandachtspunt is. 3.5 Naleving wettelijke vereisten (standaard 7) De inspectie beoordeelt of de instelling de eisen rondom examinering naleeft, zoals die in de WEB zijn opgenomen. Als er geen opleidingen zijn gespecificeerd, dan is de onderstaande conclusie met bijbehorende toelichting van toepassing op alle onderzochte opleidingen. Conclusie: De opleidingen voldoen aan de wettelijke vereisten betreffende: informatie over het examen (in OER of ander document)(art en art van de Wet educatie en beroepsonderwijs); de examencommissie (waaronder art en art vijfde lid van de Wet educatie en beroepsonderwijs); de commissie van beroep examens (art en art van de Wet educatie en beroepsonderwijs); de openbare verantwoording (art van de Wet educatie en beroepsonderwijs). p. 22 van 40

23 4 Kwaliteit examinering bij Educatie en GPO In dit hoofdstuk staat de toelichting van de inspectie op de beoordeling van de examenkwaliteit per onderzochte opleiding. Indien het oordeel onvoldoende is, wordt onderbouwd op welke bevindingen dit oordeel is gebaseerd. 4.1 Algemeen beeld In tabel 4.1 staat de beoordeling per onderzochte opleiding. Tabel 4.1 Examenkwaliteit onderzochte opleiding Standaard Vertrouwen beroepenveld Borging deskundigheid Inhoudelijke uitstroomeisen Toetstechnische kwaliteit Afname, beoordeling, diplomering /4 3/4 Borging examinering Naleving wettelijke eisen Nederlands standaard 3 en 4 Moderne vreemde talen standaard 3 en 4 Eindoordeel: voldoende of onvoldoende examenkwaliteit Metaalbewerken (Metaalbewerker), BBL V O V V V V V V - V O = onvoldoende / V = voldoende / - = n.v.t. Algemene opmerking Gilde Praktijkopleidingen (hier na te noemen GPO) biedt voor een specifieke doelgroep beroepsopleidingen aan op niveau 1 en 2. Toelichting bij beoordeling examenkwaliteit De examinering van van de onderzochte opleiding is van voldoende kwaliteit. Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De examenprocessen van afname, beoordeling en diplomering verlopen deugdelijk en de integrale examenkwaliteit is voldoende geborgd. Het beroepenveld heeft vertrouwen in de examenkwaliteit. Betrokkenen bij de examinering zijn echter onvoldoende deskundig. De onderzochte opleiding voldoet aan alle wettelijke vereisten rondom examinering. Bij de competentiegerichte Metaalbewerken zijn ook de voor Nederlands beoordeeld. Het eindoordeel voor Nederlands in voldoende. 4.2 Examenkwaliteit (standaard 3 en 4) De zijn beoordeeld op de standaarden over de uitstroomeisen (standaard 3) en de toetstechnische eisen (standaard 4). Bij de uitstroomeisen beoordeelt de inspectie de dekkingsgraad en cesuur. Bij de toetstechnische eisen p. 23 van 40

24 beoordeelt de inspectie de informatie voor de deelnemer, de afnamecondities en de beoordelingsvoorschriften Metaalbewerken (Metaalbewerker), BBL Conclusie en toelichting beroepsgerichte Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De dekkingsgraad en de cesuur zijn voldoende. De informatie voor de student, de afnamecondities en de beoordelingsvoorschriften zijn eveneens voldoende. Het exameninstrumentarium is ingekocht bij examenleverancier Kenteq en is onveranderd ingezet. De inspectie heeft dit instrumentarium op een eerder moment onderzocht en voldoende bevonden. Het oordeel voor het ingekochte exameninstrumentarium is overgenomen in dit rapport. Hoewel de examinering afgesloten wordt met een panelgesprek, is deze alleen gericht op reflectie en wordt de uitkomst hiervan niet meegenomen in het diplomabesluit. Conclusie en toelichting talen De opleiding Metaalbewerken (Metaalbewerker), is een mbo-opleiding op niveau 2. De inspectie heeft de van Nederlands op CEFniveau onderzocht. Het eindoordeel voor Nederlands is voldoende. De betreffende taalvaardigheden Lezen, Gesprekken voeren, Spreken en Schrijven zijn ingekocht bij leverancier De Vries Taaltrainingen en zijn ongewijzigd ingezet. De inspectie heeft dit instrumentarium op een eerder moment onderzocht en voldoende bevonden. Het oordeel voor het ingekochte exameninstrumentarium is overgenomen in dit rapport. Het exameninstrument betreffende de taalvaardigheid Luisteren, een aangepast NT2 staatsexamen, voldoet niet aan de uitstroomeisen maar wel aan de toetstechnische eisen. De deelnemer moet luisteren naar zes geluidsfragmenten. De subvaardigheden Luisteren naar gesprekken en Luisteren naar colleges en presentaties worden niet geëxamineerd. In bijlage 2 staat de tabel met daarin de oordelen. 4.3 Afname, beoordeling en diplomering (standaard 5) De deugdelijkheid van de afname, de beoordeling en de diplomering is beoordeeld op het niveau van de opleiding. Conclusie en toelichting De onderzochte opleiding Metaalbewerken (Metaalbewerken), BBL voldoet aan de eisen van deze standaard. De afname, de beoordeling en de diplomering verlopen deugdelijk. Het verloop van de afname en beoordeling is beschreven in het Handboek examinering. Dit handboek is onlangs geëvalueerd en bijgesteld. Een aandachtspunt is dat de uitvoering in overeenstemming blijft met de procedures en de werkwijzen van de beroepssectoren. De vaststellingscommissie vervult een belangrijke rol in de controle op de afname, beoordeling en diplomering. De vaststellingcommissie rapporteert aan de examencommissie. Dat deze informatievoorziening voldoende is blijkt uit de analyse die de examencommissie hierover heeft overlegd. p. 24 van 40

25 Leren, Loopbaan en Burgerschap De exameneenheid Educatie en GPO heeft in een verantwoordingsdocument vastgelegd hoe zij de examinering voor de zeven kerntaken van het brondocument Leren, Loopbaan en Burgerschap heeft ingericht. 4.4 Vertrouwen beroepenveld (standaard 1), deskundigheid betrokkenen (standaard 2) en borging kwaliteit (standaard 6). Het vertrouwen van het beroepenveld, de deskundigheid van de betrokkenen en de borging van de examenkwaliteit is beoordeeld op het niveau van de opleidingen. Conclusie en toelichting vertrouwen van het beroepenveld (standaard 1) De onderzochte opleiding voldoet aan de eisen van deze standaard. Het beroepenveld heeft voldoende vertrouwen in de examenkwaliteit. De contacten met het beroepenveld verlopen via Gilde-BT. Gilde-BT verricht continue onderzoek naar de tevredenheid van het beroepenveld. De accountmanager van Gilde- BT rapporteert de uitkomsten meerdere malen per jaar aan de examencommissie. Omdat een nieuw didactisch model (zes weken op en zes weken af) geïmplementeerd wordt, zijn verbetermaatregelen genomen om de directe samenwerking met het afnemende beroepenveld te versterken. Conclusie en toelichting deskundigheid van betrokkenen (standaard 2) De onderzochte opleiding voldoet niet aan de eisen van deze standaard. De toetstechnische deskundigheid van de buitenschoolse betrokkenen is onvoldoende aangetoond. In geval van een beoordeling op de werkplek wordt er beoordeeld door een leermeester. Betreffende het zicht houden op de toetstechnische deskundigheid van de leermeester verlaat de examencommissie zich alleen op de erkenning van het leerbedrijf door het kenniscentrum. Om de toetstechnische deskundigheid van de leermeester (buitenschoolse beoordelaar) te vergroten wil GPO in samenwerking met het kenniscentrum scholingstrajecten organiseren. Conclusie en toelichting borging van examinering (standaard 6) De onderzochte opleiding voldoet aan de eisen van deze standaard. De examinering is voldoende geborgd. Op basis van de zelfevaluatie heeft een interne audit plaats gevonden. De uitkomsten van de interne audit hebben geleid tot twee verbetermaatregelen: 1. het evalueren en aanpassen Handboek examinering; 2. het versterken relatie met het bedrijfsleven. Verbetervoorstellen voor het nieuwe cohort worden besproken met belanghebbenden en worden vervolgens verwerkt in het nieuwe OER. De examencommissie ziet toe op de uitwerking van de verbetermaatregelen. De examencommissie heeft eigen subexamencommissies geïnstalleerd. Deze subexamencommissies zijn niet verbonden aan de subexamencommissies van de beroepssectoren. Omdat voor de onderzochte opleiding Metaalbewerker (Metaalbewerken), BBL bij GPO geldt dat deze ook geëxamineerd wordt bij de sector Techniek is er sprake van een examenvariant. Door het ontbreken van een formele verbinding tussen de examencommissie van GPO en de examencommissie van de sector Techniek, terwijl er gebruik gemaakt wordt van één en de dezelfde examenlicentie (Crebo), signaleert de inspectie hier een risico. p. 25 van 40

26 De examencommissie heeft aangetoond dat de examenkwaliteit voldoende geborgd is. 4.5 Naleving wettelijke vereisten (standaard 7) De inspectie beoordeelt of de instelling de eisen rondom examinering naleeft, zoals die in de WEB zijn opgenomen. Conclusie: De opleiding voldoet aan de wettelijke vereisten betreffende: informatie over het examen (in OER of ander document)(art en art van de Wet educatie en beroepsonderwijs); de examencommissie (waaronder art en art vijfde lid van de Wet educatie en beroepsonderwijs); de commissie van beroep examens (art en art van de Wet educatie en beroepsonderwijs); de openbare verantwoording (art van de Wet educatie en beroepsonderwijs). p. 26 van 40

27 5 Conclusies en vervolgtoezicht De inspectie heeft op 16 en 17 juni én 6 en 7 oktober 2011 een onderzoek naar de examenkwaliteit uitgevoerd bij ROC Gilde Opleidingen. Dit onderzoek leidt tot de volgende conclusie. Voldoende examenkwaliteit De kwaliteit van de examinering van de onderstaande onderzochte opleidingen is voldoende Medewerker schilderen (Schilder), BBL Autotechniek (Technisch Specialist Personenauto's), BBL Installeren (Eerste monteur werktuigkundige installaties), BOL Voetverzorger, BOL Metaalbewerken (Metaalbewerker), BBL De inspectie voert geen vervolgtoezicht uit, aangezien de examenkwaliteit bij de onderzochte opleidingen voldoende is. Onvoldoende examenkwaliteit De inspectie concludeert dat de kwaliteit van de examinering van de onderstaande onderzochte opleiding onvoldoende is Reizen (Manager verkoop reizen), BOL Bij de opleiding waarvan geconstateerd is dat de examenkwaliteit onvoldoende is, doet de inspectie een melding aan de minister van OCW. Daarnaast intensiveert de inspectie het toezicht op de examens bij deze opleidingen. De instelling krijgt de gelegenheid de examinering te verbeteren waarna de inspectie bij deze opleiding een onderzoek naar de kwaliteitsverbetering uitvoert. Over dit onderzoek maakt de inspectie te zijner tijd nadere afspraken met de instelling. p. 27 van 40

28 p. 28 van 40

29 Bijlage 1 Examenstandaarden en normering De standaarden Onderstaand worden 7 standaarden voor de examenkwaliteit gegeven. Bij elk van deze standaarden is een portret gevoegd. Deze portretten zijn zodanig opgebouwd dat wordt aangegeven wanneer toereikend aan een standaard wordt voldaan. Indien een standaard meer criteria omvat, wordt bij elk afzonderlijk criterium een portret gevoegd. Standaard 1: Het beroepenveld heeft vertrouwen in de examenkwaliteit Criterium: Vertrouwen beroepenveld examinering Een opleiding scoort 'voldoende' op dit criterium wanneer de examinering overeenkomt met het volgende portret. Het representatieve beroepenveld heeft voldoende vertrouwen in de kwaliteit van de examinering. De examencommissie vergewist zich met een gepaste frequentie en grondigheid van de voldoende mate van vertrouwen van het beroepenveld in de kwaliteit van de examinering. Zij treft zo nodig maatregelen om het vertrouwen van het beroepenveld in de kwaliteit van de examinering te verbeteren en ziet toe op de effectiviteit daarvan. Het vertrouwen kan onder andere worden opgemaakt uit een representatief onderzoek, uit ervaringsgegevens die voortkomen uit de betrokkenheid van het beroepenveld bij de constructie en/of afname van de examens, of uit de gebleken tevredenheid van het beroepenveld over de kwaliteit van de net gediplomeerde nieuwe werknemer. Standaard 2: De deskundigheid van betrokkenen is geborgd Criterium: Borging deskundigheid Een opleiding scoort 'voldoende' op dit criterium wanneer de examinering overeenkomt met het volgende portret. De examencommissie vergewist zich met een gepaste frequentie en grondigheid van de deskundigheid van de betrokkenen bij examinering, bijvoorbeeld aan de hand van gegevens uit de constructie en vaststelling van, de beoordeling en afname van examens en deelnemerevaluaties. Zij ziet erop toe dat betrokkenen, zowel binnenschools als buitenschools, voldoen aan de door haar vastgestelde vereisten inzake de gewenste deskundigheid voor examinering. Zij maakt voor zichzelf inzichtelijk in welke mate de betrokkenen aan de deskundigheidscriteria voldoen, treft zo nodig verbetermaatregelen en ziet toe op de effectiviteit daarvan. Er zijn wel elementen in de deskundigheid die verbeterd kunnen worden, maar er vallen als gevolg hiervan geen grote gaten in de examinering. Standaard 3: Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen Criterium 1: Dekkingsgraad Een opleiding scoort 'voldoende' op dit criterium wanneer de examinering overeenkomt met het volgende portret. De dekken de kwalificatievereisten die zijn aangegeven in het eindtermendocument of het kwalificatiedossier zodanig af dat recht wordt gedaan aan het integrale kwalificatieprofiel. Van een toereikende dekking is alleen sprake indien de p. 29 van 40