ONDERZOEK NAAR KWALITEITSVERBETERING MBO OP OPLEIDINGSNIVEAU. Da Vinci College. Mbo-Verpleegkundige Reizen (Verkoper reizen)

Transcriptie

1 ONDERZOEK NAAR KWALITEITSVERBETERING MBO OP OPLEIDINGSNIVEAU Da Vinci College Mbo-Verpleegkundige Reizen (Verkoper reizen) Plaats : Dordrecht BRIN nummer : 20MQ Onderzoeksnummer : Datum onderzoek : 31 oktober -18 november 2016 en 14 maart 2017 Datum vaststelling : 25 april 2017

2

3 INHOUD 1 Inleiding Conclusie en vervolg Conclusie Vervolg Resultaten opleiding Mbo-Verpleegkundige Reizen (Verkoper Reizen) Bijlage Normering kwaliteitsgebieden... 12

4

5 1 Inleiding In dit rapport staan de uitkomsten van de twee onderzoeken naar kwaliteitsverbetering, die de Inspectie van het Onderwijs van 31 oktober tot en met 18 november 2016 en op 14 maart 2017 heeft uitgevoerd bij Da Vinci. Tussen 31 oktober en 18 november 2016 zijn de gebieden onderwijsproces en kwaliteitsborging onderzocht. Op 14 maart 2017 is het gebied examinering en diplomering onderzocht. De inspectie baseert zich op het Toezichtkader bve 2012 en het Addendum 2015 (zie Aanleiding onderzoeken naar kwaliteitsverbetering De aanleiding voor de onderzoeken naar kwaliteitsverbetering is het vervolgtoezicht, zoals is opgenomen in het rapport van de Staat van de instelling (vastgesteld op 24 juni 2015). We hebben een onderzoek naar kwaliteitsverbetering uitgevoerd bij de opleidingen Mbo-Verpleegkundige, en Reizen (Verkoper Reizen), We hebben een kwaliteitsonderzoek uitgevoerd bij de opleiding Mbo-Verpleegkundige, Gebied Onderwijsproces en Kwaliteitsborging Mbo- Verpleegkundige Mbo- Verpleegkundige Niet onderzocht Gebied Examinering en diplomering Mbo- Verpleegkundige 94090, Reizen (Verkoper Reizen) Leerweg, niveau, locatie leerweg bbl, niveau 4, locatie Karel Lotsyweg 20 te Dordrecht leerweg bol, niveau 3, locatie Leerparkpromenade te Dordrecht Mbo-Verpleegkundige, 95520/ Mbo-Verpleegkundige, We hebben het onderwijsproces, de examinering en diplomering en de kwaliteitsborging onderzocht omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van zwak onderwijs, onvoldoende examenkwaliteit en niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art ). Reizen (Verkoper Reizen), We hebben de examinering en diplomering onderzocht omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van onvoldoende examenkwaliteit Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de opleidingen geanalyseerd. Op locatie zijn onderwijsactiviteiten geobserveerd, documenten onderzocht en gesprekken gevoerd. Er is onder andere gesproken met studenten, docenten, het management en het college van bestuur. In dit rapport starten we met de conclusie van de onderzoeken naar kwaliteitsverbetering en geven we aan wat het vervolg is (hoofdstuk 2). Daarna lichten we de onderzoeken naar kwaliteitsverbetering op opleidingsniveau toe (hoofdstuk 3). Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 5 van 13

6 2 Conclusie en vervolg In dit hoofdstuk staat de conclusie van de onderzoeken naar kwaliteitsverbetering en beschrijven we het vervolg. De toelichting op de beoordeling staat in hoofdstuk Conclusie Onderzoeken naar kwaliteitsverbetering opleidingsniveau Mbo-Verpleegkundige, en Mbo-Verpleegkundige, We concluderen dat bij Mbo-Verpleegkundige de kwaliteitsgebieden onderwijsproces en examinering en diplomering voldoende zijn. De kwaliteitsborging is wederom onvoldoende. Bij deze opleiding is sprake van nietnaleving van de wet op het gebied van kwaliteitsborging (WEB, art ). Reizen (Verkoper Reizen), We concluderen dat bij deze opleiding het kwaliteitsgebied examinering en diplomering voldoende is. 2.2 Vervolg We voeren vervolgtoezicht uit naar de kwaliteitsborging van de opleiding Mbo- Verpleegkundige, omdat niet voldaan is aan de wettelijke vereiste (WEB, art ). De opleiding krijgt de gelegenheid de kwaliteitsborging te verbeteren. Over een jaar zullen we de kwaliteitsborging opnieuw onderzoeken en beoordelen. In onderstaand schema's is het vervolgtoezicht te lezen. Mbo-Verpleegkundige, 95520/ Mbo-Verpleegkundige, Beoordeling Toezichtvorm Vervolgtoezicht Kwaliteitsborging voldoet niet aan de eisen en is onvoldoende. Aangepast toezicht vanwege niet-naleving van van de WEB. Circa een jaar na het definitieve rapport beoordelen wij de kwaliteitsborging opnieuw. Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 6 van 13

7 3. Resultaten opleiding In dit hoofdstuk lichten wij het resultaat van de kwaliteitsonderzoeken bij de opleidingen toe. We geven per gebied aan wat het oordeel is (goed, voldoende, onvoldoende, slecht) en verantwoorden ons over het oordeel op het niveau van de onderliggende aspecten. 3.1 Mbo-Verpleegkundige Het onderzoek naar kwaliteitsverbetering bij Mbo-Verpleegkundige, 95520, niveau 4, bbl, locatie Karel Lotsyweg te Dordrecht richtte zich op het onderwijsproces, de examinering en de kwaliteitsborging. Het kwaliteitsonderzoek bij Mbo- Verpleegkundige, 25480, niveau 4, bbl, richtte zich op het onderwijsproces en de kwaliteitsborging. Het onderzoek leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 1. Onderwijsproces 2. Examinering en diplomering 4. Kwaliteitsborging Slecht Kwaliteitsgebied Voldoende Onvoldoende Aspect Gebied 1: Onderwijsproces Programma 1.1 Samenhang 1.2 Maatwerk Leren in de onderwijsinstelling 1.3 Didactisch handelen* 1.4 Leertijd 1.5 Leeromgeving Begeleiding 1.6 Intake & plaatsing 1.7 Studieloopbaanbegeleiding* 1.8 Zorg Leren in de beroepspraktijk 1.9 Beroepspraktijkvorming* Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 7 van 13

8 Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat het onderwijsproces, de examinering en diplomering en de kwaliteitsborging onvoldoende waren. We hebben ons binnen deze gebieden alleen gericht op aspecten die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen hebben we overgenomen. Het onderwijsproces voldeed niet omdat niet voldaan was aan de aspecten maatwerk, leertijd en het kernaspect studieloopbaanbegeleiding. Maatwerk voldeed niet omdat in het opleidingsprogramma onvoldoende rekening werd gehouden met verschillen tussen studenten wat betreft vorderingen, niveau en leerweg. Ook de leertijd werd niet voldoende benut. Tot slot sloot de studieloopbaanbegeleiding onvoldoende aan bij de ondersteunings- en informatiebehoefte van de student. De examinering en diplomering voldeed niet omdat niet was voldaan aan de aspecten afname en beoordeling en diplomering. De afname en beoordeling waren niet deugdelijk verlopen, omdat er onvoldoende waarborgen waren voor de onafhankelijkheid van de beoordeling in de beroepspraktijk. De praktijkbegeleider was vaak de enige examinator. Ook de diplomering was onvoldoende deugdelijk en geborgd, omdat de examencommissie onvoldoende zicht had op de betrouwbaarheid van de oordelen in de beroepspraktijk. Daarnaast waren de examendossiers incompleet en onoverzichtelijk. De kwaliteitsborging voldeed niet omdat niet was voldaan aan de aspecten beoordeling en verbetering en verankering. De beoordeling voldeed niet omdat het management onvoldoende zicht had op alle relevante aspecten van de kwaliteit van het onderwijs. De verbetering en verankering voldeden niet omdat er geen sprake was van een planmatige cyclus van waarborging en verbetering. Hierna lichten we alleen de aspecten toe, die tijdens dit onderzoek opnieuw zijn onderzocht en beoordeeld. Onderwijsproces Het onderwijsproces beoordelen we als voldoende. Aan alle aspecten is voldaan. Het programma biedt voldoende maatwerk. Omdat combinatiegroepen van niveau 4 met doorstromers vanuit Verzorgende IG niveau 3 niet meer voorkomen, vinden de docenten nu de ruimte om tijdens de lessen rekening te houden met de verschillen in onderwijsbehoeften bijvoorbeeld voor de zwakkere studenten. Verder is er een verkort traject mogelijk voor de opleiding met vrijstellingen op basis van het diploma Verzorgende IG. De leertijd beoordelen we als voldoende omdat de lessen op tijd beginnen en eindigen en de lestijd voldoende wordt benut. De splitsing van de bol-studenten en bbl-studenten heeft bijgedragen aan een betere benutting van de leertijd. Er gaat nu minder tijd verloren met het klassenmanagement. Van veel lesuitval of hoge absentie is geen sprake en de werkdruk voor de studenten is evenwichtig. De studieloopbaanbegeleiding beoordelen we als voldoende. Alle studenten hebben een studieloopbaanbegeleider en houden daarmee een keer per periode een voortgangsgesprek. Deze structuur is vastgelegd en hier wordt op gestuurd door vastlegging in de agenda s en een check op de uitvoering. De studenten zijn Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 8 van 13

9 tevreden over de studieloopbaanbegeleiding. De docenten hebben onderling afspraken gemaakt over aanpak bij begeleiding, maar deze zijn niet vastgelegd. Dit is een aandachtspunt. Wel ervaren studenten nu voldoende structuur en ondersteuning van de docenten en bespreken de docenten de voortgang van de studenten regelmatig en vindt intervisie plaats. Bij dreigende stagnatie in de voortgang geeft het team voorlopige negatieve studieadviezen, gevolgd door planningsafspraken met de student. Dit leidt tot urgentiebesef en ook regelmatig tot verbetering van de resultaten. Alle specifieke informatie betreffende de student wordt vastgelegd in het studentenregistratiesysteem. Examinering en diplomering De examinering en diplomering beoordelen we als voldoende, omdat aan alle aspecten is voldaan. De afname en beoordeling verlopen voldoende deugdelijk. De examinering van alle werkprocessen vindt plaats in de beroepspraktijk. Een beoordelaar uit de praktijk beoordeelt de handelingen in de praktijk. De afname is daardoor realistisch. De beoordelaar van de school beoordeelt de bewijsstukken (beroepsproducten behorend bij de beroepsprestaties). Hij is daartoe geschoold. De beoordelaars uit de praktijk zijn nog niet allemaal getraind als examinator. Als een praktijkbeoordelaar onvoldoende geschoold is als examinator, dan zet de opleiding een docent in als tweede examinator van de handelingen in de praktijk. Dat gebeurt ook als op de praktijkplek de begeleider ook de beoordelaar is. De opleiding voert als beleid dat begeleiding en beoordeling gescheiden zijn. Het team informeert het werkveld via werkveldbijeenkomsten en spreekt regelmatig met de bpv-begeleiders van de leerbedrijven over de examinering. De opleiding organiseert ook kalibreersessies om tussen de verschillende examinatoren overeenstemming te krijgen over de juiste interpretatie van de beoordelingscriteria. Daarmee zorgt de opleiding voor een deskundige en betrouwbare afname en beoordeling. De examencommissie borgt dat de examinering en diplomering deugdelijk verloopt. De examencommissie van het domein die wij eveneens hebben onderzocht, stelt daartoe afnamecondities. Ze checkt of de werkprocessen geëxamineerd kunnen worden op de beoogde examenplek. Daarnaast stelt de commissie eisen aan de onafhankelijkheid, de vakbekwaamheid en de deskundigheid van de examinatoren van de school en van de beroepspraktijk. De commissie heeft in een register van examinatoren goed in beeld gebracht welke examinatoren voldoen aan de eisen en welke nog niet. De examencommissie heeft een goed beeld van de examenplekken. Ze organiseert daartoe geregeld algemene periodieke keuringen (APK s) en verificatiegesprekken. Op basis van de uitkomsten van zo n keuring worden zo nodig afspraken gemaakt met de leerbedrijven over verbeteringen. In een vervolg-apk wordt vervolgens bekeken of de verbeteringen daadwerkelijk zijn doorgevoerd. De commissie bewaakt de kwaliteit van de afname en beoordeling van de examens door steekproefsgewijs examens bij te wonen en enquêtes te houden. Daarnaast voert zij steekproefsgewijs ook interviews met studenten en beoordelaars over hoe de examinering is verlopen. De examendossiers worden allemaal gecontroleerd. We hebben gezien dat de dossiers volledig waren. De examencommissie werkt aan de eigen deskundigheid door het volgen van trainingen over examinering en het bijwonen van landelijke bijeenkomsten over examinering. Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 9 van 13

10 Kwaliteitsborging De kwaliteitsborging beoordelen we als onvoldoende, omdat niet voldaan is aan verbetering en verankering. Sturing en beoordeling zijn wel voldoende. De beoordeling beoordelen we als voldoende. Het management analyseert de opbrengsten en andere relevante data in voldoende mate. Daarnaast voert de domeinleider lesbezoeken uit die resulteren in feedback. De oordelen worden betrokken bij de gesprekkencyclus van de docent. Het is een aandachtspunt dat de zelfevaluaties minder bruikbaar zijn voor beoordeling van de kwaliteit, omdat een duidelijke onderbouwing ontbreekt. De instelling heeft verder systematiek van auditing door de eigen onafhankelijke auditcommissie. Bij de opleiding Verpleegkundige heeft echter recentelijk geen audit plaatsgevonden. De verbetering en verankering beoordelen we als onvoldoende. De verantwoordelijkheden op het gebied van de kwaliteitszorg zijn weliswaar duidelijk belegd, maar de uitvoering van het proces van planmatige verbetering verloopt niet cyclisch. Verbeteringen zijn ingezet, maar zijn nog pril. Van een systematiek van evaluatie en verbetering aan de hand van toetsbare doelen is nog onvoldoende sprake. Het sectorplan en het teamactiviteitenplan bevatten wel speerpunten en acties, maar geen toetsbare doelstellingen. Meer uitgewerkte doelstellingen zouden de betrokkenen bruikbare handvatten bieden, omdat uitgewerkte doelstellingen beter zicht geven op te behalen resultaten. Ook duidelijke normen voor de vraag wanneer er sprake is van voldoende kwaliteit zijn nog niet vastgesteld, waardoor de kwaliteit niet op alle relevante aspecten kan worden geëvalueerd. Wel heeft het team verbeteringen gerealiseerd in onder meer de studieloopbaanbegeleiding, de opbrengsten en examinering en diplomering. 3.2 Reizen (Verkoper Reizen) Het onderzoek naar kwaliteitsverbetering bij Reizen (verkoper Reizen), 94090, niveau 3, bol, locatie Leerparkpromenade te Dordrecht richtte zich op de examinering en diplomering. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 2. Examinering en diplomering Slecht Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Onvoldoende De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 10 van 13

11 Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de examinering en diplomering onvoldoende was. We hebben ons binnen dit gebied alleen gericht op aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen hebben we overgenomen. De examinering en diplomering voldeed niet, omdat niet voldaan was aan het aspect diplomering. De diplomering was onvoldoende deugdelijk en geborgd omdat de examencommissie onvoldoende zicht had op de afname en beoordeling in de beroepspraktijk. Hierna lichten we alleen de aspecten toe, die tijdens dit onderzoek opnieuw zijn onderzocht en beoordeeld. Examinering en diplomering De examinering en diplomering beoordelen we als voldoende omdat aan alle aspecten is voldaan. De diplomering is voldoende deugdelijk en geborgd. De wijze waarop de examencommissie haar verantwoordelijkheid invult garandeert deugdelijke besluiten over het verstrekken van diploma's. De examencommissie stelt afnamecondities, waaronder de eis dat de te examineren kerntaken goed uitvoerbaar zijn bij het betreffende leerbedrijf. Alle locaties zijn daartoe dit schooljaar voorafgaand aan de examinering gecontroleerd. De commissie stelt daarnaast eisen aan de vakbekwaamheid en deskundigheid van de examinatoren. Alle examinatoren van de opleiding zijn voldoende geschoold. De vakbekwaamheid en deskundigheid van de examinatoren in de praktijk is in beeld gebracht. De opleiding verzorgt scholing voor deze examinatoren en stimuleert hen daaraan deel te nemen. Als de examinator uit de praktijk voldoet aan de eisen, examineert hij samen met een examinator van Da Vinci. Als de examinator nog niet voldoet aan de eisen, wordt de student beoordeeld door twee examinatoren van Da Vinci. De opleiding hanteert namelijk een vier-ogenbeleid bij de examinering. De examencommissie heeft daarnaast een scheiding tussen begeleiden en beoordelen vastgelegd. De examencommissie heeft zicht op de afname en beoordeling. Ze woont steekproefsgewijs de examinering bij. De commissie houdt verder na de examinering onder de studenten een enquête over het toets- en beoordelingsproces. Steekproefsgewijs zal zij vanaf voorjaar 2017 ook enkele examinatoren en studenten interviewen. Alle examendossiers worden door de examencommissie gecontroleerd waarbij dit schooljaar onder meer ook wordt gecheckt of alle beoordelingen onderbouwd zijn. De examencommissie werkt aan de eigen deskundigheid door het volgen van trainingen over examinering en het bijwonen van landelijke bijeenkomsten over examinering. Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 11 van 13

12 Bijlage Normering kwaliteitsgebieden De normering per gebied is per januari 2015 aangepast (zie het Toezichtkader bve 2012 en het Addendum 2015). De normering heeft betrekking op de toezichtperiode De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruikmaakt van een normering. Deze bestaat uit twee stappen: 1. Een normering per aspect: per aspect wordt een beschrijving gegeven. Indicatoren en portretten zijn daarvoor indicerend en richtinggevend. 2. Een normering per kwaliteitsgebied. Voor de normering van het gebied Onderwijsproces zijn drie kernaspecten benoemd. De kernaspecten zijn: aspect 1.3 Didactisch handelen, aspect 1.7 Studieloopbaanbegeleiding en aspect 1.9 Beroepspraktijkvorming. Normering Onderwijsproces Goed Aan acht van de negen aspecten is voldaan. Aan alle kernaspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan zeven van de negen aspecten is voldaan. Aan alle kernaspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten van deze indicatoren voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan één of meer kernaspecten is niet voldaan. Aan drie tot acht van de aspecten is niet voldaan. Slecht Aan geen van de aspecten is voldaan. Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect benoemd. Normering Examinering en diplomering Goed Aan alle drie de aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle drie de aspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan een of twee aspecten is niet voldaan. Slecht Aan geen van de drie aspecten is voldaan. Voor de normering van het gebied Kwaliteitsborging zijn drie kernaspecten benoemd. De kernaspecten zijn 4.1 Sturing, 4.2 Beoordeling en 4.3 Verbetering en verankering. Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 12 van 13

13 Normering Kwaliteitsborging Goed Aan alle aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle kernaspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan twee of drie aspecten is niet voldaan. Slecht Aan alle vier de aspecten is niet voldaan. Onderzoek naar kwaliteitsverbetering mbo Da Vinci College pagina 13 van 13