Development and testing of a competence assessment intrument for undergraduate nursing students
Loading...
Files
Date
2017-01
Authors
Piek, Nicola
Journal Title
Journal ISSN
Volume Title
Publisher
University of the Free State
Abstract
English: Nursing roles and responsibilities in South Africa are evolving, demanding nursing practitioners to become more autonomous, responsible and accountable. Competent nursing practitioners who are able to apply their knowledge, skill and attitude in clinical practice are in great demand. Competence is therefore regarded as a prerequisite for nursing students entering the workforce as nurse practitioners. Competent student nurses demonstrate thinking processes such as critical thinking, clinical reasoning, sound clinical judgment and metacognition as they assess, diagnose and treat patients. In order for competent student nurses to apply these thinking processes the basis of foundational knowledge, conditional knowledge, functional knowledge and metacognitive knowledge need to be in place. At present there is no assessment instrument based on the thinking processes to assess the competence of student nurses in South Africa.
The aim of this study was to develop a valid and reliable instrument to assess nursing students‟ competence through their demonstration of clinical judgment and metacognition in clinical settings
A quantitative methodological study was done to prove the developed assessment instrument as reliable. Sixteen existing competence assessment instruments were accessed and analysed. Consequently a thematic analysis of nine of the existing competence assessment instruments delivered an assessment instrument comprised of 38 items, classified according to thinking processes. A panel of experts enhanced face and content validity of the developed assessment instrument before the instrument was implemented. Twenty respondents each assessed 15 second-year undergraduate nursing students who participated in a standardised patient simulation activity via video footage. A Cronbach Alpha coefficient test, Intraclass correlation coefficient (ICC) test and a Kendall‟s coefficient of concordance (W) test determined reliability of the developed assessment instrument.
A Cronbach Alpha coefficient of .90 is indicative of good internal consistency and proves the developed assessment instrument as reliable. The ICC value of .85 indicates excellent inter-rater reliability as a continuum of all the respondents and further contributes to the reliability of the developed assessment instrument. However the W values of the developed assessment instrument were low and ranged between .04 and .40 per item. The low W values were attributed to the fact that some respondents were inconstant in assessing students, the fact that respondents could not validate the reasoning of students, and the large number of assessors (20) in comparison to other inter-rater studies that have three assessors at the most.
The competence of student nurses needs to be assessed in order to determine if they can apply their knowledge and reasoning in clinical practice. The value of this research is that the developed assessment instrument may aid nurse educators or preceptors to identify the specific learning need of a student. Furthermore the developed assessment instrument will give an indication of the competence of student nurses. This knowledge will encourage nurse educators to build in and expand teaching strategies that develop thinking processes into their pedagogies.
It is recommended that future research, such as an exploratory and confirmatory factor analysis, be done in order to determine the construct validity of the developed assessment instrument. This will significantly enhance the validity of the developed assessment instrument.
Afrikaans: Die rolle en pligte van verpleegkundiges in Suid-Afrika ontwikkel voortdurend en noop verpleegkundiges om meer outonoom, verantwoordelik en verantwoordbaar te raak. Bevoegde verpleegkundiges wat in staat is om hulle kennis, vaardighede en benadering ten opsigte van kliniese praktyk toe te pas is in aanvraag. Bevoegdheid word gevolglik beskou as ʼn voorvereiste vir verpleegkunde studente wat as verpleegkundiges die arbeidsmark betree. Bevoegde verpleegkundiges demonstreer denkprosesse soos kritiese denke, kliniese redenering, behoorlike kliniese oordeel en metakognisie wanneer hulle pasiënte assesseer, diagnoseer en behandel. ʼn Stewige basis van fundamentele kennis, voorwaardelike kennis, funksionele kennis en metakognisie is nodig vir bevoegde studenteverpleegsters om hierdie denkprosesse toe te pas. Daar is tans geen assesseringsinstrument gebaseer op denkprosesse beskikbaar om die vaardigheid van studenteverpleegsters in Suid-Afrika te assesseer nie. Die doel van hierdie studie was om „n geldige en betroubare instrument te ontwikkel om die bevoegdheid van student verpleegsters te assesseer deur die demonstrasie van hulle kliniese oordeel en metakognisie in kliniese areas. ʼn Kwantitatiewe metodologiese studie is onderneem om die assesseringsinstrument wat ontwikkel is as betroubaar te bewys. Sestien bestaande assesserings-instrumente is bekom en ontleed. Gevolglik het ʼn tematiese analise van nege van die bestaande bevoegdheidsassesserings ʼn assesseringsinstrument opgelewer wat bestaan uit 38 items, geklassifiseer volgens denkprosesse. ʼn Paneel van kundiges het die sigwaarde en inhoudelike geldigheid van die ontwikkelde assesseringsinstrument verbeter voordat die instrument in werking gestel is. Twintig respondente het elk 15 tweedejaarstudente in verpleegkunde (voorgraads) geassesseer wat aan ʼn gestandardiseerde pasiëntsimulasie-aktiwiteit via video-dekking deelgeneem het. ʼn Cronbach Alfakoëffisiënttoets, Intraklas-korrelasie-koëffisiënttoets (ICC) en Kendal se koëffisiënt van ooreenstemming (W) toets het die betroubaarheid van die ontwikkelde assesseringsinstrument bepaal.ʼn Cronbach Alfakoëffisiënt van .90 dui op goeie interne konsistensie en bewys die ontwikkelde assesseringsinstrument as betroubaar. Die ICC-waarde van .85 dui op uitstekende intergradeerderbetroubaarheid as ʼn kontinuum van al die respondente en dra verder by tot die betroubaarheid van die ontwikkelde assesseringsinstrument. Die W-waardes van die ontwikkelde assesseringsinstrument was egter laag en het gewissel tussen .04 en .40 per item. Die lae waardes word toegeskryf aan die feit dat sommige respondente inkonsekwent was in hul assessering van studente, die feit dat die respondente nie die redenasie van studente kon nagaan nie, en die groot aantal assessore (20) in vergelyking met ander intergraderingstudies wat op die meeste drie assessore gebruik. Die bevoegdheid van studenteverpleegsters moet geassesseer word ten einde te bepaal of hulle hul kennis en redenering in kliniese praktyk kan toepas. Die waarde van hierdie navorsing lê daarin dat die ontwikkelde assesseringsinstrument opvoeders van verpleegkunde studente of preseptors kan help om die spesifieke leerbehoefte van ʼn student te identifiseer. Voorts sal die ontwikkelde assesseringsinstrument ʼn aanduiding gee van die bevoegdheid van studente-verpleegkundiges. Hierdie kennis kan verpleegkunde-opvoeders aanmoedig om onderrigstrategieë wat denkprosesse help ontwikkel in hul pedagogiek in te bou en uit te bou. Dit word aanbeveel dat toekomstige navorsing, waaronder ʼn ondersoekende en bevestigende faktoranalise, onderneem word ten einde die konstrukwaarde van die ontwikkelde assesseringsinstrument te bepaal. Dit sal die geldigheid van die ontwikkelde assesseringsinstrument grootliks verbeter. Sleutelbegrippe: bevoegdhede, verpleegkunde studente, assesseringsinstrument, oordrag van leer, teorie-praktykgaping, kennisdomeine, denkprosesse, geldigheid, betroubaarheid.
Afrikaans: Die rolle en pligte van verpleegkundiges in Suid-Afrika ontwikkel voortdurend en noop verpleegkundiges om meer outonoom, verantwoordelik en verantwoordbaar te raak. Bevoegde verpleegkundiges wat in staat is om hulle kennis, vaardighede en benadering ten opsigte van kliniese praktyk toe te pas is in aanvraag. Bevoegdheid word gevolglik beskou as ʼn voorvereiste vir verpleegkunde studente wat as verpleegkundiges die arbeidsmark betree. Bevoegde verpleegkundiges demonstreer denkprosesse soos kritiese denke, kliniese redenering, behoorlike kliniese oordeel en metakognisie wanneer hulle pasiënte assesseer, diagnoseer en behandel. ʼn Stewige basis van fundamentele kennis, voorwaardelike kennis, funksionele kennis en metakognisie is nodig vir bevoegde studenteverpleegsters om hierdie denkprosesse toe te pas. Daar is tans geen assesseringsinstrument gebaseer op denkprosesse beskikbaar om die vaardigheid van studenteverpleegsters in Suid-Afrika te assesseer nie. Die doel van hierdie studie was om „n geldige en betroubare instrument te ontwikkel om die bevoegdheid van student verpleegsters te assesseer deur die demonstrasie van hulle kliniese oordeel en metakognisie in kliniese areas. ʼn Kwantitatiewe metodologiese studie is onderneem om die assesseringsinstrument wat ontwikkel is as betroubaar te bewys. Sestien bestaande assesserings-instrumente is bekom en ontleed. Gevolglik het ʼn tematiese analise van nege van die bestaande bevoegdheidsassesserings ʼn assesseringsinstrument opgelewer wat bestaan uit 38 items, geklassifiseer volgens denkprosesse. ʼn Paneel van kundiges het die sigwaarde en inhoudelike geldigheid van die ontwikkelde assesseringsinstrument verbeter voordat die instrument in werking gestel is. Twintig respondente het elk 15 tweedejaarstudente in verpleegkunde (voorgraads) geassesseer wat aan ʼn gestandardiseerde pasiëntsimulasie-aktiwiteit via video-dekking deelgeneem het. ʼn Cronbach Alfakoëffisiënttoets, Intraklas-korrelasie-koëffisiënttoets (ICC) en Kendal se koëffisiënt van ooreenstemming (W) toets het die betroubaarheid van die ontwikkelde assesseringsinstrument bepaal.ʼn Cronbach Alfakoëffisiënt van .90 dui op goeie interne konsistensie en bewys die ontwikkelde assesseringsinstrument as betroubaar. Die ICC-waarde van .85 dui op uitstekende intergradeerderbetroubaarheid as ʼn kontinuum van al die respondente en dra verder by tot die betroubaarheid van die ontwikkelde assesseringsinstrument. Die W-waardes van die ontwikkelde assesseringsinstrument was egter laag en het gewissel tussen .04 en .40 per item. Die lae waardes word toegeskryf aan die feit dat sommige respondente inkonsekwent was in hul assessering van studente, die feit dat die respondente nie die redenasie van studente kon nagaan nie, en die groot aantal assessore (20) in vergelyking met ander intergraderingstudies wat op die meeste drie assessore gebruik. Die bevoegdheid van studenteverpleegsters moet geassesseer word ten einde te bepaal of hulle hul kennis en redenering in kliniese praktyk kan toepas. Die waarde van hierdie navorsing lê daarin dat die ontwikkelde assesseringsinstrument opvoeders van verpleegkunde studente of preseptors kan help om die spesifieke leerbehoefte van ʼn student te identifiseer. Voorts sal die ontwikkelde assesseringsinstrument ʼn aanduiding gee van die bevoegdheid van studente-verpleegkundiges. Hierdie kennis kan verpleegkunde-opvoeders aanmoedig om onderrigstrategieë wat denkprosesse help ontwikkel in hul pedagogiek in te bou en uit te bou. Dit word aanbeveel dat toekomstige navorsing, waaronder ʼn ondersoekende en bevestigende faktoranalise, onderneem word ten einde die konstrukwaarde van die ontwikkelde assesseringsinstrument te bepaal. Dit sal die geldigheid van die ontwikkelde assesseringsinstrument grootliks verbeter. Sleutelbegrippe: bevoegdhede, verpleegkunde studente, assesseringsinstrument, oordrag van leer, teorie-praktykgaping, kennisdomeine, denkprosesse, geldigheid, betroubaarheid.
Description
Keywords
Competence, Nursing students, Assessment instrument, Transfer of learning, Theory-practice gap, Knowledge domains, Thinking processes, Validity, Reliability, Dissertation (M.A. (Nursing))--University of the Free State, 2017