I nte rna t io na l J o urna l o f   E v a lua t io n a nd   Resea rc h in E du ca t io n ( I J E RE )   Vo l.   13 ,   No .   6 Dec em b er   2 0 2 4 ,   p p .   3 6 8 6 ~ 3 6 9 5   I SS N:  2 2 5 2 - 8 8 2 2 DOI 1 0 . 1 1 5 9 1 / ijer e . v 13 i 6 . 2 9 4 2 3           3686     J o ur na l ho m ep a g e h ttp : //ij ere. ia esco r e. co m   Fray er mod el - ba s ed as ses sm ent  for  det ec ting st udent s’  co nceptual un der sta nding  in  ev o lut io n       Ra m a da nti  P ra t iv i,  M urni R a m li,  Yudi   Rina nto   D e p a r t me n t   o f   B i o l o g y   E d u c a t i o n ,   G r a d u a t e   S c h o o l ,   U n i v e r si t a s S e b e l a M a r e t ,   S u r a k a r t a ,   I n d o n e si a       Art icle  I nfo     AB S T RAC T   A r ticle  his to r y:   R ec eiv ed   No v   29 2 0 2 3   R ev is ed   Ap r   29 2 0 2 4   Acc ep ted   May   7 2 0 2 4       Th is  stu d y   a ime d   to   tes th e   v a li d it y ,   re li a b il it y ,   a n d   d i fficu lt y   lev e o it e m s   d e v e lo p e d   b a se d   o n   th e   F ra y e m o d e a n d   d e tec c o n c e p t u a u n d e rs tan d i n g   o h ig h   sc h o o l   st u d e n ts  i n   b io lo g y   e v o lu ti o n .   T h e   tes t   m e th o d   e v a lu a ted   3 5   m u lt ip le - c h o ice   q u e stio n o n   e v o lu ti o n   f o 5 5   h ig h   sc h o o l   st u d e n ts.  Ra sc h   a n a ly sis  wa p e rfo rm e d   to   a ss e ss   th e   v a li d it y ,   re li a b il it y ,   d iffi c u lt y   lev e o f   it e m s,  a n d   stu d e n ts   a b il it y   le v e l.   Two   e x p e rts  e m p iri c a ll y   tes ted   a n d   a n a l y z e d   th e   v a li d i ty   o th e   it e m s.  Th e   a ss e ss m e n d e v e lo p e d   wa d isc o v e re d   t o   b e   v a li d   b a se d   o n   e x p e rt  a n d   e m p iri c a a n a ly se s.  F u rt h e rm o re ,   th e   c o n stru c v a li d it y   tes in d ica ted   th a t   o n ly   two   o t h e   3 5   q u e stio n we re   d e e m e d   in v a li d .   Th e   a ss e ss m e n e x h ib i ted   re li a b i li ty   wi th   a n   it e m   re li a b il it y   sc o re   o f   0 . 9 2 .   Th e   it e m   d iffi c u lt y   lev e ls  we re   e q u a ll y   s p r e a d   a c ro ss   th e   n o rm a c u rv e ,   e n c o m p a ss in g   q u e stio n ra n g in g   fr o m   v e ry   d iff i c u lt   t o   v e r y   e a sy   c a teg o ries ,   a d e p icte d   in   th e   v a riab le  m a p .   Afte a n a ly z in g   th e   m a p ,   it   wa o b se rv e d   th a v a riatio n i n   stu d e n ts   p ro f icie n c y   le v e ls  a a n sw e rin g   q u e stio n we re   e v id e n t,   in d ica ti n g   d iv e rse   le v e ls  o f   a b il it y .   S tu d e n t p e rfo rm e d   we ll   in   h a n d li n g   f o rm a a n d   su p e ro r d in a te - su b o r d in a te  lev e l   q u e stio n s.  Ho we v e r,   t h e ir  p e rfo rm a n c e   d iffere d   wh e n   d e a li n g   wit h   i d e n ti t y   a n d   p ri n c ip le - le v e c o n c e p ts.   K ey w o r d s :   Ass es s m en t d ev elo p m en t   C o n ce p tu al  u n d er s tan d in g   E v o lu tio n   Fra y er   m o d el   Hig h   s ch o o l stu d en t   T h is i a n   o p e n   a c c e ss   a rticle   u n d e r th e   CC B Y - SA   li c e n se .     C o r r e s p o nd ing   A uth o r :   Mu r n i Ram li   Dep ar tm en t o f   B io lo g y   E d u ca tio n ,   Gr ad u ate  Sch o o l,  Un i v er s itas   Seb ela s   Ma r et   Ken tin g an ,   J eb r es,  Su r a k ar ta,   C en tr al  J av 5 7 1 2 6 ,   I n d o n esia   E m ail: m r am lim @ s taf f . u n s . ac . id       1.   I NT RO D UCT I O   C o n ce p tu al  u n d er s tan d in g   is   ess en tial   f o r   s tu d en ts   to   ex ce b ec au s it  lay s   th g r o u n d wo r k   f o r   d ev elo p in g   m o r a d v an ce d   co g n itiv s k ills ,   s u ch   as  a n aly tical  th in k in g   an d   p r o b lem - s o l v in g   ab ilit ies  [ 1 ] [ 6 ] Fu r th er m o r e ,   it  is   o f ten   p er ce iv ed   to   im p r o v as  p er s o n   g ai n s   m o r k n o wled g th an   b ef o r e.   T h d ev elo p m en t   o f   co n ce p tu al  u n d e r s tan d in g   is   p ar tially   in f l u en ce d   b y   th am o u n o f   k n o wled g e   g ain e d ,   as  well  as  th co g n itiv e   p r o ce s s es  o f   an   i n d iv id u al.   As  g r o wth   tak es  p lace ,   co g n itiv p r o ce s s es  will  also   d ev elo p ,   le ad in g   to   d if f e r en ce s   in   in f o r m atio n   p r o ce s s in g .   T h i s   p r o g r ess io n   c o n tr ib u tes  to   an   elev ated   d e g r ee   o f   c o n ce p t u al  u n d e r s tan d in g   [ 7 ] Acc o r d in g   to   p r ev io u s   s tu d ies   [ 7 ] ,   [ 8 ] ,   at  least sev en   lev els o f   co n ce p tu al  u n d er s tan d in g   ar co n cr ete,   i d en tity ,   class if icato r y ,   f o r m al,   s u p er o r d in ate - s u b o r d in ate,   co n tin g e n cy ,   a n d   p r in cip le.   Ma s ter in g   th co n ce p at  th e   co n cr ete  lev el   in v o l v es  r ec o g n izin g   an d   n a m in g   o b jects,  an d   d ev el o p m en t   o cc u r s   f r o m   a n   ea r ly   ag e.   D u to   p r o g r ess io n   in   c o g n itiv e   ab ilit ies,  in d iv id u als  s tar d is tin g u i s h in g   b etwe en   o b jects,  p h en o m en o n   co m m o n l y   ca lled   th co n ce p o f   i d en tity .   Af ter   b ein g   ab le  to   d if f er en ti ate,   th o b ject  was  class if ied   in to   its   g r o u p   b ased   o n   s h ar e d   c h ar ac ter is tics ,   k n o wn   as  th e   class if icato r y   co n ce p t.  T h ese  t h r ee   c o n ce p ts   a r g en er ally   p o s s ess ed   f r o m   y o u n g   ag o r   d u r in g   co g n itiv d ev el o p m en b ef o r ad u lth o o d .   An   in cr ea s in   a g lead s   to   ad v an ce m en t i n   th a b ilit y   to   p r o ce s s   in f o r m atio n .   I n itially ,   th e   f o cu s   was  o n   ac q u ir in g   r ec o g n itio n ,   d if f er en tiatio n ,   an d   class if icatio n   s k ills .   Ho wev er ,   as  tim g o es  o n ,   th ese  s k ills   will  ev o lv to   en co m p ass   d ee p er   co m p r e h en s io n   o f   th e   d ef in it io n   an d   d escr ip tio n   o f   t h o b jects  b ein g   s tu d ied .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2         F r a ye r   mo d el - b a s ed   a s s ess m en t fo r   d etec tin g   s tu d en ts   c o n ce p tu a l u n d ers ta n d in g   …  ( R a ma d a n ti P r a tivi )   3687   T h is   m ar k s   th tr an s itio n   to   m o r ad v an ce d   le v el  o f   f o r m a co n ce p tu al  u n d e r s tan d in g .   A f ter   ac h iev in g   th is ,   co n ce p tu al  u n d er s tan d i n g   ca n   ex p an d   f u r th e r ,   en ab lin g   th u n d er s tan d in g   o f   th p o s itio n   o f   co n ce p r elativ e   to   an o th e r   ( s u p er o r d in ate - s u b o r d in ate ) ,   t h ca u s e - a n d - ef f ec r elatio n s h ip s   b etwe en   co n ce p ts   ( co n tin g e n cy ) ,   an d   th ap p licatio n   o f   co n ce p ts   to   s o lv ev er y d ay   p r o b lem s   ( p r in cip le)   [ 7 ] ,   [ 8 ] .   Stu d en ts   s h o u ld   m aster   th ese  s ev en   co n ce p tu al   s tag es  to   co m p r e h en d   b etter   co n ce p ts ,   s p ec if ical ly   th o s clo s ely   r elate d   to   n atu r al  an d   o b s er v ab le   o b jects.   As  b r an ch   o f   b io lo g y ,   ev o lu ti o n   d elv es  in to   liv in g   o r g an is m s   h is to r ical  an d   d ev elo p m en tal  p r o ce s s es.   I clo s ely   co n n ec ts   with   tan g ib le  elem en ts ,   in clu d in g   d ir ec tly   o b s er v ab le  en titi es  lik f o s s ils .   Mo r eo v er ,   ev o lu tio n   ex p l o r es  th e   d is tin ctio n s   am o n g   v ar i o u s   s p ec ies  [ 9 ] .   T o   co m p r eh e n s iv ely   an d   ac cu r ately   u n d er s tan d   th co n ce p t   o f   e v o lu tio n ,   s tu d en ts   n ee d   to   g r asp   it  p r o g r ess iv ely ,   s tar tin g   f r o m   r ec o g n izin g   th c o n cr ete   m an if estatio n s ,   id en tify i n g   d if f er en ce s   b etwe en   o b jects  o r   s p ec ies  ( id en tity ) ,   a n d   class if icat io n   in to   r esp ec tiv e   g r o u p s   b ased   o n   s h ar ed   c h ar ac ter is tics   ( cla s s if icato r y ) .   Fu r th er m o r e ,   u n d er s tan d in g   f o r m al  ter m in o lo g ies'   m ea n in g s   an d   d ef in itio n s   is   ess en tial.  E q u ally   im p o r tan is   g r asp in g   th e   in ter co n n ec tio n s   b etwe en   co n ce p ts ,   ac k n o wled g i n g   m ig r atio n   as   s u b s er v ien to   ev o lu tio n ar y   m ec h an is m s   ( s u p er o r d in ate - s u b o r d i n ate) ,   an d   r ea lizin g   h o e n v ir o n m en tal   alter atio n s   ca n   im p a ct  v a r iatio n s   am o n g   c o ex is tin g   s p e cies  ( co n tin g e n cy ) .   Ad d itio n ally ,   d ev elo p in g   f am i liar ity   with   ev o l u tio n - r elate d   i d ea s ,   lik th e   Har d y - W ein b er g   law,   is   cr u cial.   All  th is   k n o wled g ca n   b u s ed   to   esti m ate  th n u m b er   o f   p e o p le   with   alb in is m   in   p o p u latio n   ( p r in cip le) .   Stu d en ts   ca n   o n ly   co m p r eh e n d   th co n ce p u p   to   its   b as ic  lev el  if   th ey   r ea c h   h ig h er   lev el  o r   im p lem en it  to   s o lv s cien ti f ic  p r o b lem s   in   d aily   life   [ 1 0 ] [ 1 2 ] .   T h is   lim ited   u n d er s t an d in g   ca n   p r esen ch allen g es,  s p ec if ically   in   th ca s o f   ev o lu tio n .   W h en   t h ass ess m en to o ls   em p lo y e d   b y   ed u ca to r s   a r e   in ad eq u ate  f o r   d etec tin g   s tu d e n ts co n ce p tu al  u n d e r s tan d in g ,   it  b ec o m es  ch allen g in g   to   ac cu r ately   ev alu ate  th e   e x ten o f   th eir   m aster y   o f   th t au g h m ater ial.   T h e r is   n ee d   to   d ev is ap p r o p r iate  s tr ateg ies  to   h elp   im p r o v e   k n o wled g an d   co n ce p tu al  u n d er s tan d in g   to   th d esire d   lev el  [ 1 3 ] .   T h er e f o r e,   it  is   cr u cial  to   d ev elo p   s u itab le   ass es s m en ts   to   d etec t stu d en ts co n ce p tu al  u n d e r s tan d in g .   Sev er al  s tu d ies  h av b ee n   c o n d u cted   to   d etec th co n ce p t u al  u n d e r s tan d in g   o f   s tu d en ts   [ 1 4 ] [ 1 9 ] Ho wev er ,   th in v esti g atio n s   co n d u cte d   b y   s ev er al  r esear c h er s   [ 1 4 ] [ 1 7 ]   p r im a r ily   f o c u s ed   o n   id en tif y in g   m is co n ce p tio n s   am o n g   s tu d en ts .   T h m eth o d s   ap p lied   wer e   th ce r tain ty   o f   r esp o n s i n d e x   ( C R I ) ,   d iag n o s tic  q u esti o n   clu s ter   [ 2 0 ] ,   an d   th r e e - tier   ass es s m en ts   with   cr iter i f o r   s tu d en m is co n ce p tio n s   [ 2 1 ] .   T h ese  s tu d ies  co u ld   d etec a n d   d if f er en tiate  s tu d en ts   wh o   u n d er s to o d   th c o n ce p ts   f r o m   th o s with   m is co n ce p tio n s .   Ho wev er ,   th r ep o r ts   wer u n ab le   to   p i n p o in t h ex ac t   co n ce p ts   with   wh ich   s tu d en ts   s tr u g g led   an d   th d ep th   o f   th ei r   co m p r eh e n s io n   o f   th ese  co n ce p ts .   Similar ly ,   th in v esti g atio n s   c o n d u cte d   b y   o th e r   r esear ch e r s   [ 1 8 ] ,   [ 1 9 ]   d id   n o s p ec if ically   i d en tify   th e   co n ce p ts   th at  p o s ed   ch allen g e s   an d   th ex ten o f   ac h iev em e n in   co n ce p tu al  u n d er s tan d in g .   Dete r m in in g   th e   s p ec if ic  co m p lex   co n ce p ts   an d   th ex ten o f   th lev el  o f   co n ce p tu al  u n d er s tan d in g   o f   e v o lu tio n ar y   m ater ial  is   ess en tial f o r   teac h e r s   to   d ec id e   o n   ap p r o p r iate  s tr ateg ies.  T h i s   h elp s   s tu d en ts   m ai n tain   th ei r   cu r r e n t c o n ce p tu al   u n d er s tan d i n g   an d   en h a n ce s   th eir   ab ilit y   to   co m p r eh en d   co n c ep ts ,   en ab lin g   th em   to   ac h iev e   h ig h er   lev els.  T h e   g o al  is   to   en s u r th at  s tu d en ts   p o s s es s   co n ce p tu al  u n d er s tan d in g   an d   ap p l y   it  to   ex p lain   s cien tific   p h en o m e n a   an d   s o lv s cien tific   p r o b lem s   i n   th eir   s u r r o u n d in g s   [ 7 ] ,   [ 8 ] .   T h lev el  o f   co n ce p tu al  u n d er s tan d in g   was  ex ten s iv ely   d is cu s s ed   in   th Fra y er   m o d el  [ 7 ] ,   [ 8 ] .   s tu d y   o n   th u s o f   t h is   m o d el  in   tea ch in g   an d   ass ess in g   s cien tific   m ater ials   h as  b ee n   co n d u cted   [ 2 2 ] ,   [ 2 3 ] .   H o wev er ,   th ese  s tu d ies  u tili ze d   th 1 9 6 9   Fra y er   m o d el .   T h is   m o d el   was  p r esen ted   d iag r a m m atica lly   to   aid   s tu d e n ts   in   d ef in in g   co n ce p ts ,   id e n tify in g   th eir   ch ar ac te r is tics ,   an d   p r o v id in g   e x am p les  an d   n o n - e x am p les  f o r   b etter   u n d er s tan d i n g   [ 2 4 ] .   T h Fra y er   m o d el  en h an ce d   t h s cien tific   v o ca b u lar y   s k ills   o f   h i g h   s ch o o s tu d en ts ,   p ar ticu lar ly   i n   u n d er s tan d i n g   ea r th   p r o ce s s es  ( in ter n al  a n d   ex ter n al  p r o ce s s es)   [ 2 2 ] .   Me a n wh ile,   in   p r e v io u s   s tu d y   [ 2 3 ] ,   it wa s   f o u n d   to   im p r o v th s cien tific   v o ca b u la r y   s k ills   o f   4 th - g r ad elem en tar y   s ch o o l stu d en ts   in   b io lo g y   to p ics,  co v er in g   co n c ep ts   r elate d   to   s tam en ,   p is til,  p lan r ep r o d u ctio n ,   p lan f er til izatio n ,   p o llin atio n ,   s ee d   d is p er s al,   n y m p h ,   m etam o r p h o s is ,   a n im al  ch ar ac ter is tic s ,   h er ed ity ,   d o r m a n cy ,   m ig r ati o n ,   f o o d   ch ain s ,   an d   p r ed ato r s .   T h m aster y   o f   s cien tific   v o c ab u lar y   a m o n g   s tu d en ts   alig n s   with   th eir   u n d e r s tan d in g   o f   s cien tific   co n ce p ts .   b r o a d er   v o ca b u lar y   r ep e r to ir e n h an ce s   t h e ir   ab ilit y   to   co m p r eh en d   th ese  co n ce p ts   m o r ef f ec tiv ely .   T h is   is   b ec au s th k n o wled g o f   s cien tific   v o c ab u lar y   f o r m s   th e   f o u n d atio n   f o r   s tu d e n ts   to   b u ild   co n ce p tu al  u n d e r s tan d in g   [ 2 5 ] ,   [ 2 6 ] .   T h Fra y er   M o d el  h a s   b ee n   p r o v e n   to   en h a n ce   s cien tific   v o ca b u lar y .   Ho wev er ,   it  d o es  n o ex p licitly   ex p lain   s tu d en ts '   ac h iev em en in   co n ce p tu al  u n d er s tan d in g   f r o m   co n cr ete  to   p r in cip le  lev els  [ 2 4 ] .   T h er e f o r e,   th m o d el  was  f u r th er   d ev elo p ed   to   m ak it  a p p licab le  f o r   ad d r ess in g   th is   lim itatio n .   Usi n g   th Fra y er   M o d el  [ 8 ]   i n   ass ess m en ts   to   d ete ct  th co n ce p tu al  u n d e r s tan d in g   s k ills   o f   s tu d en ts   is   s u itab le  f o r   im p lem en tatio n   in   s cien ce   lear n in g .   M o r in v esti g atio n s   o n   d ev el o p in g   as s ess m en ts   b ased   o n   th Fra y er   Mo d el  [ 8 ]   n ee d   to   b co n d u cte d .   T h is   s tu d y   aim ed   to   d ev elo p   Fra y er   Mo d el - b ased   ass e s s m en to   d etec th co n ce p tu al  u n d e r s tan d in g   o f   s tu d en ts   in   t h f iel d   o f   ev o l u tio n .   T h r esear ch   q u esti o n s   tak en   i n to   ac co u n wer e:  i)   I s   th d ev elo p ed   ass ess m en v alid ,   r eliab le,   an d   s u itab le  f o r   u s e?   ii)  W h at  is   th p r o f ile  o f   co n ce p tu al  u n d er s tan d in g   r e g a r d in g   e v o lu tio n   am o n g   1 2 th - g r ad h ig h   s ch o o l stu d e n ts ?   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   13 ,   No .   6 Dec em b er   2 0 2 4 :   3 6 8 6 - 3 6 9 5   3688   2.   M E T H O D   2 . 1 .     Respo nd e nts   T h is   s tu d y   in clu d ed   5 5   r a n d o m ly   ch o s en   1 2 th - g r ad h ig h   s ch o o s tu d en ts   f r o m   two   class es   with in   th s am s ch o o l,  co m p r is in g   4 3   f em ales  an d   1 2   m ales.  Alth o u g h   th e   s am p le  s ize  in   th is   s tu d y   is   s m all,   th r esear ch er s   h av en s u r e d   th at  t h s am p le  is   s u f f icien f o r   th an aly s is   o f   v alid ity ,   r eliab ilit y ,   an d   th q u ality   o f   test   item s ,   as  well  as  s tu d en ts ab ilit ies,  u s in g   d ic h o to m o u s   R asch   an aly s is .   T h at  s tatem en is   b ased   o n   [ 2 7 ] wh ich   s tates th at  wh en   u tili zin g   R asch   an aly s is   an d   d ich o t o m o u s   q u esti o n   f o r m ,   m i n im u m   o f   3 0   item s   an d   s am p le  s ize  o f   3 0   a r r eq u ir e d   to   ac h iev e   9 5 % c o n f id e n ce   r ate.     Ad d itio n ally ,   th r esear c h er s   h av en s u r ed   t h at,   with   s am p l s ize  o f   5 5   an d   3 5   item s ,   th ese  n u m b e r s   h av p r o d u ce d   m ea n   s q u ar v alu es  th at  m ee th ac ce p ted   c r itical  p o in ts   in   R asch   d ich o to m o u s   an aly s is   f o r   s m all  s am p les  ( 0 . 5   to 1 . 5 ) .   Sp ec if ically ,   th v al u es  ar 0 . 9 9   f o r   th e   in f it  m ea n   s q u ar a n d   0 . 9 8   f o r   th o u tf it  m ea n   s q u ar [ 2 8 ] ,   [ 2 9 ] .   Fu r t h er m o r e ,   th e   p r ev io u s   s tu d y ' s   r esu lts   [ 3 0 ]   in d icate d   n o   s ig n if ican in f lu e n ce   b etwe en   s m all  s am p le  s ize  an d   th s tu d e n ts '   ab ilit y   an aly s i s   r esu lts   u s in g   d ich o to m o u s   R asch   an aly s is .   On   Feb r u ar y   2 0 ,   2 0 2 3 ,   3 5   s tu d en ts   p ar ticip ated   in   th test ,   wh ile  th r em ain in g   2 0   to o k   t h test   o n   Feb r u ar y   2 8   o f   th s am y ea r .   T h av er ag co m p letio n   tim was  1 . 5   h o u r s .   Fin ally ,   it  was  e n s u r ed   th at  s tu d en ts   in v o lv ed   in   th f i r s t stu d y   d id   n o t e x ch a n g r elate d   in f o r m ati o n   with   r esp o n d en ts   in   th e   s ec o n d   s tu d y .       2 . 2 .     Ass es s m ent   T h ass ess m en u s ed   in   th s tu d y   c o n s is ted   o f   3 5   m u ltip le - c h o ice  q u esti o n s   d is tr ib u ted   ac r o s s   d if f er en co g n itiv le v els.  Sp ec if ically ,   t h er wer e   5 ,   6 ,   5 ,   5 ,   5 ,   4 ,   a n d   5   q u esti o n s   at   th c o n cr ete,   id en tity ,   class if icato r y ,   f o r m al,   s u p e r o r d i n ate - s u b o r d i n at e,   co n tin g e n cy ,   a n d   p r in cip le  lev els.  T h test ed   m ater ial  co v er ed   e v id en ce   o f   ev o lu tio n ,   e v o lu tio n ar y   m ec h an is m s ,   th th eo r y   o f   life ' s   o r ig in ,   an d   th Har d y - W ein b er g   L aw' s   ap p licatio n .   Ad d itio n ally ,   s o m o f   th q u e s tio n s   in clu d ed   m ater ial  r elate d   to   b io d iv er s ity   an d   ev o l u tio n ar y   m ec h a n is m s .   T h f o r m u latio n   o f   q u esti o n s   in   th is   s tu d y   f o llo ws  f r am ewo r k   b ased   o n   p r ev io u s   s tu d y   [ 8 ] ,   wh ich   in v o lv es  in d icato r s   c o r r esp o n d in g   t o   d if f er e n lev els  o f   s tu d en ts '   co n ce p tu al   u n d er s tan d in g ,   r an g in g   f r o m   co n cr ete  co n ce p ts   to   p r i n cip le s .   An   in d icato r   at  th e   co n cr ete   lev el  was  "Stu d en ts   ca n   r ec o g n ize  d o g s   th at  ca n   s u r v iv in   an   e n v ir o n m en t   with   a   s p ec if ic  tem p er atu r e   b as ed   o n   th f u r   th ick n ess . T h is   was  b ased   o n   th e   co n cr ete  c o g n itiv o p er atio n   o f   "r ec o g n izin g   s tim u li  th at  ca n   b s en s ed   b y   t h o r g an s ,   d if f e r en tiatin g   b etwe en   s tim u lu s ,   an d   r em em b er in g   th eir   d if f er e n ce s . "   T h co g n itiv o p er atio n   at  t h e   id en tity   le v el  in clu d es  “r ec o g n izin g   s tim u li  th at   ca n   b s en s ed   b y   th o r g an s ,   d if f er e n tiatin g   b etwe en   s tim u li,  r em e m b er in g   th e   d if f er en ce s   in   s tim u li,  an d   u n d er s tan d in g   t h at  two   o r   m o r s tim u li  r ep r esen d if f er e n f o r m s   o f   t h e   s am th in g . ”  An   illu s tr ativ ex am p le  o f   th i s   co g n itiv a b ilit y   is   wh en   s tu d en ts   d is ce r n   th e   d is s im ilar ities   b etwe en   liv in g   o r g an is m s   b elo n g in g   to   th e   s am g en u s   b u t   h av i n g   u n d er g o n a d ap tatio n s   s p ec if i to   ea ch   s p ec ies.  T h er ef o r e,   at  th is   lev el,   s tu d en t s   n ee d   s k ills   to   co n cr etely   r ec o g n ize  e v o lu tio n a r y   o b jects a n d   d is tin g u is h   t h ch ar ac ter i s tics   b etwe en   th two   o b jects.    T h co g n itiv o p er atio n s   co n tin u to   in cr ea s u p   to   th h ig h e s t le v el  o f   co n ce p tu al  u n d er s tan d in g .   At   th is   lev el,   th co g n itiv o p er ati o n   en co m p ass ed   r an g o f   ab i liti es,  s u ch   as   "r ec o g n izin g   s tim u li  th at  th s en s es   ca n   s en s e,   d if f er en tiatin g   b et wee n   s tim u li,  r em em b er in g   th d if f er en ce s   in   s tim u li,  g en er alizin g   two   o r   m o r e   s tim u li  to   r ep r esen d if f er en f o r m s   o f   t h s am th in g ,   g en e r a lizin g   th at  two   o r   m o r e   s tim u li  h av s o m c o m m o n   ch ar ac ter is tics ,   d if f er en tiatin g   co n ce p attr i b u tes,  h y p o t h esizin g   r ele v an t   attr i b u tes,  r em em b er in g   h y p o th eses ,   ev alu atin g   h y p o th eses   u s in g   p o s itiv an d   n eg ativ e x am p l es  o r   r ec o g n izin g   co m m o n   at tr ib u tes  o f   p o s itiv ex am p les,  co n cl u d in g   co n ce p t s ,   r ec o g n izin g   th p o s itio n   o f   co n ce p ts   ( s u p er o r d in ate,   s u b o r d in ate,   o r   p ar allel) ,   unde r s tan d i n g   r elatio n s h ip s   i n v o lv in g   ca u s es  an d   ef f ec ts ,   co r r elatio n s ,   an d   o th er   p o s s ib ilit ies,  as  well  a s   ap p ly in g   co n ce p ts   to   s o l v p r o b lem s . An   e x am p le  o f   t h in d icato r   was  "Stu d en ts   ca n   u s t h Har d y - W ein b er g   L aw  to   ca lc u late  th e   p er ce n tag o f   co lo r - b lin d   wo m en   an d   th o s wh o   wer ca r r ier s   o f   t h is   v is u al  im p air m en t."     2 . 3 .     Da t a   a na ly s is   T h v alid ity   an aly s is   was  co n d u cted   in   two   way s ,   n am ely   e x p er a n d   em p ir ical  v alid ity .   T h ex p er test   in v o lv ed   p r o v id in g   th i n s tr u m en to   two   e x p er ts ,   o n s p ec ialized   in   ev o lu tio n ar y   m ate r ial  an d   t h o t h er   in   ed u ca tio n al  ass ess m en d ev elo p m en t.  Fu r th e r m o r e ,   th ey   wer e   ask ed   to   ev alu ate  th c o n ten t   an d   s tr u ctu r o f   th e   d ev elo p e d   q u esti o n s   u s in g   L ik er t scale   q u esti o n n air r an g i n g   f r o m   1   t o   4 .   T h em p ir ical  test   ass es s ed   th in s tr u m en o n   5 5   s am p les  o f   1 2 th - g r a d s tu d en ts .   T h is   aim ed   to   ass es s   th item s '   v alid ity   an d   d ete r m in th e   test ed   q u esti o n s '   r eliab ilit y   an d   d if f icu lt y   lev el.   T h e   an aly s is   was  co n d u cte d   u s in g   W in s tep s   v er s io n   3 . 7 3   with   R asc h   d ich o to m o u s   an aly s is .   T h v alid ity   o f   th item s   was  d eter m in ed   b ased   o n   th cr iter ia  o f   o u tf it  m ea n   s q u a r ( MN SQ) ,   o u tf it  Z - s tan d ar d   ( Z STD) ,   an d   p o i n m ea s u r co r r elatio n   ( Pt.  Me as u r C o r r ) ,   with in   ac ce p te d   r an g es  o f   0 . 5   MN SQ  1 . 5 ,   - 2 . 0   Z STD  2 . 0 ,   an d   0 . 4   Pt  Me asu r C o r r   0 . 8 5 ,   r esp ec tiv ely   [ 3 1 ] .   Me an wh ile,   th r eliab ilit y   o f   th item s   was a s s e s s ed   b ased   o n   th v alu es a v ailab le  in   th s u m m ar y   s tatis tics   m en u .   T h item   d if f icu lty   lev el  was e v alu ated   b ased   o n   th m ea s u r ed   s co r v al u es,  an d   th ei r   d is tr ib u tio n   was o b s er v e d   o n   th v ar iab le  m a p .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2         F r a ye r   mo d el - b a s ed   a s s ess m en t fo r   d etec tin g   s tu d en ts   c o n ce p tu a l u n d ers ta n d in g   …  ( R a ma d a n ti P r a tivi )   3689   Stu d en ts '   ab ilit y   lev el  was  a s s ess ed   b ased   o n   th n u m b er   o f   co r r ec tly   an s wer ed   q u esti o n s .   Sco r es  o f   1   an d   0   in d icate d   co r r ec an d   in co r r ec an s wer s ,   r esp ec tiv ely .   T h ese  s co r es  wer th en   in p u in to   th W in s tep s   v er s io n   3 . 7 3   ap p licatio n   to   a n aly ze   th eir   p er s on - m ea s u r v alu es u s in g   R asch   an aly s is .   I n   a d d itio n   to   o b tain in g   th p er s o n - m ea s u r v alu es,  t h d is tr ib u tio n   o f   s tu d en ts '   ab ilit y   lev els wa s   ex am in ed   th r o u g h   th v ar ia b le  m ap .       3.   RE SU L T S AN D I SCU SS I O N   3 . 1 .     Va lid it y   a nd   re lia bil it y   o f   it e m s   An   in s tr u m en was  co n s id er ed   v alid   wh en   it  s u cc es s f u lly   m ea s u r ed   th in ten d ed   ab ilit y   an d   co n ce p t   [ 3 2 ] ,   [ 3 3 ] .   I n   th is   s tu d y ,   v alid ity   was  ass e s s ed   th r o u g h   ex p er an d   em p ir ical  m eth o d s .   T h ex p er test   was   co n d u cte d   to   en s u r t h at  th e   a s s es s m en t a lig n ed   with   t h p r e d eter m in ed   o b jectiv es a n d   e v a lu ated   th ac c u r ac y   an d   clar ity   o f   th c o n ten t c o n s tr u ctio n .   T h is   in cl u d e d   th e   co n ten t o f   e v o lu tio n ar y   m ater ial  i n   th q u esti o n s ,   th e   wo r d in g   o f   th e   q u esti o n s ,   a n d   th an s wer   o p tio n s   in   th e   ass ess m en [ 3 4 ] ,   [ 3 5 ] .   T h r esu lts   s h o wed   th at  th e   d ev elo p e d   ass ess m en was  s u itab le  f o r   s tu d y   p u r p o s es.  T h e   p o in ts   ev alu ated   wer m ater ia r elev an ce ,   d ep t h ,   an d   clar ity ,   with   a v er ag s co r e s   o f   3 . 5 ,   4 ,   a n d   4 ,   r esp ec tiv ely .   R eg ar d in g   th v alid ity   ass ess m en b y   ex p e r ts ,   th ev alu ate d   item s   in clu d ed   th clar ity   o f   q u esti o n s ,   th ar r an g e m en o f   q u esti o n s   an d   d is tr ac to r s ,   as  well  as  th lin g u is tic  asp ec ts   u s ed   with in   th q u esti o n s .   E ac h   o f   th ese  ca teg o r ies  r ec ei v ed   an   av er ag s co r o f   4 .   T h ex p er ts   d ee m ed   th e   ass ess m en d ev elo p ed   as  v alid   b ased   o n   th e   v alid ity   an al y s is .   Ho wev er ,   two   item s ,   n am ely   q u est io n s   n u m b er   1   an d   2 ,   h ad   t o   b r ep lace d   b ec a u s th m ater ial  was  n o   lo n g er   r elev an to   cu r r en ev o lu tio n ar y   b io lo g y .   T h m ate r ial  in   q u e s tio n s   1   an d   2   was   r elate d   to   th v a r iatio n   o f   f in c h   b ea k s   ac co r d in g   to   th eir   v a r io u s   ty p es  o f   f o o d   ( s ee d s ,   in s ec ts ,   an d   ca cti) .   I n   t h e   p r esen d ay ,   it  is   n o   lo n g er   r elev an as  f in ch es  ea s ee d s ,   an d   th v a r iatio n   in   b ea k s   was  p r im ar ily   d u to   d if f er en t - s ized   s ee d s   co n s u m e d .   T h d if f e r en ce s ,   wh ich   wer attr ib u ted   to   b o th   t h ty p e/si ze   o f   f o o d   an d   th e   clim atic  co n d itio n s   o f   th h a b itat,  wer d o cu m en te d   b y   D L n   et  a l.   [ 3 6 ] .   As  r esu lt,  th ese  q u esti o n s   u n d er wen r e v is io n .   W h ile  th eir   s tr u ctu r was  r etain ed ,   th f in ch - r elate d   co n ten was  s u b s titu ted   with   in f o r m atio n   r elate d   to   f u r   ad ap tatio n   in   d o g s   r esid in g   in   b o th   co ld   an d   n o r m al  clim ates.   E m p ir ical  v alid ity   an aly s is   ex am in ed   th co n s tr u ct  v alid ity   o f   item   q u esti o n s .   T h is   was c o n d u cted   b y   o b s er v in g   th d is tr ib u tio n   o f   t h d if f ic u lty   lev el  a n aly ze d   o n   th v ar iab le  m a p   to   d eter m i n wh en   t h ey   wer e   ev en ly   s p r ea d   with   r ea s o n ab le   g ap s   b etwe en   q u es tio n s .   I n   a d d itio n   to   th d if f icu lty   lev el  d is tr ib u tio n ,   co n s tr u ct  v alid ity   was  f u r th er   e v alu ated   u s in g   o u tf it  MN SQ  an d   Z ST v alu es.  T h ese  v alu es  h elp e d   ass ess   wh eth er   th e   an aly ze d   item   q u esti o n s   f it  an d   f u n ctio n ed   n o r m ally   f o r   m ea s u r em en [ 3 7 ] .   An   item   was  co n s id er ed   to   m ea s u r n o r m ally   wh e n   it  h ad   an   o u tf it  MN SQ  v alu g r ea ter   th an   0 . 5   an d   less   th an   1 . 5   an d   a n   o u tf it  Z STD  v alu g r ea ter   th an   - 2 . 0   an d   less   th an   2 . 0   [ 3 1 ] .   I n   ad d itio n   to   th e   d if f icu lty   lev el  an d   item   f it  an aly s is ,   c r u cial  asp ec o f   t h ass es s m en was  th p o in m ea s u r co r r elatio n   ( Pt  Me asu r C o r r )   v al u e,   wh ic h   f ac ilit ates  t h ev alu atio n   o f   th e   item   p o lar ity .   I tem s   wer e   co n s i d er ed   s u itab le   f o r   ass ess m en an d   ca p ab le  o f   m ea s u r in g   th i n ten d ed   s k ills   wh en   th ey   ex h i b ited   p o s itiv Pt Me asu r C o r r   v alu [ 3 8 ]   T h r esu lts   o f   3 5   item s   s h o we d   th at  q u esti o n s   3   an d   8   d i d   n o m ee th e   r e q u ir ed   f it v alu es.   Ou o f   th e   two   item s ,   it  was  ev id e n f r o m   th v ar iab le   m ap   in   Fig u r e   1   t h at  q u esti o n   n u m b e r   3   ex h ib ited   a   s ig n if ican t   d is p ar ity   in   th a n aly s is   o f   its   d if f icu lty   le v el.   Acc o r d in g   to   th e   ass er tio n   b y   Gy ll  an d   R ag lan d   [ 3 9 ] ,   v er y   e asy   item s   ar e   in ef f ec tiv e   b ec a u s th ey   f ail  to   d if f e r en tiate  b etwe en   s tu d e n ts   with   h ig h   an d   lo w   lev els  o f   ab ilit y .   C o n s eq u en tly ,   q u esti o n   n u m b er   3   was  r em o v ed .   C o n cu r r e n tly ,   item   8   d is p lay ed   an   u n f av o r ab le  Pt  Me asu r C o r r   v alu o f   - 0 . 1 5 .   Neg ativ p o in t - m ea s u r co r r elatio n   v alu es  wer also   id en tifie d   in   r esear ch   a n aly zin g   th v ali d ity   o f   q u esti o n   item s   u s in g   R asch   [ 4 0 ] .   T h is   s tu d y   r e d u ce d   q u e s tio n   item s   with   n eg ativ p o i n t - m ea s u r c o r r elatio n   v alu es ,   as  th ey   co u ld   n o m ea s u r th in ten d ed   a b ilit ies .   Ho wev er ,   in   th is   in v esti g atio n ,   item   n u m b er   8   was  n o r e d u ce d in s tead ,   th e   an s wer   o p tio n s   wer r ev is ed .   Qu esti o n   n u m b er   8   was  r ev is ed   b ased   o n   th s tatem en in   p r ev io u s   s tu d y   [ 4 1 ] wh ich   ass er ts   th at  m u ltip le - c h o ice  q u esti o n s   with   n e g ativ p o in t - m ea s u r e   co r r elatio n   v al u e s   in d icate   er r o r s   in   th an s wer   ch o ices.  T h er ef o r e,   r ev is io n   was  m ad to   o p tio n   d,   in itially   s tatin g   r em n an ts   o f   an ce s tr al   ev o lu tio n ,   wh ich   c h an g e d   to   an alo g o u s   v esti g ial  o r g an .   T h is   alter atio n   was p r o m p ted   b y   th p er ce p tio n   th at   th o r ig in al  wo r d in g   o f   o p tio n   d   m ig h m is lead   s tu d en ts   in t o   ch o o s in g   it  as  th co r r ec a n s wer   in s tead   o f   th co r r ec t o p tio n   e,   wh ich   r ea d s   v esti g ial  o r g an .   co m p r e h en s iv ass ess m en is   n o o n ly   v alid   b u also   r eliab le  [ 4 2 ] .   I n   lin with   t h at  s tatem en t,  th is   s tu d y   also   an aly ze d   item   r elia b ilit y   u s in g   th R asch   m eth o d .   T h is   was  co n d u cted   b y   ex a m in in g   th r eliab ilit y   v alu es  in   th e   s u m m ar y   s tatis ti cs.  Fro m   R asch   an aly s is ,   th r eliab ilit y   v alu o b tain ed   was  0 . 9 2 .   Acc o r d i n g   to   B o n d   [ 3 8 ] ,   v alu es  a b o v e   0 . 8   i n d icate   h ig h   item   r eliab ilit y .   I tem   r eliab ilit y   m ea s u r es  h o w   c o n s is ten an d   s tab le   an   in s tr u m en t   p r o d u ce d   co n s is ten r esu lts   wh en   test ed   o n   t h s am r esp o n d en ts   at  d if f e r en tim es.  Hig h er   v alu es,  as e m p h asized   b y   C o o p er   an d   Sch in d ler   [ 4 3 ] in d icat m o r ac cu r ate  d ata  co llectio n .       Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   13 ,   No .   6 Dec em b er   2 0 2 4 :   3 6 8 6 - 3 6 9 5   3690       Fig u r 1 .   C o n s tr u cts  v alid ity   o f   item s       T h r esear ch   by   E s tacio a   [ 2 2 ]   also   d em o n s tr ates  th at  th q u esti o n s   u s ed   to   ass e s s   s tu d en ts '   s cien tific   v o ca b u lar y   ex h ib it h ig h   r eliab ilit y .   T h elev ated   r eliab ilit y   v alu in   b o th   s tu d ies ca n   lik ely   b attr ib u ted   to   th e   m u ltip le ch o ice  q u esti o n s   c o m p r is in g   o n e   q u esti o n   s en te n ce   an d   s ev er al   an s wer   ch o i ce s ,   with   o n ly   o n e   co r r ec a n s wer .   T h e   s in g le   co r r ec an s wer   in   th is   test in g   f o r m at  f ac ilit ates  co n s en s u s   am o n g   p r o o f r ea d er s   w h en   d eter m in in g   th c o r r ec r esp o n s [ 4 4 ] .   T h is   ch ar ac ter is tic  is   wh y   m u ltip le - ch o ice  q u esti o n s   ar d ee m ed   m o r e   r eliab le  th an   o th er   f o r m ats.  I alig n s   with   p r ev io u s   s tu d y   [ 4 5 ]   th at  item s   w ith   g o o d   r eliab ilit y   y ield   co n s is ten t   s co r es  wh en   ev alu ated   b y   d if f er en ass ess o r s   a v ar io u s   tim es.  Fu r th er m o r e,   th h i g h - r elia b ilit y   v alu r esu lted   f r o m   h a v in g   en o u g h   r esp o n d e n ts   f o r   item   an aly s is   u s in g   th R asch   d ich o to m o u s   m o d el  [ 2 7 ] [ 2 9 ] .   I is   in   lin with   o th er   r esear ch   [ 4 6 ]   th at   th n u m b er   o f   r esp o n d e n ts ,   s co r d is tr ib u tio n ,   a n d   o b ject iv ity   o f   ass ess m en in f lu en ce d   item   r eliab ilit y .     3 . 2 .     Dif f iculty   lev el  o f   t est  i t em s   a nd   s t ud ent   a bil it y   lev el   I tem   d if f icu lty   lev el  m ea s u r e s   h o ch allen g in g   th item s   ar f o r   r esp o n d en ts ,   s u ch   a s   s tu d en ts .   Fu r th er m o r e ,   it  was  d eter m in ed   b y   th p r o p o r tio n   o f   s tu d e n ts   wh o   an s wer ed   th item s   co r r ec tly .   I n   R asch   an aly s is ,   th d if f icu lty   lev el   was  o b s er v ed   th r o u g h   th l o g i v alu e.   B ased   o n   th ese  lo g it   v alu es,  item s   ca n   b Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2         F r a ye r   mo d el - b a s ed   a s s ess m en t fo r   d etec tin g   s tu d en ts   c o n ce p tu a l u n d ers ta n d in g   …  ( R a ma d a n ti P r a tivi )   3691   class if ied   in to   d if f er en ca teg o r ies,  n am ely   h ig h ly   d if f icu lt  ( lo g it>1 ) ,   d if f icu lt  ( 0 lo g it   1 ) ,   ea s y   ( - 1 lo g it  0 ) ,   an d   v er y   ea s y   ( lo g it  - 1 ) .   T h an aly s is   in d icate d   d iv er s d if f icu lty   lev els  am o n g   th 3 5   item s ,   with   8   b ein g   h ig h ly   d if f ic u lt,  9   class if ied   as  d if f icu lt,  1 1   d ee m ed   ea s y ,   a n d   7   ca teg o r ize d   as  v er y   ea s y .   T h v ar iatio n   was  in d icate d   b y   s ep ar atio n   v alu o f   3 . 4 5 ,   wh ich   ex ce ed ed   th r ec o m m en d ed   th r esh o l d   o f   3 . 0   [ 4 7 ] Ad d itio n ally ,   th test   in f o r m atio n   f u n ctio n   g r ap h ,   as  d e p icted   in   Fig u r 2 ,   in d icate s   th at  th d is tr ib u tio n   o f   item   d if f icu lty   lev els alig n s   well  with   th d is t r ib u tio n   o f   s tu d en ts   a b ilit y   lev els.   T h g r ap h ' s   p ea k   was  s itu ated   p r ec is ely   at   th e   ce n ter   ( at  a   v alu o f   0   o n   th e   x - ax is ) ,   in d ic atin g   th at   s tu d en ts   with   m o d er ate  ab ilit y   lev el  co u ld   m ain ly   an s wer   th cr ea ted   item .   Pre v io u s   r esear ch   [ 4 5 ]   co n d u cted   o n   3 7   ed u ca t o r s   r ev ea led   th at  g o o d   q u esti o n s   s h o u ld   b s tr u ctu r ed   with   m o d er ate  d if f icu lty n o to o   ch allen g in g ,   y et  n o to o   ea s y .   T h is   b alan ce   allo ws  s tu d en ts   to   p er f o r m   well  an d   f ac ilit ates  d if f er en tiatio n   b etwe en   th o s with   h ig h   lev el  o f   in te llig en ce   an d   th o s with   lo lev el.   T h is   p er s p ec tiv alig n s   with   th e   p r ev io u s   r esear ch   [ 4 8 ] ,   wh o   d ef in es  g o o d   q u esti o n s   as  ch all en g in g   s tu d en ts   wh ile  p r o v id i n g   o p p o r tu n ities   f o r   th em   to   ex ce l.   T h e   d i s t r i b u t i o n   o f   i te m   d i f f i c u l t y   l e v e ls   ca n   b e   o b s e r v e d   i n   m o r e   d e t a i l   o n   t h e   v a r i a b le   m a p   in   F i g u r e   3 .   T h is   d is tr ib u tio n   was  co m p a r ed   to   th s tu d e n ab ilit y   lev els  at  ea ch   co n ce p tu al  u n d er s tan d in g   lev el.   B y   em p lo y in g   v ar iab le  m a p ,   o n ca n   s im u ltan eo u s ly   m ap   th e   d if f icu lty   lev els  o f   q u esti o n s ,   r an g in g   f r o m   v er y   d if f icu lt to   v e r y   ea s y ,   a n d   th e   s tu d en t' s   ab ilit ie s   in   an s wer in g   q u esti o n s ,   f r o m   h ig h   to   lo le v els o f   ab ilit y .           Fig u r e   2 .   T est  in f o r m atio n   f u n ctio n   g r ap h       T h p o in ts   o n   th S+  to   M+   ax is   o f   th g r ap h   in d icate   co n ce n tr atio n   o f   s tu d e n ab ilit y   lev els  alo n g   th is   lin e.   T h g r a p h   s h o wed   th at  th d if f icu lt y   lev els  f o r   tes item s   p o s itio n ed   b etwe en ,   a b o v e,   a n d   b el o th e   lin wer m o d er ate,   h ig h ,   an d   lo w,   r esp ec ti v ely .   An   i n tr i g u in g   o b s er v atio n   d e r iv ed   f r o m   th g r ap h   is   th p r esen ce   o f   item s   s itu ated   ab o v th S+  p o in f o r   th c o n ce p ts   o f   co n c r ete,   id e n tity ,   an d   cl ass if icato r y   lev els.  Ho wev er ,   item s   at   f o r m al  a n d   s u p er o r d in ate - s u b o r d in ate  l ev els  wer n o s itu ated   a b o v e   th S+   p o in t.   T h is   s u g g ests   th at  s tu d en ts   c o u ld   ef f ec tiv ely   m a n ag e   f o r m al  an d   s u p er o r d in ate - s u b o r d in ate   lev el   item s   b u t   f ailed   to   m an ag co n cr ete,   id e n tity ,   an d   class if icato r y   item s .   T h m o s ch allen g in g   q u esti o n   at  th co n cr ete  lev el  is   q u esti o n   1 ,   wh ich   p er tain s   to   th f i n ch ' s   b ea k   ad ap tatio n   m ater ial.   Me an wh i le,   q u esti o n s   class if ied   as  d if f icu lt  at  th i d en tity   lev el   ar e   n u m b er s   1 2   a n d   1 3 ,   r eq u ir in g   s tu d en ts   to   id en tify   d if f er en ce s   b etwe en   ap es  an d   m o n k e y s   an d   wh eth er   th e y   ca n   s till   b clas s if ied   in to   th s am g e n u s .   T h e   s tu d en ts '   d if f icu lty   an s wer in g   q u esti o n   1   m ay   attr ib u ted   to   th eir   in co m p lete   u n d er s tan d i n g   o f   f in c h   ad ap t atio n   m ec h an is m s .   T h is   s tate m en is   r ein f o r ce d   b y   s tu d e n ts s tr u g g les  with   q u esti o n s   2 0   an d   2 1   at  th clas s if icatio n   lev el,   wh ich   also   r el ate  to   th at  co n ce p t.   Ad d itio n ally ,   s tu d en ts '   in ab ilit y   to   an s wer   q u esti o n s   1 2   an d   1 3   co u ld   b d u to   lack   o f   u n d er s tan d in g   o f   th ter m   "g en u s in   th q u e s tio n   s en ten ce s .   T h er ef o r e,   th e   p r im ar y   f o c u s   was  o n   ev o lu tio n ar y   ter m in o lo g y   an d   d ef in itio n s ,   em p h asizin g   t h im p o r tan c o f   s tu d e n ts   m aster in g   k ey   co n ce p ts   to   en h an ce   th eir   u n d e r s tan d in g   8     7. 5     7     6. 5     6     5. 5     5     4. 5     4     3. 5     3     2. 5     2     1. 5     1     0. 5   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   13 ,   No .   6 Dec em b er   2 0 2 4 :   3 6 8 6 - 3 6 9 5   3692   o f   ev o lu tio n ar y   m ater ial,   wh ich   alig n s   with   p r e v io u s   r es ea r ch   [ 4 9 ] .   M o r eo v er ,   s tu d e n ts '   ch allen g es  with   q u esti o n s   1 2   an d   1 3   m ay   also   s tem   f r o m   th eir   u n f am iliar ity   with   q u esti o n s   ab o u e v o lu tio n ar y   o b jects  r elate d   to   ev o l u tio n ar y   m ec h an is m s   a n d   b io d iv e r s ity .   T h is   f in d in g   i n d icate s   th at,   asid e   f r o m   th e   n ee d   f o r   s tu d e n ts   to   im p r o v t h eir   s cien tific   v o ca b u lar y ,   as  s u g g ested   b y   s ev er al  r esear ch er s   [ 2 2 ] ,   [ 2 3 ] ,   [ 4 9 ] ,   th ey   also   n ee d   t o   en g ag in   co n te x tu al  lear n in g   wh en   s tu d y in g   ev o lu tio n .   I ali g n s   with   p r ev i o u s   r esear ch   [ 5 0 ] ,   [ 5 1 ] ,   em p h asizin g   th at  co n tex tu al  lear n in g   ca n   s ig n if ican tly   im p r o v s tu d e n ts co m p r eh en s io n   o f   v ar iat io n s ,   h er ed ity ,   an d   ev o lu tio n   c o n ce p ts .   Fo r   co n tin g e n cy - lev el  item s ,   S3 4   was  lo ca ted   ab o v th S+  p o in t,  wh ile  f o r   p r in cip le - lev el  i tem s ,   S2 8   an d   S3 0   wer s itu ated   a b o v e   s tu d en ts   with   th h ig h est  ab ilit y   lev el.   T h ese  th r ee   item s   co n s is ted   o f   ca s e - b ased   q u esti o n s   th at  ex p lo r ed   th c o n ce p o f   g eo g r ap h ical  is o lati o n   in   two   r a b b its   liv in g   with in   th s am e   h ab itat   ( S3 4 ) ,   al o n g   with   th e   ap p licat io n   o f   th e   Har d y - W ein b er g   L aw  to   ascer tain   th n u m b er   o f   in d iv id u als  with   a   p ar ticu lar   b l o o d   ty p e   ( S2 8 ) ,   an d   th c o u n o f   al b in o   i n d iv id u a ls   in   p o p u latio n   ( S3 0 ) .   T h e   i n ab ilit y   o f   s tu d en ts   to   an s wer   ca s e - b ased   q u esti o n s   ar is es  wh en   teac h e r s   f ail  t o   ad eq u ately   p ass   in s tr u ctio n s   o n   h o to   u tili ze   s cien tific   co n ce p ts   in   s o l v in g   ev er y d a y   p r o b lem s ,   esp ec ially   th o s r elate d   to   e v o lu tio n ar y   co n ce p ts   [ 2 ] ,   [ 5 2 ] [ 5 4 ] .   T h e r ef o r e ,   b esid es c o n n e ctin g   th e   m ater ial  tau g h t   with   co n cr ete  o b jects,  teac h e r s   s h o u ld   also   a p p ly   th ese   co n ce p ts   to   ex p lain   s cien tific   p h en o m en th at  o cc u r   in   d aily   life .           Fig u r 3 .   Var iab le   m ap   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2         F r a ye r   mo d el - b a s ed   a s s ess m en t fo r   d etec tin g   s tu d en ts   c o n ce p tu a l u n d ers ta n d in g   …  ( R a ma d a n ti P r a tivi )   3693   W h at  ty p es  o f   co n ce p ts   s tu d en ts   m aster ed   ca n n o b o b t ain ed   if   th r esear ch   o n l y   f o cu s es  o n   d eter m in in g   wh eth er   s tu d en ts   u n d er s tan d   th c o n ce p t,   d o   n o t   u n d er s tan d   th c o n ce p t,   an d   h a v m is co n ce p tio n s ,   as  d o n e   b y   p r e v io u s   r esear ch e r s   [ 1 4 ] [ 1 9 ] T h is   p o in n ec ess itates  atten tio n   f r o m   r esear ch er s   o r   p r ac titi o n er s   in   th f ield   o f   e d u ca tio n   to   s tar co n s id er in g   th e   u s o f   t h Fra y er   Mo d el   in   r esear ch   to   d etec s tu d en ts '   co n ce p tu al   u n d er s tan d in g .   A d d itio n ally ,   b y   co n s id er i n g   t h co g n itiv o p er atio n s   p r es en at  ea ch   lev el   o f   co n ce p tu al   u n d er s tan d in g   [ 8 ] ,   teac h er s   ca n   d ev elo p   q u esti o n s   to   m ea s u r s tu d en ts '   co n ce p t u al  u n d er s tan d in g .   T h is   p r o ce s s   is   g u id ed   b y   cle ar   in d icato r s ,   r an g in g   f r o m   th b asic  to   th co m p lex   lev el.   Su ch   an   ap p r o ac h   p r o v es h ig h l y   u s ef u l in   g ath er i n g   in f o r m atio n   ab o u t th ty p e s   o f   co n ce p ts   s tu d en ts   h av n o t m aster ed ,   th er eb y   en ab lin g   teac h er s   to   en h an ce   th ef f ec ti v en ess   o f   th teac h in g   an d   lear n in g   ac tiv ities   th at   h av b ee n   ca r r ie d   o u t.       4.   CO NCLU SI O N   T h is   s tu d y   aim e d   to   p r o v id e   i n s ig h ts   f o r   teac h er s   a n d   e d u ca tio n   p r ac titi o n er s   o n   th e   ef f ec t iv u s o f   Fra y er   Mo d el - b ased   ass ess m en ts   in   class r o o m   lear n in g .   T h p r im ar y   g o al  was  to   g ain   m o r in - d ep th   in f o r m atio n   ab o u th lev els  o f   co n ce p ts   ac h iev e d   b y   s tu d e n ts   an d   th ty p es  th at  r em ain   t o   b m aster ed .   T h r esu lts   in d icate d   th at  th d ev elo p ed   ass ess m en wa s   v alid   a n d   r eliab le,   with   r an g o f   it em   d if f icu lty   lev els  s p an n in g   f r o m   v er y   d if f icu lt  to   v er y   ea s y ,   th m aj o r ity   f allin g   with in   th m o d er ate  ca teg o r y .   T h an aly s is   r esu lts   in d icate   s tr o n g   p er f o r m an ce   in   task s   in v o lv in g   r ec allin g   an d   co m p r eh en d in g   te r m   d e f in itio n s   at  b o th   f o r m al   an d   s u p er o r d in ate - s u b o r d in ate   lev els.  Ho wev er ,   c h allen g es  wer en co u n ter ed   i n   h an d lin g   item s   th at  d em an d   in s ig h in to   t h co n cr e te  f o r m s   o f   an   o b ject   o r   s p ec ies  an d   th ap p licatio n   o f   co n ce p ts   to   an s wer   ev o lu tio n - r elate d   s cien tific   p h e n o m e n a.   T h ese  ch allen g in g   lev els  in cl u d co n c r ete,   id e n tity ,   class if icato r y ,   c o n tin g e n cy ,   an d   p r in cip le.   T h e r ar e   item s   with   d if f icu lty   lev els  a b o v e   th o s ex p ec te d   f o r   s tu d en ts   at   th h ig h est  a b ilit y   lev el  f o r   id e n tity   an d   p r in ci p le  lev els.   T h f in d in g s   s u g g est  th at  th Fra y er   Mo d el  ef f ec tiv ely   ev al u a tes  s tu d en ts   u n d er s tan d in g   o f   ev o lu tio n .   W ith   th is   m o d el,   teac h er s   ca n   ass es s   s tu d en ts   co n ce p tu al  u n d er s tan d in g   an d   d e v elo p   a p p r o p r iate  teac h in g   m eth o d s   to   ass is s tu d en ts   in   o v er co m in g   ch allen g es,  en a b lin g   th em   to   ac h iev th e x p ec te d   lev el.   T h er ef o r e,   teac h er s   s h o u ld   in teg r ate  th is   m o d el  in to   lear n in g   a ctiv ities   to   ev alu ate  s tu d en ts   c o n ce p tu a l c o m p r eh e n s io n .       ACK NO WL E DG E M E NT S   T h au th o r s   ar g r atef u to   L PP UNS  f o r   f u n d in g   th is   s tu d y   th r o u g h   t h GR   R esear ch   Gr an with   r ef er en ce   n u m b e r   2 2 8 /UN2 7 . 2 2 /PT. 0 1 . 0 3 /2 0 2 3 .       RE F E R E NC E S   [ 1 ]   M .   A .   A l   M u t a w a h ,   R .   Th o ma s,  A .   E i d ,   E.   Y .   M a h m o u d ,   a n d   M .   J.   F a t e e l ,   C o n c e p t u a l   u n d e r st a n d i n g ,   p r o c e d u r a l   k n o w l e d g e   a n d   p r o b l e m - so l v i n g   sk i l l i n   m a t h e m a t i c s:   H i g h   sc h o o l   g r a d u a t e w o r k   a n a l y s i a n d   s t a n d p o i n t s ,   I n t e rn a t i o n a l   J o u r n a l   o f   Ed u c a t i o n   a n d   Pra c t i c e ,   v o l .   7 ,   n o .   3 ,   p p .   2 5 8 2 7 3 ,   2 0 1 9 ,   d o i :   1 0 . 1 8 4 8 8 / j o u r n a l . 6 1 . 2 0 1 9 . 7 3 . 2 5 8 . 2 7 3 .   [ 2 ]   F .   F .   A ma n d a ,   S .   B .   S u m i t r o ,   S .   R .   L e st a r i ,   a n d   I .   I b r o h i m,  T h e   c o r r e l a t i o n   o f   c r i t i c a l   t h i n k i n g   a n d   c o n c e p t   ma st e r y   t o   p r o b l e m - so l v i n g   s k i l l s:   T h e   r o l e   o f   c o m p l e x i t y   sci e n c e - p r o b l e b a se d   l e a r n i n g   mo d e l ,   Pe d a g o g i k a ,   v o l .   1 4 6 ,   n o .   2 ,   p p .   8 0 9 4 ,   S e p .   2 0 2 2 ,   d o i :   1 0 . 1 5 8 2 3 / p . 2 0 2 2 . 1 4 6 . 4 .   [ 3 ]   J.  L.   J e n s e n ,   M .   A .   M c D a n i e l ,   S .   M .   W o o d a r d ,   a n d   T .   A .   K u mm e r ,   T e a c h i n g   t o   t h e   t e st . . . o r   t e st i n g   t o   t e a c h :   E x a ms  r e q u i r i n g   h i g h e r   o r d e r   t h i n k i n g   s k i l l e n c o u r a g e   g r e a t e r   c o n c e p t u a l   u n d e r st a n d i n g ,   Ed u c a t i o n a l   Ps y c h o l o g y   Re v i e w ,   v o l .   2 6 ,   n o .   2 ,   p p .   3 0 7 3 2 9 ,   Ju n .   2 0 1 4 ,   d o i :   1 0 . 1 0 0 7 / s1 0 6 4 8 - 0 1 3 - 9 2 4 8 - 9.   [ 4 ]   W .   N u r h i d a y a t ,   E .   S u r a h ma n ,   a n d   E.   S u j a r w a n t o ,   T h e   e f f e c t   o f   c o n c e p t u a l   u n d e r st a n d i n g   p r o c e d u r e s   l e a r n i n g   m o d e l   o n   st u d e n t s’   h i g h e r   l e v e l   t h i n k i n g   sk i l l s,”   J PI   ( J u rn a l   Pe n d i d i k a n   I n d o n e si a ) ,   v o l .   1 2 ,   n o .   2 ,   p p .   3 8 6 3 9 4 ,   J u n .   2 0 2 3 ,   d o i :   1 0 . 2 3 8 8 7 / j p i u n d i k s h a . v 1 2 i 2 . 5 8 7 0 9 .   [ 5 ]   A .   R a m d a n i ,   A .   S y u k u r ,   I .   P e r mat a s a r i ,   a n d   M .   Y u st i q v a r ,   S t u d e n t   c o n c e p t s’   mas t e r y :   T e a c h i n g   m a t e r i a l b a sed   l e a r n i n g   w i t h   S ETS  i n t e g r a t e d   i n q u i r y ,   i n   5 t h   As i a n   E d u c a t i o n   S y m p o si u m   2 0 2 0   ( A ES   2 0 2 0 ) ,   2 0 2 1 ,   p p .   1 9 5 1 9 9 .   d o i :   1 0 . 2 9 9 1 / a ss e h r . k . 2 1 0 7 1 5 . 0 4 2 .   [ 6 ]   F .   F .   A ma n d a ,   S .   B .   S u mi t r o ,   S .   R .   L e st a r i ,   a n d   I .   I b r o h i m,   A n a l y s i o f   t h e   r e l a t i o n s h i p   b e t w e e n   c o n c e p t   mas t e r y   a n d   p r o b l e m - so l v i n g   s k i l l s   o f   p r e - serv i c e   B i o l o g y   t e a c h e r i n   h u m a n   p h y si o l o g y   c o u r se s,”   J u r n a l   Pe n d i d i k a n   S a i n s   I n d o n e si a ,   v o l .   9 ,   n o .   3 ,     p p .   4 2 1 4 3 2 ,   J u l .   2 0 2 1 ,   d o i :   1 0 . 2 4 8 1 5 / j p si . v 9 i 3 . 1 9 9 5 6 .   [ 7 ]   H .   J.  K l a u sm e i e r   a n d   D .   A .   F r a y e r ,   C o g n i t i v e   o p e r a t i o n i n   c o n c e p t   l e a r n i n g ,   i n   Am e r i c a n   Psy c h o l o g i c a l   As so c i a t i o n   A n n u a l   C o n v e n t i o n ,   1 9 7 1 ,   p p .   1 2 9 .   [ 8 ]   D .   A .   F r a y e r ,   E.   S .   G h a t a l a ,   a n d   H .   J.   K l a u s mei e r ,   L e v e l s   o f   c o n c e p t   mas t e r y :   I mp l i c a t i o n s   f o r   i n s t r u c t i o n ,   E d u c a t i o n a l   T e c h n o l o g y ,   v o l .   1 2 ,   n o .   1 2 ,   p p .   2 3 2 9 ,   1 9 7 2 .   [ 9 ]   M .   A .   A s h r a f   a n d   M .   S a r f r a z ,   B i o l o g y   a n d   e v o l u t i o n   o f   l i f e   s c i e n c e ,   S a u d i   J o u r n a l   o f   Bi o l o g i c a l   S c i e n c e s ,   v o l .   2 3 ,   n o .   1 ,   p p .   S 1 S 5 ,   J a n .   2 0 1 6 ,   d o i :   1 0 . 1 0 1 6 / j . sj b s. 2 0 1 5 . 1 1 . 0 1 2 .   [ 1 0 ]   S .   M .   D .   A l o n z o   a n d   V .   M .   M i st a d e s,   S t u d e n t s’   c o n c e p t u a l   u n d e r st a n d i n g   a n d   p r o b l e m - s o l v i n g   o f   t h e   w o r k - e n e r g y   a n d   i mp u l s e - mo me n t u m   t h e o r e ms   i n   a   f l i p p e d   c l a ss r o o m ,   J o u r n a l   o f   P h y si c s:   C o n f e re n c e   S e ri e s ,   v o l .   1 8 8 2 ,   n o .   1 ,   M a y   2 0 2 1 ,   d o i :   1 0 . 1 0 8 8 / 1 7 4 2 - 6 5 9 6 / 1 8 8 2 / 1 / 0 1 2 0 0 3 .   [ 1 1 ]   S .   P r a b h a ,   S t u d e n t s’   v i e w o n   d i f f i c u l t i e i n   c o n c e p t u a l   u n d e r s t a n d i n g   o f   s c i e n c e   a t   se c o n d a r y   st a g e ,   T h e   E u ra s i a   Pr o c e e d i n g o f   Ed u c a t i o n a l   S o c i a l   S c i e n c e s (E PE S S ) ,   v o l .   1 6 ,   p p .   1 1 0 ,   2 0 2 0 .     Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   13 ,   No .   6 Dec em b er   2 0 2 4 :   3 6 8 6 - 3 6 9 5   3694   [ 1 2 ]   R. - J.  S u n g ,   S .   L.   S w a r a t ,   a n d   S .   M .   Lo ,   D o i n g   c o u r sew o r k   w i t h o u t   d o i n g   b i o l o g y :   u n d e r g r a d u a t e   st u d e n t s’   n o n - c o n c e p t u a l   st r a t e g i e t o   p r o b l e s o l v i n g ,   J o u r n a l   o f   B i o l o g i c a l   Ed u c a t i o n ,   v o l .   5 6 ,   n o .   3 ,   p p .   2 7 1 2 8 3 ,   M a y   2 0 2 2 ,   d o i :   1 0 . 1 0 8 0 / 0 0 2 1 9 2 6 6 . 2 0 2 0 . 1 7 8 5 9 2 5 .   [ 1 3 ]   P .   M .   S a d l e r   a n d   G .   S o n n e r t ,   U n d e r s t a n d i n g   m i sc o n c e p t i o n s t e a c h i n g   a n d   l e a r n i n g   i n   mi d d l e   sc h o o l   p h y si c a l   sc i e n c e ,   Am e r i c a n   Ed u c a t o r ,   v o l .   4 0 ,   n o .   1 ,   p p .   2 6 3 2 ,   2 0 1 6 .   [ 1 4 ]   H e l mi ,   N .   Y .   R u st a ma n ,   F .   S u d a r g o   T a p i l o u w ,   a n d   T.   H i d a y a t ,   M i sc o n c e p t i o n   t y p e a n a l y si s   o n   me c h a n i sm   o f   e v o l u t i o n ,   J o u r n a l   o f   Ph y si c s:   C o n f e re n c e   S e r i e s ,   v o l .   1 1 7 5 ,   M a r .   2 0 1 9 ,   d o i :   1 0 . 1 0 8 8 / 1 7 4 2 - 6 5 9 6 / 1 1 7 5 / 1 / 0 1 2 1 6 9 .   [ 1 5 ]   L.   O .   L.   P u t r i ,   T.   R a h m a n ,   a n d   D .   P r i y a n d o k o ,   A n a l y z i n g   c o n c e p t s m a st e r y   a n d   m i sc o n c e p t i o n s   a b o u t   e v o l u t i o n   o f   b i o l o g y   ma j o r   st u d e n t s ,   J o u r n a l   o f   P h y s i c s:   C o n f e r e n c e   S e r i e s ,   v o l .   8 1 2 ,   F e b .   2 0 1 7 ,   d o i :   1 0 . 1 0 8 8 / 1 7 4 2 - 6 5 9 6 / 8 1 2 / 1 / 0 1 2 0 8 3 .   [ 1 6 ]   A .   N .   P u t r i   a n d   N .   E.   K .   H i n d r a s t i ,   I d e n t i f y   st u d e n t   m i sc o n c e p t i o n a b o u t   t h e   c o n c e p t   o f   e v o l u t i o n   u si n g   c e r t a i n t y   o f   r e s p o n se   i n d e x   ( C R I ) ,   ( i n   I n d o n e si a n ) ,   J u r n a l   K i p ra h ,   v o l .   8 ,   n o .   1 ,   p p .   1 2 1 8 ,   J u n .   2 0 2 0 ,   d o i :   1 0 . 3 1 6 2 9 / k i p r a h . v 8 i 1 . 1 6 0 4 .   [ 1 7 ]   R .   H .   R i s t a n t o ,   A .   S u r y a n d a ,   a n d   L.   A .   I n d r a sw a r i ,   T h e   d e v e l o p me n t   o f   e c o sy s t e mi s c o n c e p t i o n   d i a g n o s t i c   t e st ,   I n t e r n a t i o n a l   J o u rn a l   o f   E v a l u a t i o n   a n d   Re se a rc h   i n   E d u c a t i o n   ( I J E RE) ,   v o l .   1 2 ,   n o .   4 ,   p p .   2 2 4 6 2 2 5 9 ,   D e c .   2 0 2 3 ,   d o i :   1 0 . 1 1 5 9 1 / i j e r e . v 1 2 i 4 . 2 5 2 0 0 .   [ 1 8 ]   A .   C h a mp a g n e   Q u e l o z ,   M .   W .   K l y m k o w sk y ,   E .   S t e r n ,   E .   H a f e n ,   a n d   K .   K ö h l e r ,   D i a g n o st i c   o f   st u d e n t s’   mi sc o n c e p t i o n u si n g   t h e   B i o l o g i c a l   C o n c e p t I n st r u me n t   ( B C I ) :   A   me t h o d   f o r   c o n d u c t i n g   a n   e d u c a t i o n a l   n e e d s   a ss e ssm e n t ,   PLO S   O N E ,   v o l .   1 2 ,   n o .   5 ,   M a y   2 0 1 7 ,   d o i :   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 1 7 6 9 0 6 .   [ 1 9 ]   T.   B .   Y a t e a n d   E.   A .   M a r e k ,   A   s t u d y   i d e n t i f y i n g   b i o l o g i c a l   e v o l u t i o n - r e l a t e d   mi s c o n c e p t i o n h e l d   b y   p r e b i o l o g y   h i g h   sc h o o l   st u d e n t s ,   C r e a t i v e   Ed u c a t i o n ,   v o l .   0 6 ,   n o .   0 8 ,   p p .   8 1 1 8 3 4 ,   2 0 1 5 ,   d o i :   1 0 . 4 2 3 6 / c e . 2 0 1 5 . 6 8 0 8 5 .   [ 2 0 ]   B .   K .   B a y r a k ,   U s i n g   t w o - t i e r   t e st   t o   i d e n t i f y   p r i m a r y   s t u d e n t s’   c o n c e p t u a l   u n d e r st a n d i n g   a n d   a l t e r n a t i v e   c o n c e p t i o n i n   a c i d   b a se,   Me v l a n a   I n t e r n a t i o n a l   J o u r n a l   o f   E d u c a t i o n v o l .   3 ,   n o .   2 ,   p p .   1 9 2 6 ,   A u g .   2 0 1 3 ,   d o i :   1 0 . 1 3 0 5 4 / mi j e . 1 3 . 2 1 . 3 . 2 .   [ 2 1 ]   D .   K a l t a k i   a n d   N .   D i d i ,   I d e n t i f i c a t i o n   o f   p r e - s e r v i c e   p h y s i c s   t e a c h e r s’   m i sco n c e p t i o n s o n   g r a v i t y   c o n c e p t :   A   s t u d y   w i t h   a   3 - t i e r   mi sc o n c e p t i o n   t e s t ,   i n   AI C o n f e re n c e   Pr o c e e d i n g s ,   2 0 0 7 ,   v o l .   8 9 9 ,   p p .   4 9 9 5 0 0 .   d o i :   1 0 . 1 0 6 3 / 1 . 2 7 3 3 2 5 5 .   [ 2 2 ]   R .   D .   Est a c i o a ,   T h e   u s e   o f   mo d i f i e d   F r a y e r   m o d e l   i n   d e v e l o p i n g   s c i e n c e   v o c a b u l a r y   o f   s e n i o r   h i g h   s c h o o l   s t u d e n t s ,   N e w   T re n d s   a n d   I ss u e s   Pr o c e e d i n g s   o n   H u m a n i t i e s a n d   S o c i a l   S c i e n c e s ,   v o l .   4 ,   n o .   1 ,   p p .   3 6 4 2 ,   A u g .   2 0 1 7 ,   d o i :   1 0 . 1 8 8 4 4 / p r o so c . v 4 i 1 . 2 0 4 9 .   [ 2 3 ]   D .   K .   R e e d ,   E .   J e mi s o n ,   J.   S i d l e r - F o l s o m,   a n d   A .   W e b e r ,   El e c t r o n i c   g r a p h i c   o r g a n i z e r f o r   l e a r n i n g   sci e n c e   v o c a b u l a r y   a n d   c o n c e p t s:   T h e   e f f e c t s   o f   o n l i n e   s y n c h r o n o u d i sc u ssi o n ,   T h e   J o u r n a l   o f   Ex p e r i m e n t a l   E d u c a t i o n ,   v o l .   8 7 ,   n o .   4 ,   p p .   5 5 2 5 7 4 ,   O c t .   2 0 1 9 ,   d o i :   1 0 . 1 0 8 0 / 0 0 2 2 0 9 7 3 . 2 0 1 8 . 1 4 9 6 0 6 1 .   [ 2 4 ]   D .   A .   F r a y e r ,   W .   C .   F r e d r i c k ,   a n d   H .   J.  K l a u sm e i e r ,   A   sc h e m a   f o t e st i n g   t h e   l e v e l   o f   c o n c e p t   m a s t e r y :   re p o rt   f r o m   t h e   p ro j e c t   o n   si t u a t i o n a l   v a ri a b l e a n d   e f f i c i e n c y   o f   c o n c e p t   l e a rn i n g .   W i sc o n si n   R e se a r c h   a n d   D e v e l o p me n t   C e n t e r   f o r   C o g n i t i v e   Le a r n i n g ,   1 9 6 9 .   [ 2 5 ]   M .   A .   B r a v o   a n d   G .   N .   C e r v e t t i ,   A t t e n d i n g   t o   t h e   l a n g u a g e   a n d   l i t e r a c y   n e e d o f   E n g l i sh   l e a r n e r i n   sc i e n c e ,   E q u i t y   E x c e l l e n c e   i n   Ed u c a t i o n ,   v o l .   4 7 ,   n o .   2 ,   p p .   2 3 0 2 4 5 ,   A p r .   2 0 1 4 ,   d o i :   1 0 . 1 0 8 0 / 1 0 6 6 5 6 8 4 . 2 0 1 4 . 9 0 0 4 1 8 .   [ 2 6 ]   D .   K .   R e e d ,   Y .   P e t s c h e r ,   a n d   A .   J .   Tr u c k e n mi l l e r ,   Th e   c o n t r i b u t i o n   o f   g e n e r a l   r e a d i n g   a b i l i t y   t o   s c i e n c e   a c h i e v e m e n t ,   Re a d i n g   Re se a rc h   Q u a r t e r l y ,   v o l .   5 2 ,   n o .   2 ,   p p .   2 5 3 2 6 6 ,   A p r .   2 0 1 7 ,   d o i :   1 0 . 1 0 0 2 / r r q . 1 5 8 .   [ 2 7 ]   J.  M .   L i n a c r e ,   S a m p l e   si z e   a n d   i t e m   c a l i b r a t i o n   s t a b i l i t y ,   Ra s c h   m e a s u re m e n t   t r a n sa c t i o n s ,   v o l .   7 ,   1 9 9 4 .   [ 2 8 ]   M .   M ü l l e r ,   I t e m f i t   s t a t i s t i c s f o r   R a sc h   a n a l y si s :   C a n   w e   t r u st   t h e m ?   J o u r n a l   o f   S t a t i st i c a l   D i s t ri b u t i o n a n d   Ap p l i c a t i o n s ,   v o l .   7 ,   n o .   1 ,   D e c .   2 0 2 0 ,   d o i :   1 0 . 1 1 8 6 / s 4 0 4 8 8 - 0 2 0 - 0 0 1 0 8 - 7.   [ 2 9 ]   J.  M .   L i n a c r e ,   Te a c h i n g   R a sc h   m e a s u r e me n t ,   R a sc h   M e a su r e m e n t   T r a n s a c t i o n s ,   v o l .   3 1 ,   n o .   2 ,   2 0 1 7 .   [ 3 0 ]   T.   R .   O N e i l l ,   J .   L.   G r e g g ,   a n d   M .   R .   P e a b o d y ,   Ef f e c t   o f   s a mp l e   s i z e   o n   c o mm o n   i t e e q u a t i n g   u s i n g   t h e   d i c h o t o m o u r a sc h   mo d e l ,   Ap p l i e d   Me a s u reme n t   i n   Ed u c a t i o n ,   v o l .   3 3 ,   n o .   1 ,   p p .   1 0 2 3 ,   Ja n .   2 0 2 0 ,   d o i :   1 0 . 1 0 8 0 / 0 8 9 5 7 3 4 7 . 2 0 1 9 . 1 6 7 4 3 0 9 .   [ 3 1 ]   W .   J.   B o o n e ,   J.   R .   S t a v e r ,   a n d   M .   S .   Y a l e ,   R a sc h   a n a l y si s   i n   t h e   h u m a n   sci e n c e s .   D o r d r e c h t :   S p r i n g e r   N e t h e r l a n d s ,   2 0 1 4 .   d o i :   1 0 . 1 0 0 7 / 9 7 8 - 94 - 007 - 6 8 5 7 - 4.   [ 3 2 ]   C .   R o b s o n   a n d   K .   M c C a r t a n ,   Re a l   w o rl d   rese a r c h .   W i l e y ;   4 t h   e d i t i o n ,   2 0 1 6 .   [ 3 3 ]   J.  P a l l a n t ,   S P S S   su r v i v a l   m a n u a l :   st e p   b y   st e p   g u i d e   t o   d a t a   a n a l y si s   u s i n g   I BM   S P S S .   R o u t l e d g e ,   2 0 2 0 .   d o i :   1 0 . 4 3 2 4 / 9 7 8 1 0 0 3 1 1 7 4 5 2 .   [ 3 4 ]   R .   B .   K l i n e ,   Pr i n c i p l e a n d   p r a c t i c e   o f   st r u c t u ra l   e q u a t i o n   m o d e l i n g ,   4 t h   e d .   G u i l f o r d   P r e ss,  2 0 1 6 .   [ 3 5 ]   K .   B e c k ,   E n s u r i n g   c o n t e n t   v a l i d i t y   o f   p s y c h o l o g i c a l   a n d   e d u c a t i o n a l   t e st   t h e   r o l e   o f   e x p e r t s,”   Fro n t l i n e   L e a rn i n g   R e se a rc h   v o l .   8 ,   n o .   6 ,   p p .   1 3 7 ,   S e p .   2 0 2 0 ,   d o i :   1 0 . 1 4 7 8 6 / f l r . v 8 i 6 . 5 1 7 .   [ 3 6 ]   L.   F .   D e   Le ó n ,   J.  P o d o s ,   T.   G a r d e z i ,   A .   H e r r e l ,   a n d   A .   P .   H e n d r y ,   D a r w i n f i n c h e s   a n d   t h e i r   d i e t   n i c h e s:   t h e   s y mp a t r i c   c o e x i st e n c e   o f   i m p e r f e c t   g e n e r a l i s t s,”   J o u r n a l   o f   Ev o l u t i o n a r y   B i o l o g y ,   v o l .   2 7 ,   n o .   6 ,   p p .   1 0 9 3 1 1 0 4 ,   Ju n .   2 0 1 4 ,   d o i :   1 0 . 1 1 1 1 / j e b . 1 2 3 8 3 .   [ 3 7 ]   W .   J.   B o o n e   a n d   J .   R .   S t a v e r ,   A d v a n c e i n   R a sc h   a n a l y ses   i n   t h e   h u m a n   s c i e n c e s .   C h a m:   S p r i n g e r   I n t e r n a t i o n a l   P u b l i s h i n g ,   2 0 2 0 .   d o i :   1 0 . 1 0 0 7 / 9 7 8 - 3 - 030 - 4 3 4 2 0 - 5.   [ 3 8 ]   T.   B o n d ,   A p p l y i n g   t h e   Ra sc h   m o d e l :   F u n d a m e n t a l   m e a s u reme n t   i n   t h e   h u m a n   sci e n c e s .   R o u t l e d g e ,   2 0 1 5 .   d o i :   1 0 . 4 3 2 4 / 9 7 8 1 3 1 5 8 1 4 6 9 8 .   [ 3 9 ]   S .   G y l l   a n d   S .   R a g l a n d ,   I mp r o v i n g   t h e   v a l i d i t y   o f   o b j e c t i v e   a ss e ssm e n t   i n   h i g h e r   e d u c a t i o n :   S t e p f o r   b u i l d i n g   a   b e s t i n c l a ss   c o m p e t e n c y b a se d   a ss e ssm e n t   p r o g r a m,”   T h e   J o u r n a l   o f   C o m p e t e n c y - Ba se d   E d u c a t i o n ,   v o l .   3 ,   n o .   1 ,   M a r .   2 0 1 8 ,   d o i :   1 0 . 1 0 0 2 / c b e 2 . 1 0 5 8 .   [ 4 0 ]   R .   M .   Y a s i n ,   F .   A .   N .   Y u n u s,  R .   C .   R u s,   A .   A h ma d ,   a n d   M .   B .   R a h i m ,   V a l i d i t y   a n d   r e l i a b i l i t y   l e a r n i n g   t r a n sf e r   i t e m u si n g   R a s c h   mea s u r e me n t   m o d e l ,   Pr o c e d i a   -   S o c i a l   a n d   Be h a v i o r a l   S c i e n c e s ,   v o l .   2 0 4 ,   p p .   2 1 2 2 1 7 ,   A u g .   2 0 1 5 ,   d o i :   1 0 . 1 0 1 6 / j . sb s p r o . 2 0 1 5 . 0 8 . 1 4 3 .   [ 4 1 ]   J.  M .   L i n a c r e ,   Wi n st e p s   R a sc h   m e a s u r e m e n t   c o m p u t e r   p r o g ra m   u s e r’ g u i d e .   W i n st e p s,  B e a v e r t o n ,   2 0 1 5 .   [ 4 2 ]   H .   K .   M o h a j a n ,   Tw o   c r i t e r i a   f o r   g o o d   mea s u r e m e n t i n   r e sea r c h :   V a l i d i t y   a n d   r e l i a b i l i t y ,   A n n a l o f   S p i ru   H a ret   U n i v e rs i t y .   Ec o n o m i c   S e ri e s ,   v o l .   1 7 ,   n o .   4 ,   p p .   5 9 8 2 ,   D e c .   2 0 1 7 ,   d o i :   1 0 . 2 6 4 5 8 / 1 7 4 6 .   [ 4 3 ]   D .   C o o p e r   a n d   P .   S c h i n d l e r ,   Bu s i n e ss  rese a rc h   m e t h o d s ,   1 2 t h   e d i t i o n .   N e w   Y o r k :   M c G r a w - H i l l ,   2 0 1 3 .   [ 4 4 ]   M .   P o l a t ,   A n a l y si o f   m u l t i p l e - c h o i c e   v e r s u s   o p e n - e n d e d   q u e st i o n s   i n   l a n g u a g e   t e st a c c o r d i n g   t o   d i f f e r e n t   c o g n i t i v e   d o mai n   l e v e l s ,   Re s e a r c h   o n   L a n g u a g e   a n d   S o c i a l   I n t e r a c t i o n ,   v o l .   1 4 ,   n o .   2 ,   p p .   7 6 9 6 ,   2 0 2 0 .   [ 4 5 ]   L.   H .   S c h e l l e k e n s,   W .   D .   J .   K r e mer,   M .   F .   V a n   d e r   S c h a a f ,   C .   P .   M .   V a n   d e r   V l e u t e n ,   a n d   H .   G .   J.   B o k ,   B e t w e e n   t h e o r y   a n d   p r a c t i c e :   Ed u c a t o r s’   p e r c e p t i o n s   o n   a s sessme n t   q u a l i t y   c r i t e r i a   a n d   i t s   i m p a c t   o n   st u d e n t   l e a r n i n g ,   Fr o n t i e rs   i n   Ed u c a t i o n ,   v o l .   8 ,   Ju n .   2 0 2 3 ,   d o i :   1 0 . 3 3 8 9 / f e d u c . 2 0 2 3 . 1 1 4 7 2 1 3 .   [ 4 6 ]   D .   M .   M i l l e r ,   R .   L .   L i n n ,   a n d   N .   E.   G r o n l u n d ,   Me a s u reme n t   a n d   a ssessm e n t   i n   t e a c h i n g .   1 1 t h   e d i t i o n .   L o n d o n :   P e a r so n ,   2 0 2 1 .   [ 4 7 ]   J.  M .   L i n a c r e ,   A   u ser’s   g u i d e   t o   w i n st e p s m i n i st e p :   R a sc h - m o d e l   c o m p u t e p ro g r a m s .   B e a v e r t o n ,   O r e g o n :   W i n s t e p s,   2 0 1 4 .   [ 4 8 ]   A .   C .   B u t l e r ,   M u l t i p l e - c h o i c e   t e st i n g   i n   e d u c a t i o n :   A r e   t h e   b e st   p r a c t i c e f o r   a ssessme n t   a l s o   g o o d   f o r   l e a r n i n g ?   J o u r n a l   o f   A p p l i e d   Re se a rc h   i n   M e m o r y   a n d   C o g n i t i o n ,   v o l .   7 ,   n o .   3 ,   p p .   3 2 3 3 3 1 ,   S e p .   2 0 1 8 ,   d o i :   1 0 . 1 0 1 6 / j . j a r m a c . 2 0 1 8 . 0 7 . 0 0 2 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2         F r a ye r   mo d el - b a s ed   a s s ess m en t fo r   d etec tin g   s tu d en ts   c o n ce p tu a l u n d ers ta n d in g   …  ( R a ma d a n ti P r a tivi )   3695   [ 4 9 ]   J.  d e   L i ma   a n d   T.   M .   Lo n g ,   S t u d e n t e x p l a i n   e v o l u t i o n   b y   n a t u r a l   se l e c t i o n   d i f f e r e n t l y   f o r   h u ma n s   v e r su s   n o n h u m a n   a n i ma l s,   C BE L i f e   S c i e n c e Ed u c a t i o n ,   v o l .   2 2 ,   n o .   4 ,   D e c .   2 0 2 3 ,   d o i :   1 0 . 1 1 8 7 / c b e . 2 1 - 06 - 0 1 4 5 .   [ 5 0 ]   F .   U .   O n o w u g b e d a   e t   a l . ,   C a n   t h e   c u l t u r o - t e c h n o - c o n t e x t u a l   a p p r o a c h   ( C T C A )   p r o m o t e   s t u d e n t s’   m e a n i n g f u l   l e a r n i n g   o f   c o n c e p t s   i n   v a r i a t i o n   a n d   e v o l u t i o n ?   R e se a r c h   i n   S c i e n c e   T e c h n o l o g i c a l   E d u c a t i o n ,   v o l .   4 2 ,   n o .   2 ,   p p .   3 9 5 4 1 1 ,   A p r .   2 0 2 4 ,   d o i :   1 0 . 1 0 8 0 / 0 2 6 3 5 1 4 3 . 2 0 2 2 . 2 0 8 4 0 6 0 .   [ 5 1 ]   W .   K .   A b e b e ,   H .   W .   T a f a r i ,   a n d   S .   B .   F a r i s,  Ef f e c t   o f   c o n t e x t   b a se d   R EA C s t r a t e g y   o n   st u d e n t s’   c o n c e p t u a l   u n d e r s t a n d i n g   o f   h e r e d i t y ,   C o g e n t   Ed u c a t i o n ,   v o l .   1 1 ,   n o .   1 ,   D e c .   2 0 2 4 ,   d o i :   1 0 . 1 0 8 0 / 2 3 3 1 1 8 6 X . 2 0 2 3 . 2 2 9 0 1 0 4 .   [ 5 2 ]   R .   D .   A n a z i f a   a n d   D .   D j u k r i ,   P r o j e c t - b a se d   l e a r n i n g   a n d   p r o b l e m - b a s e d   l e a r n i n g :   A r e   t h e y   e f f e c t i v e   t o   i m p r o v e   st u d e n t t h i n k i n g   sk i l l s ?   J u r n a l   Pe n d i d i k a n   I P I n d o n e si a ,   v o l .   6 ,   n o .   2 ,   p p .   3 4 6 3 5 5 ,   O c t .   2 0 1 7 ,   d o i :   1 0 . 1 5 2 9 4 / j p i i . v 6 i 2 . 1 1 1 0 0 .   [ 5 3 ]   R .   M .   M a si g n o ,   En h a n c i n g   h i g h e r   o r d e r   t h i n k i n g   s k i l l s   i n   a   m a r i n e   b i o l o g y   c l a ss   t h r o u g h   p r o b l e m - b a s e d   l e a r n i n g ,   As i a   P a c i f i c   J o u rn a l   o f   M u l t i d i s c i p l i n a ry   Re se a rc h ,   v o l .   2 ,   n o .   5 ,   p p .   1 6 ,   2 0 1 4 .   [ 5 4 ]   K. - C .   Y u ,   S . - C .   F a n ,   a n d   K . - Y .   L i n ,   En h a n c i n g   s t u d e n t s’   p r o b l e m - s o l v i n g   sk i l l t h r o u g h   c o n t e x t - b a se d   l e a r n i n g ,   I n t e rn a t i o n a l   J o u rn a l   o f   S c i e n c e   a n d   M a t h e m a t i c Ed u c a t i o n ,   v o l .   1 3 ,   n o .   6 ,   p p .   1 3 7 7 1 4 0 1 ,   D e c .   2 0 1 5 ,   d o i :   1 0 . 1 0 0 7 / s1 0 7 6 3 - 0 1 4 - 9 5 6 7 - 4.       B I O G RAP H I E S O F   AUTH O RS       Ra m a d a n t Pr a tiv i           is  a   g ra d u a te  stu d e n t,   De p a rtme n o f   Bio l o g y   E d u c a ti o n ,   G ra d u a te  S c h o o l,   Un i v e rsitas   S e b e las   M a re t ,   In d o n e sia .   H er   re se a rc h   fo c u se o n   b io l o g y   e d u c a ti o n ,   lea rn in g   p ro g re ss io n ,   a n d   c las sro o m   a ss e ss m e n t.   S h e   c a n   b e   c o n tac ted   a e m a il :   Ra m a d a n ti _ p ra ti v i@stu d e n t. u n s.a c . id .         Mu r n Ra m li           is  o n e   o lec t u re a th e   Un iv e rsitas   S e b e las   M a re t.   S h e   wa s   a p p o i n ted   lec tu re in   t h e   u n iv e rsi ty   in   2 0 1 3   a n d   we n o n   t o   p u rs u e   h e p o stg ra d u a te  stu d ies   in   e d u c a ti o n a m a n a g e m e n a th e   G r a d u a te  S c h o o o E d u c a ti o n   a n d   Hu m a n   De v e lo p m e n t   Na g o y a   Un i v e rsity .   He re se a rc h   in tere sts li e   in   th e   b io l o g y   e d u c a ti o n ,   lea rn i n g   p ro g re ss io n ,   c las sro o m   a ss e ss m e n t,   S TE M ,   g a m in g   lea rn in g ,   a n d   c u rricu l u m   m a n a g e m e n t.   S h e   c a n   b e   c o n tac ted   a e m a il m ra m li m @s ta ff. u n s.a c . i d .         Yud Rin a n t o           is  o n e   o lec tu re in   b i o l o g y   e d u c a ti o n   st u d y   p r o g ra m   a t   Un iv e rsitas   S e b e las   M a re t ,   S u ra k a rta.  His  c u rre n tl y   se rv e a Co o r d i n a to fo P re p a ra ti o n   a n d   De b riefin g   a t   KK Un it   UN S .   He   h a d   stu d ied   f o d o c t o ra i n   Bra wijay a   Un iv e rsity   in   Ag ricu lt u ra stu d y   p r o g ra m   a n d   g ra d u a ted   i n   2 0 0 5 .   His  c u rre n re se a rc h   is  a b o u th e   e ffe c ti v e n e ss   o f   in t e g ra ted   se n s o r a n d   we a th e r   f o re c a st  b a se d   In t e rn e o f   T h in g ( Io T)   o n   p lan ts i n   g re e n h o u se s.  He   c a n   b e   c o n tac ted   a e m a il y u d i . rin a n to @ sta ff. u n s.a c . id .     Evaluation Warning : The document was created with Spire.PDF for Python.