I nte rna t io na l J o urna l o f   E v a lua t io n a nd   Resea rc h in E du ca t io n ( I J E RE )   Vo l.   10 ,   No .   1 Ma r ch   2 0 2 1 ,   p p .   1 85 ~ 1 9 2   I SS N:  2 2 5 2 - 8 8 2 2 DOI : 1 0 . 1 1 5 9 1 / ijer e . v 1 0 i 1 . 2 1 0 0 7          185       J o ur na l ho m ep a g e h ttp : //ij ere. ia esco r e. co m   D ev elo pment of   Webtoo n   no n - test  instrume nt  a s e d uca tion  media       M er y   B er lia n 1 Ria n Ve bria nto 2 M us a   T ha h ir 3   1 De p a rtme n o Ag ri b u si n e ss ,   F a c u lt y   o M a th e m a ti c s a n d   Na tu ra S c ien c e s,  Un iv e rsitas   Terb u k a ,   I n d o n e sia   2 De p a rtme n o M a ste E d u c a ti o n   fo M a d ra sa h   Ib ti d a iy a h   Tea c h e rs,  F a c u lt y   o Ed u c a ti o n   a n d   Tea c h e Train i n g ,   Un iv e rsitas   Isla m   Ne g e ri  S u l tan   S y a rif  Ka sim   Riau ,   In d o n e sia   3 De p a rtme n o M a t h e m a ti c   Ed u c a ti o n ,   F a c u lt y   o f   Ed u c a ti o n   a n d   T e a c h e Train in g ,   Un i v e rsitas   Isla m   Ne g e ri  S u lt a n   S y a rif  Ka sim   Riau ,   I n d o n e sia       Art icle  I nfo     AB S T RAC T   A r ticle  his to r y:   R ec eiv ed   Sep   8 ,   2 0 20   R ev is ed   J an   2 ,   2 0 20   Acc ep ted   Feb   5 ,   2 0 21       Th e   o b jec ti v e   o th is  re se a rc h   wa s   to   d e v e lo p   n o n - tes in st ru m e n o r   q u e stio n n a ire  t o   m e a su re   th e   e v a lu a ti o n   o t h e   u se   o f   Web t o o n   a m o n g   t h e   stu d e n ts  o Op e n   U n iv e rsit y   in   P e k a n b a ru ,   R ia u ,   I n d o n e sia   a n d   t o   o b tai n   th e   in stru m e n t ’s   v a li d it y   a n d   re li a b il it y .   T h is  re se a rc h   e m p lo y e d   th e   An a ly sis,  De sig n ,   De v e lo p m e n t ,   Im p lem e n tatio n ,   Ev a l u a ti o n   ( AD DIE )   in stru c ti o n a m o d e l.   T h e   d a ta  we re   c o ll e c ted   u sin g   o n li n e   q u e stio n n a ire .   Th e r e   we re   5 5   re sp o n d e n ts  p a rti c i p a ted   i n   th is  r e se a rc h .   Th e   d a t a   c o ll e c ted   we re   a n a ly z e d   d e sc rip ti v e l y   u si n g   S P S S   p r o g ra m   v e rsio n   2 3 . 0 0   fo wi n d o ws .   T h e   re su lt   o f   th e   d a ta  a n a ly sis  i n d ica ted   t h a th e   in str u m e n h a th e   p e rc e n tag e   o f   a g re e m e n t   re su lt   o f   8 2 . 7 5 %   (v a li d a n d   Cr o n b a c h   a lp h a   wit h   s c o re   0 . 9 4 2   (re li a b le).  T h e   d a ta   p ro v e d   th a t   t h e   i n stru m e n t   h a v e ry   fe a sib le.   Th is  re su lt   sh o we d   t h a t h is  re s e a rc h   a n d   d e v e lo p m e n p ro d u c e d   Web to o n   n o n - tes in stru m e n w h ich   is v a li d   a n d   re li a b le.   K ey w o r d s :   Dev elo p m en t   E d u ca tio n   m e d ia   I n ter est   Mo tiv atio n   No n - test   in s tr u m en t   W eb to o n   T h is i a n   o p e n   a c c e ss   a rticle   u n d e r th e   CC B Y - SA   li c e n se .     C o r r e s p o nd ing   A uth o r :   R ian   Veb r ian to   Dep ar tm en t o f   Ma s ter   E d u ca ti o n   f o r   Ma d r asah   I b tid aiy a h   T e ac h er s   Facu lty   o f   E d u ca tio n   a n d   T ea c h er   T r ain in g   Un iv er s itas   I s lam   Neg er i Su ltan   Sy ar if   Kasim   R iau   J l.  Su b r an tas Km .   1 5 ,   Pek an b a r u ,   2 8 2 9 3   I n d o n esia   E m ail:  r ian . v eb r ia n to @ u in - s u s k a. ac . id       1.   I NT RO D UCT I O N     Scien ce   an d   tech n o lo g y   d e v elo p m en in cr ea s es  as  tim g o es  b y   an d   a f f ec th co m m u n icatio n   tech n o lo g y   s ig n if ican tly .   T h is   is   in d icate d   b y   th s o p h is ticatio n   in   th cu r r en m ass   co m m u n icatio n   m e d ia  s u ch   as  r ad io ,   telev is io n ,   tele p h o n e   an d   in ter n et   as  th m o s cu r r en o n [ 1 ] .   I n ter n et  b ec o m es  o n e   o f   th e   m o d er n   co m m u n icatio n   m e d ia  in ter ested   b y   m a n y   p eo p le  s in ce   it  is   ea s ily   ac ce s s ed   [ 2 ] T h er ar e   3 . 6   b illi o n   in ter n et  u s er   th r o u g h o u th wo r ld   in   2 0 1 8   an d   ac co r d in g   to   I n d o n esia   in ter n et  s er v ice  ass o ciatio n   ( APJ I I ) m o r th an   5 0 o r   a b o u 1 4 3   m illi o n   I n d o n esian   h a v c o n n ec ted   to   t h in ter n et  [ 3 ] .   L I NE   W eb to o n   is   r elea s ed   in   2 0 0 4   in   So u th   Ko r ea   b y   Nav er   an d   o f f icially   r elea s ed   in   Ap r il   2 0 1 5   i n   I n d o n esia  [ 4 ] .   Sin ce   its   r elea s e,   L I NE   W eb to o n   h as  b ee n   o b tain in g   p o s itiv r esp o n s f r o m   m an y   p e o p le.   T h e   ac tiv u s er s   o f   L I NE   W eb to o n   in   I n d o n esia  r ea c h ed   6   m illi o n   p eo p le  w h ich   ar th h ig h est  ac tiv u s er   o f   L I NE   W eb to o n   co m p ar ed   t o   o th er   co u n tr ies  [ 5 - 7 ] .   T h e   p r esen ce   o f   in ter n et   m ak es  in d iv id u al  to   b ec o m ea s ier   in   ac ce s s in g   all  in f o r m atio n ,   wh eth er   it  is   n ews,  m u s ic,   en ter tain m en t,  n ew  tr en d   an d   o th er s   f r o m   v ar io u s   p ar ts   o f   th e   wo r ld   with o u t a n y   lim it o f   s p ac an d   tim e.     Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   10 ,   No .   1 Ma r ch   2 0 2 1 :   1 85   -   1 9 2   186   On o f   th ef f ec ts   o f   tech n o lo g y   d ev e lo p m en is   th lear n in g   m ed ia.   L ea r n in g   m ed ia  is   th s o u r ce   o f   lear n in g   f o r   u n iv er s ity   s tu d e n ts .   I m ea n s   th at  th m ed ia   co n tain s   m ater ial  th at  m u s b lear n ed   b y   th e   s tu d en ts   wh eth er   it  is   in d iv i d u ally   o r   in   g r o u p   [8 - 1 0 ] .   T h er ef o r e,   it  ca n   b c o n s id e r ed   th at  m e d ia  h as   u tili za tio n   to   ex p lain   m ess ag e,   o v er co m th lim itatio n   o f   s p ac e,   tim e,   p er s o n n el  an d   s en s o r y ,   em er g e   lear n in g   m o ti v atio n   an d   in ter ac tio n   b etwe en   th s tu d e n ts   a n d   m e d ia  s o   th at   it  en a b les  th s tu d en ts   to   lear n   in d ep en d en tly   ac co r d in g   to   th eir   ab ilit y   as  well  a s   v is u al,   a u d ito r y   an d   k in esth etic  s k ills .   L ea r n in g   p r o ce s s   ca n   o cc u r   an y w h er an d   an y tim b ased   o n   w h at  en co u n t er ed   b y   th in d iv id u al  i n   h is   d aily   life   [ 1 1 - 1 3 ] L ea r n in g   p r o ce s s   ca n   last   th r o u g h o u life   b ec a u s lear n in g   p r o ce s s   d o   n o k n o tim an d   p lace .   I n   ad d itio n   to   ex p er ien cin g   f o r m al  lear n in g   in   class r o o m ,   s tu d e n ts   also   h av r esp o n s ib ilit y   to   le ar n   in d e p en d e n tly .   I n d ep e n d en t   lear n in g   ca r r ied   o u b y   s tu d en ts   ac co r d in g   to   th p r o ce d u r a n d   m ed ia   th ey   p r ef er r ed   [ 1 4 - 1 6 ] B ased   o n   th ab o v ex p lan ati o n ,   th en   th is   r esear ch   s h o u ld   d ev elo p   in ter esti n g   m e d ia  to   a ttra ct  th s tu d en ts   in   lear n in g   m ac r o m o lecu la r   ch e m is tr y ,   o v er co m in g   s p ac a n d   tim lim itatio n ,   clar if y in g   th m ess ag an d   em er g in g   s tu d en ts   lear n in g   m o tiv atio n   s o   th at  th s tu d en ts   c an   lear n   in d ep en d en tly   th r o u g h   lin W eb to o n .   W eb to o n   is   d ig ital  co m ic   wh ich   is   ea s ily   ac ce s s ed   th r o u g h   s m ar tp h o n o r   co m p u ter /la p to p   s in ce   alm o s all  s tu d en ts   h av s m ar tp h o n o r   c o m p u ter /lap t o p   [ 1 7 ] W eb to o n   is   th ac r o n y m   f r o m   web s ite  ca r to o n ,   in   wh ich   t h ex ten s iv e   m ea n i n g   o f   W eb to o n   is   c o llectio n   o f   im ag es  p u b lis h ed   o n lin e   [ 1 8 ] W eb to o n   is   also   ca lled   as  s u b - g en r o f   m a n h wa  b u p u b lis h ed   d if f e r en tly ,   in   wh ich   m an h wa  is   p u b lis h ed   p h y s ically   in   m ag az in o r   b o o k ,   wh ile  W eb to o n   is   p u b lis h ed   th r o u g h   in ter n et  m ed ia,   u s u ally   in   co m i h o s tin g   s ites   [ 1 9 ] L in W eb to o n   h as  ad v an tag es   in   lear n in g ,   o n o f   th em   is   as  g o o d   ed u ca tio n al  m ed ia  to   i m p r o v th s tu d e n ts   in ter est  in   lear n in g   an d   its   ea s ily - ac ce s s ed   an y wh er e   [ 2 0 ] .   I n   ad d itio n ,   W eb to o n   also   h as  p o ten tial  to   i n cr ea s th s elf - m o tiv atio n   in   f ac in g   s cien tific   is s u [ 2 1 ] .   B ased   o n   p r ev io u s   r esear ch   p r o ject  c o n d u cted ,   it  o b tain ed   th at  th u s er s   o f   W eb to o n   s er v ice  wer s atis f ied   if   th ey   o b tain ed   th in f o r m atio n   th e y   d esire d ,   n o o n l y   co n ce r n in g   th in ter esti n g   m atter s   b u also   im p o r tan m at ter s   [ 2 2 ] .   T h is   m ea n s   th at  lear n in g   m e d ia  in   th e   f o r m   o f   W eb to o n   is   u s ed   b ec au s W eb to o n   r ea d er s   d o   n o t   o n ly   o b tain   in ter esti n g   th in g s ,   b u also   o b tain ed   in ter esti n g   th in g s   in   th f o r m   o f   lear n in g   m ater ial.   Fu r t h er m o r e ,   o th er   r esear c h   o b ta in ed   th v ir tu o f   s cien tific   co m ic  wh ich   is   its   b en ef its   f o r   th e   lear n er s   to   o b tain   f air   ac h iev em e n in   co g n itiv asp ec [ 2 3 ] C o m ic  ca n   im p r o v th m ath e m atica l k n o wled g o f   d y s lex ic  s tu d en ts   [ 2 4 ] .   T h u s ,   th er is   n ee d   em er g es in   th e   f o r m   o f   d e v elo p in g   in s tr u m en t s   in   th is   f ield .   I n   th e   L aw  o f   th e   R ep u b lic  o f   I n d o n esia  Nu m b er   1 4   o f   2 0 0 5   co n ce r n i n g   T e ac h er s   an d   L ec tu r er s ,   ar ticle  2 0   s tates  th at  in   ca r r y i n g   o u p r o f ess io n al  d u ties ,   teac h er s   an d   lectu r e r s   ar o b lig ed   to   p lan   to   lear n ,   ca r r y   o u t a   q u ality   lear n in g   p r o ce s s ,   an d   ass ess   an d   ev alu ate  lear n in g   o u tco m es.  T h e   ev alu atio n   p r o ce s s   is   o n e   o f   th teac h er ' s   d u ties   th at  wil d eter m in th n ex lear n i n g   p r o c ess ' s   d ir ec tio n .   E v alu atio n   ca n   b s tated   as  a   s y s tem atic  p r o ce s s   in   ass ess i n g   th e   lev el  o f   ac h iev e m en o f   in s tr u ctio n al   g o als  [ 2 5 ] .   Me an wh ile,   an o th e r   o p in io n   s tates  th at  ev alu atio n   is   s y s tem atic  p r o ce s s   f o r   d eter m in in g   v al u b ased   o n   d at co llected   th r o u g h   m ea s u r em en [ 2 6 ] .   T h v alu e - tak in g   p r o ce s s   m u s b ca r r ied   o u o b jectiv ely ,   an d   it  s h o u ld   b tak en   ca r o f   th at  s u b jectiv elem en ts   ar n o in clu d ed   as  co n s id er atio n   an d   ass ess m en t.  I n   o th er   wo r d s ,   it  ca n   b s tated   th at  ev alu atio n   co n s is ts   o f   th two   s tep s   ah ea d ,   n am ely   m ea s u r in g   an d   ass ess in g .   T h r ev iew  is   s y s tem atic   an d   co n tin u o u s   p r o ce s s   o r   ac tiv ity   to   co llect  in f o r m atio n   ab o u th lea r n in g   p r o ce s s   an d   o u tco m es  o f   s tu d en ts   to   m ak d ec is io n s   b ased   o n   s p ec if ic  cr iter ia  an d   c o n s id er atio n s   [ 2 7 ,   28] .   T h p u r p o s o f   th ass ess m en is   to   f in d   o u h o f a r   th te ac h er   h as  s u cc ee d ed   in   ca r r y i n g   o u t h lear n in g   p r o ce s s ,   wh ich   is   u s ed   f o r   f ee d b ac k   f o r   th teac h er   in   p lan n in g   th n e x lear n i n g   p r o ce s s   [ 2 9 ,   3 0 ] Of ten   in   th lear n in g   p r o ce s s ,   asp ec ts   o f   th ev alu atio n   o f   lear n in g   o u tco m es  ar i g n o r ed   [ 3 1 ] .   B ec au s th e   teac h er   f o c u s es  to o   m u c h   o n   wh at  will   b tau g h to   s tu d en t s as  r esu lt,  th lear n in g   p r o ce s s   r u n s   n icely   an d   n ea tly ,   b u th ass ess m en to o ls   u s ed   n o   lo n g er   s ee   th tar g et  to   b ass ess ed .   I m p r o v in g   th q u ality   o f   ed u ca tio n   is   in s ep ar ab le  f r o m   th ap p licatio n   o f   ass ess m en ts   th at  ca n   ac cu r ate ly   m ea s u r th r esu lt  o f   a   lear n in g   p r o ce s s ,   m ea n in g   t h a to   d eter m i n th e   r esu lt  in   le ar n in g ,   q u ality   m ea s u r i n g   in s tr u m en is   n ee d e d   [ 3 2 ,   3 3 ] .   T h teac h er ' s   ab ilit y   to   ar r an g test   in s tr u m en ts   p o s itiv ely   af f ec ts   s tu d en lear n i n g   o u tc o m es.  W ith   an   ass ess m en test   in s tr u m en th at  m ee ts   th c r iter ia,   o f   co u r s e,   s tu d en lear n i n g   o u tco m es   will  b ad eq u ately   d etec ted   an d   ca n   b u s ed   as  ev alu atio n   m ater ial  f o r   o t h er   le ar n in g   p r o g r a m s .   test   i s   s a i d   to   b g o o d   if   it  h as  cr iter ia,   in clu d in g   v alid ity ,   r eliab ilit y ,   an d   h as p r ac tical  v alu e   [ 3 4 ,   35] .   T h lectu r er s '   ab ilit y   to   m ak ass ess m en in s tr u m en ts   d id   n o m ee th c r iter ia  f o r   f air   test   ass es s m en t.  R esear ch er s   h av e   m ad p r elim in ar y   o b s er v atio n s   o n   Au g u s 2 5 ,   2 0 2 0 ,   at   th Op en   Un iv e r s ity   b y   co llectin g   test   k its   wh ic h   in cl u d e:  1 )   Data   s h o ws  th at   t o tal  o f   3 0   q u esti o n s   ( 7 5 %)  a r i n v alid   a n d   o n l y   ten   q u esti o n s   ( 2 5 %)  ar e   v alid ;   2 )   T h e   r eliab ilit y   o f   th e   item s   was  0 . 4 6 ,   wh ich   m ea n s   th at   i was  in   a   s u itab le  ca teg o r y 3 )   T h er e   ar e   4 2 . 5 o f   th item s   in   th e   ea s y   class ,   4 0 o f   th item s   in   th e   m e d iu m   ca teg o r y ,   an d   1 7 . 5 o f   th item s   in   th ch allen g in g   co u r s e;  an d   4 )   T h d if f er en ce   is   th at  7 . 5 is   ter r ib le,   4 5 is   awf u l,  1 3 is   s u f f icien t,  1 5 is   g o o d ,   an d   n o n is   in   a n   o u ts tan d i n g   ca teg o r y .   Fro m   t h ese  d ata,   it  ca n   b c o n clu d ed   th at  th k n o wled g in s tr u m en h as  n o m et  th ty p e   o f   g o o d   test   in s tr u m en b ec au s th er ar s till   in v alid   q u esti o n s ,   th r eliab ilit y   is   s ti ll  in   th ex ce llen ca teg o r y ,   t h d if f icu lty   lev el  o f   th item s   alwa y s   d o es  n o Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J E v al  &   R es E d u c     I SS N:  2252 - 8 8 2 2       D ev elo p men t o f W eb to o n   n o n - test   in s tr u men t a s   ed u ca tio n   med ia   ( Mer B erli a n )   187   m ee th s tan d ar d ,   m a n y   o f   th em   ar ca teg o r ize d   as  b ad   an d   s o m ev en   v er y   b ad .   Me an w h ile,   b ased   o n   th e   r esu lts   o f   in ter v iews  with   o n o f   th tu to r s   o n   Au g u s 2 0 ,   2 0 2 0 ,   at  th Op e n   Un iv er s ity ,   t h r esu lts   wer e 1 )   T h lectu r e r s   wer e   o n ly   lim ite d   to   m ak i n g   ass ess m en in s tr u m en ts ,   th e   lev el  o f   v alid ity ,   r e liab ilit y ,   d if f icu lty   lev el  an d   d is t r ib u tio n   h ad   n ev er   b ee n   an aly ze d   th r ea lm   o f   k n o wled g e ;   2 )   L ec tu r er s   d o   n o u n d e r s tan d   h o to   in ter p r et   ass ess m en in s tr u m en ts ;   3 )   L ec t u r er s   d o   n o u n d er s tan d   th ca teg o r y   o f   r ig h ass ess m en in s tr u m en ts ;   4 )   T h ass ess m en in s tr u m en ts   u s ed   th is   y ea r   is   th s am as  th ass ess m en in s tr u m en ts   u s ed   last   y ea r   m ea n in g   th to o ls   ar n o t   ev alu ated .   B ased   o n   th d ata  f r o m   th a b o v an aly s is ,   it  ca n   b co n cl u d ed   th at  it  is   n ec ess ar y   to   d ev elo p   a n   ass es s m en in s tr u m en u s ed   f o r   n o n - test   to o ls   o r   q u esti o n n ai r es  to   m e asu r th ev alu atio n   o f   th u s o f   o n lin e   co m ics  am o n g   s tu d en ts   at  UPB J J   Pek an b ar u   Op en   Un iv e r s ity   th at  m ee th cr iter ia  o f   r ig h ass ess m en in s tr u m en ts ,   n am ely   v alid ity   a n d   r eliab ilit y .         2.   RE S E ARCH   M E T H O D   T h is   r esear ch   an d   d e v elo p m en w as   d esig n ed   to   p r o d u ce   W eb to o n   n o n - test   in s tr u m en t.  T h e   d ev elo p m e n m o d el  o f   W eb to o n   n o n - test   in s tr u m en ad ap ted   to   th d ev elo p m en m o d e s tated   b y   L ee   an d   Owe n s ,   wh ich   is   ADDI E   in s tr u ctio n al  m o d el  [ 3 6 ] T h s tag es  o f   d ev elo p m en i n clu d an aly s is d esig n ,   d ev elo p m e n t,  im p lem en tatio n ,   an d   ev alu atio n .   T h r esp o n d en ts   o f   th is   r esear c h   wer e   5 5   s am p les  with   r an d o m   s am p lin g   p r o ce s s   f r o m   u n iv er s ity   s tu d e n ts   an d   co m m u n ity .   Valid atio n   was  d o n e   to   d eter m in e   wh eth er   th in s tr u m e n d ev el o p ed   wa s   v alid   o r   n o t.  T h v ali d atio n   r esu lt  was  in   th f o r m   o f   s u g g esti o n   f r o m   th v alid ato r   an d   v alid ity   p er ce n tag o f   W eb to o n   non - test   in s tr u m en t.   Valid atio n   o f   in s t r u m en u s u ally   we  g et  th r o u g h   th p e r ce n tag e   o f   ex p er a g r ee m e n t.  T h e   co n s tr u ct  o f   W eb to o n   non - test   in s tr u m en in clu d es :   1 )   d id ac tic  co m p o n en t,  2 )   W eb t o o n   co m ic  co n s tr u ctio n ,   3 )   W eb to o n   c o m ic  tech n i q u e,   4 )   ea s in ess   in   th u s in g ,   5 )   ef f icien cy   o f   W eb to o n   c o m ic,   6 )   b e n ef its ,   7 )   i n ter est  an d   8 )   m o tiv atio n .   T h v alid ity   p e r ce n tag e   o f   W eb to o n   non - test   in s tr u m en was  o b tain ed   f r o m   th m ea n   s co r o f   q u esti o n n air u s in g   v alid atio n   q u esti o n n air o f   L ik e r s ca le  f r o m   ex p er ag r ee m en t.  L ik er s ca le  u s ed   is   in   th f o r m   o f   n u m b er   4 ,   3 ,   2   a n d   1 .   T h cr iter ia  o f   ea ch   L i k e r t scale s   is   p r esen ted   in   T ab le  1   [ 3 7 ]       T ab le  1 .   Mo d if icatio n   o f   L ik er t   s ca le  ev alu atio n   cr iter ia    S c o r e   Ex p l a n a t i o n   4   S c a l e   4 ,   i f   t h e   u s e r   g i v e s   st r o n g l y   a g r e e   e v a l u a t i o n   3   S c a l e   3 ,   i f   t h e   u s e r   g i v e s   a g r e e   e v a l u a t i o n   2   S c a l e   2 ,   i f   t h e   u s e r   g i v e s   d i sa g r e e   e v a l u a t i o n   1   S c a l e   1 ,   i f   t h e   u s e r   g i v e s   st r o n g l y   d i sa g r e e   e v a l u a t i o n       T h an aly s is   o f   v alid atio n   r esu lt d ata  b y   th u s er   is   f o r m u lated   in   ( 1 )               =     100%                     ( 1 )     E x p lan atio n   P     s co r p er ce n ta g   ∑  x      n u m b e r   o f   t o tal  s co r f r o m   t h u s er   in   o n q u esti o n   item     ∑  x i     m ax im u m   s co r o f   o n q u es tio n   item       B ased   o n   th an aly s is   r esu lt,  i was  k n o wn   th v alid ity   o f   th in s tr u m en d ev elo p e d .   T h i n s tr u m en o f   ev alu atio n   was  co n s id er e d   f ea s ib le  if   th in ter p r etatio n   6 1 %.  T h c r iter ia  o f   ev alu atio n   in s tr u m en s co r in ter p r etatio n   is   p r esen ted   in   T ab le  2   [ 3 7 ] .       T ab le  2 C r iter ia  o f   i n s tr u m en t   f ea s ib ilit y   s co r e   P e r c e n t a g e   C r i t e r i a   0 - 2 0 %   N o t   f e a si b l e   2 1 % - 4 0 %   Le ss  f e a si b l e   4 1 % - 6 0 %   Q u i t e   f e a si b l e   6 1 % - 8 0 %   F e a si b l e   8 1 % - 1 0 0 %   S t r o n g l y   f e a s i b l e       Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   10 ,   No .   1 Ma r ch   2 0 2 1 :   1 85   -   1 9 2   188   T h v alid ity   o f   q u esti o n   item   was  o b tain ed   f r o m   em p ir ical  r esp o n d en ts   o f   t h is   r esear ch   b a s ed   o n   th e   cr iter ia  o f   ev alu atio n   in s tr u m e n s co r in ter p r etatio n .   T h r e s ea r ch er   d eter m in r eliab ilit y   o f   in s tr u m en t b ased   o n   th d ata  o b tain e d   in   wh ich   th Qu esti o n   item   in   an   in s tr u m en is   co n s id er ed   as  v alid   if   th co u n Pear s o n   co ef f icien t ( r - c o u n t )   is   h ig h e r   th an   th Pear s o n   co ef f icien t o f   th tab le  ( r - tab le)   [ 3 8 ] .   Fu r th e r m o r e,   th v alid ity   o f   an   in s tr u m e n m u s h av m in im u m   s co r o f   0 . 3   [ 3 9 ]   a n d   r eliab ilit y   s co r o f   th in s tr u m en m u s b at  th e   r an g o f   0 . 6 <X < [ 4 0 ] .   T h in ter p r etatio n   o f   test   co r r elatio n   n u m b er   o v e r all  ca n   b s ee n   i n   T ab le  3   [ 3 7 ] .       T ab le  3 .   I n ter p r etatio n   o f   n o n - test   co r r elatio n   n u m b er   C o r r e l a t i o n   n u m b e r   C r i t e r i a   0 . 8 0 0   <   r 11   <   1 . 0 0 0   V e r y   h i g h   0 . 6 0 0   <   r 11   <   0 . 8 0 0   H i g h   0 . 4 0 0   <   r 11   <   0 . 6 0 0   F a i r   0 . 2 0 0   <   r 11   <   0 . 4 0 0   Lo w   0 . 0 0 0   <   r 11   <   0 . 2 0 0   V a r y   l o w       3.   RE SU L T A ND  D I SCU SS I O N   3 . 1 .   I ns t rum ent   v a lid a t io n r esu lt   T h v alid atio n   r esu lt  o f   th e   n o n - test   in s tr u m en i n   th e   f o r m s   o f   ev alu atio n   an d   s u g g esti o n   f r o m   th e   u s er   u s ed   o n lin q u esti o n n air e .   T h v alid atio n   s h ee in clu d e f ea s ib ilit y   in   th asp ec ts   o f   d id ac tic  co m p o n en t ,   W eb to o n   co m ic  co n s tr u ctio n ,   W eb to o n   co m ic  tech n i q u e,   ea s in ess   in   th u s in g ,   ef f icien c y   o f   W eb to o n   co m ic,   b en ef its ,   in ter est ,   an d   m o tiv at io n .   T h e   s co r o b tain ed   f r o m   th u s er   was  co n v er ted   i n to   p er ce n tag to   k n o w   th in s tr u m en t   v alid ity   lev e l.  T h e   d ata  wer e   co llected   u s in g   o n lin e   q u esti o n n air e   b o th   s tu d en ts   a n d   co m m u n ity   with   th r an d o m   s am p lin g   wer 5 5   r esp o n d en ts   in   th is   r esea r ch .   T h d ata  co llected   wer an aly ze d   d escr ip tiv ely   u s in g   SP SS   p r o g r am   v e r s io n   2 3 . 0 0   f o r   W in d o ws .   T h v alid atio n   r esu lt  o f   ea ch   co m p o n en is   p r esen ted   in   T a b le  4 .       T ab le  4 .   Valid atio n   r esu lt o f   W eb to o n   n o n   test   in s tr u m en t   A sp e c t   e v a l u a t e d   n   P e r c e n t a g e   C r i t e r i a   D i d a c t i c   c o mp o n e n t   55   8 0 . 2 7 %   V a l i d   W e b t o o n   c o m i c   c o n s t r u c t i o n   55   8 3 . 6 4 %   S t r o n g l y   v a l i d   C o m i c   t e c h n i q u e   55   8 4 . 0 0 %   S t r o n g l y   v a l i d   Ea si n e ss   i n   t h e   u si n g   55   8 1 . 3 6 %   S t r o n g l y   v a l i d   Ef f i c i e n c y   o f   W e b t o o n   c o mi c   55   8 4 . 8 2 %   S t r o n g l y   v a l i d   B e n e f i t s   55   8 3 . 4 5 %   S t r o n g l y   v a l i d   I n t e r e st   55   8 2 . 8 7 %   S t r o n g l y   v a l i d   M o t i v a t i o n   55   8 1 . 5 7 %   S t r o n g l y   v a l i d       T ab le  4   e x p lain s   th at  f r o m   th e   n o n - test   in s tr u m en d e v elo p e d   th at  th e   co n s tr u ct  ( d id ac tic  c o m p o n en t,   W eb to o n   co m ic  co n s tr u ctio n ,   W eb to o n   co m ic  tech n i q u e,   ea s in ess   in   th u s in g ,   ef f icien c y   o f   W eb to o n   co m ic,   b en ef its ,   in ter est ,   an d   m o tiv ati o n )   h a d   s tr o n g ly   v alid   cr iter ia.   T h is   is   d u to   th e   m ea n   o f   p er ce n tag s co r is   at  th r an g o f   81% - 1 0 0 with   th ca teg o r y   i f   s tr o n g ly   v alid .   B ased   o n   th d ata  th at   th e   in s tr u m en h as  v alid   cr iter ia.   T h is   r esu lt  is   s u p p o r t ed   b y   th p r ev io u s   r esear c h   p r o jects  wh ich   p r o d u ce d   f ea s ib le  in s tr u m en to   b e   u s ed   [ 4 1 ,   4 2 ] .   Feasib ilit y   test   is   a ls o   v er y   im p o r tan to   b e   d o n e   as  s tated   b y   W id y an in g s ih   th at  f ea s ib ilit y   ev alu atio n   is   v e r y   im p o r tan t   to   en s u r t h f ea s ib ilit y   o f   l ea r n in g   m ater ial  to   b u s ed   i n   lear n in g   p r o ce s s     [ 4 3 44] .   T h r o u g h   v alid atio n   t est  an d   in s tr u m en t   f ea s ib ilit y ,   d ev elo p m en r esu lt  is   co n s id er ed   as  f ea s ib le  b y   th u s er s   to   b u s ed   i n   ev alu ati n g   th lin W eb to o n   a s   ed u ca t io n al  m ed ia.       3 . 2 .   Resul t   o f   em pirica l t ry - o ut   t est  o f   t he  ins t rum ent     T h em p ir ical   tr y - o u test   o f   th W eb to o n   n o n - test   in s tr u m en was  d o n o n   th e   s tu d en ts   o f   Op en   Un iv er s ity   co n s is tin g   o f   v ar i o u s   s tu d y   p r o g r am s .   T h s u b jects  o f   r esp o n d en ts   o f   th is   r esear ch   wer 5 5   r esp o n d en ts .   T h tr y - o u o f   th i s   n o n - test   in s tr u m en aim ed   to   k n o th r eliab ilit y   o f   th q u esti o n s   r aised .   T h e   s u m m ar y   o f   th v alid atio n   r e s u lt  o f   th q u esti o n s   ite m   o f   th W eb to o n   non - test   in s tr u m en th at  h as  b ee n   d ev elo p e d   is   p r esen ted   in   T ab l 5 .               Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J E v al  &   R es E d u c     I SS N:  2252 - 8 8 2 2       D ev elo p men t o f W eb to o n   n o n - test   in s tr u men t a s   ed u ca tio n   med ia   ( Mer B erli a n )   189   T ab le  5 .   I n s tr u m en v alid ity   u s in g   item   co r r elatio n   s co r o f   co r r ec ted   item - t o tal  co r r elatio n   f o r   e ac h   s tu d y   co n s tr u ct   C o n st r u c t   C o r r e l a t i o n   sc o r e   o f   c o r r e c t e d   i t e m - t o t a l   c o r r e l a t i o n   C r i t e r i a   D i d a c t i c   c o mp o n e n t   0 . 7 3 9   V a l i d   W e b t o o n   c o m i c   c o n s t r u c t i o n   0 . 7 3 8   V a l i d   W e b t o o n   c o m i c   t e c h n i q u e   0 . 7 1 5   V a l i d   Ea si n e ss   i n   t h e   u si n g   0 . 7 3 5   V a l i d   Ef f i c i e n c y   o f   W e b t o o n   c o mi c   0 . 8 6 1   V a l i d   B e n e f i t s   0 . 8 8 8   V a l i d   I n t e r e st   0 . 8 7 3   V a l i d   M o t i v a t i o n   0 . 7 8 8   V a l i d       T ab le  5   s h o ws  th at   th r - tab l s co r is   m o r th a n   0 . 2 5 4   o b tain ed   f r o m   th ta b le  with   a   d eg r ee   o f   f r ee d o m   ( d f )   o f   5 3   f r o m   3 4   q u esti o n n air es  d is tr ib u ted   as  tr i als.  I n   ad d itio n ,   th c o r r elatio n   b etwe en   th e   item s   with   s co r o f   m o r th an   0 . 2 5   i s   co n s id er ed   as a   h ig h   s co r b ased   on  T ab le  3   [ 3 9 ] Fro m   th wh o le  ca lcu latio n ,   all  item s   wer d ec lar ed   v alid   b ec au s th s co r o f   r - co u n t   >   r - tab le  s o   th at   all  q u esti o n   item s   ca n   b u s ed   to   m ea s u r th ev alu atio n   o f   th u s o f   o n lin co m ics  f o r   s tu d en ts .   T h q u esti o n   item   in   an   in s tr u m en is   co n s id er ed   to   b v alid   if   th ca lcu lated   Pear s o n   co ef f icien t   s co r ( r - co u n t)   is   h ig h er   th a n   th Pear s o n   tab le  co ef f icien s co r ( r - tab le)   [ 4 5 ,   46] .   Fu r th e r m o r e ,   3 4   item   q u esti o n s   wh ich   ar v alid   ar ca lcu lated   r eg ar d i n g   its   r eliab ilit y .   T h r esu lt  o f   r el iab ilit y   ca lcu latio n   o f   th q u es tio n   item   o b tain ed   0 . 9 4 2   with   th cr iter ia  o f   v er y   h ig h   as p r esen ted   in   T ab le  6 .         T ab le  6 .   I n d ex   o f   C r o n b ac h   a l p h r eliab ilit y   o f   ea ch   s tu d y   c o n s tr u ct   C o n st r u c t   O v e r a l l   C r o n b a c h   a l p h a   sc o r e   C r i t e r i a   D i d a c t i c   c o mp o n e n t   . 9 3 8   V e r y   H i g h   W e b t o o n   c o m i c   c o n s t r u c t i o n   . 9 3 8   V e r y   H i g h   W e b t o o n   c o m i c   t e c h n i q u e   . 9 3 9   V e r y   H i g h   Ea si n e ss   i n   t h e   u si n g   . 9 3 7   V e r y   H i g h   Ef f i c i e n c y   o f   W e b t o o n   c o mi c   . 9 2 9   V e r y   H i g h   B e n e f i t s   . 9 2 7   V e r y   H i g h   I n t e r e st   . 9 2 8   V e r y   H i g h   M o t i v a t i o n   . 9 3 4   V e r y   H i g h       T ab le  6   s h o ws  th at   C r o n b ac h   alp h R eliab ilit y   I n d ex   s co r o b tain ed   f o r   ea c h   s tu d y   c o n s tr u ct  in   th is   r esear ch   f o r   d i d ac tic  co m p o n en t ,   W eb to o n   co m ic  co n s tr u c tio n ,   W eb to o n   co m ic  tech n iq u e ,   ea s in ess   in   th e   u s in g ,   ef f icien cy   o f   W eb to o n   co m ic ,   b en ef its ,   in ter est ,   an d   m o tiv atio n   r esp ec tiv ely   ar 0 . 938,   0. 9 3 8 ,   0 . 9 39 ,   0. 9 3 7 ,   0 . 9 2 9 ,   0 . 9 2 7 ,   0 . 9 2 8 ,   an d   0 . 9 3 4 .   T h is   in d icate s   th at  th r eliab ilit y   s co r >0 . 6 0   f o r   ea ch   s tu d y   c o n s tr u ct.   T h is   r esu lt  is   s u p p o r ted   b y   th s tatem en g iv e n   b y   B asu k a n d   Har y an to   th at  in s tr u m en h as  h ig h   c o r r elatio n   an d   r eliab le  at  th r an g o f   0. 6 <X <1   [ 4 7 ,   4 8 ] .   T h u s ,   th e   eig h s tu d y   co n s tr u cts  h a v e   m et  th r eliab ilit y   r eq u ir em e n s o   th at  it  ca n   b u s ed   f o r   f u r th er   r esear ch   u s e.   T ab le  5   wh ich   I n s tr u m en V alid ity   Usi n g   I tem   C o r r elatio n   Sco r o f   C o r r ec te d   I tem - T o tal  C o r r elatio n   Fo r   ea ch   s tu d y   co n s tr u ct   ar v alid   ( s co r is   m o r th an   0 . 2 5   o b tain ed )   an d   T ab le   6   p r esen in f o r m atio n   th i n s tr u m en wh ich   C r o n b ac h   al p h R el iab ilit y   I n d ex   s co r m o r th an   0 . 6   o b tain ed   ar r e liab le.   s o   th at  W eb to o n   non - t est  in s tr u m en h as  m et  th e m p ir ical  tr y - o u t,  ar e   v alid   an d   r eliab el  cr iter ia.   T h i s   r esu lt  is   s u p p o r ted   b y   th o p in io n   th at  an   ass ess m en in s t r u m en th at  ca n   b e   u s ed   is   an   in s tr u m en th at  h as  m et  th v alid   cr iter ia  [ 4 9 - 51] ,   th in s tr u m en also   m u s m et  h ig h   v alid it r eq u ir em e n [ 5 2 ,   53] .   T h r es u lts   o f   th is   s tu d y   ar also   s u p p o r ted   b y   th f in d in g s   o f   th r esear ch   ca r r ied   o u t   b y   I n ten i,  et  a l . ,   w h o   s tated   th at  o n o f   th e   co n d itio n s   f o r   a n   in s tr u m en th at  is   s u itab le  f o r   u s in   r esear ch   is   v alid   [ 5 4 ,   5 5 ] .   I n   a d d itio n   to   v alid ,   in s tr u m e n m u s also   m et  r eliab ilit y   cr iter ia,   in   wh ic h   h av i n g   C r o n b ac h   a lp h s co r e   o f   m o r e   th an   0 . 6   [ 5 6 ]   if   th C r o n b ac h   alp h r eliab ilit y   co ef f icien is   at   teh   r an g o f   0 . 7 0 - 0 . 9 0   [ 5 7 ] .   T h r esu lts   o f   th is   s tu d y   ar also   s u p p o r ted   b y   th o p in io n   g iv en   b y   T a n g   Keo w,   et  a l .   th at  th s ca le  an d   cr iter ia  u s ed   to   m ea s u r t h te s t in s tr u m en t m u s t m ee t v er y   r eliab le  cr iter ia  [ 5 8 ] .   T h u s ,   th r esear ch   in s tr u m en th at  m ea s u r es  th ev alu atio n   o f   th u s o f   lin W eb to o n   th at   h as  b ee n   test ed   was  d ee m ed   wo r th y   o f   u s an d   was  tr u s ted   to   b u s ed   in   r esear ch   th at  m ea s u r es  e v alu atio n   o f   th u s e   o f   th lin W eb to o n   f o r   u s er s .   T h i s   is   s u p p o r ted   b y   p r ev i o u s   r esear ch   wh ich   s tated   th at  th in s tr u m en ts   u s ed   wer d er iv ed   f r o m   th s elec tio n   o f   v alid   a n d   r eliab le  t o o ls   [ 5 9 - 6 1 ] .   T h ev al u atio n   in s tr u m en f o r   th u s o f   th W eb to o n   lin f o r   u s er s   ca n   p r ev en s p ec u latio n   f r o m   u s er s   in   m ak in g   ev alu a tio n ,   esp ec ially   in   d eter m in in g   th f in al  s co r a f ter   ca r r y in g   o u r esear ch   o n   th ac h iev em en o f   ev alu ati n g   th u s o f   t h e   W eb to o n   f o r   u s er s .       Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   10 ,   No .   1 Ma r ch   2 0 2 1 :   1 85   -   1 9 2   190   4.   CO NCLU SI O N   T h is   r esear ch   an d   d ev elo p m e n r esu lted   in   p r o d u ct  in   th e   f o r m   o f   W eb to o n   n o n - test   in s tr u m en t.  T h n o n - test   in s tr u m en t d ev el o p ed   is   an   o n lin q u esti o n n air u s in g   L ik er t scale .   T h r es u lts   o f   d ata  an aly s is   f r o m   th v alid atio n   r esu lts   s h o th at   th in s tr u m en d ev elo p ed   is   v er y   f ea s ib le.   T h is   is   in d icate d   b y   th e   av er ag p e r ce n tag o f   v alid at io n   r esu lts   o f   8 2 . 7 5 with   v er y   v alid   ca teg o r y .   B ased   o n   th r esu lts   o f   th e   em p ir ical  test   an aly s is   o b tain ed   3 4   v alid   q u esti o n s   with   a n   av er a g c o r r elatio n   s co r e   o f   0 . 7 9 2   with   v alid   cr iter ia  an d   v er y   h ig h   lev el  o f   r eliab ilit y   o f   0 . 9 4 2 .   T h ese  r esu lts   in d icate   th at  in   th is   r esear ch   an d   d ev elo p m e n t,  v alid   a n d   r eli ab le  n o n - t est  W eb to o n   in s tr u m en h as  b ee n   s u cc esfu lly   p r o d u ce d .   User s   ar ex p ec ted   t o   b e   ab le   to   u s n o n - test   in s tr u m en ts   th at   h av e   b ee n   d e v elo p ed   to   m ea s u r t h e   u s o f   W eb to o n s   to   tr ain   an d   d ev elo p   s tu d en ts '   ab ilit ies  in   u s in g   W eb to o n .   Fu r t h er m o r e ,   it  is   n ec ess ar y   to   test   th W eb to o n   n o n - test   in s tr u m en o n   a   b r o ad er   s ca le  s o   th at  th ef f ec tiv en ess   o f   th W eb to o n   n o n - test   in s tr u m en b ei n g   d ev elo p e d   ca n   b s ee n .       ACK NO WL E DG E M E NT S   T h is   r esear ch   was  co n d u cted   well  an d   s y s tem atica lly   b ec au s o f   th ap p r o p r iate  in f o r m atio n   an d   f in an cial  s u p p o r t b y   th h ea d   o f   Op e n   U n iv er s ity   in   Pek an b ar u ,   R iau ,   I n d o n esia.       RE F E R E NC E S   [1 ]   M .   Ng a fifi ,   Ad v a n c e in   tec h n o lo g y   a n d   p a tt e rn s   o f   h u m a n   li fe   in   s o c io - c u lt u ra p e rsp e c ti v e ,   J .   Pem b a n g .   Pen d i d ik.  F o n d a si  d a n   A p l. ,   v o l.   2 ,   n o .   1 ,   p p .   3 3 4 7 ,   2 0 1 4 ,   d o i:   1 0 . 2 1 8 3 1 /j p p fa . v 2 i1 . 2 6 1 6 .   [2 ]   M .   C.   B.   Um a n a il o ,   e a l . ,   Cy b e rc rime   c a se   a imp a c d e v e lo p m e n o c o m m u n ica ti o n   tec h n o l o g y   th a tro u b li n g   so c iety ,   In t .   J .   S c i.   T e c h n o l .   Res . ,   v o l.   8 ,   n o .   9 ,   p p .   1 2 2 4 1 2 2 8 ,   2 0 1 9 ,   d o i:   1 0 . 5 2 8 1 /ze n o d o . 3 4 5 7 4 2 0 .   [3 ]   D.  J.  Riv e o n g   a n d   S .   H.  Ra c h m a d ,   In ter n e Us e rs  ,   M a rk e t   Targ e a n d   Di g it a Tra d in g   o M S M Es  in   I n d o n e sia   In tern e Us e rs ,   M a r k e Targ e a n d   Dig it a Trad in g   o f   M S M Es  i n   I n d o n e sia ,   in   IAR IW   Ge n e ra l   Co n fer e n c e ,   2 0 1 8 ,   p p .   1 1 2 .   [4 ]   B.   Ye c ies ,   A.  S h im,  a n d   J.  Ya n g ,   1 3   Ch i n e se   T ra n sc re a to rs ,   W e b to o n a n d   t h e   Ko re a n   Di g it a l   W a v e .   Dig it a l   Tran sa c ti o n s i n   As ia:  Eco n o m ic,  I n fo rm a ti o n a l,   a n d   S o c ial  Ex c h a n g e s,  2 0 1 9 .   [5 ]   D.  S u sil o ,   N.  C h ristan t y a wa ti ,   I.   Jo k o   P ra se ty o ,   a n d   S .   R o d ric k   Ju ra m a n ,   Co n ten A n a ly sis  o LI NE  Ap p li c a ti o n   Us e r:  In ters e c ti n g   Tec h n o lo g y   a n d   S o c ial  Ne e d e d ,   J .   P h y s.  C o n f.   S e r. ,   v o l .   1 1 7 5 ,   n o .   1 ,   p p .   1 6 ,   2 0 1 9 ,   d o i:   1 0 . 1 0 8 8 / 1 7 4 2 - 6 5 9 6 /1 1 7 5 /1 / 0 1 2 2 2 4 .   [6 ]   J.  Y.  P y o ,   M .   Ja n g ,   a n d   T.   J.  Yo o n ,   Dy n a m ics   Be twe e n   Ag e n ts  in   Th e   Ne Web to o n   Eco s y ste m   in   Ko re a :   Re sp o n se s to   Wav e s o Tran sm e d ia an d   Tran s n a ti o n a li sm ,   In t.   J .   Co mm u n . ,   v o l.   1 3 ,   p p .   2 1 6 1 2 1 7 8 ,   2 0 1 9 .   [7 ]   Z.   E.   S u b a n d a n d   T.   P .   S a d o n o ,   Co m m o d ifi c a ti o n ,   S p a ti a li z a ti o n ,   a n d   S tru c t u rin g   i n   Ne M e d ia  in   In d o n e sia   (Vin c e n M o sc o ' P o li ti c a l   Eco n o m y   o f   Co m m u n ica ti o n   o n   t h e   Web t o o n   Li n e )   (in   Ba h a sa ) ,   in   Na t io n a l   Co n fer e n c e   o Cre a ti v e   In d u stry ,   2 0 1 8 ,   p p .   8 2 1 8 4 2 ,   d o i:   1 0 . 3 0 8 1 3 /n c c i. v 0 i0 . 1 2 9 7 .   [8 ]   M a imu n a h ,   M e th o d o Us in g   L e a rn in g   M e d ia  (i n   Ba h a sa ) ,   Al - A fka J .   Ke isla m.   Per a d . ,   v o l .   5 ,   n o .   1 ,   p p .   1 2 4 ,   2 0 1 6 ,   d o i:   1 0 . 2 8 9 4 4 /afk a r. v 5 i 1 . 1 0 7 .   [9 ]   Z.   M u st ik a ,   M e d ia  u rg e n c y   i n   s u p p o rti n g   a   c o n d u c iv e   lea rn in g   p ro c e ss   (in   Ba h a sa ) ,   CIRCUIT   J .   Ilm.   Pen d id ik.   T e k .   El e k tro ,   v o l.   1 ,   n o .   1 ,   p p .   6 0 7 3 ,   2 0 1 5 ,   d o i:   1 0 . 2 2 3 7 3 /crc . v 1 i1 . 3 1 1 .   [1 0 ]   D.  Erf ian t o ,   W .   P .   Ra h a y u ,   a n d   D .   D.  Ku s u m a jan to ,   Ap p li c a ti o n   o Blo g   F o M e d ia  Lea rn in g   o On li n e   M a rk e ti n g   c o u rse s (i n   Ba h a sa ) ,   J .   Pen d i d ik.   Bi sn is  d a n   M a n a j. ,   v o l.   1 ,   n o .   1 ,   p p .   1 7 0 ,   2 0 1 5 .   [1 1 ]   A.  C.   Ha y k   a n d   U.   S a il e r,   C o s m o p o li tan   En c o u n ters   P r o v o k e   A   Ch a n g e   i n   Ha b it s:  H o C h in e se   S l o M a c h in e s   Affe c Ru ra Li fe   in   G h a n a ,   Ge o fo ru m ,   v o l .   1 1 1 ,   p p .   3 9 4 7 ,   2 0 2 0 ,   d o i 1 0 . 1 0 1 6 /j . g e o f o ru m . 2 0 2 0 . 0 3 . 0 0 5 .   [1 2 ]   F .   El iza ,   D.  E.   M y o ri,   a n d   R.   F a d li ,   Va li d it y   o A n d r o id - Ba se d   Lea rn in g   M e d ia  in   S u b jec M e a su re m e n a n d   In stru m e n tati o n ,   J .   Ph y s.  C o n f .   S e r. ,   v o l .   1 3 8 7 ,   n o .   1 ,   p p .   1 7 ,   2 0 1 9 ,   d o i:   1 0 . 1 0 8 8 /1 7 4 2 - 6 5 9 6 / 1 3 8 7 / 1 /0 1 2 0 2 8 .   [1 3 ]   I.   M .   Ne g a ra ,   P h e n o m e n o l o g ica stu d y Th e   i n teg ra ti o n   o tec h n o lo g y   a m e d ia  i n   tea c h i n g   a n d   l e a rn in g   p ro c e ss   b a se d   o n   stu d e n ts’  p e rc e p ti o n ,   S p e c tr.  J .   Ilm.   S T BA ,   v o l.   5 ,   n o .   2 ,   p p .   0 1 4 0 3 0 ,   2 0 1 9 .   [On l in e ].   Av a il a b le :   h tt p : // jo u rn a l . stb a p o n t ian a k . a c . i d / in d e x . p h p / v o l 1 2 /article /v iew /3 9 /3 9 .   [1 4 ]   J.  Ab b a s,   J.  Am a n ,   M .   Nu ru n n a b i ,   a n d   S .   Ba n o ,   T h e   Im p a c o S o c ia M e d ia o n   Lea rn in g   Be h a v io r   fo S u sta in a b le   Ed u c a ti o n :   Ev id e n c e   o S tu d e n ts   fro m   S e lec ted   Un iv e rsiti e i n   P a k istan ,   S u st a i n a b il it y ,   v o l.   1 1 ,   n o .   6 ,   p p .   1 2 3 ,   2 0 1 9 ,   d o i:   1 0 . 3 3 9 0 /s u 1 1 0 6 1 6 8 3 .   [1 5 ]   N.  Ib ra h im,  Th e   re latio n sh i p   b e twe e n   in d e p e n d e n lea rn i n g   a nd  a c h iev e m e n m o ti v a ti o n   wit h   Isla m ic  re li g io u s   e d u c a ti o n   lea rn i n g   o u tco m e Ter b u k a   Ju n io r   Hig h   S c h o o l   (i n   Ba h a sa ) ,   L e n ter a   Pen d id ik. ,   v o l .   1 5 ,   n o .   1 ,   p p .   1 1 7 ,   2 0 1 2 .   [1 6 ]   M .   De wi,   Y.  R.   S a ri,   S .   Am n a ,   R a sm it a ,   a n d   R.   S u sa n ti ,   Th e   u n d e rsta n d in g   o Lec tu re rs  Ab o u Th e   Ne Li tera c y   in   I n d u strial  Re v o lu t io n   Era  4 . 0 :   S tu d y   Ca se   o U n iv e rsit y   o f   P u tra  I n d o n e sia   YPT P a d a n g ,   J .   Ph y s.  C o n f.   S e r. ,   v o l.   1 3 3 9 ,   n o .   1 ,   p p .   1 7 ,   2 0 1 9 ,   d o i:   1 0 . 1 0 8 8 / 1 7 4 2 - 6 5 9 6 /1 3 3 9 /1 /0 1 2 1 0 5 .   [1 7 ]   U.  S u m a n jay a   a n d   R.   T.   P a d m a n in g ru m ,   De v e l o m p m e n o c h e m istry   Web t o o n   f o lea rn i n g   o m a c ro m o lec u le  m a teria (in   Ba h a sa ) ,   J .   Pem b e la ja ra n   Kim. ,   v o l.   7 ,   n o .   5 ,   p p .   2 1 0 2 1 9 ,   2 0 1 8 .   [1 8 ]   J.  H.  Kim   a n d   J.  Y u ,   P latf o rm izin g   We b to o n s:  Th e   Im p a c o n   Cr e a ti v e   a n d   Dig it a Lab o in   S o u t h   Ko re a ,   S o c .   M e d ia   S o c . ,   v o l.   5 ,   n o .   4 ,   p p .   1 1 1 ,   2 0 1 9 ,   d o i:   1 0 . 1 1 7 7 / 2 0 5 6 3 0 5 1 1 9 8 8 0 1 7 4 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J E v al  &   R es E d u c     I SS N:  2252 - 8 8 2 2       D ev elo p men t o f W eb to o n   n o n - test   in s tr u men t a s   ed u ca tio n   med ia   ( Mer B erli a n )   191   [1 9 ]   D.  B.   Ha rm o k o   a n d   M .   S .   S u m b a wa ti ,   M o b il e   Web to o n   De v e lo p m e n in   G a m e   P ro g ra m m i n g   Co u rse a t   Un iv e rsitas   Ne g e ri  S u ra b a y a   (i n   Ba h a sa ) ,   IT - EDU ,   v o l .   2 ,   n o .   1 ,   p p .   1 0 2 1 0 9 ,   2 0 1 7 .   [2 0 ]   R.   K.  Ja ti ,   Th e   d e si g n   o Web t o o n   c o m ic  m e d ia  a b o u h ist o rica les so n   (IP S )   o 5 th   g ra d e   e lem e n tary   sc h o o l   in   Jo g ja   (i n   Ba h a sa ) ,   in   e - Pr o c e e d in g   o Art   &   De sig n ,   2 0 1 7 ,   v o l.   4 ,   n o .   3 ,   p p .   6 8 5 6 9 4 .   [2 1 ]   F .   Affe ld t,   D.   M e i n h a rt,   a n d   I.   Ei lk s,  T h e   Us e   o f   Co m ics   in   Ex p e rime n tal  In str u c ti o n i n   a   No n - fo r m a Ch e m istry   Lea rn in g   Co n tex t,   I n t.   J .   Ed u c .   M a t h .   S c i.   T e c h n o l . ,   v o l .   6 ,   n o .   1 ,   p p .   9 3 1 0 4 ,   2 0 1 8 ,   d o i:   1 0 . 1 8 4 0 4 /i jem st.3 8 0 6 2 0 .   [2 2 ]   M. - B.   Kim ,   S . - H.   Lee ,   B. - J.   Kw o n ,   a n d   G .   G im,  S tu d y   o f   th e   Eff e c ts  o We b to o n   Co n ten ts  a n d   C o o p e ra ti v e   Ch a ra c teristics   o n   Op e n   Co l lab o ra ti o n   P latf o rm   Us a g e ,   In t.   J .   S o ft w.   En g .   it Ap p l. ,   v o l.   1 0 ,   n o .   9 ,   p p .   5 1 6 4 ,   2 0 1 6 ,   d o i:   1 0 . 1 4 2 5 7 /i jse ia.2 0 1 6 . 1 0 . 9 . 0 6 .   [2 3 ]   S. - F .   Li n   a n d   H.   Li n ,   Lea rn in g   n a n o tec h n o lo g y   wit h   te x ts  a n d   c o m ics :   th e   imp a c ts  o n   stu d e n ts  o d iffere n t   a c h iev e m e n lev e ls ,   In t.   J .   S c i .   E d u c . ,   v o l.   38 ,   n o .   8 ,   p p .   1 3 7 3 1 3 9 1 ,   2 0 1 6 ,   d o i:   1 0 . 1 0 8 0 / 0 9 5 0 0 6 9 3 . 2 0 1 6 . 1 1 9 1 0 8 9 .   [2 4 ]   T.   L.   T o h ,   L.   P .   C h e n g ,   S .   Y.  H o ,   H.  Jia n g ,   a n d   K.   M .   L im,  Us e   o c o m ics   to   e n h a n c e   stu d e n ts’   lea rn in g   fo th e   d e v e lo p m e n o th e   twe n ty - f irst   c e n tu r y   c o m p e ten c ies   i n   t h e   m a th e m a ti c c las sro o m ,   Asia   Pa c if ic  J .   E d u c .   v o l.   3 7 ,   n o .   4 ,   p p .   4 3 7 4 5 2 ,   2 0 1 7 ,   d o i 1 0 . 1 0 8 0 / 0 2 1 8 8 7 9 1 . 2 0 1 7 . 1 3 3 9 3 4 4 .   [2 5 ]   V.  T.   K.  An h ,   Ev a l u a ti o n   M o d e ls  in   Ed u c a ti o n a P ro g ra m S tre n g t h a n d   Wea k n e ss e s,”   VNU  J .   Fo re ig n   S tu d .   v o l.   3 4 ,   n o .   2 ,   p p .   1 4 0 1 4 9 ,   2 0 1 8 ,   d o i 1 0 . 2 5 0 7 3 /2 5 2 5 - 2 4 4 5 /v n u fs. 4 2 5 2 .   [2 6 ]   M .   Un terk a lms tein e r,   T .   G o rsc h e k ,   A.   K.   M .   M .   Isla m ,   C.   K.  C h e n g ,   R.   B.   P e rm a d i,   a n d   R .   F e l d t,   Ev a lu a ti o n   a n d   M e a su re m e n o S o f twa re   P ro c e ss   Im p ro v e m e n t - S y ste m a ti c   Li tera tu re   re v iew ,   IEE T ra n s.  S o ft w.   En g .   v o l.   3 8 ,   n o .   2 ,   p p .   3 9 8 4 2 4 ,   2 0 1 2 ,   d o i 1 0 . 1 1 0 9 /T S E. 2 0 1 1 . 2 6 .   [2 7 ]   C.   D.   Hu n d h a u se n ,   D.  M .   Oliv a r e s ,   a n d   A.   S .   Ca rter,  IDE - Ba se d   Lea rn in g   An a ly t ics   fo r   C o m p u t i n g   Ed u c a ti o n A   P ro c e ss   M o d e l,   Cr it ica Re v iew ,   a n d   Re se a rc h   Ag e n d a ,   AC M   T ra n s.  Co m p u t .   Ed u c . ,   v o l .   1 7 ,   n o .   3 ,   p p .   1 2 6 ,   2 0 1 7 ,   d o i:   1 0 . 1 1 4 5 / 3 1 0 5 7 5 9 .   [2 8 ]   J.  A.   M u s k in ,   S t u d e n Lea rn in g   As se ss m e n a n d   T h e   Cu rr icu l u m Iss u e a n d   Im p li c a ti o n F o r   P o li c y ,   De sig n   a n d   Im p lem e n tatio n ,   C u rr .   Crit.   Iss u e s Cu rr ic.  L e a rn . ,   v o l.   1 ,   n o .   1 ,   p p .   1 2 9 ,   2 0 1 5 .   [2 9 ]   I.   To su n c u o g l u ,   Im p o rtan c e   o As se ss m e n in   EL T ,   J .   Ed u c .   T r a in .   S t u d . ,   v o l.   6 ,   n o .   9 ,   p p .   1 6 3 1 6 7 ,   2 0 1 8 ,   d o i :   1 0 . 1 1 1 1 4 /j e ts.v 6 i 9 . 3 4 4 3 .   [3 0 ]   A.  Az is,  Tea c h e rs’  c o n c e p ti o n s   a n d   u se   o f   a ss e ss m e n in   stu d e n lea rn in g ,   I n d o n e s.   J .   Ap p l.   L in g u ist. ,   v o l.   2 ,     n o .   1 ,   p p .   4 0 5 1 ,   2 0 1 2 ,   d o i:   1 0 . 1 7 5 0 9 /i jal. v 2 i 1 . 7 2 .   [3 1 ]   U.  F a iza h ,   P e rfo rm a n c e   e v a lu a t io n   o e d u c a t o rs  a n d   e d u c a ti o n a l   sta ff  a n d   Isla m ic  e d u c a ti o n   lea rn in g   p r o c e ss   in   In d o n e sia   (in   Ba h a sa ) ,   Al - Fi k ri   J .   S t u d .   d a n   Pen e li t.   Pen d id ik.  Isl a m ,   v o l .   2 ,   n o .   2 ,   p p .   4 4 5 4 ,   2 0 1 9 .   [3 2 ]   H.  Y.  S u h e n d i,   M .   A.  Ra m d h a n i,   a n d   F .   S .   Irwa n s y a h ,   Ve rifi c a ti o n   Co n c e p o As se sm e n fo P h y sic Ed u c a ti o n   S tu d e n Lea rn in g   Ou tc o m e ,   In t.   J .   En g .   T e c h n o l. ,   v o l.   7 ,   n o .   3 . 2 1 ,   p p .   3 2 1 3 2 5 ,   2 0 1 8 ,   d o i:   1 0 . 1 4 4 1 9 /i jet. v 7 i 3 . 2 1 . 1 7 1 8 1 .   [3 3 ]   D.  Da rm a w a n ,   D.  Ya ti m a h ,   K.  S a sm it a ,   a n d   R.   S y a h ,   An a l y sis  o No n - F o rm a Ed u c a ti o n   T u to r   Ca p a b il it ies   i n   Ex p l o ri n g   As se ss m e n fo S c ien c e   Lea rn in g ,   J .   Pe n d i d ik.  IP I n d o n e s. ,   v o l .   9 ,   n o .   2 ,   p p .   2 6 7 2 7 5 ,   2 0 2 0 ,   d o i:   1 0 . 1 5 2 9 4 /j p ii . v 9 i 2 . 2 4 0 2 5 .   [3 4 ]   E.   R.   Ard y a n t o ,   M .   W in a rn o ,   a n d   S .   Ad i,   Th e   De v e lo p m e n t   o f   Kn o wle d g e   In str u m e n ts   fo r   P JO su b jec t   fo r   XII   g ra d e   Hig h   S c h o o stu d e n ts   ( i n   Ba h a sa ) ,   J .   Pen d id ik.   -   T e o r.  Pen e li t ia n ,   d a n   Pen g e mb . ,   v o l.   1 ,   n o .   1 0 ,     p p .   1 8 9 7 1 9 0 3 ,   2 0 1 6 .   [3 5 ]   Z.   Arifin ,   I n stru m e n Crit e ria  i n   a   Re se a rc h   (in   Ba h a sa ) ,   J .   T h e o re ms   (th e   Or ig .   Res .   M a th ) ,   v o l.   2 ,   n o .   1 ,     p p .   2 8 3 6 ,   2 0 1 7 .   [3 6 ]   W.   Lee   a n d   D.  Ow e n s,  M u lt ime d i a - Ba se d   I n stru c ti o n a De sig n .   S a n   F ra n c isc o :   P leiffe r,   2 0 0 4 .   [3 7 ]   S .   K.  E.   N o v a n t i,   E.   Y u li a n ti ,   a n d   V.  R.   M u sti k a sa ri,   De v e lo p m e n o f   S c ien c e   Li tera c y   Tes t   In str u m e n ts  fo J u n i o Hig h   S c h o o l   S t u d e n ts   o n   S u b sta n c e   P re ss u re   a n d   Its  Ap p li c a ti o n   in   Da il y   Li fe   (i n   Ba h a sa ) ,   J .   Pem b e la ja ra n   S a i n s v o l.   2 ,   n o .   2 ,   p p .   6 1 2 ,   2 0 1 8 .   [3 8 ]   D.  Tri a n a   a n d   W.   O.  Ok tav ia n to ,   Re lev a n c e   o Civ il   E n g i n e e rin g   Co n trac to Qu a li fica ti o n to   Qu a li ty   o f   Co n stru c ti o n   P r o jec Wo r k   i n   Ba n ten   P r o v in c e   (in   Ba h a sa ) ,   J .   Fo n d a si ,   v o l.   1 ,   n o .   1 ,   p p .   1 8 2 1 9 0 ,   2 0 1 3 .   [3 9 ]   J.  Nu n n a ll y ,   T h e   S t u d y   o Ch a n g e   in   Eva l u a ti o n   Res e a rc h Pri n c ip a Co n c e rn in g   M e a su re me n t ,   Exp e rime n ta l   De sig n   a n d   An a lys is .   Be v e rly   Hil ls:  S a g e   P u b li c a ti o n ,   1 9 7 8 .   [4 0 ]   J.  Jo se p h   F .   Ha ir,   W.   C .   Blac k ,   B .   J.  Ba b in ,   a n d   R.   E.   A n d e rso n ,   M u lt iv a ria te  Da ta   A n a lys is .   Ne Je rse y P e a rso n   Ed u c a ti o n a I n tern a ti o n a l,   2 0 0 6 .   [4 1 ]   H.  Ak h sa n ,   e t   a l. ,   De v e lo p m e n o f   Hig h e r - Ord e Th i n k i n g   Tes t   In str u m e n o n   F l u id   M a teria l   f o S e n io r   Hig h   S c h o o S t u d e n ts,”  J .   P h y s.  Co n f.   S e r. ,   v o l.   1 4 6 7 ,   n o .   1 ,   p p .   1 6 ,   2 0 2 0 ,   d o i:   1 0 . 1 0 8 8 / 1 7 4 2 - 6 5 9 6 /1 4 6 7 /1 /0 1 2 0 4 6 .   [4 2 ]   Na sra h ,   Ja sru d d in ,   a n d   M .   Taw il ,   De v e lo p m e n o P h y sic L e a rn in g   To o ls  Ba se d   o n   C o n tex stu a Tea c h in g   An d   Lea rn in g   (CTL A p p r o a c h   t o   M o ti v a te  a n d   Im p r o v e   P h y sic Lea r n in g   Ou tco m e fo 2 n d   g ra d e   o f   S M P   Ne g e ri   1   Ba lo c c P a n g k e p   (i n   Ba h a sa ) ,   J .   Pen d i d ik.  Fi s. ,   v o l.   5 ,   n o .   2 ,   p p .   2 3 5 2 4 8 ,   2 0 1 5 .   [4 3 ]   D.  I.   S isty a ri n a n d   S .   D.  N u rtj a h y a n i ,   An a ly sis  o Th e   Va li d i ty   o th e   De v e lo p m e n o f   P ro b lem   Ba se d   Ha n d o u t   o n E n v ir o n m e n tal  C o n ten Ch a p te rs Cl a ss   VII S M P /M TS   (in   Ba h a s a ) ,   Pro c e e d in g   Bi o l.   E d u c .   Co n f. ,   v o l .   1 4 ,   n o .   1 ,   p p .   5 8 1 5 8 4 ,   2 0 1 7 .   [On l in e ].   A v a il a b le:  h t tp s:// ju r n a l. u n s.a c . id / p ro sb i/ a rti c le/d o w n lo a d /2 1 1 1 2 / 1 6 3 9 8 .   [4 4 ]   N.  S .   G o e d h a rt,   N.  Bli g n a u t - v a n   Wes trh e n e n ,   C.   M o se r,   a n d   M .   B.   M .   Zwe e k h o rst,   Th e   F l i p p e d   C las sro o m :   S u p p o rt in g   Di v e rse   G ro u p   o f   S tu d e n ts  i n   T h e ir  Lea rn i n g ,   L e a rn .   En v iro n .   Res . ,   v o l.   2 2 ,   n o .   2 ,   p p .   2 9 7 3 1 0 ,   2 0 1 9 ,   d o i:   1 0 . 1 0 0 7 /s 1 0 9 8 4 - 0 1 9 - 0 9 2 8 1 - 2.   [4 5 ]   Erma y e n ti   a n d   He ry a n t o ,   Th e   Eff e c o Co m p e ten c e   a n d   Disc ip li n e   o Wo r k   o n   P u b li c   S a ti s fa c ti o n   i n   T h e   Re g io n a Off ice   o T h e   M i n istry   o Re li g i o n   in   Wes S u m a tera   P ro v in c e   wit h   Qu a li t y   o S e rv ice   As   An   In ter v e n in g   Va riab le,”  Arc h .   Bu s.  R e s. ,   v o l.   7 ,   n o .   7 ,   p p .   6 9 8 7 ,   2 0 1 9 .   [On li n e ].   Av a il a b le:   h tt p : // 1 1 6 . 2 0 3 . 1 7 7 . 2 3 0 /i n d e x . p h p /ABR/article /v iew /6 6 3 8 .   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c Vo l .   10 ,   No .   1 Ma r ch   2 0 2 1 :   1 85   -   1 9 2   192   [4 6 ]   R.   Ku rn iaw a n ,   M .   Ha iza m   M o h d   S a u d i ,   a n d   Z .   Ra p h a e Wi jay a ,   Th e   In fl u e n c e   o f   Bra n d   Eq u it y   a n d   S TP   to wa rd s   P ricin g   S trate g y   a n d   t h e   Im p a c o n   De c isio n   M a k in g ,   In t .   J .   En g .   T e c h n o l. ,   v o l.   7 ,   n o .   4 . 3 4 ,   p p .   3 1 8 3 2 6 ,   2 0 1 8 ,   d o i:   1 0 . 1 4 4 1 9 / ij e t. v 7 i 4 . 3 4 . 2 5 3 0 4 .   [4 7 ]   R.   M e n g ,   e a l. ,   T h e   Ch i n e se   Ve rsio n   o T h e   P e rc e iv e d   S tre ss   Qu e stio n n a ire:  De v e lo p m e n a n d   Va li d a ti o n   Am o n g st  M e d ica S t u d e n ts  a n d   Wo rk e rs,”  He a l th   Q u a l .   L if e   Ou tco me s ,   v o l.   1 8 ,   n o .   1 ,   p p .   1 1 7 ,   2 0 2 0 ,   d o i :   1 0 . 1 1 8 6 /s 1 2 9 5 5 - 0 2 0 - 0 1 3 0 7 - 1.   [4 8 ]   P .   J.  S e l b y ,   J.  A.   Ch a p m a n ,   J.  E taz a d i - Am o li ,   D.  Da ll e y ,   a n d   N.   F .   B o y d ,   T h e   De v e lo p m e n o f   M e th o d   f o r   As se ss in g   th e   Qu a li t y   o Li fe   o Ca n c e P a ti e n ts,”  Br.   J .   C a n c e r ,   v o l .   5 0 ,   n o .   1 ,   p p .   1 3 2 2 ,   1 9 8 4 ,   d o i:   1 0 . 1 0 3 8 / b jc. 1 9 8 4 . 1 3 4 .   [4 9 ]   E.   Alm a n a sre h ,   R.   M o les ,   a n d   T .   F .   Ch e n ,   Ev a l u a ti o n   o M e t h o d Us e d   f o Esti m a ti n g   C o n ten Va li d it y ,   Res .   S o c .   A d m.  P h a rm . ,   v o l.   1 5 ,   n o .   2 ,   p p .   2 1 4 2 2 1 ,   2 0 1 9 ,   d o i:   1 0 . 1 0 1 6 /j . sa p h a rm . 2 0 1 8 . 0 3 . 0 6 6 .   [5 0 ]   U .   Nu rfil laili ,   M .   Yu s u f,   a n d   S .   An g g e re n i ,   De v e lo p m e n o c o g n it iv e   lea rn i n g   o u tco m e tes in stru m e n ts  f o r   p h y sic s   su b jec ts  o n   t h e   s u b jec t   o f   b u sin e ss   a n d   e n e rg y   o f irst  se m e ste se c o n d   g ra d e   S M A   Ne g e ri  Kh u s u s   Je n e p o n t o   (i n   Ba h a sa ) ,   J .   Pen d id ik.  Fi s. ,   v o l .   4 ,   n o .   2 ,   p p .   8 3 8 7 ,   2 0 1 6 .   [5 1 ]   C .   K .   Az z a h ri,   D .   Wi d ja n a rk o ,   a n d   I.   M .   S u d a n a ,   De v e lo p m e n o a n   As se ss m e n In stru m e n t   fo r   Jo g ja  P a e Ag e n g   Brid a M a k e u p   P ra c ti c e in   th e   J a v a n e se   Brid a M a k e u p   C o u rse ,   J .   Vo c a t.   C a re e Ed u c . ,   v o l .   2 ,   n o .   1 ,   p p .   2 2 2 7 ,   2 0 1 7 ,   d o i:   1 0 . 1 5 2 9 4 /j v c e . v 2 i 1 . 1 0 9 2 8 .   [5 2 ]   Y .   Efen d i   a n d   A .   Wi d o d o ,   Th e   v a li d it y   tes t   a n d   re li a b i li ty   o t h e   fo o t b a ll   sc h o o ti n g   tes in str u m e n t   o n   th e   P e rsiwu   F Ja ti y o s o   tea m   p lay e r   (i n   Ba h a sa ) ,   J .   Ke se h a t.   Ola h ra g a ,   v o l.   7 ,   n o .   2 ,   p p .   3 6 7 3 7 2 ,   2 0 1 9 .   [5 3 ]   R.   S .   W.   G a b riela   V.  Wale s,  a n d   S il v y a   L .   M a n d e y ,   T h e   In fl u e n c e   o Org a n iza ti o n a l   Cu l tu re ,   Lea d e rsh ip   S ty le,   a n d   W o rk   Disc ip li n e   o n   Em p lo y e e   P e rfo rm a n c e   a P t.   S tate   S a v i n g s Ba n k   (P e rse ro T b k .   M a n a d o   Br a n c h   Offic e   (i n   Ba h a sa ) ,   J .   EM BA   J .   Ri s.  Eko n .   M a n a jem e n ,   Bi sn is  d a n   Aku n t. ,   v o l.   5 ,   n o .   3 ,   p p .   4 4 3 5 4 4 4 4 ,   2 0 1 7 .   [5 4 ]   B.   S .   Aji   a n d   M .   E.   Wi n a rn o ,   De v e lo p m e n o f   Kn o wle d g e   As s e ss m e n In stru m e n ts  f o P h y sic a Ed u c a ti o n   a n d   He a lt h   S u b jec ts  (P JO K) VIII   G ra d e   F irst  S e m e ste (in   Ba h a sa ) ,   J .   Pen d i d ik. ,   v o l.   1 ,   n o .   7 ,   p p .   1 4 4 9 1 4 6 3 ,   2 0 1 6 .   [5 5 ]   W .   K.  Ad ams   a n d   C.   E.   W iem a n ,   De v e lo p m e n a n d   v a li d a ti o n   o in stru m e n ts   to   m e a su re   lea rn i n g   o f   e x p e rt - l ik e   th in k in g ,   I n t.   J .   S c i.   Ed u c . ,   v o l.   3 3 ,   n o .   9 ,   p p .   1 2 4 ,   2 0 1 0 ,   d o i:   1 0 . 1 0 8 0 /0 9 5 0 0 6 9 3 . 2 0 1 0 . 5 1 2 3 6 9 .   [5 6 ]   M .   K h u m a e d i,   Th e   Re li a b il i ty   o Ed u c a ti o n   Re se a rc h   I n stru m e n t s   (in   Ba h a sa ) ,   J u r n a l   Pen d i d ika n   T e k n ik  M e sin v o l.   1 2 .   p p .   2 5 3 0 ,   2 0 1 2 .   [5 7 ]   F .   Yu s u p ,   Tes th e   Va li d it y   a n d   Re li a b il it y   o f   Qu a n ti tativ e   Re s e a rc h   In stru m e n ts  (i n   Ba h a sa ) ,   J .   T a rb .   J .   I lm.   Ke p e n d i d ika n ,   v o l.   7 ,   n o .   1 ,   p p .   1 7 2 3 ,   2 0 1 8 ,   d o i:   1 0 . 1 8 5 9 2 / tarb iy a h . v 7 i1 . 2 1 0 0 .   [5 8 ]   T.   K.  Ng a n g ,   S .   Na ir,   a n d   B.   P ra c h a k ,   De v e lo p in g   In str u m e n ts  t o   M e a su re   Th i n k i n g   S k i ll a n d   P ro b lem   S o lv i n g   S k il ls  a m o n g   M a lay sia n   P rima ry   S c h o o P u p i ls,”  Pro c e d i a   -   S o c .   Beh a v .   S c i. ,   v o l .   1 1 6 ,   p p .   3 7 6 0 3 7 6 4 ,   2 0 1 4 ,   d o i :   1 0 . 1 0 1 6 / j. sb sp r o . 2 0 1 4 . 0 1 . 8 3 7 .   [5 9 ]   A.  C.   d e   S o u z a ,   N.  M .   C.   Ale x a n d re ,   a n d   E.   d e   B.   G u irard e ll o ,   P s y c h o m e tri c   P r o p e rti e i n   I n stru m e n ts  Ev a l u a ti o n   o Re li a b il it y   a n d   Va li d i ty ,   Ep id e mi o l.   S e rv .   S a u d e ,   Br a síl ia ,   v o l.   2 6 ,   n o .   3 ,   p p .   6 4 9 6 5 9 ,   2 0 1 7 ,   d o i:   1 0 . 5 1 2 3 / S 1 6 7 9 - 4 9 7 4 2 0 1 7 0 0 0 3 0 0 0 2 2 .   [6 0 ]   A.  S u ra tn o ,   De v e lo p in g   As se ss m e n In stru m e n ts  in   C o m p e ten c e   P ra c ti c e   En g in e   S t u d e n in   S M Au to m o t iv e   En g i n e e rin g   P ro g ra m   (in   Ba h a sa ) ,   VA NOS   J .   M e c h .   E n g .   E d u c . ,   v o l.   1 ,   n o .   1 ,   p p .   1 11 ,   2 0 1 6 .   [6 1 ]   F .   W.   P i n il i h ,   R.   Bu d ih a rti ,   a n d   E.   Y.  Ek a wa ti ,   T h e   De v e lo p m e n o A n   As se ss m e n t   P ro d u c In stru m e n on   S c ien c e   Lea rn in g   fo r   Ju n i o Hi g h   S c h o o l   S t u d e n ts ,   J .   Pen d id ik.   Fi s. ,   v o l .   1 ,   n o .   2 ,   2 0 1 3 .   [O n li n e ].   Av a il a b le:  h tt p s:/ /j u r n a l. fk ip . u n s.a c . i d /i n d e x . p h p /p fisi k a /article /v iew F il e / 2 7 9 8 / 1 9 1 4 .       Evaluation Warning : The document was created with Spire.PDF for Python.