I nd o ne s ia n J o urna l o f   E lect rica l En g ineering   a nd   Co m pu t er   Science   Vo l.   17 ,   No .   2 ,  Feb r u ar y   20 20 ,   p p .   1 0 2 9 ~1 0 3 9   I SS N:  2 5 0 2 - 4 7 5 2 ,   DOI : 1 0 . 1 1 5 9 1 /ijeecs.v 1 7 .i 2 . p p 1 0 2 9 - 1 0 3 9     1029       J o ur na l ho m ep a g e :  h ttp : / / ijee cs.ia esco r e. co m   Ana ly sis  of clas sif ica tion lea rning  a lg o rithms        H a na   Ra s heid E s m a ee l   De p a rtme n t  o f  In fo rm a ti o n   &   C o m m u n ica ti o n ,   Al  Na h ra in   Un i v e rsit y ,   Ira q       Art icle  I nfo     AB S T RAC T   A r ticle  his to r y:   R ec eiv ed   Ap r   27 ,   2 0 1 9   R ev is ed   J u l   7 ,   2 0 1 9   Acc ep ted   Au g   8 ,  2 0 1 9       Th e   p a p e r  a tt e m p ts  to   a p p l y   d a t a   m in in g   tec h n i q u e ,   to   e stim a te  th e   tea c h e r  p e rfo rm a n c e   o f   c o ll e g e   o f   In f o r m a ti o n   E n g in e e rin g   (COIE)   I n   Al  Na h ra in   Un iv e rsity   in   Ba g h d a d / Ira q ,   F iv e   c las sifica ti o n s  a lg o r it h m s  we r e   u se d   t o   b u il d   d a ta  th e y   a re   (Zero R ,   SM O ,   Na iv e   Ba y e sia n ,   J4 8   a n d   Ra n d o m   F o re st).   Th e   a n a l y sis  imp lem e n ted   u si n g   WE KA   (3 .   8 .   2 )  Da ta  m i n in g   s o f twa re   to o l .   In fo rm a ti o n   wa s  c o ll e c ted   fro m   with in   t h e   v a riety   o f  f o rm   u sin g   “ Re fe re n d u m ” ;  it   wa s  st o re d   i n   Ex c e l  fil e   C S V  fo rm a t  th e n   re g e n e ra te  to   ARFF   ( Attri b u te - Re latio n   F il e   F o rm a t).   M a n y   c rit e ria  li k e   (T ime   is  tak e n   t o   c re a te  m o d e ls,  a c c u ra c y   a n d   a v e ra g e   e rro r)  wa s  tak e n   to   e v a lu a te  th e  a lg o rit h m s.  Ra n d o m   fo re st   a n d   S M O P re d icts  h ig h e r  th a n   a lt e rn a ti v e   a lg o rit h m s  sin c e   t h e ir  a c c u ra c y   i s  th e   h ig h e st  a n d   h a v e   t h e   l o we st  a v e ra g e   e rro r  c o m p a re d   to   o th e rs,  “ Th e   te a c h e r  c larifica ti o n ,   a n d   wa n t in g   t o   b e   u se fu l   to   stu d e n ts” ,   wa s  t h e   stro n g e st  a tt rib u te.  F u rth e r,   re m o v i n g   th e   b a d   ra n k e d   a tt rib u tes   (1 0 ,   1 1 ,   1 2 ,   a n d   1 4 )   th a t  h a v e   a   l o we r  c o n tac t  o n   t h e   D a tas e t  c a n   in c re a se   a c c u ra c ie s o f  a lg o ri th m s.   K ey w o r d s :   C las s if icatio n   Data   m in in g   Dec is io n   tr ee   T ea ch er   ev alu atio n   W ek a   Co p y rig h t  ©  2 0 2 0   In stit u te o f  A d v a n c e d   E n g i n e e rin g   a n d   S c ien c e .     Al l  rig h ts re se rv e d .   C o r r e s p o nd ing   A uth o r :   Han a  R ash eid   E s m ae el ,   Dep ar tm en t o f   I n f o r m atio n   &   C o m m u n icatio n ,     Al  Nah r ain   Un iv er s it y ,   I r aq .   E m ail:   h an au o m @ y ah o o . c o m       1.   I NT RO D UCT I O N   “E x tr ac tin g   th e  k n o wled g e  f r o m   th e  m ass iv e  s et  o f   in f o r m ati o n   is   ca lled   Data   m in in g . ”  [ 1 ] ,   T h e  d ata  o u g h t  t o   b e   n ew,   n o t  o b v io u s ,   an d   o n e  s h o u ld   b e  r ea d y   to   u s e  it,  th at  o u g h t  to   b e  h elp f u l  wh en   d ec id i n g   to   f in d   t h e  b u r ied   p atter n s   an d   in ter ac tio n   th at   s h o u ld   b e   u s ef u l  in   d ec id in g .   Data   m in i n g   c o n s is ts   o f   f i v e   elem en ts   [ 1 ] .   a)   E x tr ac t,  tr an s f o r m   an d   lo ad   d e alin g   in f o r m atio n .   b)   Sto r e  an d   m a n ag e  th e  i n f o   i n   e x ce ed in g ly   two - d im en s io n al  in f o   s y s tem s .     c)   Pro v id e  in f o r m atio n   ac ce s s   to   b u s in ess   an aly s ts   an d   k n o wled g e  tech n o l o g y   p r o f ess io n als.    d)   An aly ze   th e  in f o   b y   ap p licatio n   co d e.     e)   R ewa r d   th e  in f o   in   an   ex ce e d i n g ly   h el p f u l f o r m at  lik e  a  g r ap h   o r   tab le.   T h e  aim   o f   t h is   p ap er   is   to   ev alu ate  th e  teac h er   p e r f o r m an c e  in   ( C OI E )   in   Al  Nah r ain   Un iv er s ity   in   B ag h d ad /I r aq   with in   th e  R ef er en d u m   to   th e   s tu d en ts   to   esti m ate  th e  teac h er   p er f o r m an ce   b y   u s in g   f i v e   class if icatio n s   alg o r ith m s ,   an d   th en   d is co v e r   wh ic h   attr ib u te  h as  th e   s tr o n g est  e f f ec t  i n   teac h er   ev al u atio n ,   an d   wh ich   al g o r ith m   was th e  b est.    Sev er al  wo r k s   h av e  u s ed   d ata  m in in g   to   en h a n ce   teac h e r   p e r f o r m an ce ;   Asan b e  M.   O.   Oso f is an   A. O.   an d   W illi am   W .   F  [ 2 ]   h av e  d esig n ed   Ar tific ial  Neu r al  Net wo r k   ( ANN)   an d   Dec is io n   T r ee   s ch em e  th eir   s y s tem   W a s   tes ted   u s in g   d ata  f r o m   a  “Nig er ian   Un iv er s ity ”.   R en u k a  Ag r awa l1 ,   J y o ti  Sin g h ,   an d     Z ad g o an k ar   [ 3 ]   “su g g ests   ty p e  to   esti m ate  th e  p er f o r m a n c e  v ictim izatio n   d ata  m i n in g ”  lik e  ( “a s s o ciatio n , ”  class if icatio n   r u les  “ Dec is io n   T r ee ”,   “Ru le  I n d u ctio n , ”  K - N N,   an d   “Na ïv e  B ay esian ”)   to   s ea r ch   o u t  tr ad itio n s   to   ass is t  th em   to   r ein f o r ce   s u p p ly   th e   ed u ca tio n al  p r o ce s s ”.   Hem aid   an d   E l -   Hale es  [ 4 ]   i n   th eir   s tu d y   th ey   u s e  Qu esti o n n air e  wh ich   h as q u esti o n s   o n   th e  class es,  th ey   in ten d   a  f o r m   to   "test  teac h e r   p er f o r m an ce   d u r in g   d ata   m in in g   tec h n iq u es  lik e ,   class if icatio n ,   ass o ciatio n   r u les  to   f i n d   o u t  b eh av io r   to   aid   t h em   t o war d   en h an ce d   th e   Evaluation Warning : The document was created with Spire.PDF for Python.
               I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec   E n g   &   C o m p   Sci,   Vo l.  17 ,   No .   2 ,  Feb r u a r y   20 20 :   1 0 2 9   -   1 0 3 9   1030   lear n in g   p r o ce d u r e  an d   im p r o v e  th e  p r esen tatio n   o f   teac h er s   in   class r o o m ”,   to   en h a n ce   th e  ed u ca tio n al   p r o ce s s   an d   ex p an d   th e   co n tr ib u tio n   o f   teac h er s   in   th e   cla s s r o o m ”. W o r k s   p u b lis h ed   b y   Ah m ed a,   R izan er c   an d   Ulu s o y c  [ 5 ]   u s in g   T h e   s eq u en tial  Min i m al  Op tim i za tio n ,   Naïv e   B ay es,  J 4 8   D ec is io n   T r ee ,   an d   Mu ltil ay er   Per ce p tio n   to   E v al u ate  Stu d en t  r ec o r d s   to   p r ed ic t  th e  teac h er   p er f o r m a n ce   an d   in v esti g ates  f ac to r s   th at  h av e   af f ec ted   s tu d en ts   a ch iev em en ts   to   d ev el o p   t h e  t ea ch in g   s y s tem , .   I n   [ 6 ] ,   in   h is   s tu d y   to   Pre d ict   s tu d en ts '   p er f o r m an ce   h e   f in d s   th at  th e   class if icatio n   s ch em e  is   r ep ea te d ly   u s ed   i n   ed u ca tio n al  d ata   m in in g   ar ea ,   it  in clu d es,  Neu r alNe two r k   an d   Dec is io n   T r ee ,   th e  t wo   m eth o d s   g r ea tly   u s ed   b y   th e  r esear ch er s   f o r   p r ed ictin g   s tu d en ts '   p er f o r m a n ce .   Ms.  A. Pav ith r a,   Mr .   S.   Dh an ar aj  [ 7 ]   I n   th eir   s tu d y   th ey   ex am in e  th e   p r ed ictio n   ac c u r aten ess   o f     th e  ac ad em ic  p er f o r m a n ce   o f   te ac h in g   th e  s tu d e n ts   u s in g   d if f er en t  class if icatio n   alg o r ith m s   lik e,   “M L P,  Naïv e  B ay es,  Dec i s io n   tr ee ,   R E P   tr ee ,   an d   J 4 8   tr ee ” ,   th ey   co n clu d ed   th at  “m an y   f ac to r s   will  in f lu e n ce   th e   s tu d en t  p er f o r m a n ce ,   a n d   it  m ay   d if f er   t o   th e   d if f er en t   lo ca lity   o f   s tu d en ts ".   Far id   J au h ar i,  Ah m a d   Af if   Su p ian t o   [ 8 ]   p r o p o s es  th r ee   b o o s tin g   a lg o r ith m s   ( C 5 .   0 ,   Ad aBo o s t.  M1 ,   an d   Ad aBo o s t.  SAMM E )   to   b u ild   t h e  clas s if ier   f o r   p r e d ictin g   s tu d en t' s   p er f o r m an ce .   T h e y   u s ed   t h r ee   s ce n ar i o s   o f   ev alu atio n ,   th e   f ir s t  s ce n ar io   em p lo y s   1 0 - f o ld   cr o s s - v alid atio n   to   co m p ar e  t h e  p er f o r m an ce   o f   b o o s tin g   alg o r ith m s .   T h e  s ec o n d   s ce n ar io   was  ac cu s to m ed   to   ev alu at e  b o o s tin g   alg o r ith m s   b elo w  t h e  v a r io u s   v ar ieties  o f   co ac h i n g   in f o r m atio n   with in   th e  th ir d   s ce n a r io ,   th e y   b u il d   m o d els  f r o m   o n e  s u b ject  Da taset,  an d   test   u s in g   an o th er   s u b ject  Data s et.   T h e y   co n clu d e   th at  th e   th ir d   s ce n ar i o   r esu lts   in d icate   th at  th e y   ca n   b u ild   a  p r ed ictio n   m o d el  u s in g   o n e  s u b ject  to   p r ed ict  an o th er .   B in   Ma t  an d   N.   B u n iy am in   [ 9 ]   u s in g   n e u r o - f u zz y   to o l  to   class if y   an d   p r ed ict  elec tr ical  en g in e er in g   s tu d en ts   g r ad u atio n   ac h iev em en t  b ased   o n   m ath em atics  co m p eten cy .   I t' s   s u p p o r ted   lo n g itu d in al  p r o g r ess   an d   cr o s s - v alid atio n   m o d el   o n   two   ar ith m etic   s u b jects,  s em ester s ’   p er f o r m an ce ,   a n d   g r a d u atio n   ac h iev e m en t  o f   elec tr ical  s tu d en ts .   T h ey   co n cl u d e  th at  th e  m ix tu r e  o f   s tatis tical  ass o ciate   an aly s i s   an d   m ac h in e  lear n in g   will  f ac ilit ate  to   ex tr ac t  d ata,   an d   alter   u n iv er s ity   m an ag em en t  to   ass is t  lo w  ac h iev er s   at  an   ea r l y   s tag e.   T h ey   h o p ed   th at  th eir   f in d in g s   ca n   h elp   f ac u lty   m a n ag em en t  to   r ev iew   m ath em atics c u r r icu lu m   with   r esp ec t in   th e  in cr ea s in g   r an g e   o f   en g in ee r in g   f ield .   S.  Hu s s ain ,   N.   A.   Dah an ,   F.  M.   B a - Alwib ,   an d   N.   R ib ata  [ 1 0 ]   u s ed   f o r   class if icatio n s   m eth o d s ,   ( J 4 8 ,   PAR T ,   R an d o m   Fo r est  an d   B ay es   Netwo r k   C lass if ier s ) .   T h e  h ig h   in f lu en tial  attr ib u tes  wer e  s elec ted   u s in g   th e  d ata  m in in g   to o l  W ek a.   T h ey   co n clu d e  t h at  th e  R an d o m   Fo r est C la s s if icatio n   m eth o d   was th e  m o s t su ited   alg o r ith m   f o r   th e  Data s et.     Sao u ab i  Mo h am e d ,   Ab d u lla h   E zz ati  [ 1 1 ]   p r o p o s es  a  d ata   m i n in g   p r o ce s s   f o r   em p lo y a b ilit y   d ata   u s in g   class if icatio n   tech n iq u es  ( th e  Dec is io n   T r ee   class if ier ,   L o g is tic  r eg r ess io n ,   an d   Naïv e  B ay es  alg o r ith m s ) ,   ap p ly   th em   b y   R a p id   Min er   Stu d io   E d u ca tio n al   Ver s io n   ( 8 .   1 .   0 0 0 ) ,   u s in g   e m p lo y ab ilit y   Data s et.   T h ey   co n clu d e  th at  t h e  Dec is io n   tr ee   class if ier   is   m o r e  ac cu r ate  th an   L o g is tic  r eg r ess io n   an d   Naïv e  B ay .       2.   RE S E ARCH   M E T H O D   2. 1 .     P re pa re   Da t a   F o r   th is   an aly s is ,   d ata  wer e  c o llected   f r o m   co lleg e  s tu d en ts   at  to tally   d if f e r en t  Dep a r tm e n ts   with in   th e  f ac u lty   o f   C o lleg e  o f   I n f o r m atio n   E n g in ee r in g   ( C OI E )   at  Al  Nah r ain   Un iv er s ity   in   B ag h d ad /I r aq   f o r   th e   aim   o f   t h e  in v esti g atio n ;  h o w ev er   th eir   s k illed   im p r o v em e n t  h as  tak en   Place  th r o u g h o u t   th e  ter m .   T h e   in f o   was c o llected   f r o m   th e  c o lleg e   with in   th e  ty p e  o f   f o r m   to   ju d g e  teac h er   p e r f o r m an ce   as sh o wn   in   T ab le  1 .    a)   Pre p ar in g   I n f o r m atio n ,  T ea ch er ' s   Data   wa s   E v alu ated .   Attr ib u tes an d   v al u e  wer e  d eter m in ed .   b)   Dat a  s av ed   in   ex ce l f ile  in   C SV ( C o m m a  Sep ar ated   Valu es).   c)   T o   u s e  W ek a  d ata  m u s t b e  c o n v er ted   to   Ar r f   ( Attr ib u te - R elatio n   Fil e  Fo r m at)   d)   Usi n g   W ek a  ( 3 . 8 . 2 )   GUI   C h o o s er   an d   E x p lo r e r .   e)   Usi n g   W ek ap r ep r o ce s s o r   an d   o p en   Ar f f   f ile.   f)   Ap p ly   class if icatio n   alg o r ith m s   ( Z er o R ,   SMO,   Naïv e  B ay esi an ,   J 4 8   tr ee   a n d   R an d o m   Fo r e s t) .   g)   E v alu ate  th e  r esu lt a n d   p er f o r m an ce .   Fig u r e  1   s h o ws th e  p r o p o s ed   s y s tem   lay o u t.       D a t a   C o l l e c t e d   F r o m   ( C O I E)   I n   A l   N a h r a i n   U n i v e r si t y   A t t r i b u t e   a n d   V a l u e   A r e   D e t e r m i n e d   D a t a   S a v e d   i n   C S V   F i l e   F o r m a t   ( E x c e l   F i l e )   C o n v e r t e d   to   A r f f   ( A t t r i b u t e   R e l a t i o n   F i l e   F o r m a t )   W EK A   ( ( 3 . 8 . 2 )   G U I   C h o o s e r   U si n g   P r e p r o c e ss o r   A p p l y   C l a ss i f i c a t i o n   A l g o r i t h ms  ( Ze r o R ,   S M O ,   N a ï v e   B a y e s i a n , J 4 8   t r e e   a n d   R a n d o m F o r e st )   Ev a l u a t e   R e s u l t   a n d   P e r f o r ma n c e     Fig u r e  1 .   T h e  r o p o s ed   s y s tem       Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec   E n g   &   C o m p   Sci   I SS N:  2502 - 4 7 5 2       A n a lysi s   o f c la s s ifica tio n   lea r n in g   a l g o r ith ms   ( Ha n a   R a s h eid   E s ma ee l )   1031   T ab le  1 .   T h e   Qu esti o n s   an d   T h eir   A b b r e v iatio n s   S e q   A t t r i b u t e   D e scri p t i o n   1   D ESG .   Ti t l e   2   QUA.   D e g r e e   3   EX P .   Ex p e r i e n c e   4   S C _ C T M _ ES   Th e   sem e st e r   c o u r s e   c o n t e n t   p e d a g o g i c   a n d   a n a l y s i s w e r e   p r o v i d e d   a t   t h e   b e g i n n i n g   5   C A _ O B J . S   A t t h e   b e g i n n i n g   t h e   t e a c h e r   w e r e   c l e a r l y s p e c i f i c t h e   a i ms a n d   p u r p o s e   o f   t h e   c o u r se .   6   C W _ A _ C A   Th e a m o u n t o f   c r e d i t a l l o t t e d   to t h e   c o u r se  w a s p o s i t i v e l y   si g n i f i c a n c e   7   C TA _ S A _ A Y   Th e   c o u r s e   w a s   i n st r u c t e d   i n   st e p   w i t h   t h e   i n f o r ma t i o n   p r o c l a i me d   o n   t h e   p r i mary   d a y   o f   s o p h i s t i c a t i o n   8   C D _ H W _ A S S . _ A P P . _ S A T   Th e   c l a ss  d i sc u ssi o n s  h o m e w o r k   a ssi g n me n t   a p p l i c a t i o n s a n d   st u d i e s wer e   sat i sf a c t o r y   9   TB _ o t h e r _ C R   Th e   t e x t   b o o k   a n d   d i f f e r e n t   c o u r ses  r e so u r c e s w e r e   e n o u g h   a n d   u p   t o   t h i s  p o i n t   10   C _ W A P P . _ LA B _ D I S   Th e   c o u r s e   a c c e p t a b l e   c o n v e r sa t i o n   o f   t h e   l a b o r a t o r y   a p p l i c a t i o n s   a n d   d i f f e r e n t   st u d i e s.   11   Q U I Z. A S S . P R O J.E X A . _ H EP.   Th e   q u i z z e s  a ssi g n me n t   c o mes  a n d   e x a ms c o n t r i b u t e d   t o   s e r v i n g   t o   t h e   e d u c a t i o n a l .   12   EN J.C LA . A C TI V I . D U R . LEC .   Th e   l e c t u r e   a l l o w s st u d e n t s   t o   p a r t i c i p a t e   t h e i r   k n o w l e d g e .   13   I N T. EX P E. C . EN D . Y   Th e   c o u r s e   w e r e   me t   a l l   st u d e n t   p r o sp e c t   14   C W R _ B TM _ P R O . _ D EV E   Th e   c o u r s e   w a s   r e l e v a n t   a n d   h e l p f u l   t o   m y   s k i l l e d   d e v e l o p me n t .   15   C H M _ LA _ W _ P R E.   Th e   c o u r s e   h e l p e d   M a i n e   c h e c k   u p   o n   l i f e   a n d   w o r l d   w i t h   my   n e w   p e r sp e c t i v e .   16   I N S . _ K W _ R EL E. _ D A TE   Th e   l e c t u r e r   i n f o r ma t i o n   w a s   r e l e v a n t   a n d   u p   t o   t h i s   p o i n t .   17   I N S . _ C P _ c l a s   Th e   l e c t u r e r   c a m e   r e a d y   f o r   c a t e g o r i e s   18   I N S . _ TA U G . I N _ A C C O R . _   Th e   l e c t u r e r   i n st r u c t e d   i n   a c c o r d a n c e   w i t h   t h e   p r o c l a i me d   l e ss o n   se t   u p .   19   I N S . _ W _ C O M M I . _ T _ TH E . _ C O .   Th e   l e c t u r e r   w a s c o mm i t t e d   t o   t h e   c o u r se  a n d   w a s c o m p r e h e n d i b l e   20   I N S . _ A R R . _ O F _ T . C   Th e   l e c t u r e r   a r r i v e d   o f   y o u r   t i me   f o r   c a t e g o r i e s   21   I N S . _ H . S M . _ C _ H O .   Th e   l e c t u r e r   h a d   a   s l e e k   a ss o c i a t e   o f   s o p h i st i c a t i o n   h o u r s   22   I N S . _ EX P . _ TH E _ C O . _ A . W . E. _ H E. _ T_   Th e   t e a c h e r   c l a r i f i c a t i o n   a n d   w a s   w a n t i n g   t o   b e   u s e f u l     t o   st u d e n t s   23   I N S . _ D E_ A P _ A P P . _ T_ S T.   Th e   l e c t u r e r   i n c o n t e s t a b l e       a p p o s i t i v e   a p p r o a c h   t o   st u d e n t s   24   I N S . _ W . O P . _ R ES._ V I E. _ S T. _ C O .   Th e   t e a c h e r   w a s  c o n si d e r a t e   o f   t h e   v i e w s o f   s t u d e n t   o n   t h e   t o p i c   o f   t h e   c o u r s e .   25   I N S . _ EN . _ P A R T . _ I N _ C O .   Th e   l e c t u r e r   i n sp i r e d   p a r t i c i p a t i o n   w i t h i n   t h e   c o u r se.       2 . 2 .      D a t a   C o llect ed   T h e  k n o wled g e  was  g ath er in g   f o r   m ak in g   r ea d y   th e  m o d el,   th e  f ield s   th at  ar e  n ee d ed   f o r   d ata   p r o ce s s in g   was  tak en ,   t h is   in clu d es  p r e - p r o ce s s in g   o r   ex tr ac ts   v ital  in f o   f r o m   it  th en   p r o d u ce   co r r ec t   f o r m at   f ile  o f   th e  in f o   lik e  in we k a. ar f f   f ile  f o r m a t ( Attr ib u te  R elatio n   Fil e  Fo r m at)   [ 3 ] ,   as sh o wn   i n   Fig u r e   2 .   @ r elatio n   tea ch er e va lu a tio n     @ attr ib u te  N a me1   s tr in g   @ attr ib u te  N a me2   n u m er ic   @ attr ib u te  Nam en ?   @ d ata        Yes ,   1 ,   ye s ….           Fig u r e  2 .   T ac h er . ar f f     f ile   Evaluation Warning : The document was created with Spire.PDF for Python.
               I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec   E n g   &   C o m p   Sci,   Vo l.  17 ,   No .   2 ,  Feb r u a r y   20 20 :   1 0 2 9   -   1 0 3 9   1032   2 . 3 .       M et ho do lo g y   T h e  class if icatio n   tech n i q u e  was  u s ed   f o r   th e   f o r ec ast  o f   t ea ch er s ’   ev al u atio n .   Fiv e  class if icatio n s   alg o r ith m s   wer e  u s ed   ( Z e r o R ,   SMO,   Naïv e  B ay esian ,   J 4 8   t r ee   an d   R an d o m   Fo r est)  an d   i m p lem en ted   u s in g   W ek a  ( 3 .   8 . 2 )   Data   m in in g   s o f twar e  to o l.      2 . 4 .      B uil d ing   M o dels   2 . 4 . 1 .   B uil din g   t he  T r iv ia l m o del Zero R  [ 1 2 ,   1 3 ]   a)   I n   Pre p r o ce s s   p an el,   click   “Op en   f ile”   b u tto n ,   ch o o s e  th e  f ile   n am ed   ( teac h er . ar f f )   as in   Fig u r e  3 .   b)   Select  Z er o R   b y   C lick in g   “Ch o o s e”   B u tto n .   c)   I n v o k e  class if ier   b y   click in g   “star t”  b u tto n   to   m ak e  a  m o d el .   T h e  an aly tical  p er f o r m a n c e  o f   th e  m o d el   ch ar ac ter ized   b y   th e  r ig h t - h a n d   class if ier   o u tp u t f r am e.     d)   T h e  C o n f u s io n   Ma tr ix   f o r   th e   m o d el  is   b esto wed   at  th e  u n d er s id e  p ar t  o f   th e   C lass if ier   o u tp u t  win d o w.   I t is seen   f r o m   it th at  co m p o u n d s   ar e  clas s if ied   as ( 2 1 )   af f ir m ativ e  an d   ( 4 3 )   N o .   e)   T h e  ac cu r ac y   o f   t h e  m o d el  is   ( 6 7 . 1 8 7 )   f o r   No   an d   ( 3 2 . 8 1 3 )   f o r   af f ir m ativ e  as in   Fig u r e  4   a n d   Fig u r e  5 .           Fig u r e  3 .   Selecte d   attr ib u tes o f   teac h er . ar f f           Fig u r e  4 .   Z e r o R   class if ier   o u tp u t   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec   E n g   &   C o m p   Sci   I SS N:  2502 - 4 7 5 2       A n a lysi s   o f c la s s ifica tio n   lea r n in g   a l g o r ith ms   ( Ha n a   R a s h eid   E s ma ee l )   1033       Fig u r e  5 .   C o n tin u e  o f   Z er o R   c lass if ier   o u tp u t       2 . 4 . 2 .   B uil din g   J 4 8   T re e  M o del [ 1 2 ]   T o  g et  th e  u s u al  illu s tr atio n   o f   th e  tr ee ,   th e  f o llo win g   m u s t b e  d o n e:   a)   C lick th e  co r r ec t p u s h   o n   th e   m o d el  ty p e   tr ee s   ( J 4 8 )   with in   t h e  R esu lt lis t f r am e  an d   ch o o s e    b)   T h e  m en u   item   v is u alize s   tr ee   s ize  a  r ep lace m en t w in d o w  wi th   g r ap h ical  I llu s tr atio n   o f   th et r ee .     c)   C lick   with   th e  co r r ec t  p u s h   to   th e  ar ea   d u r in g   th is   s cr ee n ,   a n d   with in   th e  p o p u p   m e n u   ch o o s e   t h e  ite m   a p p r o p r iate  s cr ee n .   As in   Fig u r e s   6   an d   7 .             Fig u r e  6 .   T h e  s tatis tical  o f   th e  J 4 8   m o d el   Evaluation Warning : The document was created with Spire.PDF for Python.
               I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec   E n g   &   C o m p   Sci,   Vo l.  17 ,   No .   2 ,  Feb r u a r y   20 20 :   1 0 2 9   -   1 0 3 9   1034       Fig u r e  7 .   Vis u alize   j4 8   tr ee       2 . 4 . 3 .   B uil din g   Na iv e  B a y esi a n M o del [ 1 2 ,  1 3 ]     As in   p r ev io u s   m o d els Na iv e  B ay esian   Mo d el  was b u ilt  as   s h o wn   i n   Fig u r e  8 .           Fig u r e  8 .   Nav ie  b ay esian   m o d el       2 . 4 . 4 .   B uil din g   S up po rt   Vec t o r  M a chine Mo del s   [ 12 - 15]   T h e  W ek a  s o f twar e  im p lem en ts   Seq u en tial  Min im al  Op ti m izatio n   ( SMO)   alg o r ith m   f o r   tr ain in g     a   s u p p o r t  v ec to r   class if ier .   Fig u r e  9   s h o w  t h e  class if ier   o u tp u t f o r   th is   m o d el.   T h e  ac cu r ac y   o f   ( C o r r ec tly   C lass if ied s   I n s tan ce s )   o f   t h is   m o d el   is   ex tr em ely   h i g h   n i n ety   eig h t.4 3 7 5 %.  T h is   tr u th   cle ar ly   in d icate s   th at  th e  ac cu r ac y   ca n ' t  b e  u s ed   f o r   ass es s in g   th e  u tili ty   o f   class if icatio n   m o d els  d esig n e d   ex p lo itatio n   u n b alan ce d   d atasets .   Fo r   th is   p u r p o s e  an   h o n est  s elec tio n   is   to   u s e   th e  Kap p a  s tatis tic,   th at  i s   =0 . 9 6 4   f o r   th is   ca s e.   Kap p a  s tatis tic  is   th e  ac ad em ic  d eg r ee   an a lo g   o f   th e  co n s tan t  o f   co r r elatio n .   I t' s   wo r th   is   z er o   f o r   t h e  s h o r tag e  o f   a n y   r elatio n   an d   ap p r o ac h es   to   ( 1 )   f o r   ter r ib ly   s tu r d y   ap p lied   m ath   r elatio n   b etwe e n   th e  ca teg o r y   lab el  an d   attr i b u tes  o f   in s tan ce s ,   An o th er   h elp f u l  ap p lied   m ath   ch ar ac ter is tic  is   “ROC   Ar ea ”,   th at  th e   wo r th   =0 . 9 7 6   m ea n s   th at  s en s ib le  m y th ical   m o n s ter   cu r v es  m a y   b e   b u ild   an d   th er ef o r e  th e  c o s t/b en ef it a n aly s is   will si m p ly   b e  p er f o r m e d .   As in   F ig u r e  1 0 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec   E n g   &   C o m p   Sci   I SS N:  2502 - 4 7 5 2       A n a lysi s   o f c la s s ifica tio n   lea r n in g   a l g o r ith ms   ( Ha n a   R a s h eid   E s ma ee l )   1035       Fig u r e  9 .   T h e  class if ier   o u tp u t   f o r   SMO           Fig u r e  1 0 .   C o s t/b en ef it a n aly s is   f o r   SMO       2 . 4 . 5 .  B uil din g   t he  Ra nd o m   F o re s t   M o dels   [ 1 2 - 15]   T h e  class if ier   o u tp u t u s ed   f o r   "Ran d o m   Fo r est "  alg o r ith m   b e  s h o wn   in   Fig u r e  1 1   b elo w  th e  ac cu r ac y   o f   th is   m o d el  is   ex tr em el y   h i g h =  n i n ety   eig h t.4 3 7 5 %.  T h is   r ea lity   clea r ly   in d icate s   th e  a cc u r ac y   ca n n o t   b e   u s ed   to   ass ess in g   th e  wo r th   o f   class if icatio n   m o d els  d esi g n ed   v ictim izatio n   u n b alan ce d   d atasets .   Fo r   th is   p u r p o s e  an   h o n est  alter n ativ e   is   to   u s e  th e  “Ka p p a  s tati s ti c” ,   th at  is   =0 . 9 6 4   f o r   th is   ca s e  [ 6 ] .   I ts   p r ice  is   =0 . 9 6 4 1   it' s   ter r ib ly   r o b u s t  a p p lied   m ath   r elatio n   b etwe en   th e  ca teg o r y   la b el  an d   attr i b u tes  o f   in s tan ce s ,   An o th er   h elp f u l  ap p lied   m at h   ch a r ac ter is tic  is   “ROC   Ar ea ”,   th a t   th e  w o r th   =1 . 0 0 0   m ea n s   th at  s en s ib le  m y th ical  cr ea tu r e   cu r v es  ar e  b u ilt  an d   th er ef o r e  th e   co s t/b en ef it  an aly s is   w ill  s im p ly   b e  p er f o r m ed .   As  in   F ig u r e  1 2 .     Evaluation Warning : The document was created with Spire.PDF for Python.
               I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec   E n g   &   C o m p   Sci,   Vo l.  17 ,   No .   2 ,  Feb r u a r y   20 20 :   1 0 2 9   -   1 0 3 9   1036       Fig u r e  1 1 .   C lass if ier   Ou tp u t f o r   R an d o m   Fo r est           Fig u r e  1 2 .   C o s t/b en ef it R an d o m   Fo r est      Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec   E n g   &   C o m p   Sci   I SS N:  2502 - 4 7 5 2       A n a lysi s   o f c la s s ifica tio n   lea r n in g   a l g o r ith ms   ( Ha n a   R a s h eid   E s ma ee l )   1037   3.   RE SU L T S  A ND  D IS CU SS I O N   3 . 1 .      A t t ribute   Ra nk ing   [ 1 6 - 20]   W ek a  ex p lo r er   ca n   ev alu ate  t h e  attr ib u tes o f   th e  d ata  b y   u s in g   th e  f o llo win g   s tep s :   Select   a t t ribute s →G a inRa t o At t ribute →s t a rt →s ho w E v a l→Ra nk   At t ribute   T h e  lis t o f   attr ib u tes an d   t h eir   v alu e  ar e  ap p ea r in g   f r o m   h ig h er   to   lo wer ,   i n   T ab le  2   s h o w  th at.       T ab le  2 .   Attr ib u te  R an k i n g         3 . 2 .     M o dels   Co m pa riso n   [ 21 ,   2 2 ]   T h e  p er f o r m a n ce s   o f   th e  5   m o d els  wer e  ev alu ated   p r im ar il y   b ased   o n   t h e  s tan d a r d s   as  illu s tr ated   I n   T ab le  3 .   a)   Pre d ictio n   ac cu r ac y :  T h e  s h ar e  o f   p r o p er ly   class if ied   in s tan ce s   is   u s u ally   r ef er r ed   to   as  a cc u r ac y   o f   a   m o d el.     b)   T im e  is   tak en   to   cr ea te  th e   m o d el.   c)   E r r o r   r ate.       T ab le   3 .   C o m p a r is o n   An aly s is   o n   T h e   Mo d els   R a n d o mF o r e st   S M O   N a ï v e B a y e si a n   J4 8   Ze r o R   M e t r i c   0 . 0 3   0 . 0 5   0   0 . 0 3   0   Ti me   T o   B u i l d   T h e   M o d e l   9 8 . 4 3 5 %   9 8 . 4 3 7 %   9 2 . 1 8 7 %   9 5 . 3 1 2 %   6 7 . 1 8 7 %   C o r r e c t l y   C l a ss i f i e d   I n st a n c e s   1 . 5 6 2 %   1 . 5 6 2 %   7 . 8 1 2 %   4 . 6 8 7 %   3 2 . 8 1 2 %   I n   C o r r e c t l y   C l a ssi f i e d   I n st a n c e s   0 . 9 6 4   0 . 9 6 4   0 . 8 3 3   0 . 8 9 5   0   K a p p a     S t a t i s t i c s   0 . 0 2 1 3   0 . 0 1 5 6   0 . 0 7 9 1   0 . 0 6 4 5   0 . 4 4 3   M e a n   A b s o l u t e   Er r o r   0 . 0 9 3 9   0 . 1 2 5   0 . 2 7 9   0 . 2 1 0   0 . 4 7   R o o t   M e a n   S q u a r e   Er r o r   4 . 8 0 9   %   3 . 5 2 4 %   1 7 . 8 3 8 %   1 4 . 5 5   %   1 0 0 %   R e l a t i v e   A b so l u t e   Er r o r     2 6 . 5 9 4 %   5 9 . 4 2 8 %   4 4 . 7 6 5 %   1 0 0 %   R o o t   R e l a t i v e   S q u a r e   Er r o r       3 . 3 .      P er f o r m a nce   o f   t he  M o dels   T ab le  4   s h o w  th e   p er f o r m an ce   o f   th e  ( 5 )   alg o r ith m s :  [ 1 1 ,   23 - 25]   T P=tr u e  p o s itiv es": a   v ar iety   o f   ex am p les": Pr ed icted   p o s itiv e  th at  ar e  liter ally   p o s itiv e.   FP =f alse p o s itiv es": a   v ar iety   o f   ex am p les:   "E x p ec ted   p o s itiv e  th at  ar e  liter ally   n e g ativ e.   T N= tr u e  n eg ativ es": a   v a r iety   o f   E x am p les ":  p r ed icted   n eg a tiv e  th at  ar e  liter ally   n eg ati v e.   Evaluation Warning : The document was created with Spire.PDF for Python.
               I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec   E n g   &   C o m p   Sci,   Vo l.  17 ,   No .   2 ,  Feb r u a r y   20 20 :   1 0 2 9   -   1 0 3 9   1038   FN=f alse n eg ativ es": a   v ar iety   o f   E x a m p les:   "E x p ec ted   n eg a tiv e  th at  ar e  liter ally   p o s itiv e.   W ek a  ( 3 . 8 . 2 )   C o n f u s io n   Ma tr ix :  T h e  q u an tity   o f   p r o p er l y   class if ied   in s tan ce s   is   th at  t h e  to tal  o f   d iag o n als with in   th e  m at r ix ; a l l o th er s   ar ea   u n it in co r r ec tl y   cl ass if ied .   x     y < --   class if ied   as,  ac tu al  x = 0   T P FN   Actu al  y =1   FN T P   T P=T P+FN /  R ec a ll   Pre cisi o n =T P/TP+F P   Acc u r ac y =T P+T N  /TP+ T N+ FP +FN       T ab le  4 .   P er f o r m an ce   o f   T h e  Mo d el   R o c   A r e a   F - M e a s u r e   R e c a l l   P r e c i s i o n   FP   R a t e   TP R a t e   A l g o r i t h m   0 . 4 5 5   ?   0 . 6 7 2   ?   0 . 6 7 2   0 . 6 7 2   Ze r o R   0 . 9 5 1   0 . 9 5 3   0 . 9 5 3   0 . 9 5 4   0 . 0 4 7   0 . 9 5 3   J4 8   Tr e e   0 . 9 2 7   0 . 9 2 4   0 . 9 2 2   0 . 9 3 7   0 . 0 3 8   0 . 9 2 2   N a i v e   B a y e s i a n   0 . 9 7 6   0 . 9 8 4   0 . 9 8 4   0 . 9 8 5   0 . 0 3 2   0 . 9 8 4   S M O   1 . 0 0 0   0 . 9 8 4   0 . 9 8 4   0 . 9 8 5   0 . 0 3 2   0 . 9 8 4   R a n d o mF o r e st       4.   CO NCLU SI O N   Fro m   th e  r esu lt  o f   c o m p ar is o n   o f   t h e  f iv e  alg o r ith m s   a s   in   T ab les  4   an d   5   it  c o n clu d e  th at  Alg o r ith m s   SMO  an d   R an d o m   f o r est  p r ed icts   h ig h er   th a n   alter n ativ e  alg o r ith m s   s in ce   th eir   ac cu r ac y   is   th at   th e  h ig h est  a n d   h av e  lo west  av er ag e  e r r o r   co m p ar ed   to   o t h er s   alg o r ith m s   o n   f u n ctio n in g   o n   p er f o r m a n ce ,   s ev er al  attr ib u tes  ar e  test ed ,   a n d   f o u n d   th at  a  f ew  o f   th em   a r e  ef f ec tiv e   o n   th e  p er f o r m an ce   p r ed ictio n .   "T h e   teac h er   clar if icatio n   an d   was  wan ted   to   b e  u s ef u l  to   s tu d en t s ",   was  th e  s tr o n g est  attr ib u te  an d   th en   th e  r esu lt   p lay s   a  v ital  r o le  with in   th e  p e r f o r m a n ce   o f   ac a d em ics.  Mo r e  a  lo t  o f   r em o v in g   th e  wo r s t  h ier ar ch al  attr ib u tes   ( 1 0 ,   1 1 ,   1 2 ,   a n d   1 4 ) ,   th at  h av e  a  lo wer   im p ac t  o n   th e  d ataset  ca n   in cr ea s e  th e  alg o r ith m s   p er f o r m a n ce   ac cu r ac ies.       RE F E R E NC E S   [1 ]   S h a fiq   As lam , Im ra n   As h ra f,   “ Da ta  M in in g   Alg o rit h m s  a n d   Th e ir  Ap p li c a ti o n s   i n   E d u c a ti o n   Da ta  M in i n g ” ,  In ter n a t io n a l   J o u r n a l   o f  A d v a n c e   Res e a rc h   i n   C o mp u ter   S c ien c e   a n d   M a n a g e me n t  S t u d ies ,   Vo l   2 ,   I ss u e   7 ,   p g .   5 0 - 56 ,  J u ly   2 0 1 4 .   [2 ]   As a n b e   M . O. ,   Os o fisa n   A.O.,   Wi ll iam   W. F .   “ Tea c h e rs’  P e rfo rm a n c e   Ev a lu a ti o n   i n   Hig h e r  E d u c a ti o n a l  In stit u t i o n   u sin g   Da ta  M i n i n g   Tec h n iq u e ” ,  I n ter n a ti o n a l  J o u rn a l  o f  Ap p li e d   I n fo rm a t io n   S y ste ms   (IJ AIS )   –   IS S N:  2 2 4 9 - 0 8 6 8   F o u n d a ti o n   o f  C o m p u ter S c ien c e   F CS ,   Ne w Yo r k ,   US A V o lu m e   1 0   –   N o . 7 ,   M a rc h   2 0 1 6 .   [3 ]   Re n u k a   Ag ra wa l1 ,   Jy o ti   S i n g h ,   A . S .   Zad g o a n k a r,   “ S u m m a ti v e   As se ss m e n t  fo r  P e rfo rm a n c e   Ev a lu a ti o n   o f  a   F a c u lt y   Us in g   D a ta  M in in g   Tec h n i q u e s, ” In ter n a ti o n a l  J o u r n a l  o f  Ad v a n c e d   Res e a rc h   in   Co mp u ter   a n d   Co mm u n ica ti o n   En g i n e e rin g   I S O 3 2 9 7 : 2 0 0 7   Ce rti fied   Vo l.   5 ,   Iss u e   1 0 ,   Oc to b e r  2 0 1 6 .   [4 ]   Ra n d a   Kh .   He m a id 1 ,   Ala a   M .   El - Ha lee s,  “ Im p ro v i n g   Tea c h e r  P e rfo rm a n c e   u sin g   Da ta  M i n in g ” ,  In ter n a ti o n a l   J o u rn a l  o f  A d v a n c e d   Res e a rc h   in   Co mp u ter   a n d   Co mm u n ica ti o n   E n g i n e e rin g   V o l.   4 ,   Iss u e   2 ,   F e b ru a ry   2 0 1 5 .   [5 ]   Ah m e d   M o h a m e d   Ah m e d a ,   Ah m e t  Riza n e rc ,   Ali  H a k a n   Ulu so y c ,   “ Us in g   D a ta   M in i n g   t o   Pr e d ict  In stru c to r   Per fo rm a n c e ” ,   1 2 th   In tern a ti o n a l  Co n fe re n c e   o n   A p p l ica ti o n   o f   F u z z y   S y st e m s  a n d   S o ft   Co m p u ti n g ,   ICAF S ,  Vie n n a ,   Au stria. 29 - 3 0   Au g u st  2 0 1 6 .   [6 ]   A.  M o h a m e d   S h a h iri a , W .   Hu sa in a   ,   N.  Ab d u l  Ra sh id a ,   “ A  Rev iew o n   Pre d icti n g   S t u d e n t’s  Per f o rm a n c e   u sin g   D a ta   M in i n g   T e c h n iq u e s”   P r o c e d ia  Co m p u ter  S c ien c e   7 2   , 4 1 4   –   4 2 2 ,   EL S EVIE R   2 0 1 5 .   A v a il a b le  o n li n e   a t   ww w.sc ien c e d irec t. c o m   [7 ]   M s.A.P a v it h ra ,   M r. S . Dh a n a ra j,   “ P re d ictio n   Ac c u ra c y   o n   Ac a d e m ic  P e rfo rm a n c e   o f  S tu d e n ts   Us in g   Di ffe re n t   Da ta   M in i n g   Al g o r it h m s wit h   In f lu e n c i n g   F a c to rs” ,   IJ S RC S AM S   Vo l   7 ,   I ss u e   5 ,   2 0 1 8 .   [8 ]   F a rid   Ja u h a ri ,   Ah m a d   Afif     S u p i a n to   ,   “ Bu il d in g   S tu d e n t’s  P e rf o r m a n c e   De c isio n   Tree   Clas sifier  Us in g     B o o sti n g     Alg o rit h m ” ,  In d o n e sia n   J o u rn a l  o f  El e c trica l   En g i n e e rin g   a n d   C o mp u ter   S c ien c e   (IJ EE CS ) V o l.   1 4 ,   No .   3 ,     p p .   1 2 9 8 - 1 3 0 4 ,   J u n e   2 0 1 9 .   [9 ]   U.  Bin   M a t  a n d   N.   Bu n iy a m in ,   “ Us in g   Ne u ro - F u z z y   Tec h n i q u e   to   Clas sify   a n d   P re d ict  El e c tri c a l  En g i n e e rin g   S tu d e n tsAc h iev e m e n t  Up o n   G ra d u a ti o n   Ba se d   On   M a th e m a ti c s  Co m p e ten c y , ”   I n d o n e sia n   J o u rn a l  o f  El e c trica l   En g i n e e rin g   a n d   C o mp u ter   S c ien c e   (IJ EE CS ) . ,   v o l.   5 ,   n o .   3 ,   p p .   6 8 4 – 6 9 0 ,   2 0 1 7 .     [1 0 ]   S .   Hu ss a in ,   N.  A.   Da h a n ,   F .   M .   Ba - Alwib ,   a n d   N.  Rib a ta,  “ E d u c a ti o n a l  d a ta  m in in g   a n d   a n a ly sis  o f  stu d e n ts   a c a d e m ic  p e rfo rm a n c e   u sin g   W EKA,”  I n d o n e sia n   J o u r n a l  o f  El e c trica l  En g in e e rin g   a n d   C o mp u ter   S c ien c e   (IJ EE CS ) . ,   v o l.   9 ,   n o .   2 ,   p p .   4 4 7 – 4 5 9 ,   2 0 1 8 .   [1 1 ]   S a o u a b i  M o h a m e d ,   Ab d u ll a h   E z z a ti   “ A  d a ta  m in in g   p ro c e ss   u sin g   c las sifica ti o n   tec h n iq u e s  fo r   e m p lo y a b i li ty   p re d ictio n ” ,  In d o n e sia n   J o u rn a l  o f  El e c t ric a l  En g in e e rin g   a n d   C o mp u ter   S c ien c e   (IJ EE CS )   Vo l.   1 4 ,   No .   2 ,   p p .   1 0 2 5 - 1 0 2 9 ,   M a y   2 0 1 9 ,   [1 2 ]   Tu to r ialsp o i n t. c o m ,   “ Da t a   M in i n g   T u to ri a l  S imp ly E a sy   L e a rn in g , ”   2 - 11 - 2 0 1 4   Evaluation Warning : The document was created with Spire.PDF for Python.