I nd o ne s ia n J o urna l o f   E lect rica l En g ineering   a nd   Co m pu t er   Science   Vo l.   22 ,   No .   3 J u n 2 0 2 1 p p .   1 7 0 8 ~ 1 7 1 5   I SS N:  2 5 02 - 4 7 5 2 ,   DOI : 1 0 . 1 1 5 9 1 /ijeecs.v 2 2 .i 3 . p p 1 7 0 8 - 1 7 1 5          1708       J o ur na l ho m ep a g e h ttp : //ij ee cs.ia esco r e. co m   Predic tion o s tud ent’ performa nc e t hro ug h e duca ti o na l data   mining  t ech nique s       Nibra s   Z .   Sa li h Wa la a   K ha la f   De p a rtme n o Co m p u ter E n g in e e rin g ,   M u sta n siriy a h   Un i v e rsity ,   B a g h d a d ,   Ira q       Art icle  I nfo     AB S T RAC T   A r ticle  his to r y:   R ec eiv ed   Ma r   8 ,   2 0 2 1   R ev is ed   Ma y   1 4 ,   2 0 2 1   Acc ep ted   Ma y   1 9 ,   2 0 2 1       M a n y   e d u c a to rs  h a v e   wo rried   a b o u t h e   fa il u re o stu d e n t th ro u g h   a c a d e m ic  e d u c a ti o n .   Th u s,  a   v a riety   o p re d ictio n h a v e   b e e n   a p p li e d   t o   g e n e ra in f o rm a ti o n   in c l u d i n g   c u lt u re ,   so c ial,   a n d   e c o n o m ic  i n fo rm a ti o n   wh ich   wa sn ’t  re late d   t o   st u d e n t   p e rfo rm a n c e .   We  h a v e   g a th e re d   a n   a c tu a d a tas e fro m   t h re e   y e a rs  o a c a d e m ic  sta g e o M u sta n siri y a h   Un iv e rsity   in   Ira q .   Th e   d a tas e c o n sists   o a c a d e m ic  in fo rm a ti o n   wit h o u a n y   so c io e c o n o m ic  d a ta,  it   i n c lu d e fo rty - f o u u n d e rg ra d u a te  stu d e n ts  with   th irt e e n   a tt rib u tes .   We   h a v e   p r o p o se d   a   m o d e l   t h a e x p lain s   th e   c o rre latio n   b e twe e n   two   m a in   su b jec ts  w h i c h   a re ,   m a th e m a ti c s,  a n d   c o n tr o sy ste m s.  Th is  stu d y   a ime d   to   i d e n ti f y   st u d e n fa il u re   o th e   c o n tr o sy ste m su b jec i n   th e   th ird   y e a d e p e n d i n g   o n   t h e   a c a d e m ic  fe a tu re o th e   m a th e m a ti c s   su b jec ts  in   th e   first  a n d   se c o n d   y e a rs.  Th re e   a lg o rit h m we re   a p p li e d   to   th e   d a tas e in c lu d in g   Na ïv e   Ba y e s,  su p p o rt   v e c to r   m a c h in e ,   a n d   m u lt il a y e r   p e rc e p tro n .   S i n c e   th e   d a tas e wa s   imb a lan c e d ,   t h is  lea d t o   a p p e a o v e rfit ti n g   p ro b lem   in   th e   re su lt so   th e   sy n t h e ti c   m in o rit y   o v e rsa m p li n g   tec h n iq u e   wa s   u ti li z e d   to   s o lv e   t h is  p ro b lem .   Ou re su lt sh o t h a t h e   su p p o rt  v e c t o m a c h in e   a lg o rit h m   p ro v e a n   e fficie n c las sifica ti o n   a fter  a p p li e d   sy n th e ti c   m in o rit y   o v e rsa m p li n g   tec h n iq u e .   Th e   a c c u ra c y   o th e   c las sifiers   wa s   m e a su re d   fro m   th e   c o n f u sio n   m a tri x   u sin g   t h e   Waik a to   e n v ir o n m e n f o r   k n o wle d g e   a n a l y sis (W EKA) t o o l   a n d   i ts r e late d   m e tri c s.   K ey w o r d s :   C las s if icatio n   alg o r ith m s   C r o s s - v alid atio n     I m b alan ce   d atasets     Sy n th etic  m in o r ity   O v er s am p l in g   tech n iq u e   T h is i a n   o p e n   a c c e ss   a rticle   u n d e r th e   CC B Y - SA   li c e n se .     C o r r e s p o nd ing   A uth o r :   Nib r as Z .   Salih   Dep ar tm en t o f   C o m p u ter   E n g i n ee r in g   Mu s tan s ir iy ah   Un iv er s ity   B ag h d ad ,   I r aq   E m ail: E Gm a0 2 0 @ u o m u s tan s ir iy ah . ed u . iq ,   n e r an ze zo @ g m a il.c o m       1.   I NT RO D UCT I O N     T h e   t r o u b l i n g   i n d i c e s   o f   s t u d e n t s’   a c a d e m i c s   f a i l u r e   f o r   e d u c a t i o n a l   c o u r s e s   a t   u n i v e r s i t i e s   h a v e   b e e n   c o n c e r n e d   e d u c a t o r s .   T h e r e f o r e ,   r e s e a r c h e r s   s h o w   t h a t   d u r i n g   t h e i r   c o u r s e   t a s k s ,   s t u d e n t s   e n c o u n t e r   m a n y   d i f f i c u l t i e s   i n   a   m a n n e r   t h a t   m a n y   o f   t h e m   c o u l d   b e   f a i l i n g   d u r i n g   t h e i r   s t u d i e s   o r   l e a v i n g   t h e   a c a d e m i c   c o u r s e s   [ 1 ] .   T h e   m e t h o d   o f   s e a r c h i n g   f o r   e s s e n t i a l   d a t a   f r o m   an   e x t e n s i v e   d a t a s e t   t o   e v a l u a t e   t h e   d a t a   f r o m   v a r i o u s   d e s t i n a t i o n s   i s   k n o w n   a s   d a t a   m i n i n g .   D a t a   m i n i n g   t e c h n o l o g i e s   h a v e   b e e n   u s e d   t o   e n h a n c e   e d u c a t i o n s   p e r f o r m a n c e   b y   c o n n e c t i n g   a   k n o w l e d g e   g a p ,   p r e d i c t i n g   s t u d e n t   p e r f o r m a n c e ,   a n d   i d e n t i f y i n g   f e a t u r e s   [ 2 ] - [ 4 ] .     M a n y   t e c h n i q u e s   f o r   d a t a   m i n i n g   a r e   u s e d   t o   e v a l u a t e   a   d a t a s e t   a n d   t o   f i n d   u s e f u l   i n f o r m a t i o n   c a l l e d   k n o w l e d g e .   D a t a   m i n i n g   w a s   i n t r o d u c e d   i n   b u s i n e s s   s e c t o r s   o n l y ,   b u t   i t   i s   p r o v e n   t o   b e   a p p l i e d   f o r   e d u c a t i o n   a n d   h e n c e   i s   d e f i n e d   a s   e d u c a t i o n a l   d a t a   m i n i n g   ( E D M )   [ 5 ] .   E D M   is   c o n c e r n e d   w i t h   t h e   e x e c u t i o n   o f   d a t a   m i n i n g   s t r a t e g i e s   t o   i n s p ect   s e v e r a l   a c a d e m i c s   d a t a   f o r   k n o w l e d g e   d e r i v a t i o n .   A l s o ,   E D M   e x p l o r e s   n e w   t e c h n i q u e s   t h a t   l e a d   t o   a   b e t t e r   u n d e r s t a n d i n g   o f   t h e   l e a r n i n g   e n v i r o n m e n t .   T h e   i n c r e a s i n g   a t t e n t i o n   i n   a c a d e m i c   w o r k   i s   e x p a n d e d   t o   r e c o g n i z e   k e y   f a c t o r s   w h i c h   i n f l u e n ce  t h e   s t u d e nt s   s u c c e s s T h e r e f o r e ,   e d u c a t o r s   s h o u l d   a n a l y z e   s t u d e n t s '   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4 7 5 2       P r ed ictio n   o f stu d en t’ s   p erfo r ma n ce   th r o u g h   ed u ca tio n a l d a ta   min in g   tech n iq u es  ( N ib r a s   Z.  S a lih )   1709   r e s u l t s   t o   h a v e   a   s t r o n g e r   m e a n s   o f   s t u d y i n g .   M o r e o v e r ,   t h e   s t r a t e g i e s   o f   E D M   a r e   d e s i g n e d   t o   p r o v i d e   a d d i t i o n a l   a d v a n t a g e s   f o r   e d u c a t o r s   t o   b e t t e r   s t u d e n t   a c t i v i t i e s .   T h e   e x t r a c t i o n   f r o m   l a r g e   d a t a s e t s   o f   e s s e n t i a l   p a t t e r n s   i s   k n o w n   a s   k n o w l e d g e   d i s c o v e r y   i n   d a t a b a s e s   ( K D D )   [ 5 ] [ 6 ] .     O n e   o f   t h e   m a i n   c h a l l e n g e s   i n   t h i s   s e n s e   i s   t h e   a b i l i t y   t o   p r e d i c t   s t u d e n t s '   f a i l u r e   d u r i n g   e d u c a t i o n a l   c o u r s e s   i n   t h e   f u t u r e   a t   a n   e f f i c i e n t   l e v e l   s o   t h a t   p e d a g o g i c a l   s t r a t e g i e s   c a n   b e   p e r f o r m e d   t o   p r e v e n t   s t u d e n t s   f a i l u r e   [ 1 ] ,   [7 ] - [ 1 0 ] .   T h e r e f o r e ,   c l a s s i f i c a t i o n   i s   o n e   o f   t h e   m o s t   f a m o u s   t o o l s   o f   d a t a   m i n i n g   u s e d   t o   c l a s s i f y   d a t a   t o   t h e   g r o u p s   so   e a c h   e l e m e n t   o f   t h e   d a t a s e t   i s   a l l o c a t e d   t o   o n e   c l a s s   b y   a s s i g n i n g   a   l a b e l   r e g a r d i n g   i t s   c l a s s .   T h e   i d e a   b e h i n d   t h i s   t o o l   i s   t o   s e p a r a t e   t h e   d a t a s e t   i n t o   t h e   t r a i n i n g   s e t   a n d   t e s t   s e t ,   t h e   t r a i n i n g   c o l l e c t i o n   i n c l u d e s   t h e   d a t a   t h a t   i s   t r a i n e d   u s i n g   a   c e r t a i n   a l g o r i t h m   t h e n   u s e d   a s   a   r e f e r e n c e   f o r   t h i s   c l a s s i f i c a t i o n   [ 1 1 ] .   M a t h e m a t i c a l   m e t h o d s   w e r e   u s e d   t o   c h a r a c t e r i z e   t h e   d a t a   b y   c e r t a i n   m o d e l s   w o r k i n g   a s   a   c l a s s i f i e r ,   s u c h   a s   d e c i s i o n   t r e e ,   B a y e s i a n   c l a s s i f i c a t i o n ,   n e u r a l   n e t w o r k s ,   s u p p o r t   v e c t o r   m a c h i n e ,   a n d   c l a s s i f i c a t i o n   b a s e d   o n   a s s o c i a t i o n   [ 6 ] [ 7 ] .     W a i k a t o   e n v i r o n m e n t   f o r   k n o w l e d g e   a n a l y s i s   ( W E K A )   h a s   b e e n   c o n s i d e r e d   a   p o w e r f u l   c l a s s i f i c a t i o n   t o o l   u s e d   f o r   e d u c a t i o n a l   d a t a   m i n i n g   t o   a n a l y z e   a n d   e v a l u a t e   t h e   a c c u r a c y   o f   v a r i o u s   a l g o r i t h m s .   W E K A   i s   c o m m o n l y   i m p l e m e n t e d   i n   m a c h i n e   l e a r n i n g   d e p e n d s   o n   t h e   J a v a   l a n g u a g e   t h a t   i n v o l v e s   v a r i o u s   a l g o r i t h m s   a n d   d i f f e r e n t   t e c h n i q u e s   a s   c l a s s i f i c a t i o n ,   c l u s t e r i n g ,   a n d   r e g r e s s i o n   [ 3 ] ,   [ 1 2 ] .   I n   t h i s   p a p e r ,   w e   h a v e   i d e n t i f i e d   t w o   m a i n   s u b j e c t s   w h i c h   a r e m a t h e m a t i c s   a n d   c o n t r o l   s y s t e m s   f o r   f i v e   c o u r s e s   o f   a c a d e m i c   s t a g e s A l s o ,   w e   h a v e   p r o p o s e d   a   m o d e l   t h a t   e x p l a i n s   t h e   c o r r e l a t i o n   b e t w e e n   t h e s e   s u b j e c t s   a n d   i l l u s t r a t e s   t h a t   t h e   r e s u l t s   o f   t h e   s t u d e n t   i n   t h e   f i r s t   s u b j e c t   w i l l   a f f e c t   h i s   r e s u l t s   i n   t h e   s e c o n d   s u b j e c t .   T h i s   c o r r e l a t i o n   d e p e n d s   o n   t h r e e   a c a d e m i c   f e a t u r e s   o f   t h e   m a t h e m a t i cs   s u b j e c t   w h i c h   a r e   t o t a l   l e c t u r e   a t t e n d a n c e ,   a s s e s s m e n t   g r a d e ,   a n d   f i n a l   g r a d e .     T h e   g o a l   o f   t h i s   p a p e r   i s   t o   p r e d i c t   s t u d e n t s '   s u c c e s s   o r   f a i l u r e   i n   t h e   c o n t r o l   s y s t e m s   s u b j e c t ,   a n d   t h r e a s o n s   b e h i n d   i t .   T h e r e f o r e ,   f i n d i n g   t h e s e   r e a s o n s   w i l l   s u p p o r t   t h e   s t u d e n t s   t o   i m p r o v e   t h e i r   p e r f o r m a n c e ,   p r e p a r i n g   t h e   s t u d e n t   t o   s t a r t   a   g o o d   s e m e s t e r ,   a n d   u n d e r s t a n d   t h e   b a s i c   c o n c e p t s   t h a t   l e a d   t o   a   s u c c e s s f u l   e d u c a t i o n   c o u r s e .   T h r e e   c l a s s i f i c a t i o n   m o d e l s   a r e   a p p l i e d   t o   p r e d i c t   s t u d e n t   p e r f o r m a n c e :   N a ï v e   B a ye s   c l a s s i f i e r   ( N B C ) s u p p o r t   v e c t o r   m a c h i n e   ( S V M ) ,   a n d   m u l t i l a y e r   p e r c e p t r o n   ( M L P ) .   I n   t h i s   r e s e a r c h ,   s e v e n   m e t r i c s   a r e   u s e d   t o   e v a l u a t e   t h e   e f f i c i e n c y   o f   t h e   s e l e c t e d   c l a s s i f i e r s :   r e c a l l ,   p r e c i s i o n ,   s p e c i f i c i t y ,   F - m e a s u r e ,   r e c e i v e r   o p e r a t i n g   c h a r a c t e r i s t i c s   ( R O C ) p r e c i s i o n - r e c a l l   c u r v e   ( P R C )   a r e a ,   a n d   a c c u r a c y .   T h e   p a p e r   i s   d i v i d e d   i n t o   t h e   f o l l o w i n g   s e c t i o n s ,   s e c t i o n   2   p r e s e n t s   r e l a t e d   w o r k s e c t i o n   3   d e s c r i b e s   t h e   d a t a   s t r u c t u r e   a n d   t h e   p r o p o s e d   m e t h o d ,   s e c t i o n   s h o w s   e x p e r i m e n t   d e s i g n ,   S e c t i o n   i l l u s t r a t e s   t h e   r e s u l t s   a n d   d i s c u s s i o n   w h i l e   t h e   c o n c l u s i o n s   a r e   i n   s e c t i o n   6 .       2.   RE L AT E WO RK S   S o m e   w o r k s   h a v e   a n a l y z e d   t h e   p r e d i c t i o n   o f   s t u d e n t s '   f a i l u r e   d u r i n g   t h e i r   e d u c a t i o n   c o u r s e s .     C o s t a   e t   a l .   [ 1 ]   d i s c u s s e d   t h e   r e s u l t s   o f   t h e   e f f e c t i v e   E D M   a p p r o a c h   to   e a r l d e t e c t i o n   f o r   s t u d e n t s   w h o   w e r e   e x p e c t e d   t o   f a i l   i n t r o d u c t o r y   c o u r s e s   t h r o u g h   s t u d y i n g   t h e   i m p a c t   o f   d a t a   p r e - p r o c e s s i n g   a n d   f i n e - t u n i n g   a l g o r i t h m   t a s k s   t h a t   c o n c e r n i n g   t h e   e f f i c i e n c y   o f   t h e   c l a s s i f i e r s .   T w o   d a t a s e t s   w e r e   i m p l e m e n t e d   w h i c h   w e r e   d i s t a n c e   s t u d i e s   d a t a   t h a t   c o n s i s t   o f   2 6 2   s t u d e n t s   f o r   1 0   w e e k s   a n d   c a m p u s   d a t a   t h a t   c o n t a i n   1 6 1   s t u d e n t s   f o r   1 6   w e e k s .   H e n c e ,   f o u r   a l g o r i t h m s   w e r e   u t i l i z e d   o n   t h e s e   d a t a s e t s   a s   d e c i s i o n   t r e e ,   n e u r a l   n e t w o r k ,   S V M ,   a n d   N B C .   T h e   d a t a s e t s   c o n s i s t   o f   s e v e r a l   f e a t u r e s   l i k e   a g e ,   t o w n ,   s t u d e n t   r e g i s t r a t i o n   a n d   s e m e s t e r ,   c i v i l   s t a t u s ,   a n d   d i s c i p l i n e   s t a t u s .   C o s t a   e t   a l .   [ 1 ]   f o u n d   t h e   S V M   w a s   a n   a p p r o p r i a t e   c l a s s i f i e r   w i t h   a n   F - m e a s u r e   o f   9 2 %   f o r   d i s t a n c e   s t u d i e s   c o u r s e s   w h i l e   w i t h   a n   F - m e a s u r e   o f   8 3 %   f o r   c a m p u s   c o u r s e s   [ 1 ] .     C h i n g - C h i e h   K i u   a n a l y z e d   t h e   s i g n i f i c a n c e   a n d   e f f e c t   o f   s t u d e n t   h i s t o r y ,   s o c i a l   b e h a v i o r s   o f   s t u d e n t s ,   a n d   t h e   a c c o m p l i s h m e n t   o f   s t u d e n t   c o u r s e w o r k   i n   f o r e c a s t i n g   s t u d e n t   a c a d e m i c   p e r f o r m a n c e   in   t h e   M a t h e m a t i c   s u b j e c t .   T h e   d a t a s e t   c o n t a i n s   3 9 5   i n s t a n c e s   a n d   3 3   a t t r i b u t e s   t h a t   w e r e   d i v i d e d   i n t o   t h r e e   g r o u p s .   T h e   f i r s t   g r o u p   o f   t h e   d a t a   w a s   s t u d e n t   b a c k g r o u n d   s u c h   a s   t h e   j o b   o f   f a t h e r ,   g u a r d i a n   o f   a   s t u d e n t ,   a n d   g e n d e r   o f   s t u d e n t .   T h e   s e c o n d   g r o u p   w a s   t h e   s o c i a l   d a t a   s u c h   a s   h o m e   i n t e r n e t   a c c e s s ,   o u t i n g   w i t h   f r i e n d s ,   a n d   t h e   s t a t u s   o f   c u r r e n t   h e a l t h .   A n d   t h e   t h i r d   g r o u p   w a s   t h e   c o u r s e w o r k   d a t a   t h a t   i n v o l v e s   t h e   g r a d i n g   p e r i o d   [ 7 ] .     A n   e a r l y   p r e d i c t i o n   o f   s t u d e n t s   f a i l s   w h o   w e r e   e x p e c t e d   n o t   t o   s u c c e e d   i n   a n   a c a d e m i c   c o u r s e   w as   i m p l e m e n t e d   b y   s e n t i m e n t   t e s t i n g   t o   d e t e c t   e f f e c t i v e   d a t a    a n d   t o   i m p r o v e   p r e d i c t i v e   a c c u r a c y .   T h e   e m o t i o n a l   a n a l y s i s   w a s   p r o v i d e d   b y   a   s t u d e n t ' s   c o m m e n t s   t h a t   i d e n t i f y   a n   a c h i e v e m e n t   s t u d e n t   b y   g r a p h i c   t e c h n i q u e s .   T h e   d a t a s e t   i n c l u d e d   1 8 1   s t u d e n t s   o f   c o m p u t e r   s c i e n c e   s u b j e c t s   f o r   n i n e t e e n   w e e k s   t h a t   i n v o l v e d   c o m p l e t i n g   t h e   h o m e w o r k ,   p a r t i c i p a t i o n   i n   t h e   c l a s s ,   a t t e n d a n c e ,   a n d   t h e   s t u d e n t s   e m o t i o n .   S V M   a n d   c o n v o l u t i o n   n e u r a l   n e t w o r k   ( C N N )   w e r e   a p p l i e d   t h r o u g h   t h e   d a t a   m i n i n g   t e c h n i q u e s .   C N N   w a s   t h e   b e s t   c l a s s i f i e r   w i t h   a n   F - m e a s u r e   o f   0 . 7 8 %   d u r i n g   t h e   9 t h   w e e k   [ 8 ] .   A l s o ,   A s i f   e t   a l .   [ 9 ]   u s e d   d a t a   m i n i n g   t e c h n i q u e s   t o   e v a l u a t e   s t u d e n t s '   u n d e r g r a d u a t e ,   s i n c e   t h e   a u t h o r s   f o c u s e d   o n   t w o   f a c t o r s   o f   s t u d e n t   p e r f o r m a n c e   w h i c h   a r e   t h e   p r e d i c t i o n   o f   s t u d e n t s   a c a d e m i c   p e r f o r m a n c e   a t   t h e   e n d   o f   f o u r   y e a r s   s t u d y   p r o g r a m ,   t o   a n a l y z e   a n d   c o m b i n e   s t a n d a r d   p r o g r e s s i o n s   w i t h   p r e d i c t i o n   o u t c o m e s   A s i f   e t   a l .   [ 9]   d e t e c t e d   t w o   s t u d e n t   c a t e g o r i e s   w h i c h   w e r e   l o w   a n d   h i g h   s t u d e n t   a c t i v i t i e s .     I n c l u d i n g   t h e   r e s e a r c h ,   J a c o b   e t   a l .   [ 1 0 ]   i m p l e m e n t e d   m u l t i p l e   t e c h n i q u e s   l i k e   r e g r e s s i o n   a n d   d e c i s i o n   t r e e   t o   e f f e c t i v e l y   p r e d i c t   t h e   s t u d e n t s   p e r f o r m a n c e   a n d   a c a d e m i c   f a i l u r e .   T h e   d a t a s e t   w a s   c o l l e c t e d   f r o m   c o m p u t e r   e n g i n e e r i n g   a n d   a p p l i e d   v a r i o u s   r e g r e s s i o n   a n a l y s e s   a n d   d e c i s i o n   t r e e s   t o   p r e d i c t   t h e   a v e r a g e   g r a d e   a n d   t h e   f i n a l   s e m e s t e r   o f   t h e   s t u d e n t s .   T h u s ,   g r o u p i n g   w a s   a p p l i e d   i n   l e a r n i n g   s t y l e s   b y   d i v i d i n g   s t u d e n t s   i n t o   a c a d e m i c   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec  E n g   &   C o m p   Sci,   Vo l.  22 ,   No .   3 J u n 2 0 2 1   :   1 7 0 8   -   1 7 1 5   1710   s t r e n g t h   g r o u p s   a n d   w e a k n e s s e s   g r o u p s   t h a t   d e p e n d   o n   t h e   s t u d e n t   a c t i v i t i e s   o f   p r o g r a m m i n g   l a n g u a g e   s u b j e c t   u s i n g   k - m e a n   a l g o r i t h m   [ 1 0 ] .   P .   K a u r ,   M .   S i n g h ,   a n d   G .   S .   J o s a n   [ 1 2 ]   r e c o g n i z e d   a n d   d i s p l a y e d   s l o w   l e a r n e r s   a m o n g   s t u d e n t s   t h r o u g h   a   p r e d i c t i v e   d a t a   m i n i n g   m o d e l .   T h e   s t u d e n t   a c a d e m i c   d a t a s e t   w a s   t e s t e d   a n d   i m p l e m e n t e d   u s i n g   f i v e   c l a s s i f i e r s   i n c l u d i n g   m u l t i l a y e r   p e r c e p t i o n ,   N a ï v e   B a y e s ,   J 4 8 ,   s e q u e n t i a l   m i n i m u m   o p t i m i z a t i o n   ( S M O ) ,   a n d   R E P T r e e .   T h e   d a t a s e t   c o n t a i n s   1 5 2   s t u d e n t s   t h a t   w e r e   i n c l u d e d   a c a d e m i c   a n d   n o n - a c a d e m i c   f e a t u r e s   s u c h   a s   s t u d e n t s   g e n d e r ,   a n d   t h e   c o m p u t e r   a t   h o m e ,   m e d i u m   o f   i n s t r u c t i o n ,   t h e   s t u d e n t   h a v i n g   a   c e l l   p h o n e .   P .   K a u r ,   M .   S i n g h ,   a n d   G .   S .   J o s a n   [ 1 2 ]   i n d i c a t e d   t h a t   t h e   M L P   w a s   t h e   a p p r o p r i a t e   c l a s s i f i e r   w i t h   a n   a c c u r a c y   o f   7 5 % .   A h m e d   e t   a l .   [ 3 ]   f o c u s   o n   t h e   p e r f o r m a n c e   o f   t h e   t e a c h e r   a n d   a   d i s c u s s i o n   o f   t h e   r e a s o n s   t h a t   a f f e c t   t h e   p e r f o r m a n c e   o f   t h e   s t u d e n t s   t o   e n h a n c e   t h e   e f f i c i e n c y   o f   t h e   e d u c a t i o n   s y s t e m   b y   a p p l y i n g   f o u r   c l a s s i f i e r s ,   w h i c h   a r e   J 4 8 ,   N B ,   M L P ,   a n d   S M O .   T h e   d a t a s e t   w a s   g a t h e r e d   f r o m   C a l i f o r n i a   U n i v e r s i t y   t h a t   w a s   c o n t a i n e d   a   5 , 8 2 0 - a s s e s s m e n t   s c o r e   s u p p l i e d   b y   t h e   s t u d e n t ,   i t   i n v o l v e s   2 8   s p e c i f i c   q u e s t i o n s   w i t h   5   a t t r i b u t e s .   A m j a d   A b u   S a a   [ 1 3 ]   c o l l e c t e d   d i f f e r e n t   d a t a s e t s   i n c l u d i n g   a   v a r i e t y   o f   p e r s o n a l ,   s o c i a l ,   a n d   a c a d e m i c   d a t a .   T h e   a u t h o r s   c o n c l u d e d   t h a t   t h e   a c h i e v e m e n t   o f   t h e   s t u d e n t   i s   n o t   c o m p l e t e l y   d e p e n d e n t   o n   t h e i r   a c a d e m i c   e f f o r t s ,   a l t h o u g h   s e v e r a l   o t h e r   v a r i a b l e s   h a v e   g r e a t   i n f l u e n c e s .   F o u r   a l g o r i t h m s   o f   t h e   d e c i s i o n   t r e e   a n d   t h e   N a ï v e   B a y e s   a l g o r i t h m   w e r e   a p p l i e d .   T h e   d a t a s e t s   w e r e   o b t a i n e d   t h r o u g h   a n   o n l i n e   s u r v e y   c o n d u c t e d   i n   G o o g l e   f o r m s   a n d   c i r c u l a t e d   t o   v a r i o u s   s t u d e n t s   i n   t h e i r   o r d i n a r y   s t u d i e s .   I t   w a s   i n c l u d e d   v a r i o u s   f e a t u r e s   s u c h   a s   t h e   s t u d e n t s   g e n d e r ,   n a t i o n a l i t y   c a t e g o r y ,   a n d   t e a c h i n g   l a n g u a g e   i n   t h e   u n i v e r s i t y .   Al - S h e h r i   e t   a l .   [ 1 4 ]   i n t r o d u c e d   t h e   S VM   a n d   K - n e a r e s t   n e i g h b o r   c l a s s i f i e r s   on   a   s t u d e n t   d a t a   c o l l e c t i o n   t o   e s t i m a t e   t h e   s t u d e n t   g r a d e   i n   t h e   f i n a l   e x a m   o f   M a t h e m a t i c   s u b j e c t .   T h e   s t u d e n t   w a s   a s s e s s e d   f o r   t w o   p e r i o d s   a n d   c o m b i n e d   w i t h   t h e   t h i r d   p e r i o d   t o   a c h i e v e   t h e   f i n a l   s c o r e .   T h e   d a t a s e t   c o n s i s t s   o f   3 9 5   i n s t a n c e s   a n d   3 3   a t t r i b u t e s ,   i t   w a s   i n c l u d e d   d i f f e r e n t   f e a t u r e s   s u c h   a s   f a m i l y   s i z e ,   f a t h e r s   j o b ,   a n d   m o t h e r s   j o b .   H u s s a i n   e t   a l .   [ 4 ]   p r e s e n t e d   t h e   s t u d e n t   p e r f o r m a n c e   b a s e d   o n   t h r e e   v a r i o u s   c o l l a g e s   o f   A s s a m   i n   I n d i a .   T h e   d a t a s e t s   c o n s i s t   o f   3 0 0   s t u d e n t s   w i t h   t w e n t y - f o u r   a t t r i b u t e s   o f   s o c i a l ,   d e m o g r a p h i c ,   a n d   a c a d e m i c .   F o u r   c l a s s i f i c a t i o n   s t r a t e g i e s   w e r e   u s e d   i n   t h i s   r e s e a r c h ,   i n c l u d i n g   J 4 8 ,   P A R T ,   r a n d o m   f o r e s t ,   a n d   B a y e s   n e t w o r k   c l a s s i f i e r s .   T h e   c o n t i n u o u s   a p p r a i s a l   p r o c e s s   o f   t h e   i n t e r n a l   a s s e s s m e n t   v a r i a b l e   h a d   t h e   g r e a t e s t   e f f e c t   o n   t h e   s t u d e n t s '   f i n a l   s e m e s t e r   o u t c o m e s .   T h e   d a t a s e t   w a s   i n c l u d e d   d i f f e r e n t   f e a t u r e s   a s   f a t h e r   a n d   m o t h e r   q u a l i f i c a t i o n s ,   s i z e   o f   t h e   f a m i l y ,   a n d   g e n d e r   [ 4 ] .   M o s t   r e s e a r c h e r s   o f   t h e   a b o v e - m e n t i o n e d   w o r k s   h a v e   u s e d   a   l a r g e   d a t a s e t   c o n c e r n i n g   a   g e n e r a l   d e s c r i p t i o n   o f   s t u d e n t s   t h a t   i n c l u d e d   s o c i a l ,   d e m o g r a p h i c ,   p e r s o n a l ,   a n d   s o c i o - e c o n o m y   i n f o r m a t i o n   t h a t   w a s n ' t   r e l a t e d   d i r e c t l y   t o   s t u d e n t s   p e r f o r m a n c e .         3.   D A T A   D E S C R I P T I O N     D u r i n g   t h e   a c a d e m i c   y e a r   2 0 1 9 - 2 0 2 0 ,   t h e   d a t a s e t   w a s   c o l l e c t e d   f r o m   M u s t a n s i r i y a h   U n i v e r s i t y   i n   I r a q .   D a t a s e t   h a s   p e r t a i n e d   d e p e n d   o n   t w o   m a i n   s u b j e c t s   w h i c h   a r e   m a t h e m a t i c s   a n d   c o n t r o l   s y s t e m s   s u b j e c t s .   M a t h e m a t i c s   s u b j e c t   i n v o l v e s   C a l c u l u s   I   a n d   C a l c u l u s   I I   f r o m   t h e   f i r s t   s t a g e ,   M a t h e m a t i c a l   a n a l y s i s   I ,   a n d   M a t h e m a t i c a l   a n a l y s i s   I I   f r o m   t h e   s e c o n d   s t a g e .   W h e r e a s ,   c o n t r o l   s y s t e m s   s u b j e c t   ( c l a s s )   f r o m   t h e   t h i r d   s t a g e ,   e i t h e r   0   r e f e r s   t o   p a s s   o r   1   r e f e r s   t o   f a i l .   O n e   a c a d e m i c   s t a g e   c o n s i s t s   o f   t w o   c o u r s e s ,   e a c h   c o u r s e   o f   t h e   m a t h e m a t i c s   s u b j e c t   h a s   t h r e e   a c a d e m i c   f e a t u r e s :   T h e   t o t a l   l e c t u r e s   a t t e n d a n c e ,   a s s e s s m e n t   g r a d e ,   a n d   t h e   f i n a l   g r a d e .   T h e   t o t a l   l e c t u r e   a t t e n d a n c e   f e a t u r e   h a s   a   v a l u e   o f   0 ,   1 ,   o r   2   ( 0   i n d i c a t e s   t h e   l a s t   w a r n i n g ,   1   i n d i c a t e s   t h e   f i r s t   w a r n i n g ,   a n d   2   i n d i c a t e s   n o   a b s e n c e   h a s   b e e n   r e c o r d e d ) .   T h e   a s s e s s m e n t   g r a d e   i n v o l v e s   q u i z z e s ,   m i d - t e r m   e x a m s ,   a n d   s t u d e n t   a s s i g n m e n t s .   T h e   m a x i m u m   a s s e s s m e n t   g r a d e   v a l u e   i s   4 0   w h i l e   t h e   m i n i m u m   g r a d e   v a l u e   i s   0 .   T h e   f i n a l   g r a d e   f e a t u r e   h a s   a   v a l u e   o f   0 ,   1 ,   o r   2   ( 0   i n d i c a t e s   t h a t   t h e   s t u d e n t   h a s n t   p a s s e d   e i t h e r   t h e   f i r s t   o r   t h e   s e c o n d   at t e m p t ,   1   i n d i c a t e s   t h a t   t h e   s t u d e n t   h a s   f a i l e d   i n   t h e   f i r s t   a t t e m p t   b u t   p a s s e d   i n   t h e   s e c o n d ,   a n d   2   i n d i c a t e s   t h a t   t h e   s t u d e n t   p a s s e d   t h e   e x a m   f r o m   t h e   f i r s t   a t t e m p t .   T w e l v e   a t t r i b u t e s   d e s c r i p t i o n   o f   m a t h e m a t i c s   s u b j e c t s   a n d   o n e   c l a s s   a t t r i b u t e   o f   t h e   c o n t r o l   s y s t e m s   s u b j e c t s   a r e   s h o w n   i n   T a b l e   1 .       T a b l e   1 .   A t t r i b u t e s   d e s c r i p t i o n   f o r   t w o   m a i n   s u b j e c t s   o f   m a t h e m a t i c s   a n d   c o n t r o l   s y s t e m s   S t a g e   A t t r i b u t e s   R a n g e   o f   a t r i b u t e s   D e s c r i p t i o n   F i r s t   s t a g e   A t t e n d a n c e   c o u r s e   1   [ 0 , 1 , 2 ]     m o r e   t h a n   1 0 %   a b s e n c e     A t t e n d a n c e   c o u r s e   2     l e s s   t h a n   1 0 %   a b s e n c e   S e c o n d   s t a g e   A t t e n d a n c e   c o u r s e   1     n o   a b s e n c e     A t t e n d a n c e   c o u r s e   2   F i r s t   s t a g e   A s s e s s m e n t   g r a d e   c o u r s e   1   Q u i z z e s   [ 0 - 10]     r e f e r s   t o   t h e   l o w e s t   a s s e s s m e n t   g r a d e     A s s e s s m e n t   g r a d e   c o u r s e   2   Mid - t e r m   e x a m   [ 0 - 20]   S e c o n d   s t a g e   A s s e s s m e n t   g r a d e   c o u r s e   1   A s s i g n m e n t s   [ 0 - 10]   40    r e f e r s   t o   t h e   h i g h e s t   a s s e s s m e n t   g r a d e     A s s e s s m e n t   g r a d e   c o u r s e   2   F i r s t   s t a g e   F i n a l   g r a d e   c o u r s e   1   [ 0 , 1 , 2 ]     f a i l e d   b o t h   a t t e m p t s     F i n a l   g r a d e   c o u r s e   2     p a s s   f r o m   t h e   s e c o n d   a t t e m p t   S e c o n d   s t a g e   F i n a l   g r a d e   c o u r s e   1     p a s s   f r o m   t h e   f i r s t   a t t e m p t     F i n a l   g r a d e   c o u r s e   2   T h i r d   s t a g e   F i n a l   r e s u l t s   c o u r s e   1   ( C l a s s )   [ 0 , 1 ]     p a s s   a n d   1   -   f a i l   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4 7 5 2       P r ed ictio n   o f stu d en t’ s   p erfo r ma n ce   th r o u g h   ed u ca tio n a l d a ta   min in g   tech n iq u es  ( N ib r a s   Z.  S a lih )   1711   C alcu lu s   I ,   an d   ca lcu lu s   I I   f o r   th f ir s s tag e,   m ath em atica an aly s is   I   an d   m ath em atica an aly s is   I I   f o r   th e   s ec o n d   s tag e,   an d   co n tr o s y s tem s   o f   th f ir s co u r s f o r   t h th ir d   s tag e.   Als o   Fig u r 1   s h o ws  th d ataset  r ep r esen tatio n   in   t h W E KA  to o l u s in g   attr ib u te  r elatio n   f ile  f o r m at  ( AR FF )   ex ten s io n           Fig u r 1 .   Data   r e p r esen tatio n   u s in g   AR FF   f o r m at       D a t a s e t   c o n s i s t s   o f   4 4   i n s t a n c e s   ( s t u d e n t s ) ,   1 2   a t t r i b u t e s ,   a n d   o n e   c l a s s   a t t r i b u t e   v a l u e   f o r   e a c h   i n s t a n c e T h e   l o w e r   c l a s s e s   h a v e   1 7   i n s t a n c e s   k n o w n   a s   0   ( p a s s )   w h i l e   t h e   h i g h e r   c l a s s e s   h a v e   2 7   i n s t a n c e s   k n o w n   a s   1   ( f a i l ) W e   h a v e   c o n s t r u c t e d   t h e   d a t a s e t   d e p e n d s   o n   t h e   c o r r e l a t i o n   b e t w e e n   m a t h e m a t i c s   s u b j e c t s   f r o m   o n e   s i d e ,   a n d   t h e   c o n t r o l   s y s t e m s   f r o m   t h e   o t h e r   s i d e .   W e   h a v e   s u g g e s t e d   t h a t   t h e s e   s u b j e c t s   s h a r e   t h e   b a s i c   c o n c e p t s   f o r   t h r e e   y e a rs   o f   a c a d e m i c   c o u r s e s T h e   b a s i c   c o n c e p t s   t h a t   s h a r e   i n   t h e s e   s u b j e c t s   i n c l u d i n g   a n a l o g   a n d   d i g i t a l   s y s t e m s ,   L a p l a c e ,   z - t r a n s f o r m ,   o p t i m i z a t i o n   t e c h n i q u e s ,   l i n e a r ,   a n d   n o n l i n e a r   s y s t e m s .   C o n s e q u e n t l y ,   t h e   s t u d e n t ' s   r e s u l t s   i n   t h e   f i r s t   s u b j e c t   o f   a c a d e m i c   c o u r s e s   w i l l   a f f e c t   h i s   r e s u l t s   i n   t h e   s e c o n d   s u b j e c t .     T h r ee   class if ier s   ar u tili ze d   to   p r ed ict  th s tu d e n t' s   r esu lt   i n clu d in g   NB C ,   SVM,   an d   ML P .   I n   th e   f ir s p h ase,   ea ch   class if ier   is   ap p lied   to   th s tu d e n d ataset  u s in g   s p ec if ic  tech n iq u e   in   th W E K to o l   s u c h   as  leav o n o u cr o s s   v alid a tio n   ( L OOCV),   f iv e - f o ld s   cr o s s - v alid atio n   ( 5 - C V) ,   o r   tr ai n in g   s et  tech n i q u e T h en ,   th d ataset  is   class if ied   in to   th tr ain in g   s et  an d   test in g   s et  in   th class if icatio n   tech n iq u e.   T h t r ain in g   s et  in clu d es  d ata  th at   h as  b ee n   tr ain ed   with   p ar ticu lar   class if ier   an d   u s ed   as  class if icatio n   r ef er e n ce   wh ich   ca n   b im p lem en ted   in   th t est  s et.   W h ile  in   th test in g   s et,    th u n d ef in ed   in s tan ce s   th at  ar n o lab eled   ( with o u t c lass es)  ar test ed   to   p r ed ict   s tu d en p er f o r m an ce   in   th e   c o n tr o l sy s tem s   s u b ject   Sev en   m etr ics  ar a p p lied   in   th th ir d   p h ase  to   m ea s u r e   th ac cu r ac y   o f   th e   m o d el   u s in g   th e   co n f u s io n   m atr i x   in   th W E KA  to o wh ich   ar r ec all,   p r ec is io n ,   s p ec if icity ,   F - m ea s u r e,   R OC ,   P R C   a r ea ,   an d   a ccu r ac y .   Fin ally ,   th f in al  o u tp u r esu lts   ar p r esen ted   b ased   o n   t h av er a g r esu lts   f o r   ea ch   m etr ic .   Fig u r e   s h o ws th f r am ewo r k   o f   t h p r o p o s ed   s y s tem .           Fig u r 2 .   T h f r a m ewo r k   o f   th p r o p o s ed   s y s tem   s tr u ctu r e   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec  E n g   &   C o m p   Sci,   Vo l.  22 ,   No .   3 J u n 2 0 2 1   :   1 7 0 8   -   1 7 1 5   1712   T h co n f u s io n   m atr i x   co n s is t s   o f   T P,  T N,   FP ,   an d   FN,  wh er T is   tr u p o s itiv es,  T is   tr u e   n eg ativ es,  FP   is   f alse p o s itiv e s ,   an d   FN is f alse n eg ativ es.  Se v en   m etr ics ar u s ed   to   ev al u a te  th ef f icien cy   o f   th s elec ted   class if ier R ec a ll,  p r ec is io n ,   s p ec if icity ,   F - m ea s u r e,   R OC ,   PR C   ar ea ,   an d   ac c u r ac y   [ 4 ] ,   [ 1 5 ] .   T h r ec all  d escr ib ed   tr u e   p o s itiv es st ates d iv id ed   b y   p o s itiv s tates e x p r ess ed   as:     R ec all = TP TP + FN   ( 1  )     T h Pre cisi o n   id en tifie s   tr u p o s itiv es st ate s   d iv id ed   b y   ex p e cted   p o s itiv s tates e x p r ess ed   a s     Pr e c isio n = TP TP + FP   ( 2 )     Sp ec if icity   d escr ib ed   tr u e   n eg ativ es st ates d iv id ed   b y   th to t al  n u m b er   o f   n eg ativ s tates e x p r ess ed   as:     Sp ec if icity   = TN TN + FP     ( 3 )     F - m ea s u r is   m ix tu r o f   p r ec is io n   an d   r ec all  m ea s u r e m en ex p r ess ed   as:     F - m ea s u r = 2   R e c a ll     P r e c is ion    R e c a ll   +   P r e c is ion    ( 4 )     PR C   is   th p r ec is io n - r ec all   c u r v u s ed   to   ev alu ate   th cla s s if ier   p er f o r m a n ce   f o r   im b al an ce d   an d   n o is y   d atasets .   T h e   r ec eiv er   o p er atin g   ch ar ac ter is tics   ( R OC )   cu r v is   u s ed   to   ev alu ate   th e   p er f o r m an ce   o f   th class if ier   in clu d es  two - ax es:  f alse  p o s itiv r ate  o n   th x - a x is   an d   tr u e   p o s itiv r ate  ( R ec all)   o n   th e   y - a x is .   T h er ef o r e,   R OC   an d   PR C   cu r v es  ar u s ed   to   co m p ar th p er f o r m a n ce   m o d el  as  s in g le  m etr ic.   T h R OC   is   u s ed   to   r ea lize  th p er f o r m an ce   o f   class if ier   o n   b alan ce d   d ataset  at  ea ch   class   wh ile  t h PR C   r ep r esen ts   th ch an g o f   th p r ec is io n   with   th r ec all  f o r   d if f er en t h r esh o ld s   o f   th im b alan ce d   d ataset  [ 1 6 ] ,   [ 1 7 ] .   Acc u r ac y   is   u s ed   to   m ea s u r e   th p e r f o r m an ce   o f   t h class if ier   an d   d escr ib ed   as  t r u class if ic atio n   s tates   d iv id ed   b y   th t o tal  n u m b er   o f   s tates e x p r ess ed   as:     Acc u r ac y   = TP + TN TP + TN + FP + FN   ( 5 )     C r o s s - v alid atio n   aim s   to   ass ess   lear n in g   alg o r ith m s   b y   d iv i d in g   th e   d ata   in to   two   s ets  wh ich   ar e   th e   tr ain in g   s et  an d   test in g   s et.   Als o ,   it  is   u s ed   to   co m p ar t h r esu lts   o f   d if f e r en class if ier s .   k - f o ld s   cr o s s - v alid atio n   ( C V)   is   u s ed   to   e v alu ate  th e   p er f o r m a n ce   o f   a n y   class if ier   in   m ac h i n lear n in g .   T h e   d ata  a r e   r an d o m l y   s ep ar ated   i n to   k - f o l d s ,   s in ce   th d ataset  is   s p lit  in to   k   eq u ally   f o ld s ,   th er ea f te r   k   iter atio n s   o f   th tr ain in g   an d   test in g   ar ca r r ie d   o u s o   th at  at  ev er y   iter atio n   v ar io u s   f o l d   o f   th d ataset  is   k ep f o r   test in g   wh er ea s   th r e m ain in g   ( k - 1 )   f o ld s   ar e   ap p lied   f o r   th e   tr ai n in g   s et.   A   p ar ticu lar   s itu atio n   o f   k - f o ld   cr o s s - v alid atio n   is   th leav o n o u cr o s s - v alid atio n   ( L OOCV)  wh er th n u m b er   o f   f o ld s   is   p r o p o r tio n al  to   th e   to tal  n u m b er   o f   in s tan ce s .   L e av o n o u cr o s s - v alid atio n   h as  b ee n   u s ed   to   ev alu ate  th ef f icien cy   o f   a n y   m ac h in lear n in g   alg o r ith m   w h en   th n u m b e r   o f   in s tan ce s   is   lim ited   [ 1 8 ] ,   [ 1 9 ] .       4.   E XP E R I M E N T   D E SI G   W E KA  is   im p lem en ted   to   class if y   th d ataset  s in ce   it’s  an   o p en - s o u r ce   m ac h i n lear n in g   s o f twar e   u s ed   f o r   d ata  m in in g   task s   [ 3 ] ,   [ 1 2 ] ,   [ 1 4 ] .   W E KA  in clu d es  m an y   to o ls   f o r   d ata  p r ep r o ce s s in g ,   class if icatio n ,   an d   clu s ter in g .   T h r ee   class if icatio n   alg o r ith m s   ar e   s elec ted   f r o m   W E KA:  NB C ,   ML P,  an d   SVM  to   p r ed ict  th p er f o r m an ce   o f   th s tu d en t.  Naïv B ay es  clas s if ier   ( NB C )   is   s im p le  s u p er v is ed   class i f icatio n   m eth o d   th at  d ep en d s   o n   p r esu m p tio n   o f   t h class   co n d itio n al  in d ep en d en ce .   NB C   is   ass u m ed   th at   all  attr ib u tes  p r o v id e d   in   d ataset  ar in d e p en d e n t b ased   o n   th B ay es r u le  o f   co n d itio n al  p r o b a b ilit y   [ 2 0 ] .       Mu ltil ay er   p er ce p tr o n   ( ML P)  is   s u p er v is ed   class if ier   im p lem en ted   f o r   n eu r al  n etwo r k   t r ain in g   an d   to   class if y   in s tan ce s   b y   b ac k p r o p a g atio n   alg o r ith m   wh i ch   u s es  g r ad ien d escen tech n iq u f o r   m in im izi n g   m ea n   s q u ar e r r o r   i n   th in p u v ec to r   th r o u g h   th d esire d   an d   ac tu al  o u tp u ts .   ML P c o m p r is es sev er al  lay er s   o f   n eu r o n s   an d   ea ch   n eu r o n   ex cl u d in g   th i n p u n e u r o n s   h as  ac tiv atio n   f u n ctio n s   wh er ev e r y   lay er   is   attac h ed   to   th n ex lay er   [ 2 1 ] .   Su p p o r v ec to r   m ac h in ( SVM)   is   s u p er v is ed   m ac h in lear n in g   alg o r ith m   th at  was  ap p lied   b y   Vap n ik ,   u s in g   f o r   b o th   class if icatio n ,   an d   r eg r es s io n .   T h is   class if ier   h as  th p o ten tial  to   m in im ize  er r o r s   o f   t h class if ier   a n d   to   m ax im ize  th g r a p h ical  m ar g in   [ 2 2 ] .   I n   t h is   s tu d y ,   we  h av ap p lied   lin ea r   SVM   to   th d ataset.   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4 7 5 2       P r ed ictio n   o f stu d en t’ s   p erfo r ma n ce   th r o u g h   ed u ca tio n a l d a ta   min in g   tech n iq u es  ( N ib r a s   Z.  S a lih )   1713   Fo r   th im b alan ce d   an d   n o is y   d ataset,   an   o v er f itti n g   p r o b le m   co u ld   ap p ea r   wh ich   ca n   b e   ex clu d ed   b y   f o llo win g   s o m s tatis tical  tech n iq u [ 2 3 ] .   I n   th is   p ap er ,   an   im b alan ce d   d ataset  is   p r esen ted   b ec au s th in s tan ce s   n u m b er   o f   o n e   class   is   s m aller   th an   th e   o th er   o n e.   T h e   lo wer   class es  h av e   1 7   in s tan ce s   b u t   th e   h ig h er   class es  h av 2 7   in s tan c es.  T h s m aller   class   is   ca lled   th m in o r ity   class   wh ile  th b ig g er   class   is   ca lled   th m ajo r ity   class .     Sy n th etic  m in o r ity   o v er s am p li n g   tech n iq u ( SMOT E )   is   th o v er s am p lin g   m eth o d   u s ed   to   s o lv th im b alan ce d   d ataset  p r o b lem .   SMOT E   tr an s f o r m s   an   im b ala n ce d   d ataset  an d   p r o d u ce s   b al an ce d   d atasets .   T h e   m ajo r ity   an d   m in o r ity   clas s es  ar d is tr ib u ted   u s in g   SMOT E   b y   g en er atin g   s y n th etic  in s tan ce s   in   th m in o r ity   class ,   th is   tech n iq u is   u s ed   t o   en h an ce   p r e d ictio n   p er f o r m an ce   in   th m in o r ity   class .   I n   th m in o r ity   class ,   th s am p le  is   p o s itio n ed   ac r o s s   th lin s eg m en ts   th at  in clu d o n o r   m o r e   o f   t h k - n ea r est  n eig h b o r s .   T h e   SMOT E   is   u s u ally   u s ed   b y   f iv clo s est n eig h b o r s   [ 2 4 ] ,   [ 2 5 ] .     Ov er s am p lin g   in cr ea s es  th n u m b er   o f   o cc u r r e n ce s   to   r etain in g   b o th   o cc u r r en ce s   an d     non - o cc u r r e n ce s   b y   u s in g   s a m p lin g   with   r e p lace m en [ 2 6 ] .   So ,   th two   class es  b ec am s im ilar   wh en   th is   tech n iq u was a p p lied .   SMOT E   s u p er v is ed   f ilter   h as b ee n   i m p lem en ted   u s in g   two   m ai n   p ar am eter s   wh ich   ar p er ce n tag a n d   n ea r est  n eig h b o r s   in   W E KA.   T h lo wer   cl ass es  h av in cr ea s ed   b y   5 0 %   ( b ased   o n   o p tio n - 5 0 . 0   in   W E KA)   an d   ad ju s tin g   n ea r est n eig h b o r s   to   o b tain   th e   b est r esu lts   ( b ased   o n   o p tio n - in   W E KA)       5.   RE SU L T   AND  DI SCUS SI O   T h r elev an r esu lts   ar illu s tr ated   in   T ab les  2   an d   3   f o r   th av er ag o f   t h f o llo win g   s ev e n   m etr ics:   R ec all,   p r ec is io n ,   s p ec if icity ,   F - m ea s u r e,   R OC ,   P R C   ar ea ,   an d   ac cu r ac y .   T h r ee   class if ier s   ar ap p lied   wh ic h   ar NB C ,   ML P,  an d   SVM  t o   p r ed ict  th p e r f o r m an ce   o f   th s tu d en t.  I n   th f ir s ca s e,   we  p er f o r m   t h is   ex p er im en t   u s in g   th tr ai n in g   s et  tech n iq u e   to   ass ess   th cla s s if ier   o n   h o well  th e   class   o f   ca s es  is   tr ain ed   to   p r ed ict  an d   th en   a p p lied   cr o s s - v alid atio n   tech n iq u es  ( L OOCV  an d   5 - C V) .   T h er ef o r e,   to   u n d er s tan d   th e   p er f o r m an ce   o f   ea c h   class if ier ,   th r esu lts   o f   th e   ab o v e - m e n tio n ed   m etr ics  f o r   th tr ai n in g   s et,   L OOCV,  an d   f iv e - tim es,  5 - C ar s h o wn   i n   T ab le  2 .   W co m p ar th r esu lt  o f   t h e   p r ed ictiv m o d el  f o r   t h tr ai n in g   s et,   L OOCV,  an d   5 - C V.   W f o u n d   th at  th p e r f o r m an ce   o f   th e   cl ass if ier   o n   th tr ai n in g   s et  is   b etter   th an   L OOCV  an d   5 - C V,   wh ich   m ea n s   th at  th p r ed ictiv m o d el  s u f f er s   f r o m   o v er f i ttin g ,   wh ic h   led   to   a    lar g d if f er e n ce   b etwe en   th r esu lts   o f   th tr ain in g   s et  an d   cr o s s - v alid ati o n   tech n iq u es.  So   SMOT E   s u p er v is ed   f ilter   is   u s ed   to   o v er c o m th o v e r f itti n g   p r o b lem   a n d   to   en h a n ce   th p r ed ictio n   p er f o r m a n ce .     T ab le  3   s h o ws  th r esu lts   f o r   t h r ee   class if ier s   ( NB C ,   ML P,  an d   SVM)   u s in g   L OOCV  an d   f iv tim es,  5 - C af ter   s u p er v is ed   SMOT E   f ilter   is   ap p lied .   T h b est  r esu lts   f o r   th is   ex p er im en h a v b ee n   u n d er lin e d .   W h av n o ticed   th e   SVM  o u tp er f o r m i n g   i n   ter m s   o f   s en s itiv ity ,   p r ec is io n ,   F - m ea s u r e,   PR C   ar ea ,   R OC ,   an d   ac cu r ac y   f o r   L OOCV,  an d   NB C   o u tp er f o r m s   in   ter m s   o f   s en s itiv ity ,   s p ec if icity ,   F - m ea s u r e,   an d   ac cu r ac y   f o r   5 - C V.   T h lo s p ec if icity   v a lu es  ar u s u ally   r esu lt  o f   h i g h   s en s itiv ity   v alu es,  s o   t h s p ec if icity   p lay s   an   im p o r tan t r o le  b e ca u s it id e n tifie s   th s tu d en t' s   f ailu r in   th ac ad em ic  co u r s e.         T ab le  2 .   T h class if icatio n   r esu lts : u s in g   th tr ain in g   s et,   L O OC V,   an d   5 - CV     U si n g   Tr a i n i n g - s e t   LO O C V   5 - C V   ( M e a n   ±   s t d )   M e t r i c s   N B C   M LP   S V M   N B C   M LP   S V M   N B C   M LP   S V M   S e n s i t i v i t y   0 . 7 7 3   0 . 9 7 7   0 . 8 6 4   0 . 6 5 9   0 . 6 3 6   0 . 6 5 9   0 . 6 3 6   ±   0 . 0 2 2   0 . 6 7 2   ±   0 . 0 1 2   0 . 6 3 6   ±   0 . 0 3 2   S p e c i f i c i t y   0 . 7 4 0   0 . 9 6 2   0 . 8 8 8   0 . 7 4 0   0 . 7 0 3   0 . 7 7 7   0 . 6 9 5   ±   0 . 0 3   0 . 7 6 9   ±   0 . 0 1 6   0 . 7 4   ±   0 . 0 7 4   P r e c i s i o n   0 . 7 9 1   0 . 9 7 9   0 . 8 6 4   0 . 6 5 6   0 . 6 3 6   0 . 6 5 0   0 . 6 3 8   ±   0 . 0 2   0 . 6 6 6   ±   0 . 0 1 5   0 . 6 3 1 2   ±   0 . 0 2   F - M e a s u r e   0 . 7 7 6   0 . 9 7 7   0 . 8 6 4   0 . 6 5 7   0 . 6 3 6   0 . 6 5 2   0 . 6 3 7   ±   0 . 0 2 1   0 . 6 6 8   ±   0 . 0 1 5   0 . 6 2 9   ±   0 . 0 3 1   R O C   0 . 8 5 2   0 . 9 6 9   0 . 8 5 6   0 . 5 9 0   0 . 6 4 3   0 . 6 2 4   0 . 6 0 3   ±   0 . 0 2 3   0 . 6 7 7   ±   0 . 0 1 2   0 . 6 0 6   ±   0 . 0 3   P R C   A r e a   0 . 8 7 4   0 . 9 6 0   0 . 8 1 5   0 . 6 1 0   0 . 6 7 9   0 . 6 0 1   0 . 6 1 7   ±   0 . 0 1 5   0 . 7 0 5   ±   0 . 0 1 7   0 . 5 8 7   ±   0 . 0 2   A c c u r a c y   7 7 . 2 7   %   9 7 . 7 2   %   8 6 . 3 6   %   6 5 . 9 0   %   6 3 . 6 3   %   6 5 . 9 0   %   6 3 . 6 3 6   ±   2 . 2 7   6 7 . 2 7   ±   1 . 2 4   6 3 . 6 3 6   ±   3 . 2 1       T ab le  3 .   T h class if icatio n   r esu lts   u s in g   SMOT E   f ilter     LO O C V   5 - C V   ( M e a n   ±   s t d )   M e t r i c s   N B C   M LP   S V M   N B C   M LP   S V M   S e n s i t i v i t y   0 . 7 1 2   0 . 7 6 9   0 . 7 8 8   0 . 7 3 8   ±   0 . 0 2 9   0 . 7 2 3   ±   0 . 0 2 2   0 . 7 3 8   ±   0 . 0 4   S p e c i f i c i t y   0 . 6 6 6   0 . 7 7 7   0 . 7 4 0   0 . 7 0 3   ±   0 . 0 2 6   0 . 6 3 6   ±   0 . 0 1 7   0 . 6 7 3   ±   0 . 0 3   P r e c i s i o n   0 . 7 1 6   0 . 7 6 9   0 . 7 9 3   0 . 7 4 2   ±   0 . 0 3   0 . 7 3 4   ±   0 . 0 2 4   0 . 7 4 8   ±   0 . 0 5   F - M e a s u r e   0 . 7 1 1   0 . 7 6 9   0 . 7 8 8   0 . 7 3 8   ±   0 . 0 2 9   0 . 7 2 1   ±   0 . 0 2 2   0 . 7 3 7   ±   0 . 0 4   R O C   0 . 7 3 6   0 . 7 5 4   0 . 7 9 0   0 . 7 4 6   ±   0 . 0 2 3   0 . 7 7 4   ±   0 . 0 1 4   0 . 7 4 1   ±   0 . 0 4   P R C   A r e a   0 . 7 0 3   0 . 7 1 7   0 . 7 3 0   0 . 7 2 0   ±   0 . 0 1 5   0 . 7 8 0   ±   0 . 0 1 8   0 . 6 9   ±   0 . 0 5 8   A c c u r a c y   7 1 . 1 5 3   %   7 6 . 9 2 3   %   7 8 . 8 4 6   %   7 3 . 8 4 6   ±   2 . 9 1   7 2 . 3 0   ±   2 . 1 9   7 3 . 8 4   ±   4 . 4 2       Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4 7 5 2   I n d o n esian   J   E lec  E n g   &   C o m p   Sci,   Vo l.  22 ,   No .   3 J u n 2 0 2 1   :   1 7 0 8   -   1 7 1 5   1714   6.   CO NCLU SI O AND  F U T U RE   WO RK   I n   th is   ar ticle,   t h ex p lo r ati o n   aim s   to   p r o v id a   p r e d ic tio n   f o r   s tu d y   p r o g r am   m an ag er s   an d   ed u ca to r s   wh ich   m ig h t   ass is th em   in   o b tain in g   b etter   ed u ca tio n al  p r o g r am s   at   th eir   ac ad em y .   Pre d ictin g   s tu d en ts '   p er f o r m an ce   d e p en d in g   o n   m ar k s   an d   co u r s a tten d an ce   with o u a n y   s o cio e co n o m ic   d ata.   T h e   d atasets   wer co llected   f r o m   th r ee   s tu d ies  y ea r s   o f   ac a d em ic  s tag es  o f   Mu s tan s ir iy ah   Un iv er s ity   in   I r a q ,   it   co n s is ts   o f   4 4   s tu d e n ts   an d   1 3   attr ib u tes  th at  in clu d ed   f i v c o u r s es.   W h av p r o p o s ed   m o d el  th at  e x p lain s   th co r r elatio n   b etwe en   two   b asic  s u b jects  wh ich   ar m ath e m atics  o f   th e   f ir s an d   s ec o n d   y ea r s   an d   c o n tr o l   s y s tem s   o f   th th ir d   y ea r .   T h e   s tu d y   aim s   to   im p r o v s tu d e n p er f o r m an ce   b y   an aly zin g   ac ad em ic  f ea tu r es  o f   m ath em atics  co u r s es  to    av o i d   s tu d en f ailu r e   o f   t h co n t r o s y s tem s    co u r s e.   T h u s ,   th is   p r ed ictio n   lea d s   to   g u id t h s tu d e n f o r   im p r o v i n g   th ei r   ac a d em ic  f ea tu r es  o f   m ath em atics  co u r s es  in   th e   f ir s an d   s ec o n d   y ea r s   o f   th eir   s tu d ies.     T h r esu lts   s h o th at  is   th p o ten tial  to   p r e d ict  th s tu d en t s   r esu lt  o f   o n s u b ject  in   t h e   u n iv er s ity   p r o g r a m   to   o b tain   g o o d   u n d er g r ad u ate  m ar k s   with   p lau s ib le  ac cu r ac y .   W ith   th ass i s tan ce   o f   NB C ,   ML P,  an d   SVM  alg o r ith m s ,   th r ee   tech n i q u es  ar ap p lied   to   th d atase in clu d in g   th e   tr ain in g   s et,   L OOCV,  an d   5 - C u s in g   th W E KA  to o l.  W f o u n d   th p r ed ictiv m o d el  s u f f e r s   f r o m   o v er f itti n g   b ec au s an   i m b alan ce d   d ataset  was  u tili ze d ,   th er ef o r a   s u p er v is ed   SMOT E   ap p r o ac h   is   im p lem en ted   to   o v er c o m t h is   p r o b lem   a n d   to   en h an ce   th p r ed ictio n   o f   th s tu d en ts   p er f o r m an ce .   W co n clu d th at  th b est  class if ier   r esu lt  h as  ap p ea r ed   af ter   ap p lied   SMOT E   tech n iq u wh ich   is   th SVM  f o r   L O OC V.   T h f u tu r wo r k   is   to   e n lar g th d ataset  to   s tr en g th en   t h g e n er aliza b ilit y   o f   th e   p r e d ictio n .   Als o ,   we  will  s tu d y   th c o r r elatio n   b et wee n   o th er   s u b jects   s u ch   as c o m m u n icatio n   s y s tem   an d   d ig ital sig n al  p r o ce s s in g ,   an d   t h eir   im p ac o n   s tu d e n t’ s   p er f o r m a n ce .       ACK NO WL E DG M E N T   My   s in ce r ap p r ec iatio n   an d   t h an k s   to   th e   Un iv er s ity   o f   Mu s ta n s ir iy ah   f o r   th e   g u id a n ce   a n d   s u p p o r t.   Als o ,   all  th an k s   an d   a p p r ec iati o n   to   th o s wh o   h el p ed   m a n d   g av m s cien tific   ad v ice  in   th is   r esear ch .       RE F E R E NC E S   [1 ]   E.   B.   C o sta ,   B.   F o n se c a ,   M .   A.   S a n tan a ,   F .   F .   d e   Ara ú j o ,   a n d   J.   R e g o ,   E v a lu a ti n g   th e   e ffe c ti v e n e s o e d u c a ti o n a l   d a ta  m in in g   tec h n i q u e f o e a rly   p re d icti o n   o f   stu d e n ts’  a c a d e m i c   fa il u re   i n   i n tro d u c t o ry   p r o g ra m m in g   c o u rse s,”   Co mp u ter s i n   Hu m a n   Beh a v i o r ,   v o l.   7 3 ,   p p .   2 4 7 - 2 5 6 ,   Au g u st  2 0 1 7 ,   d o i 1 0 . 1 0 1 6 /j . c h b . 2 0 1 7 . 0 1 . 0 4 7 .   [2 ]   A.  I.   A d e k it a n   a n d   O.  S a lau ,   T h e   imp a c o f   e n g in e e rin g   st u d e n t s’  p e rfo rm a n c e   in   th e   first  t h re e   y e a rs  o n   t h e ir   g ra d u a ti o n   re su lt   u si n g   e d u c a t io n a d a ta  m in in g ,   He li y o n ,   v o l.   5 ,   n o .   2 ,   p p .   e 0 1 2 5 0 ,   F e b ru a ry   2 0 1 9 ,     d o i:   1 0 . 1 0 1 6 /j . h e li y o n . 2 0 1 9 . e 0 1 2 5 0 .   [3 ]   A.  M .   Ah m e d ,   A .   Riza n e r,   a n d   A.  H.  Ulu so y ,   Us in g   d a ta  m in i n g   t o   p re d ict  in str u c to p e rfo rm a n c e ,   Pro c e d ia   Co mp u ter   S c ien c e ,   v o l.   1 0 2 ,   p p .   1 3 7 - 1 4 2 ,   2 0 1 6 ,   d o i:   1 0 . 1 0 1 6 / j. p r o c s.2 0 1 6 . 0 9 . 3 8 0 .   [4 ]   S .   Hu ss a in ,   N.  A.  Da h a n ,   F .   M .   Ba - Alwib ,   a n d   N.  Rib a ta,  Ed u c a ti o n a d a ta  m in i n g   a n d   a n a ly sis  o stu d e n ts '   a c a d e m ic  p e rfo rm a n c e   u sin g   WE KA ,   In d o n e sia n   J o u rn a o El e c t ric a En g in e e rin g   a n d   Co m p u ter   S c ien c e ,   v o l .   9 ,   n o .   2 ,   p p .   4 4 7 - 4 5 9 ,   F e b ru a r y   2 0 1 8 ,   d o i:   1 0 . 1 1 5 9 1 / ij e e c s.v 9 . i 2 . p p 4 4 7 - 4 5 9 .   [5 ]   N.  Ke tu i,   W.   Wi s o m k a ,   a n d   K.  Ho m ju n ,   Us in g   Clas sifica ti o n   D a ta  M in in g   Tec h n i q u e fo S tu d e n ts  P e rfo rm a n c e   P re d ictio n ,   2 0 1 9   J o in I n ter n a ti o n a Co n fer e n c e   o n   Dig it a Art s,  M e d ia   a n d   T e c h n o lo g y   wit h   ECT No rth e rn   S e c ti o n   C o n fer e n c e   o n   E lec trica l,   El e c tro n ics ,   Co mp u ter   a n d   T e lec o mm u n ica ti o n E n g in e e rin g   (ECT DAM T - NCON ) ,   2 0 1 9 ,   p p .   3 5 9 - 3 6 3 ,   d o i:   1 0 . 1 1 0 9 / ECT I - NCO N.2 0 1 9 . 8 6 9 2 2 2 7 .   [6 ]   N.  Ku m a a n d   S .   Kh a tri ,   Im p lem e n ti n g   WE KA   fo m e d ica d a ta  c las sifica ti o n   a n d   e a rly   d ise a se   p re d ictio n ,   2 0 1 7   3 rd   In ter n a ti o n a C o n fer e n c e   o n   Co mp u t a ti o n a l   In tell ig e n c e   &   Co mm u n ica ti o n   T e c h n o l o g y   (CICT ) ,   2 0 1 7 ,   p p .   1 - 6 ,   d o i:   1 0 . 1 1 0 9 /CIACT. 2 0 1 7 . 7 9 7 7 2 7 7 .   [7 ]   Ch in g - Ch ieh   Ki u ,   Da ta  M in i n g   An a ly sis   o n   S tu d e n t’s   Ac a d e m ic  P e rfo rm a n c e   th r o u g h   E x p l o ra ti o n   o f   S t u d e n t’s   Ba c k g ro u n d   a n d   S o c ial  Ac ti v i ti e s,”   2 0 1 8   Fo u rth   I n ter n a ti o n a Co n fer e n c e   o n   Ad v a n c e in   Co mp u ti n g ,   Co mm u n ica ti o n   &   A u to m a ti o n   (I CACCA ) ,   2 0 1 8 ,   p p .   1 - 5 ,   d o i 1 0 . 1 1 0 9 /ICACCAF. 2 0 1 8 . 8 7 7 6 8 0 9 .   [8 ]   L.   C.   Yu ,   e a l . ,   Im p ro v in g   e a rly   p re d icti o n   o a c a d e m ic  fa il u re   u sin g   se n ti m e n a n a l y sis  o n   se lf - e v a lu a ted   c o m m e n ts,”  J o u rn a o f   Co m p u ter   Assiste d   L e a rn in g ,   v o l.   3 4 ,   n o .   4 ,   p p .   3 5 8 - 3 6 5 ,   2 0 1 8 ,   d o i:   1 0 . 1 1 1 1 / jca l. 1 2 2 4 7 .   [9 ]   R.   As if,   A.   M e rc e ro n ,   S .   Al i,   a n d   N.   Ha id e r,   An a l y z in g   u n d e rg r a d u a te  stu d e n ts'   p e rfo rm a n c e   u si n g   e d u c a ti o n a l   d a ta m in in g ,   Co m p u ter a n d   Ed u c a ti o n ,   v o l.   1 1 3 ,   p p . 1 7 7 - 1 9 4 ,   Oc t.   2 0 1 7 ,   d o i:   1 0 . 1 0 1 6 /j . c o m p e d u . 2 0 1 7 . 0 5 . 0 0 7 .   [1 0 ]   J.  Ja c o b ,   K.  J h a ,   P .   K o tak ,   a n d   S .   P u t h ra n ,   Ed u c a ti o n a l   Da ta  M in i n g   tec h n i q u e a n d   th e ir   a p p li c a ti o n s,”   2 0 1 5   In ter n a t io n a C o n fer e n c e   o n   G re e n   Co mp u ti n g   a n d   In ter n e o T h in g (ICGCIo T ) ,   2 0 1 5 ,   p p .   1 3 4 4 - 1 3 4 8 ,     d o i:   1 0 . 1 1 0 9 /ICG CIo T. 2 0 1 5 . 7 3 8 0 6 7 5 .   [1 1 ]   M .   W.   Be rry ,   A .   M o h a m e d ,   a n d   B.   W.   Ya p ,   S u p e rv ise d   a n d   Un s u p e rv ise d   Lea rn in g   f o Da ta  S c ie n c e ,   S p ri n g e r   Na tu re ,   Ne w Yo r k ,   NY ,   2 0 1 9 .   [1 2 ]   P .   Ka u r,   M .   S in g h ,   a n d   G .   S .   Jo s a n ,   Clas sifica ti o n   a n d   P re d icti o n   Ba se d   Da ta  M in in g   Al g o ri th m t o   P re d ict  S l o w   Lea rn e rs  in   Ed u c a ti o n   S e c to r,   Pro c e d i a   C o mp u ter   S c ien c e ,   v o l.   5 7 ,   p p .   5 0 0 - 5 0 8 ,   2 0 1 5 ,     d o i:   1 0 . 1 0 1 6 /j . p ro c s. 2 0 1 5 . 0 7 . 3 7 2 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esian   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4 7 5 2       P r ed ictio n   o f stu d en t’ s   p erfo r ma n ce   th r o u g h   ed u ca tio n a l d a ta   min in g   tech n iq u es  ( N ib r a s   Z.  S a lih )   1715   [1 3 ]   A.  A.  S a a ,   Ed u c a ti o n a Da ta  M in in g   &   S t u d e n ts’  P e rfo rm a n c e   P re d ictio n ,   In ter n a ti o n a J o u rn a o Ad v a n c e d   Co mp u ter   S c ien c e   a n d   A p p li c a ti o n s ,   v o l.   7 ,   n o .   5 ,   p p .   2 1 2 - 2 2 0 ,   2 0 1 6 .   [1 4 ]   H.  Al - S h e h ri,   e a l . ,   S tu d e n t   p e rfo rm a n c e   p re d icti o n   u si n g   S u p p o rt  Ve c to r   M a c h i n e   a n d   K - Ne a re st  Ne ig h b o r,   2 0 1 7   IEE E   3 0 th   Ca n a d i a n   Co n fer e n c e   o n   El e c trica l   a n d   Co mp u ter   E n g i n e e rin g   (CCECE ) ,   2 0 1 7 ,   p p .   1 - 4 ,     d o i:   1 0 . 1 1 0 9 /CCE CE. 2 0 1 7 . 7 9 4 6 8 4 7 .   [1 5 ]   A.  Th a rwa t,   Clas sifica ti o n   a ss e ss m e n m e th o d s,”   Ap p li e d   Co m p u ti n g   a n d   In f o rm a ti c s ,   v o l.   1 7 ,   n o .   1 ,   p p . 1 6 8 - 1 9 2 ,   Ja n u a ry   2 0 2 1 ,   d o i:   1 0 . 1 0 1 6 / j. a c i. 2 0 1 8 . 0 8 . 0 0 3 .   [1 6 ]   J.  Va n   Hu lse ,   T .   M .   Kh o sh g o ft a a r,   a n d   A.  Na p o li ta n o ,   An   e m p iri c a c o m p a riso n   o f   re p e ti ti v e   u n d e rsa m p li n g   tec h n iq u e s,”   2 0 0 9   I EE I n ter n a ti o n a l   Co n fer e n c e   o n   I n fo rm a ti o n   Reu se   &   In teg ra ti o n ,   2 0 0 9 ,   p p .   2 9 - 3 4 ,     d o i:   1 0 . 1 1 0 9 /IRI. 2 0 0 9 . 5 2 1 1 6 1 4 .   [1 7 ]   G .   H .   F u ,   L.   Z.   Yi,   a n d   J.  P a n ,   T u n i n g   m o d e p a ra m e ters   in   c las s‐i m b a lan c e d   lea rn in g   wit h   p re c isio n ‐re c a ll   c u rv e ,   Bi o me trica J o u rn a l ,   v o l .   6 1 ,   n o .   3 ,   p p .   6 5 2 - 6 6 4 ,   De c .   2 0 1 8 ,   d o i 1 0 . 1 0 0 2 /b imj.2 0 1 8 0 0 1 4 8 .   [1 8 ]   S .   Ya d a v   a n d   S .   S h u k la,   An a ly s is  o f   k - F o l d   Cro ss - Va li d a ti o n   o v e Ho ld - O u t   Va li d a ti o n   o n   C o l o ss a Da tas e ts  fo r   Qu a li ty   Clas sifica ti o n ,   2 0 1 6   IEE 6 th   In ter n a ti o n a Co n fer e n c e   o n   Ad v a n c e d   C o mp u ti n g   (IA CC) ,   2 0 1 6 ,   p p .   7 8 - 8 3 ,   d o i:   1 0 . 1 1 0 9 /IACC. 2 0 1 6 . 2 5 .   [1 9 ]   Tzu - Tsu n g W o n g ,   P e rfo rm a n c e   e v a lu a ti o n   o c las sifica ti o n   a l g o rit h m b y   k - f o l d   a n d   lea v e - one - o u c ro ss - v a li d a ti o n ,   P a tt e rn   Rec o g n it i o n ,   v o l.   4 8 ,   n o .   9 ,   p p .   2 8 3 9 - 2 8 4 6 ,   S e p t.   2 0 1 5 ,   d o i:   1 0 . 1 0 1 6 /j . p a tco g . 2 0 1 5 . 0 3 . 0 0 9 .   [2 0 ]   S .   S .   Ath a n i ,   S .   A.  Ko d li ,   M .   N .   Ba n a v a si,  a n d   P .   G .   S .   Hire m a th ,   S t u d e n t   a c a d e m ic  p e rfo rm a n c e   a n d   so c ia l   b e h a v i o p re d icto r   u si n g   d a ta  m i n in g   tec h n iq u e s,”   2 0 1 7   I n ter n a ti o n a C o n fer e n c e   o n   C o mp u ti n g ,   Co mm u n ica ti o n   a n d   Au to ma ti o n   (ICCCA) ,   2 0 1 7 ,   p p .   1 7 0 - 1 7 4 ,   d o i:   1 0 . 1 1 0 9 /CCAA . 2 0 1 7 . 8 2 2 9 7 9 4 .   [2 1 ]   N.  B.   G a ik wa d ,   V.   Ti w a ri,   A .   Ke sk a r,   a n d   N .   C.   S h iv a p ra k a sh ,   Eff icie n F P G Im p lem e n tatio n   o f   M u lt il a y e P e rc e p tro n   fo r   Re a l - Ti m e   Hu m a n   Ac ti v it y   Clas sifica ti o n ,   I EE Acc e ss ,   v o l.   7 ,   p p .   2 6 6 9 6 - 2 6 7 0 6 ,   2 0 1 9 ,     d o i:   1 0 . 1 1 0 9 /ACCES S . 2 0 1 9 . 2 9 0 0 0 8 4 .   [2 2 ]   M .   G a u d io s o ,   W.   K h a laf,  a n d   C .   P a c e ,   On   th e   Us e   o f   th e   S VM   Ap p ro a c h   in   An a l y z in g   a n   El e c tr o n ic  N o se ,   7 t h   In ter n a t io n a C o n fer e n c e   o n   Hy b rid   In tell ig e n t   S y ste ms   (HIS   2 0 0 7 ) ,   2 0 0 7 ,   p p .   4 2 - 4 6 ,   d o i:   1 0 . 1 1 0 9 / HIS. 2 0 0 7 . 1 6 .   [2 3 ]   S .   E.   Ro sh a n   a n d   S .   As a d i ,   Im p ro v e m e n o Ba g g in g   p e rfo rm a n c e   fo c las sif ica ti o n   o imb a lan c e d   d a tas e ts  u sin g   e v o lu ti o n a ry   m u lt i - o b jec ti v e   o p ti m iza ti o n ,   En g in e e rin g   A p p li c a ti o n o Arti f icia In telli g e n c e ,   v o l.   8 7 ,   p .   1 0 3 3 1 9 ,   Ja n u a ry   2 0 2 0 ,   d o i:   1 0 . 1 0 1 6 / j. e n g a p p a i. 2 0 1 9 . 1 0 3 3 1 9 .   [2 4 ]   S .   T .   Jish a n ,   R .   I.   Ra sh u ,   N.   Ha q u e ,   a n d   R.   M .   Ra h m a n ,   Im p ro v in g   a c c u ra c y   o st u d e n ts’  fi n a g ra d e   p re d ictio n   m o d e u sin g   o p t ima e q u a wi d t h   b in n in g   a n d   sy n th e t ic  m in o rit y   o v e r - sa m p li n g   tec h n i q u e ,   De c isio n   An a lytics   v o l.   2 ,   n o .   1 ,   p p .   1 - 2 5 ,   M a rc h   2 0 1 5 ,   d o i:   1 0 . 1 1 8 6 /s4 0 1 6 5 - 0 1 4 - 0 0 1 0 - 2.   [2 5 ]   P .   Ka u r ,   A.   G o sa i n ,   Co m p a rin g   th e   b e h a v io r   o o v e rsa m p li n g   a n d   u n d e rsa m p li n g   a p p r o a c h   o f   c las imb a lan c e   lea rn in g   b y   c o m b i n in g   c las imb a lan c e   p ro b lem   with   n o ise ,   S p rin g e r ,   S i n g a p o re ,   p p .   2 3 - 3 0 ,   2 0 1 8 ,     d o i:   1 0 . 1 0 0 7 /9 7 8 - 9 8 1 - 10 - 6 6 0 2 - 3 _ 3 .   [2 6 ]   Y.  Zh a n g   a n d   P .   Tr u b e y ,   M a c h in e   Lea rn i n g   a n d   S a m p li n g   S c h e m e An   Emp ir ica S t u d y   o M o n e y   Lau n d e ri n g   De tec ti o n ,   Co m p u t a ti o n a Eco n o mic s ,   v o l.   5 4 ,   n o .   3 ,   p p .   1 0 4 3 - 1 0 6 3 ,   Oc to b e 2 0 1 9 ,     d o i:   1 0 . 1 0 0 7 /s1 0 6 1 4 - 0 1 8 - 9 8 6 4 - z .       B I O G RAP H I E S O F   AUTH O RS         Nib r a Z.   S a li h   re c e iv e d   t h e   B. S c .   d e g re e   i n   C o n tr o l   a n d   S y ste m   e n g in e e rin g   in   2 0 0 8   fr o m    t h e   Un iv e rsity   o f   Tec h n o l o g y ,   Ba g h d a d - Ira q   a n d ,   He   is  a n   M . S c .   stu d e n a t   th e   Un i v e rsity   o M u sta n siri y a h ,   Ba g h d a d - Ira q ,   si n c e   2 0 1 9 ,   Th e sis  ti tl e   wa In v e stig a ti n g   M u lt i p le  in sta n c e lea rn in g   c las sifiers   fo imp ro v e d   d a ta cla ss ifi c a ti o n .         Wa la a   K h a la f   re c e iv e d   th e   B . S c .   d e g re e   i n   e lec tri c a e n g i n e e rin g   i n   1 9 9 6   fro m   M u sta n siriy a h   Un iv e rsity ,   Ba g h d a d - Ira q   a n d ,   i n   2 0 0 1 ,   t h e   M . S c .   d e g re e   in   e lec tr o n ics   a n d   tele c o m m u n ica ti o n   e n g in e e rin g   fro m   th e   sa m e   Un iv e rsity ,   a n d   t h e   P h . D.   fro m   th e   Un i v e rsity   o f   Ca lab ria,   Italy .   He   is   c u rre n tl y   a   p ro fe ss o o O p e ra ti o n s Re se a rc h   a th e   M u sta n siri y a h   Un iv e rsity .   Evaluation Warning : The document was created with Spire.PDF for Python.