I A ES   I n te r n at i o n al   Jo u r n al   o f  A r ti fi c i al   I n te l l i ge n c e   (I J - AI )   V o l .   9 ,   N o .   4 ,  D e c e m be r   20 20 ,   pp .   734 ~ 743   IS S N :   2252 - 8938 ,   D O I :   10. 1 1591 / i j a i . v 9 .i 4 . pp 734 - 743             734       Jou r n al   h o m e pa ge :  ht t p: / / i j ai . i ae s c or e . c om   E f f e c t s  o f   k e r n e l s  a n d   t h e   p r o p o r t i o n   o f   t r a i n i n g   d a t a   o n   t h e   a c c u r a c y   o f   S V M   sent i m e n t   a n a l y s i s i n   l e c t u r e r   e v a l u a t i o n       D an i e l   F e b r i an   S e n gk e y 1 ,   A gu s ti n u s   Jac o b u s 2 ,   F ab i an   Jo h an e s   M an o p p o 3   1 , 2 D e pa r t m e n t   o f   E l e c t r i c a l   E ng i n e e r i ng ,   F a c u l t y   o f   E ng i ne e r i ng ,   U n i v e r s i t a s   S a m   R a t ul a ng i ,   M a n a do ,   I ndo ne s i a   3 D e pa r t m e n t   o f   C i v i l   E ng i ne e r i ng ,   F a c ul t y   o f   E ng i ne e r i ng ,   U ni v e r s i t a s   S a m   R a t u l a ng i ,   M a na do ,   I ndo ne s i a       A r ti c l e   I n fo     A B S TR A C T   Ar t i c l e   h i s t or y :   R e c e i v e d  J u l   4 ,   20 20   R e v i s e d  O ct   20,   2 0 20   A c c e pt e d  N ov   1 2 ,   20 20       S uppo r t   v e c t o r   m a c hi ne   ( S V M )   i s   a   kno w n  m e t ho d  f o r   s up e r v i s e d  l e a r n i ng   i n  s e n t i m e nt   a na l y s i s   a nd  t he r e   a r e   m a ny   s t udi e s   a bo ut   t he   u s e   o f   S V M   i n  c l a s s i f y i ng   t he   s e n t i m e nt s   i n  l e c t u r e r   e v a l ua t i o n.   S V M   ha s   v a r i o us   pa r a m e t e r s   t ha t   c a n  be   t un e d  a nd   ke r ne l s   t h a t   c a n  be   c ho s e n   t o   i m pr o v e   t he   c l a s s i f i e r   a c c ur a c y .   H o w e v e r ,   no t   a l l   o pt i o ns   h a v e   be e n  e x pl o r e d.   T he r e f o r e ,   i n  t hi s   s t udy   w e   c o m pa r e d  t he   f o ur   S V M   ke r ne l s :   r a d i a l ,   l i ne a r ,   po l y n o m i a l ,   a nd  s i g m o i d,   t o   di s c o v e r   ho w   e a c h  ke r ne l   i nf l ue nc e s   t he   a c c ur a c y   of   t he   c l a s s i f i e r .   T o   m a ke   a   pr o pe r   a s s e s s m e n t ,   w e   u s e d  o ur   l a be l e d  da t a s e t   o f   s t ud e n t s ’   e v a l ua t i o ns   t o w a r d  t he   l e c t ur e r .   T he   da t a s e t   w a s   s p l i t ,   o ne   f o r   t r a i n i ng   t he   c l a s s i f i e r ,   a nd  a no t he r   o ne   f o r   t e s t i ng   t he   m o de l .   A s   a n  a ddi t i o n,   w e   a l s o   us e d  s e v e r a l   di f f e r e n t   r a t i o s   o f   t he   t r a i ni ng : t e s t i ng   da t a s e t .   T he   s p l i t   r a t i o s   a r e   0. 5  t o   0. 95 ,   w i t h  t h e   i nc r e m e nt   f a c t o r   o f   0. 05.   T he   d a t a s e t   w a s   s pl i t   r a ndo m l y ,   he nc e   t he   s p l i t t i ng - t r a i n i ng - t e s t i ng   pr o c e s s e s   w e r e   r e p e a t e d  1 , 000   t i m e s   f o r   e a c h  ke r n e l   a nd  s p l i t t i ng   r a t i o .   T he r e f o r e ,   a t   t he   e nd  o f   t he   e xpe r i m e nt ,   w e   g o t   40 , 000   a c c ur a c y   da t a .   L a t e r ,   w e   a ppl i e d   s t a t i s t i c a l   m e t ho ds   t o   s e e   w he t h e r   t he   di f f e r e nc e s   a r e   s i g ni f i c a n t .   B a s e d  o n  t he   s t a t i s t i c a l   t e s t ,   w e   f o und  t ha t   i n  t h i s   pa r t i c ul a r   c a s e ,   t h e   l i n e a r   k e r ne l   s i g ni f i c a n t l y   h a s   hi g he r   a c c ur a c y   c o m pa r e d  t o   t h e   o t he r   ke r n e l s .   H o w e v e r ,   t he r e   i s   a   t r a d e o f f ,   w he r e   t he   r e s ul t s   a r e   g e t t i ng   m o r e   v a r i e d  w i t h  a   hi g he r   pr o po r t i o n  o f   da t a   u s e d   f o r   t r a i n i ng .   Ke y w or d s :   K e rn e l s   c o m pa ri s o n   L e c t ur e r  e v a l ua t i o n   P r o po r t i o n   o f   t r a i n i ng  d a t a   s t ud e nt   o pi ni o n   S e n t i m e n t   a na l y s i s   S uppo r t   v e c t o r   m a c h i n e   T hi s   i s   an   ope n   ac c e s s   ar t i c l e   u nde r   t he   C C   B Y - SA   l i c e ns e .     Cor r e s pon di n g   Au t h or :   D a n i e l   F e b r i a n  S e ngke y   D e pa r t m e n t   o f   E l e c t ri c a l   E ngi n e e ri n g   F a c ul t y   of   E n g i n e e ri n g,   U ni v e r s i t a s   S a m   R a t ul a n gi   J l .   K a m pus   U N S R A T ,   B a h u - M a na do ,   95115 ,   I n do n e s i a   E m a i l :   da ni e l s e n g ke y @ un s ra t . a c . i d       1.   I N TR O D U C TI O N   S i n c e   i n t r o duc e d  i n   199 5  [1] ,  s uppo r t   v e c t o r   m a c hi n e   (S V M )  h a s   b e c o m e   a   po pul a r   s upe r v i s e d  m e t h o d  i n   m a c h i n e   l e a rni n g  (M L ).   T h e   ri s e   of   M L   a s   a   po t e nt i a l   t o o l   fo r   t h e   f ut u r e   [2] ,   l e a ds   t o   t h e   e m e r gi ng  us e   of   S V M .   F o r   e xa m pl e ,   S V M   r e g r e s s i o n   w a s   us e d  i n  t e l e c o m m u n i c a t i o n  t o   e s t i m a t e   c ha nn e l   i n   m ul t i p l e   i n put   m u l t i pl e   o ut put   (M IM O )  o r t h o go na l   f r e que n c y   di v i s i o n   m ul t i p l e xi n g  (O F D M )  by   us i n g  t h e   i n t e r po l a t i o n   m e c ha n i s m   [3] .   T h e   s t udy   i n   [4]   e m pl o y e d  S V M ,   t o   e xt r a c t   b ui l di n gs   o b j e c t   f r o m   v e r y   h i g h - r e s o l ut i o n   s a t e l l i t e   i m a ge s   of  T e t ua n ,   M o r o c c o ,   by   us i n g  s pa t i a l   a nd  s pe c t r a l   r a d i us   w i t h   83 . 76%  a c c u r a c y .   O t h e r   ut i l i z a t i o n  o f   S V M   i n   i m a ge   p r o c e s s i n g  c o ul d  a l s o   b e   fo un d  i n  [5] ,   w h e r e   t h e   m ul t i - c l a s s   S V M   i s   us e d  t o   c l a s s i fy   t hr e e   t y pe s   of   r i c e   g r a i n   w i t h  92 . 22%   a c c u r a c y .   S V M   w a s   us e d  i n   [ 6] ,   t o   f o r e c a s t   w i n d  s pe e d,   b a s e d  o n   t h e   di r e c t i o n,   t h e   f o r m e r   da t a   ( hi s t o ri c a l ) ,   p r e s s u r e ,   m o i s t u r e ,   a nd   h e a t ,   a l t h o ug h   i t   i s   b e s t e d  by   t h e   o t h e r  m e t h o ds   i n  t h e   s a m e   s t udy .   R e c e n t l y ,   S V M   w a s   a l s o   c on s i de r e d  i n  a   s t udy   of   f l oo d  r i s k   p r e di c t i o n   [ 7] .   Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   A r t i f   I n t e l l   IS S N :   2252 - 8938       E f f e c t s   o f   k e r n e l s   and   t h e   pr opor t i on  of   t r ai ni ng   da t a   on  t h e   ac c ur a c y   o f . . .   ( D ani e l   F e br i an   Se n gk e y )   735   In   s p i t e   o f   i t s   a c c ur a c y   i s s ue   i n   a   s o m e   s c o pe s   of   a ppl i c a t i o n s ,   a s   f o un d  i n   [6] ,   S V M   i s   s t i l l   a   pr e f e r a b l e   m e t h o d  i n   s e nt i m e nt   a n d / o r   e m o t i o n   a na l y s i s   [8] .   T o   i m p r o v e   i t s   a c c ur a c y ,   t h e r e   a r e   s t ud i e s   a b o ut   t h e   k e rn e l   t r i c ks .   F o r   i n s t a n c e ,   A m a ri   a nd  W u  [9] ,   f o un d  t ha t   m o di fy i n g  t h e   g a us s i a n  r a di a l   b a s i s   f un c t i o n  (R BF )  ke rn e l   b r o ug h t   r e m a rka b l e   i m p r o v e m e n t .   I n  a n o t h e r   s t udy ,   t h e   ke rn e l s   a r e   c o m pa r e d   t o   f i n d  t h e   b e s t   o n e   fo r   e m o t i o n   r e c o gn i t i o n   b a s e d  o n   t h e   p r o c e s s i n g  o f   phy s i o l o gi c a l   s i g n a l s   a n d  i t   i s   f o un d  t ha t   t h e   l i n e a r   ke rn e l   ga v e   t h e   h i g h e s t   a c c u r a c y   r a t e   [10] .   O n   t h e   o t h e r   ha n d ,   t h e   w o r k  of   A s r a f   a n d  S h a h   R i z a m   [1 1] ,  c o m pa r e d  t h e   S V M   ke rn e l s   t o   c l a s s i fy   n ut r i e n t   di s e a s e   i n   o i l   pa l m   l e a v e s   s h o w e d  t h a t   t h e   po l y n o m i a l   ke rn e l   pe r f o r m e d  b e s t   c o m pa r e d  w i t h   t h e   o t h e r   ke rn e l s .   S i m i l a rl y ,   t h e   ke rn e l   c o m pa r i s o n   f o r   t e r m i t e   de t e c t i o n   a l s o  fo un d  t h e   po l y n o m i a l   ke rn e l   a s   t h e   b e s t   o n e   [12] .   S ha n t i n i   e t   al   i n   [ 13] ,   c o m pa r e d  S V M   ke rn e l s   f o r   f a ul t   c l a s s i f i c a t i o n   i n   t h e   a na l o g  f i l t e r   c i r c ui t .   T h e r e fo r e ,   b a s e d  o n   t h e   f o r m e r   s t udi e s   [9 - 13] ,   e a c h   ke rn e l   m a y   b r i n g  di f fe r e nt   i m p a c t s   o n   t h e   a c c u r a c y   of   t h e   c l a s s i f i e r .   E duc a t i o na l   s e n t i m e n t   a na l y s i s   i s   a   f i e l d  o f   S V M   a ppl i c a t i o n .   T h i s   f i e l d  c o m m o n l y   a dd r e s s e s   t h e   s t ude nt s ’  e v a l ua t i o n s   o f   t h e   l e c t ur e r   [14 - 19] .   I n  o n e   o f   o ur   fo r m e r   w o r k  [14] ,   w e   h a v e   a ppl i e d  s uppo rt   v e c t o r   m a c h i n e   (S V M )  t o   c l a s s i fy   t h e   s e n t i m e n t s   i n   l e c t ur e r   e va l u a t i o n   by   s t ude n t s .   I n   [15] ,   A l t ra b s h e h   e t   a l   pr o po s e d  t h e   s e n t i m e nt   a n a l y s i s   fo r   e duc a t i o n   ( SA - E ),   w h i c h   i s   a   s y s t e m   t ha t   w i l l   c o l l e c t   s t ude n t s ’  f e e d b a c k   by   us i n g  t h e   s oc i a l   n e t w o r k  a n d  t h e n   p r o c e s s e d   t h e m   by   us i n g  S V M   a n d/ o r   na i v e   b a y e s .   T h e   r e s ul t s   i n   [16] ,  s h o w e d  t h a t   w h e n   us e d  t o   c l a s s i fy   s e n t i m e nt s   w i t hi n   t hi s   pa r t i c ul a r   f i e l d ,   S V M   c a m e   a s   t h e   b e s t   m e t h o d.   S i m i l a rl y ,   t h e   s t udy   i n   [17]   a l s o   pr o po s e d  t h e   us e   of   T w i t t e r   f o r   t h e i r   da t a   c o l l e c t i o n   a n d  i n   s e nt i m e nt   a n a l y s i s ,   w i t h   S V M   t o   c l a s s i fy   t h e   f e e d b a c ks ,   fo r   t h e   i m p rov e m e n t   of   t h e   t e a c h i ng - l e a rni n g  p r o c e s s .   L a t e r ,   t h i s   s t udy   i s   e xt e n de d  i n  [18] .   I n  t h e   I ndo n e s i a   c o n t e xt ,   a n o t h e r   s t udy   o n   s t ude nt   f e e db a c ks   t ow a r d   t h e   l e c t ur e r   w a s   r e po rt e d  i n  [1 9] .   T h e r e   a r e   pi e c e s   of   e v i de n c e   w h i c h   f o un d  t ha t   d i f fe r e nt   ke rn e l   m a y   b r i n g  di f f e r e n t   e f fe c t s   o n   t h e   a c c ur a c y   of   t h e   c l a s s i f i e r,   y e t   t h e   s t udy   o n   S V M   ke rn e l s   fo r   s e n t i m e nt   a na l y s i s   i n   e duc a t i o n   i s   r a r e .   T h e r e f o r e ,   i n   t h i s   s t udy   w e   c o m pa r e   t h e   a c c u r a c y   r a t e s   y i e l de d  by   v a r i o us   S V M   ke rn e l s .   I n   t h e   c o m pa ri s o n ,   w e   a l s o   i n c l ude   s e v e r a l   di f f e r e n t   r a t i o s   of   t h e   t ra i ni n g : t e s t i n g  da t a   s o   w e   m a y   i de n t i fy   t h e   i m pa c t   o f   t h e   ke rn e l s   i n   d i f f e r e n t   s i z e s   o f   t r a i n i n g  da t a .   T h e   r e s t   o f   t h i s   pa pe r   i s   o r g a n i z e d  a s   f o l l ow s :   In   S e c t i o n   2   w e   pr e s e nt   t h e   m e t h o do l o gi e s   us e d  i n   t h i s   s t u dy ,   s uc h   a s   t h e   d a t a   s o ur c e ,   a n d  t h e   s t e ps / s t a ge s   i n   t h e   r e s e a r c h.   T h e n  w e   pr e s e n t   t h e   r e s ul t s   i n   S e c t i o n   3 ,   a n d   f i na l l y   i n   S e c t i o n   4   w e   c o n c l ude   t hi s   pa pe r   a n d   p r e s e n t   s o m e   pl a us i b l e   e xt e n s i o n s   t o   t hi s   s t udy .       2.   R ES EA R C H   M ET H O D   T h e   c o ur s e   of   t hi s   s t udy   i s   pr e s e nt e d  i n   F i gu r e   1 .   T h e r e   a r e   4  m a j o r   p ha s e s ,   w h i c h   a r e   d a t a   c o l l e c t i o n ,   p r e - p r o c e s s i n g,   p r o c e s s i n g,   a n d   po s t - p r o c e s s i n g .   G e n e ra l l y ,   i t   c a n  b e   s e e n   a s   a   m i xt u r e   o f   t h e   s t e ps   us e d  i n   [18,   20 - 21]   w i t h   t h e   e xc e pt i o n s   o n   t h e   da t a   c o l l e c t i o n   a n d  po s t - p r o c e s s i n g  p ha s e s ,   w h e r e   t h e   w o r ks   i n   [18]   a n d  [20]   us e d  c r a w l e d  da t a   f r o m   T w i t t e r,   w h i l e   t h e   w or k  i n   [2 1]   us e d  c r a w l e d  da t a   f r o m   n e w s   p o r t a l s .   T h e   f i n a l   p ha s e ,   po s t - pr o c e s s i n g,   r e f e r s   t o   a   s e t   o f   s t a t i s t i c a l   t e s t s   w h e r e   t h e   a c c ura c y   da t a   a r e   c o m pa r e d.           F i gu r e   1 .   Co u r s e   o f   r e s e a r c h     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2252 - 8938     I n t   J   A rt i f   I nt e l l ,   V o l .   9 ,   N o .   4 ,  D e c e m be r   20 20 :     734   –   7 4 3   736   2. 1 .     D ata   c o l l e c t i o n   T h e   da t a   f o r   t hi s   s t udy   i s   a c qui r e d  f r o m   t h e   l e c t u r e r   e v a l ua t i o n / s t ude n t   f e e d b a c ks   o f   t h e   s pr i ng  s e m e s t e r   2019 .   T h e   s a m e   da t a   w a s   us e d  i n   [14 ] .   I n  M a y   t o   m i d - J un e ,   s t ude n t s   w e r e   a s ke d  t o   f i l l   a n  a n o n y m o us   o n l i n e   e v a l ua t i o n   f o r m   f o r   e a c h   l e c t ur e r   t h e y   ha d  du r i ng  t h e   s e m e s t e r   t h a t   w a s   a bo ut   t o   e n d.   It   m e a n s   s t ude n t s   m i g ht   ha v e   m a de   s e v e r a l   s ub m i s s i o n s .   A s   p re s e n t e d  i n   F i g u r e   1 ,   t h e s e   fe e d b a c ks   a r e   s t o r e d  i n  a   da t a b a s e .   Co l l e c t e d  da t a   c o n s i s t s   o f   636  f e e db a c ks   w i t h   43 0,   109 ,   a n d  97  o f   pos i t i v e ,   n e ga t i v e ,   a n d  n e ut ra l   s e n t i m e n t s ,   r e s pe c t i v e l y .   It   i s   f o un d  t h a t   t h e   s t ude n t s   us e d   s e ve r a l   l a ngua ge s   w h e n   g i v i ng  t h e i r  f e e d b a c k.   M o s t l y   us e   s t a n da rd  B a h a s a   I n do n e s i a ,   s o m e   us e d  E n g l i s h,   a nd  s o m e   us e d  B a h a s a   I n do n e s i a   m i xe d  w i t h   l o c a l   di c t i o n.     2. 2 .     P r e - p r o c e s s i n g   T h e   pr e - p r o c e s s i n g  p ha s e ,   a l o n g  w i t h   t h e   p r o c e s s i n g  p ha s e   di s c us s e d  i n   t h e   n e xt   s ub s e c t i o n   a r e   t h e   c o m m o n   pha s e s   i n   n a t u ra l   l a n gu a ge   pr o c e s s i n g  (N L P ).   In   t hi s   s t udy ,   t h e   pr e - p r o c e s s i n g  pha s e   w a s   d o n e   i n  s e v e r a l   s t e ps :   F i r s t ,   e a c h  f e e d b a c k  w a s   m a n u a l l y   l a b e l e d.   I n  t hi s   s t e p,   t h e   c o l l e c t e d  f e e d b a c ks ,   o r   us ua l l y   r e f e rr e d  t o   a s   do c um e n t s   i n   t h e   f i e l d  o f   s e n t i m e nt   a na l y s i s ,   w e r e   m a nua l l y   a na l y z e d  a n d   l a b e l e d  a c c o r di n g  t o   i t s   s e n t i m e nt .   F r o m   t h e   636  c o l l e c t e d  do c um e n t s ,   t h e r e   a r e   4 30,   109 ,   a nd  97  o f   pos i t i v e ,   n e ga t i v e ,   a n d  n e ut ra l   s e n t i m e n t s ,   r e s pe c t i v e l y .   T h e   pe r c e n t a ge s   o f   t h e   s e n t i m e n t s   a r e   s h o w n   i n  F i gu r e   2 .           F i gu r e   2 .   S e n t i m e n t s   c o m po s i t i o n   i n   t h e   d a t a s e t       A f t e r   a l l ,   f e e d b a c ks   l a b e l e d,   t h e   l e t t e r   c a s e   i n  a l l   do c um e nt s   i s   f o l de d  t o   s m a l l   c a ps .   L a t e r ,   e a c h  do c um e n t   w a s   t o ke ni z e d,   w h i c h   i n   t h i s   c a s e   e a c h   t o ke n   i s   a   w o r d.   T h e   n o n - s t a nda r d   w o r ds   (N S W )  h a ndl i ng  i s   a   s t e p  t h a t   c l o s e l y   r e l a t e d  t o   t h e   c a r e l e s s l y   a bb r e v i a t e d  a nd/ o r   m i s t y pe d  w o r ds ,   w h i c h   i s   f o un d  a s   a   c h a ra c t e ri s t i c   o f   pe o pl e   i n   I n do n e s i a   [22] .   I n   t hi s   s t e p,   a   c us t o m i z e d  di c t i o na r y   c o n t a i ni n g  p a i r s   o f   n o n - s t a n d a r d:   s t a n da rd  w o r d  i s   us e d.   W h e n   t h e   N S W s   w e r e   h a n dl e d ,   t h e n   t h e   s t o pw o r ds   w e r e   r e m o v e d.   A s   de s c r i b e d  e a r l i e r  i n  S ub s e c t i o n   2. 1,   s i n c e   t h e   s t u de nt s   u s e d  v a r i o us   l a n gu a ge s ,   t h e n  s e v e r a l   s t o pw o r d  di c t i o na r i e s   w e r e   us e d  i n   t h i s   s t e p:   1.   T h e   E ngl i s h   s t o pw o r ds   f r o m   t h e   T i dy t e xt   pa c ke t   f o r   R   [23] ;   2.   T h e   B a h a s a   I ndo n e s i a   s t o pw o r ds   d i c t i o na r y ,   a s   a v a i l a b l e   o n - l i n e   i n  [24 - 25] ;   a nd   3.   W e   b ui l t   o ur  o w n   l i s t   o f   l o c a l   s t o p w o r d  di c t i o n a r y ,   b a s e d  o n   t h e   w o r ds   us e d  by   t h e   s t ude n t s .   A f t e r   t h e   do c um e n t s   c l e a r e d  f r o m   s t o pw o r ds ,   a l l   n u m b e r s   a n d  pu n c t u a t i o n   a r e   r e m o ve d.   T h e   f i na l   s t e p  i n   t h i s   p ha s e   i s   t h e   F e a t u r e   s e l e c t i o n,   w hi c h  i n  t hi s   s t u d y   i t   i s   b a s e d  o n  t h e   w o r d  f r e que n c y .   A l l   w o r ds   t h a t   a ppe a r e d  l e s s   t ha n   1 0  t i m e s   w e r e   de e m e d  a s   i n s i g ni f i c a nt   a n d  s o   r e m o v e d.   A l t h o ug h   s t e m m i n g  i s   c o m m o nl y   us e d  i n   t h e   p r e - p r o c e s s i n g  p h a s e ,   i n   t hi s   s t udy   t h i s   s t e p  w a s   o m i t t e d,   a s   w a s   do n e   i n   [ 14] .   T h e   r e a s o n   b e h i n d  t h i s   i s   t h a t   s t e m m i n g  ha s   b e e n   i de nt i f i e d  t o   b r i n g  n o   s i g n i f i c a n t   i m pa c t   t o   t h e   a c c u r a c y   w h e n  a p pl i e d   t o   do c um e nt s   w i t h  B a h a s a   I ndo n e s i a   [26] .   T h e   s t e ps   w i t h i n   t h i s   p ha s e   b r o ugh t   a   g r e a t   i m p a c t   o n   t h e   d a t a .   F i r s t ,   a s   s h o w n   i n   F i gu r e   3 ( a ) ,   t h e   s t o p w o r ds   w e r e   f r e que n t l y   us e d.   T h e   ra n k   o f   t h e   m o s t   f r e que n t   w o r ds   t h e n   d ra s t i c a l l y   c h a n ge d  a f t e r   t h e   n o n s t a nda r d  w o r d  ha n d l i n g  a n d  s t o pw o r d  r e m o v a l ,   a s   s h o w n   i n   F i g u r e   3 ( b ) .   T h i s   c ha n ge   a l s o   r e f l e c t e d  i n   t h e   n u m b e r   o f   w o r ds ,  a s   s h o w n   i n   F i gu r e   4 .   P r i o r   t o   t h e   s t o pw or d  r e m o v a l ,   t h e r e   w e r e   8, 446  a nd  a f t e r   t h a t ,   o nl y   1, 049  w o r ds   a r e   l e f t .   It   m e a n s ,   t h e r e   w e r e   7, 397  s t o pw o r d  a n d   n o n - s t a n d a r d  w o r ds   i n   t h e   c o l l e c t e d  da t a   t h a t   ha d  b e e n   r e m o ve d,   o r  a p p r o xi m a t e l y   87. 58% .   Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   A r t i f   I n t e l l   IS S N :   2252 - 8938       E f f e c t s   o f   k e r n e l s   and   t h e   pr opor t i on  of   t r ai ni ng   da t a   on  t h e   ac c ur a c y   o f . . .   ( D ani e l   F e br i an   Se n gk e y )   737     (a )  P o s t   t o k e n i z a t i o n       (b )  P o s t   s t o p w o r d  r e m o v a l     F i gu r e   3 .   T h e   c o m pa r i s o n   o f   t h e   30   m o s t   f r e que n t   w o r ds   a f t e r  t o ke ni z a t i o n / b e fo r e   N S W   h a n d l i ng,   a nd  a f t e r  s t o p w o r d  r e m o v a l           F i gu r e   4 .   N u m b e r   o f   w o r ds   b e fo r e   a n d  a f t e r  s t o pw o r d  r e m o va l       2. 3 .     P r o c e s s i n g   A s   t h e   o bj e c t i v e   of   t hi s   s t udy   i s   t o   m a ke   c o m pa r i s o n s   b e t w e e n  t h e   S V M   ke rn e l s   a n d  a l s o   t o   c o m pa r e   t h e   e ff e c t   of  t h e   t ra i ni n g : t e s t i ng  da t a s e t   ra t i o ,   t h e n   a   m a j o r   pa r t   o f   t h i s   pha s e   i s   de s i gn e d  t o   b e   d o n e   s e v e r a l   t i m e s ,   t o   a c hi e v e   a   l a r ge   n u m b e r   o f  s a m pl e s   fo r   e a c h   pa r a m e t e r   t e s t e d  s o  t h a t   t h e   l a w   of  l a rge   n u m b e r   c o ul d   b e   s a t i s f i e d  [27] .   T h e r e f o r e ,   fo r   e a c h   pa i r   o f  t h e   ke rn e l   a nd  t ra i ni n g : t e s t i n g  ra t i o ,   t h e   f o l l ow i n g  pr o c e s s e s   w e r e   r e pe a t e d  f o r   1 000  t i m e s :   1.   S e t t i n g  up  t h e   r a n do m i z a t i o n   s e e d  w i t h   t h e   i t e r a t o r ,   s o   f or   a l l   i - t h   r e pe t i t i o n   i n   a l l   p a i r s   o f   ke rn e l   t r a i ni n g : t e s t i ng  ra t i o ,   t h e   t ra i ni n g   d a t a s e t s   w e r e   a l w a y s   i de n t i c a l ,   a n d   s o   w i t h   t h e   t e s t i ng  d a t a s e t .   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2252 - 8938     I n t   J   A rt i f   I nt e l l ,   V o l .   9 ,   N o .   4 ,  D e c e m be r   20 20 :     734   –   7 4 3   738   2.   S pl i t   t h e   da t a s e t   f o r   t r a i n i ng  a n d  t e s t i ng,   w i t h   t h e   pe r c e n t a ge   of   t r a i ni n g  da t a s e t   s t a rt e d  f r o m   50%  t ow a r d   95%,   u ni f o r m l y   i n c r e a s e d  by   5%,   o r   i n   o t h e r   w o r ds   0. 5 ,   0. 5 5,   0. 6 ,   0. 65,   0 . 7,   0 . 75 ,   0. 8 ,   0. 85,   0 . 9 ,   0. 95 ,   pa r t s   f r o m   t h e   c o l l e c t e d  da t a .   T h e s e   da t a   w e r e   r a ndo m l y   s pl i t   by   us i n g  t h e   c r e a t e D a t a P a rt i t i o n ()   f un c t i o n,   a v a i l a b l e   i n   t h e   c a r e t   pa c ka ge   f o r   G N U   R   [28] .   L a t e r,   e a c h   da t a s e t   w a s   t r a n s f o r m e d  i nt o   a   do c um e n t   t e rm   m a t ri x  (D T M )   by   us i n g   t h e   t m   p a c ka ge   f o r   G N U   R   [29] .   3.   T h e   t r a i n i ng  da t a s e t   t h e n  us e d  f o r   t ra i ni n g  t h e   S V M   c l a s s i f i e r   by   us i n g  t h e   e 1071  pa c ka ge   f o r   R   [30] .  T h i s   s t e p  p r o duc e d  a n  S V M   c l a s s i f i e r   ( m o de l ),   b a s e d  o n   t h e   pa r t i c ul a r  t ra i ni n g   d a t a s e t .   4.   T o   t e s t   t h e   a c c ura c y   of   t h e   m o de l ,   i t   w a s   us e d  w i t h   t h e   t e s t i n g  d a t a s e t .   T h e   m o de l   c l a s s i f i e d  e a c h   do c um e n t   i n   t h e   t e s t i n g  da t a s e t   i n t o   o n e   of  t h e   s e n t i m e n t s .   A f t e r   t h a t ,   t h e   o ut put   o f   t h e   m o de l   w e r e   c o m pa r e d  w i t h   t h e   r e a l   s e n t i m e n t   l a b e l   of   t h e   do c um e n t s .   T hi s   p r o c e s s   t h e n   y i e l de d  t h e   a c c ur a c y   of   t h e   m o de l   i n  pe r c e n t .   A f t e r   a l l   r e pe t i t i o n s   f o r   e a c h   ke rn e l   t r a i n i ng: t e s t i n g  r a t i o   f i n i s h e d,   t h e   a c c u r a c y   da t a   a r e   c o l l e c t e d  i n  a   da t a s e t .   A s   t h e r e   w e r e   4  ke r n e l s ,   10  t r a i n i ng: t e s t i n g  r a t i o s   a nd  1, 0 00  r e pe t i t i o n s ,   t h e n   t h i s   d a t a s e t   c o n t a i n s   40, 000   r o w s   of   da t a .     2. 4 .    P o s t - p r o c e s s i n g   T h e   t e r m   po s t - pr o c e s s i n g  w a s   c h o s e n   t o   r e p r e s e nt   t h e   a n a l y s i s   ph a s e   do n e   a f t e r   t h e   S V M   pr o c e s s i n g.   M a i n l y ,   t h i s   p ha s e   c ov e r s   t h e   s t a t i s t i c a l   p r o c e du r e s   us e d  t o   m a ke   t h e   c o m pa r i s o n  b e t w e e n   t e s t e d  pa r a m e t e r s ,   w hi c h  a r e   ke rn e l s   a n d   r a t i o   b e t w e e n   t ra i ni n g  a n d   t e s t i n g   da t a s e t s .   T h e   m a i n  s t e p  w i t h i n  t hi s   p ha s e   i s   t h e   V a r i a n c e   A na l y s i s   s t e p  by   us i n g  t h e   m ul t i v a r i a t e   t e s t .   In  t hi s   s t e p,   t h e   da t a   w e r e   c o m pa r e d  t o   f i n d   a n y   s i g n i f i c a n t   v a r i a n c e   due   t o   t h e   e ff e c t   of   t h e   pa r a m e t e r s .   H ow e ve r ,   t o   de c i de   w h i c h   m ul t i v a r i a t e   m e t h o d  t o   be   us e d,   t h e   di s t ri b ut i o n   n o r m a l i t y   m us t   b e   i de n t i f i e d  f i r s t .   If   t h e   v a ri a n c e   a n a l y s i s   i n d i c a t e s   a n y   s i gn i f i c a n t   v a r i a n c e ,   t h e n  t hi s   c o n t i n ue d  t o   t h e   po s t - h o c   t e s t .   T h e   r e s ul t s   w i t h i n  t hi s   p ha s e   a r e   c o m pr e h e n s i v e l y   di s c us s e d   i n   S e c t i o n   3 .   F o r   a l l   s t a t i s t i c a l   t e s t s ,   α  =   0 . 05  i s   a do pt e d.   T h e   G N U   R   s t a t i s t i c a l   s o f t w a r e   [31]   w a s   us e d  t o  c o n duc t   t h e s e   t e s t s .       3.   R ES U LTS   A N D   D I S C U S S I O N   T o   pr o v i de   a   ge n e ra l   o v e r v i e w ,   w e   pl o t t e d  t h e   a c c u r a c y   of   e a c h   e xpe r i m e n t   a s   a   s c a t t e r   pl o t ,   gr o upe d   by   t h e   pr o po r t i o n   ( ra t i o )  of   t h e   t r a i n i ng  da t a ,   a s   s how n   i n   F i gu r e   5 .   F o r   e a c h   ke rn e l   t y pe ,   t h e r e   i s   a   l i n e   t h a t   c o nn e c t s   t h e   m e a n   o f   t h e   a c c ur a c y   of  e a c h   pa r t i c u l a r   t r a i n i ng  r a t i o .   It   i s   c l e a r   t ha t   i n   e v e r y   r a t i o   o f  t h e   t ra i ni n g  d a t a   t o   t h e   t e s t i n g  d a t a ,   t h e   l i n e a r   ke rn e l   h a s   h i g h e r   a v e r a ge   a c c ur a c y .   H ow e ve r ,   t h e r e   a r e   s e ve r a l   po i n t s   o f   t h e   l i n e a r  ke rn e l   a c c u r a c y   t h a t   l o c a t e d  t o o   f a r ,   a l t h o ugh   t hi s   i s   a   c o m m o n   p h e n o m e n o n  i n   a l l   ke rn e l   t y p e s   w h e n   t h e   r a t i o   o f   t ra i ni n g   da t a   i n c r e a s e d.           F i gu r e   5 .  T h e   a c c u r a c y   of   e a c h   e xpe ri m e n t .   E a c h  l i n e   r e p r e s e nt s   a nd  c o nn e c t s   t h e   m e a n   o f   t h e   a c c u r a c y ,   fo r   e a c h   ra t i o   o f   t h e   t r a i n i ng  d a t a       T h e   bo xpl o t s   i n   F i gu r e   6  c o n f i r m   t h a t   t h e   l i n e a r   ke rn e l   t e n ds   t o   y i e l d  h i g h e r   a c c u r a c y ,   j udge d   by   t h e   v e r t i c a l   po s i t i o n s   o f   t he   b o x  i n   F i g u r e   6(a ) .   W h e n   t h e   b o xpl o t s   o f   t h e   a c c ura c y   gr o upe d  by   t h e   ke rn e l ,   a s   s h o w n   i n   F i gu r e   6(b ),   t h e   i n d i c a t i o n   o f   t h e   hi g h e r   v a r i a t i o n   due   t o   t h e   hi g h e r   ra t i o   of   t h e   t ra i ni n g  da t a   c a n  b e   v i s ua l l y   i n s pe c t e d  c l e a r e r .   A l t h o ug h   t h e   l i n e a r  ke rn e l   t e n ds   t o   h a v e   h i g h e r   v a ri a t i o n,   y e t   t h e   s h a pe   o f   t h e   b o x   a n d  t h e   l o c a t i o n   o f   t h e   m e di a n s   a r e   c o m m o n l y   b a l a n c e d,   i n   w h i c h   t h e   m e di a n  l i n e   l o c a t e d  a r o un d  t h e   c e n t e r ,   m e a n w h i l e   fo r   t h e   o t h e r   ke rn e l ,   t h e   m e di a n   s o m e t i m e s   l oc a t e d  n e a r   o n e   of   t h e   qua rt i l e s   (i . e   po l y n o m i a l   ke rn e l   Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   A r t i f   I n t e l l   IS S N :   2252 - 8938       E f f e c t s   o f   k e r n e l s   and   t h e   pr opor t i on  of   t r ai ni ng   da t a   on  t h e   ac c ur a c y   o f . . .   ( D ani e l   F e br i an   Se n gk e y )   739   a t   t ra i ni n g  r a t i o   0. 8  a n d  0. 95,   w h i l e   a t   t r a i n i ng  r a t i o   0. 85  t h e   m e di a n   i s   c l o s e r   t o   t h e   f i r s t   qua rt i l e ;   ra di a l   ke rn e l   a t   t ra i ni n g   r a t i o n  0 . 6,   0 . 8 ,   0 . 85   a nd  0 . 9) .         (a )  G r o upe d  b y   t h e   r a t i o   o f   t ra i ni n g   d a t a     (b )  G r o upe d  by   ke rn e l     F i gu r e   6 .   B o xpl o t   o f   t h e   a c c ur a c y   f r o m   e a c h  e xpe r i m e n t .       F i gu r e   7  gi v e s   a   v i s ua l   c o m pa r i s o n   o f   t h e   s t a n d a r d  de v i a t i o n ,   w h e r e   F i gu r e   7( a )  a n d  F i gu r e   7(b )  s h o w   gr o upe d  c o m pa r i s o n s   b y   t h e   r a t i o   o f   t ra i ni n g   da t a   a nd   by   ke r n e l ,   r e s pe c t i v e l y .   It   i s   v e r y   c l e a r   t ha t   t h e   a c c ur a c y   of   t h e   l i n e a r   ke rn e l   a l w a y s   de v i a t e s   h i g h e r   t ha n   t h e   o t h e r   ke rn e l s ,   f o l l ow e d  by   t h e   r a d i a l   ke rn e l .   T h e   s t a n d a r d  de v i a t i o n   o f  t h e   po l y n o m i a l   a nd  t h e   s i gm o i d  ke rn e l s   t e n d  t o   c o i n c i de   i n   l o w e r   t ra i ni n g  r a t i o .   H ow e ve r ,   w i t h   t h e   h i g h e r   p r o po r t i o n   o f   t h e   da t a   us e d  fo r   t r a i n i n g ,   t h e   po l y n o m i a l   ke rn e l s   de v i a t e   l o w e r   t ha n  t h e   s i g m o i d  ke rn e l ,   a s   s h o w n   i n  F i g u r e   7(b ).         (a )  G r o upe d  b y   t h e   r a t i o   o f   t ra i ni n g   d a t a       (b )  G r o upe d  by   ke rn e l     F i gu r e   7 .   B o xpl o t   o f   t h e   a c c ur a c y   f r o m   e a c h  e xpe r i m e n t           Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2252 - 8938     I n t   J   A rt i f   I nt e l l ,   V o l .   9 ,   N o .   4 ,  D e c e m be r   20 20 :     734   –   7 4 3   740   3. 1 .     D i s tr i b u ti o n   n o r m al i ty   T h e   di s t ri b ut i o n   n o rm a l i t y   t e s t   w a s   do n e   t o   e a c h   ke rn e l   t r a i ni n g: t e s t i n g   r a t i o   by   us i n g   t h e   S ha pi r o - W i l k  m e t h o d  [32] .   T h e   r e s ul t s ,   i n   p - v a l ue ,   a r e   pr e s e nt e d  i n   T a b l e   1.   A s   de s c r i b e d  i n   S ub s e c t i o n   2 . 3. ,   t h e   t hr e s h o l d  f o r   t h e   p - v a l ue   i s   0. 0 5,   h e n c e   t h e   H 0   i n   m o s t   c a s e s   w a s   r e j e c t e d.   A s   n o t   a l l   da t a   n o r m a l l y   di s t r i b ut e d,   t h e n  t h e   s ub s e que n t   t e s t s   m us t   us e   t h e   n o n - pa ra m e t r i c   m e t h o ds .       T a b l e   1 .   R e s ul t s   f r o m   t h e   S ha pi r o - W i l k  t e s t   K e r n e l   T y p e   P - v a l u e   fo r  e a c h   ra t i o   o f   t h e   t ra i n i n g   d a t a   0 . 5   0 . 5 5   0 . 6   0 . 6 5   0 . 7   ra d i a l   3 8 . 0 1   ×   1 0 − 27   1 . 0 9 2   ×   1 0 − 24   7 9 4 . 4   ×   1 0 − 24   1 . 4 9 7   ×   1 0 − 18   1 5 . 3 3   ×   1 0 − 15   l i n e a r   1 . 6 8 5   ×   1 0 − 3   6 . 7 8 8   ×   1 0 − 3   4 5 . 0 6   ×   1 0 − 3   3 . 8 0 2   ×   1 0 − 3   2 . 4 2 9   ×   1 0 − 3   p o l y n o m i a l   3 2 6 . 1   ×   1 0 − 27   5 . 8 5 2   ×   1 0 − 24   1 . 7 5 3   ×   1 0 − 21   5 8 . 3 7   ×   1 0 − 18   3 0 . 1 0   ×   1 0 − 15   s i g m o i d   4 5 2 . 4   ×   1 0 − 24   1 7 . 2 9   ×   1 0 − 21   128. 4   ×   1 0 − 18   5 4 2 . 5   ×   1 0 − 15   2 0 . 2 8   ×   1 0 − 9     0 . 7 5   0 . 8   0 . 8 5   0 . 9   0 . 9 5   ra d i a l   1 1 . 8 3   ×   1 0 - 12   4 7 7 . 1   ×   1 0 - 12   1 4 0 . 5   ×   1 0 - 12   7 . 5 9 8   ×   1 0 - 12   1 2 0 . 5   ×   1 0 - 18   l i n e a r   5 6 . 0 4   ×   1 0 - 6   4 5 1 . 0   ×   1 0 - 6   1 5 8 . 0   ×   1 0 - 6   6 . 7 0 2   ×   1 0 - 6   2 7 . 9 8   ×   1 0 - 12   p o l y n o m i a l   8 4 3 . 2   ×   1 0 - 15   1 5 7 . 0   ×   1 0 - 12   79 . 2 6   ×   1 0 - 12   5 8 9 . 4   ×   1 0 - 15   2 . 8 3 1   ×   1 0 - 18   s i g m o i d   1 3 . 2 9   ×   1 0 - 9   4 3 . 6 1   ×   1 0 - 9   3 2 3 . 7   ×   1 0 - 12   6 . 4 7 0   ×   1 0 - 12   5 . 7 7 8   ×   1 0 - 18       3. 2 .    M u l ti v ar i ate   a n al ys i s   T o   ga i n  k n o w l e dge   r e ga r di ng  t h e   e ff e c t s   of   t h e   ke rn e l   a n d   t h e   e f fe c t s   o f   t r a i ni n g   da t a   r a t i o ,   e a c h  s c e n a r i o   w a s   t e s t e d  s e pa r a t e l y .   F i r s t ,   w e   c o m pa r e d  t h e   ra t i o s   of   t r a i ni n g  d a t a   i n   t h e   s a m e   ke rn e l ;   a n d  s e c o n d,   w e   c o m pa r e d  t h e   ke rn e l s   i n   e a c h   r a t i o   of   t h e   t r a i n i ng  da t a .   A s   t h e   da t a   a r e   n o t   di s t r i b ut e d  n o rm a l l y ,   t h e n   w e   a ppl i e d  t h e   t w o - t a i l   K r us ka l - W a l l i s   t e s t   i n  t hi s   s t e p   [33] .     3. 2 . 1.   Th e   r ati o   o f  th e   t r ai n i n g   d ata   B a s e d  o n   t h e   p - v a l ue s   i n   T a b l e   2,   t h e   r e s ul t s   a r e   s i gni f i c a n t   s i n c e   a l l   v a l ue s   a r e   l e s s   t ha n   0. 05 .   T h e   p - v a l ue   f o r   t h e   po l y n o m i a l   ke rn e l   i s   n o t   a c t u a l l y   e qua l   t o   0.   H ow e ve r ,   s i n c e   t h e   v a l ue   i s   t oo   s m a l l ,   i t   i s   w a y   b e y o n d  t h e   l i m i t s   o f  t h e   c o m put e r   t o   di s p l a y .   T h e r e f o r e ,   fo r   t hi s   s t e p,   i t   c a n   b e   s a i d  t ha t   i n   e v e r y   ke r n e l   t e s t e d,   a t   l e a s t   o n e   t r a i n i ng  ra t i o   ga v e   s i g n i f i c a nt l y   di f fe r e n t   a c c u r a c y .       T a b l e   2 .   R e s ul t s   o f   t h e   K r us ka l - W a l l i s   t e s t   f o r   t h e   ra t i o   o f   t r a i n i n g   d a t a   c o m pa ri s o n   i n   e a c h  ke rn e l   K e r n e l   T y p e   p - v a l u e   ra d i a l   585 . 4 × 1 0 − 2 3 7   l i n e a r   567 . 5 × 1 0 − 1 8 9   p o l y n o m i a l   <   0 . 0 0 0 1   s i g m o i d   8 . 8 0 6 × 1 0 − 1 3 5       3. 2 . 2.   K e r n e l s   S i m i l a r   t o   t h e   c o m pa ri s o n   o f   t h e   r a t i o s   of   t r a i n i ng  da t a   i n   t he   s a m e   ke rn e l ,   w h e n   t h e   ke rn e l s   i n   e a c h   ra t i o   put   t o ge t h e r   t o   b e   c o m pa r e d,   t h e   di f f e r e n c e s   a r e   a l s o   s i g n i f i c a n t ,   a s   s h o w n   i n   T a b l e   3.   H e n c e ,   fo r   e a c h  pr o po r t i o n  o f   t h e   d a t a s e t   us e d  f o r   t r a i ni n g,   a t   l e a s t   o n e   ke rn e l   h a d   s i g ni f i c a n t l y   di ff e r e n t   a c c ura c y .       T a b l e   3 .   R e s ul t s   o f   t h e   K r us ka l - W a l l i s   t e s t   f o r   t h e   ke rn e l   c om pa ri s o n  o f   e a c h   r a t i o   o f   t ra i ni n g   d a t a   Ra t i o   o f  T ra i n i n g   D a t a   p - v a l u e   0 . 5   415 . 0 × 1 0 − 1 6 2   0 . 5   8 . 3 9 × 1 0 − 1 9 8   0 . 6   1 . 2 2 × 1 0 − 2 0 4   0 . 6 5   91 . 8 0 × 1 0 − 1 9 8   0 . 7   648 . 0 × 1 0 − 2 2 8   0 . 7 5   1 . 3 2 × 1 0 − 2 4 0   0 . 8   1 . 2 0 × 1 0 − 1 7 4   0 . 8 5   916 . 0 × 1 0 − 1 7 4   0 . 9   17 . 3 0 × 1 0 − 93   0 . 9 5   143 . 0 × 1 0 − 36         Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   A r t i f   I n t e l l   IS S N :   2252 - 8938       E f f e c t s   o f   k e r n e l s   and   t h e   pr opor t i on  of   t r ai ni ng   da t a   on  t h e   ac c ur a c y   o f . . .   ( D ani e l   F e br i an   Se n gk e y )   741   3. 3 .     P o s t - h o c   a n al ys i s   T h e   po s t - h o c   a na l y s i s   w a s   do n e   t o  c o m pa r e   pa i r s   o f   e xpe r i m e nt s   i n   t h e   s a m e   gr o up.   B a s e d  o n   t h e   pa i r w i s e   t e s t s ,   i t   po s s i b l e   t o   f i n d  t h e   p a i r s   t ha t   s i g n i f i c a n t l y   d i f fe r e n t .   T h e   m e t h o d  us e d  i n  t hi s   s t e p  w a s   a   t w o - t a i l   D u nn   t e s t   w i t h   t h e   B e n j a m i n i - H o c h b e r g  a dj us t m e n t .   S i n c e   t h e r e   a r e   t o o   m a n y   c o m b i n a t i o n s   t e s t e d,   t h e n   to   s a v e   s pa c e ,   t h e n   i n   o n l y   t h e   r e s ul t s   w i t h  i n s i g ni f i c a nt   d i f f e r e n c e s   (p - v a l ue   >   0 . 05)   a r e   s h o w n   i n  T a b l e   4.       T a b l e   4 .   S e l e c t e d  r e s ul t s   f r o m   t h e   D u nn  t e s t   f o r   t h e   i m p a c t   o f   t h e   ra t i o   o f   t h e   t r a i n i ng  d a t a s e t ,   o n  t h e   a c c ura c y   fo r   e v e r y   ke rn e l   t y pe   T ra i n i n g   Ra t i o   Co m p a r i s o n   Z   P . u n a d j   P . a d j   0 . 8 0   p o l y n o m i a l   -   ra d i a l   - 1 . 8 9   0 . 0 6   0 . 0 6   0 . 8 5   p o l y n o m i a l   -   ra d i a l   - 0 . 7 5   0 . 4 5   0 . 4 5   0 . 9 0   p o l y n o m i a l   -   ra d i a l   1 . 6 1   0 . 1 1   0 . 1 1       3. 3 . 1.   K e r n e l   T h e   r e s ul t s   o f   t h e   D u nn  t e s t   f o r   t h e   c o m pa ri s o n   o f   t h e   ke r ne l s   a r e   s h o w n   i n   T a b l e   5.   B a s e d  o n   t h e   a dj us t e d  p - v a l ue s ,   o n l y   t h e   po l y n o m i a l   a n d  ra di a l   ke rn e l s   t h a t   ha v e   s e ve r a l   i n s i g ni f i c a n t   d i f fe r e n c e s .   T h e r e f o r e ,   i t   c a n   b e   s a i d  t ha t   m o s t   ke rn e l s   gi v e   s i gni f i c a n t l y   di ff e r e n t   a c c ur a c y .   M o r e ove r ,   t h e   c a s e s   w h e r e   t h e   di f f e r e n c e s   a r e   n o t   s i g n i f i c a n t ,   h a p pe n e d   w h e n  t h e   r a t i o s   a r e   i n  v e r y   c l os e   r a n ge .       T a b l e   5 .   S e l e c t e d  r e s ul t s   f r o m   t h e   D u nn  t e s t   f o r   c o m pa ri s o n  i n  e a c h  ke rn e l   t h e   ke rn e l   i m pa c t   o n  t h e   a c c ura c y ,   fo r   e v e r y   ra t i o   o f   t h e   t ra i ni n g   d a t a s et   K e r n e l   T y p e   Co m p a r i s o n   Z   P . u n a d j   P . a d j   ra d i a l   0 . 5   -   0 . 5 5   - 1 . 2 4   0 . 2 2   0 . 2 3   ra d i a l   0 . 6 5   -   0 . 7 5   - 1 . 5 7   0 . 1 2   0 . 1 3   ra d i a l   0 . 7   -   0 . 7 5   0 . 9 7   0 . 3 3   0 . 3 4   ra d i a l   0 . 8   -   0 . 8 5   0 . 5 3   0 . 5 9   0 . 5 9   l i n e a r   0 . 6   -   0 . 6 5   - 1 . 5 1   0 . 1 3   0 . 1 4   l i n e a r   0 . 7 5   -   0 . 8   - 1 . 0 0   0 . 3 2   0 . 3 3   l i n e ar   0 . 8 5   -   0 . 9   - 0 . 4 9   0 . 6 2   0 . 6 2   l i n e a r   0 . 7 5   -   0 . 9 5   - 1 . 5 8   0 . 1 1   0 . 1 3   l i n e a r   0 . 8   -   0 . 9 5   - 0 . 5 8   0 . 5 6   0 . 5 7   l i n e a r   0 . 8 5   -   0 . 9 5   1 . 6 6   0 . 1 0   0 . 1 1   p o l y n o m i a l   0 . 5   -   0 . 5 5   - 1 . 2 3   0 . 2 2   0 . 2 3   p o l y n o m i a l   0 . 6   -   0 . 6 5   - 1 . 9 8   0 . 0 5   0 . 0 5   p o l y n o m i a l   0 . 7   -   0 . 7 5   - 1 . 0 4   0 . 3 0   0 . 3 1   po l y n o m i a l   0 . 8   -   0 . 8 5   - 0 . 2 7   0 . 7 9   0 . 7 9   p o l y n o m i a l   0 . 9   -   0 . 9 5   - 1 . 6 4   0 . 1 0   0 . 1 1   s i g m o i d   0 . 5   -   0 . 5 5   - 0 . 0 6   0 . 9 5   0 . 9 7   s i g m o i d   0 . 6   -   0 . 6 5   - 0 . 8 6   0 . 3 9   0 . 4 4   s i g m o i d   0 . 6   -   0 . 7   - 0 . 8 5   0 . 4 0   0 . 4 4   s i g m o i d   0 . 6 5   -   0 . 7   0 . 0 2   0 . 9 9   0 . 9 9   s i g m o i d   0 . 6   -   0 . 7 5   0 . 3 5   0 . 7 2   0 . 7 8   s i g m o i d   0 . 6 5   -   0 . 7 5   1 . 2 2   0 . 2 2   0 . 2 7   s i g m o i d   0 . 7   -   0 . 7 5   1 . 2 0   0 . 2 3   0 . 2 7   s i g m o i d   0 . 8   -   0 . 8 5   - 0 . 2 5   0 . 8 0   0 . 8 4   s i g m o i d   0 . 9   -   0 . 9 5   - 1 . 7 3   0 . 0 8   0 . 1 0       3. 3 . 2.   Th e   r ati o   o f  th e   t r ai n i n g   d ata   In   t o t a l ,   f o r   e a c h   ke rn e l   t y pe ,   t h e r e   a r e   45  c o m pa r i s o n s   o f   t h e   t r a i n i ng  ra t i o   w h i c h   w h e n  a c c um ul a t e d,   t h e   r e s ul t   o f   t h e   D u nn   t e s t   c o n s i s t s   o f   186  r o w s .   T h e r e f o r e ,   o n l y   t h e   c o m pa r i s o n s   w i t h  i n s i g ni f i c a nt   d i f fe r e n c e s   a r e   s h o w n   i n  T a b l e   3.   T h e   t a b l e   c o n f i r m s   t h a t   w h e n   t h e   ra t i o   t o o   c l o s e   t o ge t h e r,   s uc h   a s   0. 5  a n d  0. 55,   t h e n   t h e   r e s u l t s   w i l l   n o t   b e   s i gn i f i c a n t l y   di ffe r e nt .   T h e   s i g m o i d  a n d  t h e n   t h e   l i n e a r   ke rn e l   a r e   t h e   2  l e a s t   a f f e c t e d  by   t h e   p r o po r t i o n   o f   t h e   da t a   us e d  f o r   t r a i ni n g .   Co nt r a ri l y ,   t h e   r a d i a l   ke rn e l ,   i n  t hi s   c a s e ,   i s   t h e   m o s t   a f f e c t e d  by   t h e   ra t i o ,   s i n c e   o nl y   4  o f   45  e xp e r i m e nt s   t ha t   a r e   n o t   s i g ni f i c a nt l y   di f fe r e nt .       4.   C O N C LU S I O N   A N D   F U TU R E  W O R K   T h e   s e n t i m e nt   a na l y s i s   w i t h   t h e   S V M   c l a s s i f i e r   h a s   b e e n   s t u di e d  a s   a   s o l ut i o n   fo r   t h e   t i r e s o m e   w o r ks   of   m a n u a l   s e nt i m e nt   c l a s s i f i c a t i o n .   T h e   s t ude n t   e v a l ua t i o n   t o w a r d  t h e   l e c t u r e r   i s   a   f i e l d  w h e r e   i t   ha s   b e e n   a ppl i e d.   S V M   h a s   s e v e r a l   p a ra m e t e r s   t ha t   c a n   b e   t u n e d  t o   i n c r e a s e   i t s   a c c ura c y ,   s uc h   a s   us i ng  di f f e r e n t   ke rn e l s .   Y e t ,   i n   s e nt i m e n t   a na l y s i s   of   t h e   s t ude n t s ’  e v a l u a t i o n,   t hi s   o pt i o n   i s   ra r e l y   e xpl o r e d.   I n   t hi s   s t udy ,   w e   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2252 - 8938     I n t   J   A rt i f   I nt e l l ,   V o l .   9 ,   N o .   4 ,  D e c e m be r   20 20 :     734   –   7 4 3   742   ha v e   s pe c i f i c a l l y   e v a l ua t e d  t h e   us e   o f   v a r i o us   ke rn e l s   a n d  t h e   pr o po rt i o n s   o f   da t a   us e d  f o r   t r a i n i ng  t o   t h e   a c c ur a c y   of  t h e   c l a s s i f i c a t i o n.   S i m i l a r   t o   t h e   f i n di ngs   of   t h e   pr e v i o us   s t udi e s   a bo ut   S V M   k e rn e l s ,   t h i s   s t udy   a l s o   fo un d  t h a t   t h e   ut i l i z a t i o n   o f  di ff e r e n t   k e rn e l s   a f fe c t s   t h e   a c c ur a c y   of   t h e   S V M   c l a s s i f i e r ,   w h i c h   i n   t hi s   c a s e   s p e c i f i c a l l y   t ra i n e d  f o r   t h e   s e n t i m e n t   a na l y s i s   of   t h e   l e c t ur e r   f e e d b a c ks   f r o m   s t ude n t s .   O n l y   t h e   po l y n o m i a l   a nd  ra d i a l   ke rn e l s   t h a t   a t   a   c e r t a i n   p r o po r t i o n  of  t h e   da t a s e t   us e d  f o r   t r a i n i ng  r a t i o   h a v e   n o   s i g n i f i c a n t l y   di ff e r e n t   i m p a c t   t h e   a c c ur a c y .   O n   t h e   o t h e r   ha n d,   w e   a l s o   s t udi e d  t h e   i m p a c t   o f   t h e   da t a s e t   pr o po r t i o n   us e d  f o r   S V M   t r a i n i ng.   B a s e d  o n   t h e   b o xpl o t ,   a   hi g h e r   p r o po r t i o n   o f   da t a   us e d  f o r   t r a i n i n g  gi v e s   hi g h e r   v a ri a t i o n   t o   t h e   a c c ura c y   of   t h e   m o de l .   I t   m e a n s   t h e   m o de l   w o ul d  b e   unr e l i a b l e   w h e n  t h e   p r o po r t i o n   o f  t h e   t ra i ni n g  da t a s e t   i n c r e a s e d.   H ow e v e r ,   i n   t h e   po s t - h o c   t e s t ,   t h e   di f fe r e n c e s   a r e   n o t   a l w a y s   s i gn i f i c a n t .   T h e   s i gm o i d  a n d  t h e n   t h e   l i n e a r   a r e   t h e   2  ke rn e l s   w i t h   t h e   l e s s   s i g n i f i c a n t   v a r i a n c e   b e t w e e n   c l o s e - r a n ge   t ra i ni n g   ra t i o .   T hi s   s t udy   a l r e a dy   e v a l ua t e d  t h e   us e   o f   ke rn e l s   a nd  t h e   pr o po r t i o n   o f   da t a s e t s   us e d  f o r   t ra i ni n g  i n   S V M - b a s e d  s e n t i m e n t   a na l y s i s   o f  t h e   s t ude n t s ’  f e e d b a c ks   t ow a r d  t h e   l e c t ur e r .   F ut u r e   w o r k  m us t   a dd r e s s   t h e   i s s ue   of   t h e   b e t t e r   ke rn e l ,   a s   w e l l   a s   t h e   ri g h t   p r o po r t i o n   o f   t he   t r a i n i ng  da t a s e t ,   t h a t   s h o ul d  b e   us e d  i n   t h i s   pa r t i c ul a r  c a s e .       R EF ER EN C ES   [ 1]   C .   C o r t e s   a nd  V .   V a pn i k ,   “ S uppo r t - v e c t o r   ne t w o r ks , ”   M a c h .   L e ar n. ,   v o l .   20 ,   no .   3,   pp .   2 73 – 2 97 ,   S e p.   199 5,   do i :   10. 1 007 / bf 009 9401 8.   [ 2]   V .   S i dd e s h  P a da l a ,   K .   G a nd hi ,   a nd  D .   V .   P us h pa l a t ha ,   “ M a c hi n e   l e a r ni ng:   T he   ne w   l a ng ua g e   f o r   a ppl i c a t i o ns , ”   I A E S   I n t .   J .   A r t i f .   I n t e l l . ,   v o l .   8,   no .   4 ,   p p.   41 1 – 42 1,   D e c .   20 19,   do i :   10. 1 1591 / i j a i . v 8. i 4. pp41 1 - 421.   [ 3]   A .   C ha r r a da ,   “ S uppo r t   V e c t o r   M a c hi ne s   R e g r e s s i o n  f o r   M I M O - O F D M   C ha nne l   E s t i m a t i o n, ”   I A E S  I nt .   J .   A r t i f .   I nt e l l . ,   v o l .   1 ,   no .   4,   pp .   214 - 22 4,   D e c .   20 12,   do i :   10. 115 91/ i j - a i . v 1i 4. 18 32 .   [ 4]   O .   B e na r c hi d  a nd  N .   R a i s s o uni ,   “ S uppo r t   V e c t o r   M a c h i ne s   f o r   O bj e c t   B a s e d  B ui l d i ng   E xt r a c t i o n  i n  S ubu r b a n  A r e a   us i ng   V e r y   H i g h  R e s o l ut i o n  S a t e l l i t e   I m a g e s ,   a   C a s e   S t udy :   T e t ua n ,   M o r o c c o , ”   I A E S  I n t .   J .   A r t i f .   I nt e l l . ,   v o l .   2,   no .   1,   pp .   43 – 5 0,   M a r .   201 3,   do i :   10. 1159 1/ i j - a i . v 2i 1. 1781 .   [ 5]   S .   I br a hi m ,   N .   A .   Z u l ki f l i ,   N .   S a b r i ,   A .   A .   S h a r i ,   a nd   M .   R .   M .   N o o r di n,   “ R i c e   g r a i n  c l a s s i f i c a t i o n  u s i ng   m ul t i - c l a s s   s uppo r t   v e c t o r   m a c hi ne   ( S V M ) , ”   I A E S  I nt .   J .   A r t i f .   I n t e l l . ,   v o l .   8 ,   no .   3,   pp .   21 5 – 22 0,   D e c .   2 019 ,   do i :   10. 1 1591 / i j a i . v 8. i 3. pp21 5 - 220.   [ 6]   S .   B a r hm i   a n d  O .   E l   F a t ni ,   “ H o ur l y   w i nd  s pe e d  f o r e c a s t i ng   ba s e d  o n  s uppo r t   v e c t o r   m a c hi ne   a nd  a r t i f i c i a l   ne ur a l   ne t w o r k s , ”   I A E S   I nt .   J .   A r t i f .   I n t e l l . ,   v o l .   8,   no .   3 ,   pp.   2 86 - 291 ,   S e p .   2019 ,   do i :   10. 115 91 / i j a i . v 8. i 3 . pp 286 - 291 .   [ 7]   N .   R a z a l i ,   S .   I s m a i l ,   a nd  A .   M u s t a ph a ,   “ M a c h i ne   l e a r n i ng   a ppr o a c h  f o r   f l oo d  r i s ks   p r e d i c t i o n, ”   I A E S  I n t .   J .   A r t i f .   I nt e l l . ,   v o l .   9 ,   no .   1,   pp .   73 - 80 ,   M a r .   2 020 ,   do i :   10. 11 591 / i j a i . v 9 . i 1 . p p73 - 80.   [ 8]   M .   M o ha i m i n ul   a nd   N .   S ul t a na ,   “ C o m pa r a t i v e   S t udy   o n  M a c hi n e   L e a r ni ng   A l g o r i t hm s   f o r   S e nt i m e n t   C l a s s i f i c a t i o n, ”   I n t .   J .   C om pu t .   A ppl . ,   v o l .   182 ,   no .   21,   p p.   1 - 7,   O c t .   201 8,   do i :   10. 5120 / i j c a 20 1891 7961 .   [ 9]   S .   A m a r i   a n d  S .   W u ,   “ I m pr o v i ng   s uppo r t   v e c t o r   m a c hi ne   c l a s s i f i e r s   by   m o di f y i ng   ke r ne l   f unc t i o ns , ”   N e ur a l   N e t w or k s ,   v o l .   12 ,   no .   6 ,   pp .   783 - 7 89,   J ul .   199 9,   do i :   10. 1 016 / S 08 9 3 - 6080( 99) 0003 2 - 5.   [ 10]   C .   M a a o ui   a nd   A .   P r u s k i ,   “ A   c o m pa r a t i v e   s t udy   of   S V M   ke r ne l   a p pl i e d  t o   e m o t i o n  r e c o g ni t i o n  f r o m   phy s i o l o g i c a l   s i g na l s , ”   i n   200 8  5 t h   I n t e r na t i ona l   M u l t i - C on f e r e nc e   on  S y s t e m s ,   Si gna l s   and   D e v i c e s ,   J ul .   200 8,   pp .   1 - 6,   do i :   10. 1 109 / S S D . 200 8. 4 6328 91 .   [ 11]   H .   M .   A s r a f ,   M .   T .   N o o r i t a w a t i ,   a nd  M .   S .   B .   S .   R i z a m ,   “ A   C o m pa r a t i v e   S t udy   i n  K e r ne l - B a s e d  S u ppo r t   V e c t o r   M a c hi n e   o f   O i l   P a l m   L e a v e s   N ut r i e nt   D i s e a s e , ”   P r oc e di a   E ng. ,   v o l .   41,   pp .   135 3 - 1359 ,   2 012 ,   do i :   10. 1 016 / j . p r o e ng . 2012 . 0 7. 3 21 .   [ 12]   M .   A c hi r u l   N a nd a ,   K .   B o r o   S e m i na r ,   D .   N a nd i k a ,   a nd  A .   M a ddu ,   “ A   C o m pa r i s o n  S t u dy   o f   K e r ne l   F unc t i o ns   i n  t he   S uppo r t   V e c t o r   M a c hi ne   a nd  I t s   A ppl i c a t i o n  f o r   T e r m i t e   D e t e c t i o n, ”   I n f or m at i on ,   v o l .   9,   no .   1,   p.   5,   J a n .   20 18 ,   do i :   10. 3 390 / i nf o 9010005 .   [ 13]   D .   S ha n t h i ni ,   M .   S ha n t h i ,   a nd  D .   M .   C .   B huv a ne s w a r i ,   “ A   C o m pa r a t i v e   S t udy   of   S V M   K e r ne l   F u nc t i o ns   B a s e d  o n  P o l y no m i a l   C o e f f i c i e nt s   a nd  V - T r a ns f o r m   C o e f f i c i e nt s , ”   I n t .   J .   E n g.   C om pu t .   Sc i . ,   v o l .   6,   no .   3,   p p.   2 0765 - 20 769 ,   2017 ,   do i :   10. 185 35 / i j e c s / v 6 i 3. 65 .   [ 14]   D .   F .   S e ng ke y ,   A .   J a c o bus ,   a nd  F .   J .   M a no ppo ,   “ I m pl e m e nt i ng   S uppo r t   V e c t o r   M a c hi n e   S e n t i m e nt   A na l y s i s   t o   S t ud e nt s ’   O p i n i o n  t o w a r d  L e c t ur e r   i n  a n  I ndo ne s i a n  P ub l i c   U ni v e r s i t y , ”   J .   Sus t ai n.   E n g.   P r oc .   Se r . ,   v o l .   1 ,   no .   2 ,   pp.   19 4 – 19 8,   S e p.   20 19,   do i :   10. 357 93/ j o s e p s . v 1i 2. 2 7.   [ 15]   N .   A l t r a bs h e h,   M .   M .   G a be r ,   a nd  M .   C o c e a ,   “ S A - E :   S e nt i m e nt   a na l y s i s   f o r   e duc a t i o n , ”   i n  F r ont i e r s   i n  A r t i f i c i a l   I nt e l l i ge nc e   and   A p pl i c a t i on s ,   20 13,   v o l .   255 ,   pp .   3 53 – 3 62 ,   do i :   10 . 3233 / 978 - 1 - 614 99 - 264 - 6 - 353 .   [ 16]   M .   A .   U l l a h,   “ S e nt i m e n t   a na l y s i s   o f   s t ude n t s   f e e db a c k:   A   s t udy   t o w a r ds   o pt i m a l   t o o l s , ”   i n  2016  I n t e r na t i o na l   W or k s hop   on   C om pu t a t i ona l   I n t e l l i ge nc e   ( I W C I ) ,   D e c .   20 16 ,   p p.   1 7 5 - 180,   do i :   10. 1 109 / I W C I . 2016. 786 0361 .   [ 17]   G .   G .   E s pa r z a ,   A .   P .   D í a z ,   J .   C a nul - R e i c h,   C .   A .   D e - L una ,   a nd  J .   P o nc e ,   “ P r o po s a l   o f   a   S e n t i m e n t   A na l y s i s   M o de l   i n  T w e e t s   f o r   I m pr o v e m e nt   o f   t he   T e a c hi ng   -   L e a r ni ng   P r o c e s s   i n  t he   C l a s s r o o m   U s i ng   a   C o r pus   o f   S ubj e c t i v i t y , ”   I nt .   J .   C om b .   O pt i m .   P r ob l .   I nf or m a t i c s ,   v o l .   7,   no .   2 ,   pp .   22 - 34,   M a y   2016,   A c c e s s e d:   J ul .   13 ,   201 9.   [ O nl i n e ] .   A v a i l a b l e :   ht t p s : / / i j c o pi . o r g / i nd e x. php / o j s / a r t i c l e / v i e w / 37.   [ 18]   G .   G .   E s p a r z a   e t   al . ,   “ A   s e n t i m e n t   a n a l y s i s   m o de l   t o   a na l y z e   s t ud e n t s   r e v i e w s   o f   t e a c he r   p e r f o r m a nc e   us i ng   s uppo r t   v e c t o r   m a c h i ne s , ”   i n  14 t h  I nt e r n at i on al   C on f e r e nc e ,   A dv anc e s   i n  I nt e l l i ge nt   S y s t e m s   and  C om pu t i ng ,   v o l .   620,   p p.   157 - 164 ,   2018 ,   do i :   10. 10 07 / 978 - 3 - 319 - 62 410 - 5_1 9.   [ 19]   V .   I .   S a nt o s o ,   G .   V i r g i ni a ,   a nd  Y .   L uki t o ,   “ P e ne r a pa n  S e nt i m e n t   A na l y s i s   pa da   H a s i l   E v a l ua s i   D o s e n  de ng a n   Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   A r t i f   I n t e l l   IS S N :   2252 - 8938       E f f e c t s   o f   k e r n e l s   and   t h e   pr opor t i on  of   t r ai ni ng   da t a   on  t h e   ac c ur a c y   o f . . .   ( D ani e l   F e br i an   Se n gk e y )   743   M e t o de   S uppo r t   V e c t o r   M a c hi ne   [ T he   I m pl e m e nt a t i o n  o f   S uppor t   V e c t o r   M a c h i ne   f o r   S e nt i m e n t   A na l y s i s   of   L e c t ur e r   E v a l ua t i o n  R e s ul t s ] , ”   J .   T r a ns f or m . ,   v o l .   1 4,   no .   2 ,   p .   72 ,   J a n .   2 017 ,   do i :   10. 2 6623 / t r a ns f o r m a t i ka . v 14i 2. 4 39 .   [ 20]   A .   F .   H i da y a t ul l a h  a n d   M .   R .   M a ’ a r i f ,   “ P r e - pr o c e s s i ng   T a s ks   i n  I ndo ne s i a n  T w i t t e r   M e s s a g e s , ”   J .   P hy s .   C on f .   Se r . ,  v o l .   801 ,   p.   01 2072 ,   J a n.   20 17 ,   do i :   10 . 108 8/ 1 742 - 659 6/ 801 / 1/ 012 0 72.   [ 21]   S .   K .   L i dy a ,   O .   S .   S i t o m pul ,   a nd  S .   E f e nd i ,   “ S e n t i m e nt   A na l y s i s   P a da   T e ks   B a h a s a   I ndo ne s i a   M e ng g una ka n   S uppo r t   V e c t o r   M a c hi n e   ( S V M )   d a n  K   -   N e a r e s t   N e i g hbo ur   ( K - N N )   [ S e nt i m e n t   A na l y s i s   f o r   T e x t   i n  B a ha s a   I nd o ne s i a   w i t h  S uppo r t   V e c t o r   M a c hi ne   ( S V M )   a nd  K - N e a r e s t   N e i g hbo ur   ( K - NN) ] , ”   i n  Se m i na r   N as i o na l T e k no l og i   I nf or m a s i   dan   K om u ni k as i   2015   ( SE N T I K A   20 1 5) ,   20 15,   v o l . ,   no . ,   pp .   1 - 8,   [ O nl i ne ] .   A v a i l a b l e :   ht t ps : / / f t i . u a j y . a c . i d / s e n t i k a / pub l i ka s i / m a ka l a h / 2 015 / 1 . pdf .   [ 22]   A .   F .   H i da y a t ul l a h,   “ L a ng ua g e   t w e e t   c ha r a c t e r i s t i c s   o f   I nd o ne s i a n   c i t i z e ns , ”   i n   201 5  I nt e r n at i on al   C on f e r e nc e   on   Sc i e nc e   a nd   T e c hno l og y   ( T I C ST ) ,   N o v .   2015 ,   pp .   397 - 401 ,   do i :   10. 1109 / T I C S T . 2015 . 736 9393 .   [ 23]   J .   S i l g e   a nd  D .   R o bi n s o n,   “ t i dy t e xt :   T e xt   M i n i ng   a nd  A na l y s i s   U s i ng   T i dy   D a t a   P r i nc i p l e s   i n  R , ”   J O SS ,   v o l .   1 ,   no .   3,   201 6,   do i :   10. 2 1105 / j o s s . 0003 7.   [ 24]   D e v i d  H a r y a l e s m a n a   W a h i d,   “ m a s de v i d / I D - S t o pw o r ds :   S t o pw o r ds   c o l l e c t i o n  o f   B a ha s a   I ndo ne s i a   c o l l e c t e d  f r o m   m a ny   s o ur c e s . ”   201 6,   A c c e s s e d:   J u l .   15 ,   201 9.   [ O nl i ne ] .   A v a i l a b l e :   ht t ps : / / g i t hub . c o m / m a s de v i d / I D - S t o pw o r ds / .   [ 25]   F .   Z .   T a l a ,   “ A   S t udy   o f   S t e m m i ng   E f f e c t   o n  I nf o r m a t i o n  R e t r i e v a l   i n  B a ha s a   I ndo ne s i a , ”   U n i v e r s i t e i t   v a n   A m s t e r da m ,   2003 .   [ 26]   A .   F .   H i da y a t ul l a h ,   C .   I .   R a t na s a r i ,   a nd  S .   W i s nug r o ho ,   “ A na l y s i s   o f   S t e m m i ng   I nf l ue nc e   o n  I nd o ne s i a n  T w e e t   C l a s s i f i c a t i o n, ”   T E L K O M N I K A   ( T e l e c om m un i c a t i on  C om p ut .   E l e c t r on .   C on t r o l . ,   v o l .   14 ,   no .   2,   pp.   665 - 673 ,   20 16 ,   do i :   10. 1292 8/ t e l ko m ni k a . v 14 i 2. 3113 .   [ 27]   P .   S .   M a nn ,   I n t r oduc t o r y   S t at i s t i c s ,   9t h  e d.   W i l e y ,   20 16.   [ 28]   M .   K uh n,   “ c a r e t :   C l a s s i f i c a t i o n  a nd  R e g r e s s i o n  T r a i ni ng . ”   2020 ,   [ O nl i n e ] .   A v a i l a bl e :   ht t ps : / / c r a n . r - pr o j e c t . o r g / pa c ka g e = c a r e t .   [ 29]   I .   F e i ne r e r ,   K .   H o r n i k,   a nd   D .   M e y e r ,   “ T e x t   M i ni ng   I n f r a s t r uc t u r e   i n  R , ”   J .   St at .   S of t w . ,   v o l .   2 5,   no .   5 ,   pp .   1 - 5 4,   M a r .   20 08,   [ O nl i n e ] .   A v a i l a bl e :   ht t p: / / w w w . j s t a t s o f t . o r g / v 25/ i 05 / .   [ 30]   D .   M e y e r ,   E .   D i m i t r i a do u,   K .   H o r n i k ,   A .   W e i ng e s s e l ,   a nd  F .   L e i s c h,   “ e 10 71:   M i s c   F u nc t i o ns   o f   t h e   D e pa r t m e n t   o f   S t a t i s t i c s ,   P r o ba b i l i t y   T he o r y   G r o up  ( F o r m e r l y :   E 1071) ,   T U   W i e n . ”   2019 ,   [ O nl i n e ] .   A v a i l a b l e :   ht t ps : / / c r a n . r - pr o j e c t . o r g / pa c ka g e = e 107 1.   [ 31]   R   C o r e   T e a m ,   “ R :   A   L a ng ua g e   a nd  E nv i r o nm e nt   f o r   S t a t i s t i c a l   C o m put i ng . ”   V i e nna ,   A us t r i a ,   20 20,   [ O nl i n e ] .   A v a i l a b l e :   ht t p s : / / w w w . r - pr o j e c t . o r g / .   [ 32]   S .   S .   S h a pi r o   a nd  M .   B .   W i l k,   “ A n  a na l y s i s   o f   v a r i a nc e   t e s t   f o r   no r m a l i t y   ( c o m pl e t e   s a m pl e s ) , ”   B i om e t r i k a ,   v o l .   52 ,   no .   3 - 4,   p p.   59 1 - 611,   D e c .   19 65 ,   do i :   10 . 109 3/ bi o m e t / 52 . 3 - 4. 591 .   [ 33]   W .   H .   K r us ka l   a n d  W .   A .   W a l l i s ,   “ U s e   o f   R a nks   i n  O ne - C r i t e r i o n  V a r i a nc e   A na l y s i s , ”   J .   A m .   S t a t .   A s s oc . ,   v o l .   47 ,   no .   26 0,   pp .   583 – 621 ,   D e c .   1952 ,   do i :   10. 1 080 / 016 214 59. 1952 . 1 04 83441 .       B I O G R A P H I ES   O F   A U T H O R S       D a ni e l   F e b r i a n  S e ng ke y   w a s   g r a dua t e d   f r o m   t he   D e pa r t m e nt   o f   E l e c t r i c a l   E ng i n e e r i ng ,   U ni v e r s i t a s   S a m   R a t u l a ng i ,   I ndo ne s i a   i n  2 012;   a nd  f r o m   t h e   D e p a r t m e n t   o f   E l e c t r i c a l   E ng i ne e r i ng   a nd  I nf o r m a t i o n  T e c hno l o gy ,   U ni v e r s i t a s   G a d j a h  M a da ,   I ndo ne s i a   i n  2 015  f o r   hi s   unde r g r a du a t e   a nd  m a s t e r   s t ud i e s ,   r e s p e c t i v e l y .   I n  2016  he   j o i ne d  t he   E l e c t r i c a l   E ng i n e e r i ng   D e pa r t m e n t ,   U ni v e r s i t a s   S a m   R a t u l a ng i   a s   a   l e c t u r e r .   H i s   r e s e a r c h  i nt e r e s t s   a r e   d a t a   c om m uni c a t i o ns   ne t w o r ks ,   i n t e l l i g e nt   t r a ns po r t a t i o n  s y s t e m s ,   I T - a s s i s t e d  l e a r ni ng ,   a nd  m a c hi n e   le a r n i ng   a p pl i c a t i o ns .   F u r t he r   i nf o   o n  t h e   f a c ul t y   di r e c t o r y :   ht t ps : / / f a t e k . uns r a t . a c . i d/ po r t a l / i nd e x . php / p ubl i c / do s e n / i d/ 1990 0223 20180 3100 1         Ag us t i n us   J a c o bus   i s   a   t e nu r e d   l e c t ur e r   i n   t he   U nde r g r a d ua t e   P r o g r a m   o f   I n f o r m a t i c s ,   U ni v e r s i t a s   S a m   R a t u l a ng i .   H e   ho l d s   a   ba c he l o r ’ s   de g r e e   i n  E l e c t r i c a l   E ng i ne e r i ng   f r o m   U ni v e r s i t a s   S a m   R a t ul a ng i   a n d  a   m a s t e r ’ s   d e g r e e   i n  C o m put e r   S c i e nc e   f r o m   U ni v e r s i t a s   G a d j a h   M a d a .   H i s   r e s e a r c h  i n t e r e s t s   a r e   D a t a   S c i e nc e   a nd  A r t i f i c i a l   I nt e l l i g e nc e .   F u r t h e r   i nf o   o n  t he   f a c ul t y   di r e c t o r y :   ht t ps : / / f a t e k . uns r a t . a c . i d/ po r t a l / i nd e x . php / p ubl i c / do s e n / i d/ 1979 0804 20140 4100 1         F a bi a n  J o ha n e s   M a no ppo   i s   a   F u l l   P r o f e s s o r   i n  G e o t e c hni c a l   E ng i ne e r i ng   a nd  t h e   c ur r e nt   D e a n   o f   t he   F a c ul t y   o f   E n g i ne e r i ng ,   U n i v e r s i t a s   S a m   R a t u l a ng i .   D e s pi t e   hi s   G e o t e c hni c a l   b a c kg r o und,   he   i s   v e r y   f l ue nt   i n  c o m put e r   pr o g r a m m i ng ,   he nc e   i n   hi s   t e r m   a s   de a n  m a ny   a ppl i c a t i o ns   a r e   de v e l o pe d  f o r   t he   f a c ul t y   i nt e r na l   u s e ,   s uc h  a s   t h e   s t ud e n t   e v a l ua t i o n  t o w a r d   t h e   l e c t u r e r   s y s t e m ,   i n  w hi c h  i t s   da t a   i s   us e d  i n   t hi s   s t udy .   F ur t he r   i nf o   o n  t he   f a c ul t y   di r e c t o r y :   ht t ps : / / f a t e k . uns r a t . a c . i d/ po r t a l / i nd e x . php / p ubl i c / do s e n / i d/ 1962 1014 19920 3100 1     Evaluation Warning : The document was created with Spire.PDF for Python.