I n d on e s i an   Jo u r n al   o El e c t r i c al   En gi n e e r i n g   an d   C o m p u te r   S c i e n c e   V o l .   22 ,   N o .   2 M a y   202 1 pp .   1165 ~ 117 6   IS S N :   25 0 2 - 4752 ,   D O I :   10. 1 1591 / i j e e c s . v 22 .i 2 . pp 116 5 - 1176             1165       Jou r n al   h o m e pa ge ht t p: / / i j e e c s . i a e s c or e . c om   A   c o m p a r a t i v e   a n a l y si s   o n   t r a d i t i o n a l   w i r e d   d a t a sets   a n d   t h e   n e e d   f o r   w i r e l e ss   d a t a sets   f o r   I o T   w i r e l e ss   i n t r u s i o n   d e t e c t i o n       Te h   B o o n   S e o n g 1 ,   V as a k i   P o n n u s am y 2 ,   N Jh an jh i 3 ,   R o b i th o h   A n n u r 4 ,   M   N   T al i b 5   1 , 2 , 4 F a c ul t y   o f   I nf o r m a t i o a nd   C o m m uni c a t i o n   T e c hno l o gy ,   U ni v e r s i t i   T un ku   A bdul   R a hm a n   K a m p a r ,   M a l a y s i a   3 S c hoo l   o f   C om put e r   S c i e nc e   &   E ng i ne e r i ng ,   S C E ,   T a y l o r s   U ni v e r s i t y ,   M a l a y s i a     5 P a pua   N e w   G ui n e a   U ni v e r s i t y   o f   T e c hno l ogy ,   L a e ,   P N G       A r ti c l e   I n fo     A B S TR A C T   Ar t i c l e   h i s t or y :   R e c e i v e M a y   1 0 ,   2020   R e v i s e M a r   9 ,   202 1   A c c e pt e M a r   2 9,   202 1       I o T   ne t w o r ks   m o s t l y   r e l y   o w i r e l e s s   m e d i um s   f o r   c o m m uni c a t i o n,   a n due   t o   t ha t ,   t h e y   a r e   v e r y   s us c e pt i b l e   t o   i nt r us i o ns .   A nd  due   t o   t he   t i ny   na t ur e ,   pr o c e s s i ng   c o m pl e xi t y ,   a nd  l i m i t e s t o r a g e   c a pa c i t i e s ,   I o T   ne t w o r ks   r e qu i r e   v e r y   r e l i a b l e   i nt r us i o de t e c t i o n   s y s t e m s   ( I D S ) .   A l t ho ug t h e r e   a r e   m a ny   I D S   t y pe s   of   r e s e a r c a v a i l a b l e   i t he   l i t e r a t ur e ,   m o s t   o f   t he s e   s y s t e m s   a r e   s ui t a b l e   f o r   w i r e d   ne t w o r e nv i r o nm e n t s ,   a nd   t he   be nc hm a r d a t a s e t s   u s e d   f o r   t he s e   r e s e a r c w o r ks   a r e   m o s t l y   r e l y i ng   o w i r e d   da t a s e t s   s uc h   a s   K D D   C up’ 99   a nd  N S L - K D D .   I o T   a nd  w i r e l e s s   n e t w o r k s   a r e   d i s t i nc t   i na t u r e   a s   w i r e l e s s   ne t w o r k s   g i v e   m o r e   e m pha s i s   o t he   da t a   l i nk   l a y e r   a nd  phy s i c a l   l a y e r .   T he s e   c o n c e r ns   a r e   no t   g i v e m uc a t t e n t i o i t r a d i t i o na l   w i r e da t a s e t s   i t he   bo d y   o f   kno w l e d g e .   T he r e f o r e ,   i t hi s   r e s e a r c h,   a I D S   s y s t e m   i s   de v e l o pe d   us i ng   a   ne w l y   a v a i l a b l e   I o T   w i r e l e s s   da t a s e t   ( N a B I o T )   i t he   l i t e r a t u r e   w i t h   t he   da t a s e t s   f o c us i ng   m u c o t he   c o m m o I o T   r e l a t e a t t a c ks ,   a nd  r e l a t e d   l a y e r s   a r e   t a ke i n t o   c o ns i de r a t i o n.   T h e   I D S   s y s t e m   de v e l o pe i s   e v a l ua t e d   by   c o m pa r i ng   w i t v a r i o us   m a c hi n e   l e a r ni ng   a l g o r i t hm s   i n   t e r m s   o f   e v a l ua t i o m e t r i c s   s uc a s   a c c ur a c y ,   F s c o r e ,   f a l s e   po s i t i v e ,   a nd  f a l s e   ne g a t i v e .   M o r e o v e r ,   t h e   I o T   w i r e l e s s   da t a s e t   i s   c o m pa r e a g a i ns t   t he   t r a di t i o na l   N S L - KD D   da t a s e t s   t o   e v a l ua t e   t he   ne e f o r   I o T   w i r e l e s s   da t a s e t s .   T he   N a B I o T   da t a s e t s   s ho w   i t s   e f f e c t i v e n e s s   i d e t e c t i ng   w i r e l e s s   i nt r us i o ns .   B e s i de s   t h a t ,   t he   s i m ul a t i o i s   pe r f o r m e w i t di f f e r e nt   c o m bi na t i o ns   o f   f e a t u r e s   t o   c o nc l ude   t ha t   c e r t a i f e a t u r e s   a r e   p r i m a r y   i de t e c t i ng   a t t a c ks ,   a n I D S   do e s   no t   r e qu i r e   a l l   t h e   f e a t ur e s   t o   pe r f o r m   de t e c t i o n.   T hi s   c a r e duc e   t he   d e t e c t i o t i m e   m a i n l y   f o r   m a c hi ne   l e a r ni ng   a nd  c r e a t i ng   t he   m o de l s .   T h i s   r e s e a r c r e s u l t s   h a v e   p r o po s e s o m e   o f   t he   c r i t i c a l l y   i m po r t a nt   f e a t u r e s   t o   be   us e d   a nd  e l i m i na t i ng   no t   s uc i m po r t a n t   f e a t ur e s .     Ke y w or ds :   Int e rn e t   o f   t h i n gs   Int r us i o n   de t e c t i o s y s t e m   ID S   M a c hi n e   l e a rni n g   S uppo r t   v e c t o r   m a c h i n e   W i r e da t a s e t   W i r e l e s s   d a t a s e t   T hi s   i s   an   ope n   ac c e s s   ar t i c l e   u nde r   t he   C C   B Y - SA   l i c e ns e .     Cor r e s pon di n g   Au t h or :   N oo r   Z a m a J h a n j hi   S c h o o l   of   Co m put e S c i e n c e   a nd   E n g i n e e r i ng  S C E   T a y l o r ’s   U n i v e r s i t y ,   M a l a y s i a   E m a i l :   n o o r z a m a n. j h a n j h i @ t a y l o r s . e du. m y       1.   I N TR O D U C TI O N     W i r e l e s s   n e t w o r ks   a r e   be c o m i ng  m uc h   m o r e   i m po r t a nt   now a da y s   due   t o   t h e   po pul a ri t y   of   I o T   n e t w o r ks .   A m o ng  t h a t ,   W i - F i   a n c e l l ul a r   n e t w o r ks   a r e   m uc h   p r o m i s i ng  c o m m uni c a t i o n   m e di um s   f o r   Io T   n e t w o r ks   [1].   T h e   s e c ur i t y   m e a s ur e   us e i n   W i - F i   i s   ID S ,   w hi c h   i s   a   de t e c t i o n   s y s t e m   w i de l y   us e d   f o r   e v e r y   n e t w o r s e c ur i t y   i n f r a s t ruc t u r e   [2].   W i r e l e s s   n e t w o r ks   ut i l i z i n W i - F i   a n Ce l l ul a r   c o m m u ni c a t i o n s   a r e   o n e   of   t h e   m a i n   p i l l a r s   f o r   Io T   n e t w o r ks .   Io T   i s   a   n e t w o r t h a t   c o n s i s t s   o f   ph y s i c a l   o r   di gi t a l   de v i c e s ,   s m a rt   c a r s ,   h o m e   a pp l i a n c e s ,   a n d r o n e s .   t h a t   a r e   e m b e dde w i t h   e l e c t r o ni c s   s uc h   a s   s e n s o r s .   T h e y   c a n   s e n d,   r e c e i v e ,   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   22 ,   N o .   2 M a y   202 1   :     1165   -   1 176   1166   a n s ha r e   da t a   w i t h o ut   t h e   h e l o f   a   h um a n   [3] .   Io T   de v i c e s   a r e   v e r y   f l e xi b l e ,   a l l o w i n t h e m   t o   be   us e i n   a n y   s e c t o r .   F o r   i n s t a n c e ,   s e n s o r s   c a n   b e   i n s t a l l e i n   c i t i e s   t o   c o l l e c t   da t a   o n   r o a c o n di t i o n s   w h i c h   c a n   b e   us e b y   t h e   t ra f f i c   m a na ge m e nt   s y s t e m   t o   m o n i t o r   a nd  a n a l y z e   t h e   t ra f f i c   f l ow .   T h e   s y s t e m   w i l l   b e   a b l e   t o   a dj us t   t h e   t r a f f i c   l i ght   a c c o r di n t o   t h e   t ra f f i c ,   r e duc i ng  t h e   po s s i b i l i t y   o c o n ge s t i o n .   T h e r e f o r e ,   Io T   be c o m e s   ve r y   po pul a r   a nd  h a s   a   m a j o r   i m p a c t   o n   t h e   de v e l o pm e n t   o f   s o c i e t y .   H ow e v e r ,   a   w i r e l e s s   n e t w o r i s   s us c e pt i b l e   t m a l i c i o us   a c t i v i t i e s   s uc h   a s   e a ve s dr o ppi n g,   t h e   m a n   i n   t h e   m i ddl e   (M i T M ),   de n i a l   o s e r v i c e   (D O S ),   a n m a l w a r e .   A c c o r di n t o   [4]  n e w   t y p e s   of  a t t a c ks   ha v e   b e e n   di s c o ve r e a t   a n   a s t o ni s h i n s pe e d.   O n e   o t h e   b e s t   t o o l s   t o   c o m b a t   a t t a c ks   i n   w i r e l e s s   n e t w o r i s   ID S   a s   i t   i s   t h e   f i n a l   l i n e   o f   de fe n c e   i n   m o s t   of   t h e   de f e n s e - in - de pt s y s t e m s .     T h e   i n t rus i o n   de t e c t i o n   s y s t e m   c a n   b e   o n e   of   t h e   b e s t   t o o l s   t o   m i t i g a t e   a t t a c ks   i n   w i r e l e s s   n e t w o r ks .   A n   i n t rus i o de t e c t i o n   s y s t e m   c a n   b e   de s i gn e b y   us i n m a c h i n e   l e a rn i ng  a l go ri t hm s   t o   de t e c t   po s s i b l e   m a t c h e b e t w e e n   a   k n o w n   t r a f f i c   un k n o w n   t ra f f i c s .   T h e r e   a r e   v a r i o us   ID S   s y s t e m s   i n   pl a c e ,   s uc h   a s   s i g n a t u r e - b a s e d,   a n o m a l y - b a s e d,   a n d   o t h e r s .   M a c h i n e   l e a rni n a l go r i t hm s   s uc h   a s   s uppo r t   v e c t o r   m a c h i n e ,   na ï v e   B a y e s ,   de c i s i o n   t r e e ,   a n d   o t h e r s   a r e   de pl o y e t o   de s i gn  a ID S   i n   w i r e a n d   w i r e l e s s   n e t w o r ks .         2.   P R O B L EM   S TA TE M EN T   O n e   o f   t h e   m a i r e s e a r c h   g a ps   e xi s t s   i t h e   ID S   de s i g n   f o r   I o T   i s ,   a l t h o ug h   m a n y   m a c h i n e   l e a rn i ng - b a s e ID S   ha v e   b e e n   p r o po s e pr e v i o us l y ,   t h e   w o r r e l i e s   t ra di t i o na l l y   o n   c o m m e r c i a l l y   a v a i l a b l e   K D D   Cu da t a   a nd  t hi s   d a t a s e t   i s   n o t   s ui t a b l e   f o r   ID S   i n   Io T   a s   K D D   C up  da t a   i s   de s i g n e f o r   t ra di t i o na l   w i r e n e t w o r a t t a c ks   a n i t   i s   v e r y   o ut da t e d.   M o r e o v e r ,   ID S   de s i gn   f or   Io T   h a s   b e e n   r e s e a r c h e by   [5]  by   a ppl y i n a ut o e n c o de r s   t o   Io T   n e t w o r t ra f f i c   f o r   a n o m a l y   de t e c t i o n   a s   a   c o m pl e t e   m e a n s   o f   de t e c t i ng  a t t a c ks ,   b ut   t h e   a ut h o r s   c o ul n o t   c o n c l ude   o n   t h e   c r uc i a l   f e a t ur e s   n e e de fo r   de t e c t i n a t t a c ks .   T h e r e   i s   n o   un i q ue   w o r k   e m pl oy i n w i r e l e s s   da t a s e t s   t o   de s i gn   Io T   ID S   by   us i n a   w i de   r a n ge   o f   I o T   t r a f f i c   da t a .   A   c l o s e r   w o r t t h i s   i s   by   [6],   b ut   t h e   r e s e a r c h e r s   h a v e   be e n   fo c us i n o n   K D D   Cup  da t a ,   w hi c h   i s   n o t   s ui t a b l e   fo r   Io T   ID S ,   a s   m e nt i o n e e a r l i e r.   O u r   w o r us e s   a   w i r e l e s s   da t a s e t   s i m u l a t e us i n t h e   Io T   e n v i r o nm e nt ,   a nd  t hr o ug h   s i m ul a t i o n   r e s ul t s ,   w e   c a n   i de nt i f y   c r uc i a l   f e a t u r e s   fo r   de t e c t i n a t t a c ks   a n w h i c h   c o m b i n a t i o n   o f   f e a t ur e s   gi v e s   t h e   b e s t   pe r f o r m a n c e .       3.   R ELA TED   WO R K   A   ge n e t i c   a l go ri t hm - b a s e ID S   w a s   de ve l o p e by   [7],   w hi c h   p r i m a ri l y   r e l i e s   o n   K D D   d a t a s e t s   a ga i n .   A n o t h e r   w o r by   [8]  h a s   b e e n   de v e l o p e us i n a   s up po r t   v e c t o r   m a c h i n e   (S V M a s   i t   ge n e r a l i z e s   t h pe r f o r m a n c e s   o t h e   ID S   us i n K D D   c up  da t a s e t s .   T h e re   a r e   m a n y   h y b r i ID S   t e c hni que s   h a v e   be e n   pr o po s e w h e r e by   t w di ff e r e n t   c l a s s i f i c a t i o n   m e t h o ds   ha v e   b e e n   us e fo r   i nt r us i o n   de t e c t i o n   pu r po s e .   A   w o r by   [9]  us e s   a   c o m b i n a t i o n   o f   S V M   a n d   ge n e t i c   a l go r i t hm   f o r   i n t rus i o de t e c t i o a n d   f e a t u r e   s e l e c t i o n s .     N e t w o r t ra f f i c   i s   n o rm a l l y   ob t a i n e e i t h e by   us i n a   w i r e o r   w i r e l e s s   m e di um .   B ut   t h e   n a t u r e   o t h e s e   da t a   di f f e r   b e c a us e   of   b e c a us e   t h e r e   a r e   di f f e r e n t   a t t a c v e c t o r s   a r e   t a rge t e a t   b o t h   w i r e a nd  w i r e l e s s   m e di um .   A c c o r di ng  t o   [10]   w i r e n e t w o r i s   c o m po s e of   a n   a c c e s s   m e di um   t ha t   i s   w e l l   s e c ur e w h e r e a s   w i r e l e s s   n e t w o r r e qui r e s   a i r s p a c e   m o n i t o r i ng  d ue   t o   o pe n   m e di um   o f   w i r e l e s s   n e t w o r ks .   M o s t   o f   t h e   ID S   w o r i n   t h e   l i t e ra t u r e   r e l i e s   o n   K D D   Cup  ’9 9,   i t s   i m p r o v e ve r s i o n   o f   N S L - K D D ,   a n K y o t o   2006+   da t a s e t s .   T h e r e f o r e   t h e r e   e xi s t s   a   h uge   ga i n   w i r e l e s s   ID S   de s i gn   w he r e by   s o m e   w i r e l e s s   pa ra m e t e r s   a r e   c r uc i a l   w h e n   i t   c o m e s   t o   c l a s s i f i c a t i o a n d   de t e c t i o n s .       4.   P R O P O S ED   D ETEC TI O N   M ET H O D   T h e   p r o po s e w o r i n   u n i q ue   i n   t h a t   s i m ul a t e a nn e a l i n g   b a s e f e a t ur e   s e l e c t i o n   i s   do n e   by   h a v i ng  a   c o m b i na t i o n   o f   t hr e e   r a ndo m   f e a t ur e s   a t   e a c h   r o und,   a n d i f fe r e nt   m a c hi n e   l e a rni n a l go ri t hm s   a r e   a p pl i e t o   e a c h   c o m b i n a t i o n   o f   fe a t ur e s .   T h e   pu r po s e   of   t h i s   c o m b i na t i o n   i s   t o   i de n t i fy   t h e   m o s t   s ui t a b l e   f e a t ur e s   r e qui r e d   f o r   i n t rus i o de t e c t i o n,   a n t h i s   c a g r e a t l y   r e duc e   t h e   t r a i n i ng  a nd  t e s t i n r e qu i r e a n s ub s e que n t l y   c a n   r e duc e   t h e   de t e c t i o n   t i m e .   T h e   s a m e   m e t h o i s   a l s o   a ppl i e t o   t r a d i t i o na l   N S L - K D D   Cup  da t a s e t s   a s   s h o w n   i T a b l e   1,   t o   c o m pa r e   t h e   pe r f o r m a n c e   o f   w i r e l e s s   da t a s e t s   w i t t ra di t i o na l   w i r e d   da t a s e t s .     In  t hi s   e xpe r i m e nt ,   N S L - K D D   h a s   b e e n   us e f o r   t r a i n i ng  t h e   m o de l   s i n c e   i t   i s   s u i t a b l e   fo r   s upe r v i s e d   m o de l s .   A s   s h o w n   i n   T a b l e   2,   t h e r e   a r e   t y pe s   of   a t t a c ks   t a ke n   i nt o   c o n s i de r a t i o n ,   w hi c h   a r e   D O S ,   p r o b i n g ,   U 2 R ,   a n d   R 2L .   D O S   w i l l   u t i l i s e   a l l   t h e   r e s o ur c e s   of   t h e   v i c t i m   a n w o ul l e a v e   t h e   v i c t i m   u n a b l e   t o   r e s po n d   o r   p r o c e s s   f o r   a n y   l e gi t i m a t e   r e que s t s .   P r o b i n g   i s   n o r m a l l y   s c a nni n g   f o r   o pe n   po rt   t o   l o o f o r   v ul n e ra b i l i t i e s   a n a t t a c t hr o ug t h e s e   po r t s .   I U 2R   a   l o c a l   us e g e t s   a ut h e n t i c a t e t o   s upe r   us e r   m o de   w i t h o ut   a ut h o r i z a t i o n.   F o t h e   R 2L ,   a   r e m o t e   de v i c e   c a n   ge t   g ra n t   a c c e s s   t o   o t h e r   de v i c e s   w i t h o ut   a u t h o r i z a t i o n ,   a n d   t h e   a t t a c ke r   ga i n s   a c c e s s   t o   t h e   t a r ge t   m a c h i n e   [11] .     Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A   c om par at i v e   anal y s i s   on  t r adi t i o nal   w i r e dat as e t s   and   t h e   ne e d   f or   w i r e l e s s …  ( T e h   B o on  Se on g )   1167   T a b l e   1 .   A t t r i b ut e   v a l ue   t y pe   of   N S L - K D D   [11]         T a b l e   2 .   M a ppi ng  o f   a t t a c c l a s s   w i t h   a t t a c k   t y pe   [11]         T he   w o rk f l o w   o f   t he   s y s t e m   i s   s ho w i F i g u re   1 .   I t hi s   re s e a rc h ,   t he re   a re   t w o   t y p e s   o f   d a t a s e t   u s e d   t o   t r a i t he   m o d e l ,   w hi c i s   w i re d   a nd   w i re l e s s .   T he   w i re d   d a t a s e t ,   w hi c ha s   4 1   f e a t u re s ,   w a s   u s e d   t o   t ra i t he   m o de l   i s   K D D T ra i n+   w i t t e s t i ng   d a t a s e t   K D D T e s t + .   B e s i d e s ,   f o w i re l e s s   d a t a s e t s ,   i t   i s   f ro m   t he   N B a I o T   d a t a s e t   [ 1 2 c o ns i s t s   o f   1 1 5   f e a t u re s .   F o t he   N S L - K D D   d a t a s e t ,   t he   t o p   1 0   f e a t u re s   w e re   c a l c u l a t e d   us i ng   A N O V A .   T he   t o p   1 f e a t u re s   w e re   u s e d   t o   t ra i n   t he   m o d e l ,   a nd   t he   p re c i s i o n,   re c a l l ,   f   s c o re ,   a nd   a c c u ra c y   w a s   u s e d   t o   d e t e rm i ne   t he   p e rf o rm a nc e   o f   t he   m o d e l .   B e s i d e s ,   1 0   g ro u p s   o f   ra nd o m   c o m b i n a t i o ns   o f   t he   t o p   1 0   f e a t u re s   a re   u s e d   t o   t ra i t he   m o d e l   t o   g e t   t he   a c c u ra c y   s c o re .   E a c o f   t he   g ro u p   c o ns i s t s   o f   3   f e a t u re s   f ro m   t he   t o p   1 0   f e a t u re s .   N B a Io T   d a t a s e t   c o ns i s t s   o f   t w o   a t t a c k s ,   w hi c a re   t he   M i ra i   a t t a c k   a nd   t he   B a s hl i t e   a t t a c k ,   w hi c a l s o   k no w a s   G a f gy t ,   Q - B o t ,   T o rl u s ,   L i z a rd S t re s s e r,   a nd   L i z k e b a b .   B o t o f   t hi s   a t t a c k   i s   d i s t ri b u t e d   d e ni a l   o f   s e rv i c e   (D D o S )   a t t a c k   w hi c u s e s   t he   i nt e r ne t   o f   t hi ng s   ( I o T )   d e v i c e   a s   a   b o t ne t   t o   p e rf o rm   t hi s   a t t a c k   t o   a   t a rg e t .   I t   i s   c o nt ro l l e d   b y   a   b o t m a s t e t o   l a u nc a n   a t t a c k .   T he re   a re   5   d i f f e re nt   f i l e s   i t he   M i ra i   a t t a c k ,   w hi c a re   s c a n,   A C K ,   S Y N ,   U D P ,   a nd   U D P   p l a i n .   T he s e   5   f i l e s   a re   t he   a t t a c k   t he   l a u nc b y   M i ra i   a t t a c k .   T he   s c a i s   t he   f i l e   w hi c c o ns i s t s   o f   t he   p a c k e t   t he   M i ra i   a t t a c k   p e rf o rm   s c a n ni ng   f o t he   v u l n e ra b l e   d e v i c e   i t he   ne t w o rk .   I a d d i t i o n ,   A C K ,   S Y N ,   U D P ,   a nd   U D P   p l a i n   c o ns i s t   o f   t he   p a c k e t   t ha t   u s e d   t o   f l o o d   a   t a rg e t   d e v i c e .   B a s hl i t e   a t t a c k   i s   a l s o   o ne   o f   t he   a t t a c k s   i I o T ,   w hi c i s   a l s o   p e rf o rm i ng   D D o S   a t t a c k s   b y   us i ng   a n   i nf e c t e d   b o t ne t .   I n   t he   B a s hl i t e   a t t a c k ,   i t   c o ns i s t s   o f   5   f i l e s ,   w hi c a re   s c a n,   j u nk ,   U D P ,   T C P ,   a nd   c o m b o .   S i m i l a t o   t he   M i ra i   a t t a c k ,   t he   B a s hl i t e   a t t a c k   a l s o   c o ns i s t s   o f   s c a nni ng   v u l ne ra b l e   d e v i c e s   i t he   ne t w o rk .   T he   w i re l e s s   t ra i d a t a s e t   w a s   c re a t e d   b y   c o m b i ni ng   t he   5   f i l e s   i M i r a i   a t t a c k   a nd   no rm a l   t ra f f i c ,   w hi c i s   t he   b e ni g t ra f f i c   p ro v i d e d   i t he   N a B Io T   d a t a s e t .   F o t he   w i re l e s s   t e s t   d a t a s e t ,   i t   a l s o   c o ns i s t s   o f   5   f i l e s   i n   M i ra i   a t t a c k   a nd   b e ni g t ra f f i c .   O t o p   o f   t ha t ,   t he   w i re l e s s   t e s t   d a t a s e t   w a s   a l s o   c o m b i ne w i t h   5   f i l e s   i n   t he   B a s hl i t e   a t t a c k .   T h e   n e xt   f l o w   i s   t o   h a v e   a   f e a t u r e   s e l e c t i o n   o f   t h e   i n de pe n d e n t   f e a t u r e .   T h e   a l go ri t hm   t h a t   us e t c a l c ul a t e   t h e   f e a t u r e   s c o r e   i s   S e l e c t K B e s t (s c o r e _f un c = f _c l a s s i f ,   k= 10 ).   T h e   f u n c t i o w i l l   c a l c ul a t e   t h e   t o 10   f e a t ur e   s c o r e s ,   a n t h e   pa r a m e t e r   us e a s   t h e   s c o r e   f un c t i o n   i s   A N O V A   (f _c l a s s i f ).   T h e   pa ra m e t e r   i s   t h e   n u m b e r   o f   f e a t ur e s   t ha t   a r e   n e e de a s   a   r e s ul t   a f t e r   t h e   c a l c ul a t i o o f   t h e   f e a t u r e   s c o r e s .   I n   t h i s   r e s e a r c h ,   t h e   t o 10  f e a t ur e s   a r e   n e e de d.   T h e r e f o r e ,   t h e   v a l ue   w i l l   b e   10.   T h e   r e l e v a n t   f e a t ur e s   r e ga rdi n g   a   s e t   o f   c l a s s   l a b e l s   w e r e   m e a s u r e by   A N O V A ,   a n i t   i s   us e fo r   f e a t ure   s e l e c t i o n   i n   v a r i o us   f i e l ds .   S o m e   w o r ks   i n   t h e   l i t e r a t u r e   s h o w   A N O V A   i s   a   po w e r f ul   s t a t i s t i c   t e s t .   I t   c a n   b e   us e t o   r a nk  i ndi v i du a l   f e a t u r e   r e l e v a n c e   i s upe r v i s e c l a s s i f i c a t i o n   [ 13] - [14 ].   T h e   t o 10  f e a t u r e   s c o r e   w a s   c a l c ul a t e d,   a n t h e   o r de o f   t h e   f e a t ur e   s c o r e   s t a r t s   f r o m   t h e   hi g h e s t   t o   t h e   l o w e s t .   I n   T a b l e   3,   t h e   f e a t u r e   s c o r e ,   w h i c h   ha s   t h e   hi g h e s t   s c o r e ,   i s   s a m e _s r v _ r a t e ,   w h i c h   h a s   a   s c o r e   of   1. 64e + 05f o r   N S L - K D D ,   a n t h e   f e a t ur e   t h a t   ha s   t h e   l o w e s t   s c o r e   i s   c o un t   w h i c h a s   t h e   s c o r e   o f   6. 27e + 04 .   B e s i de s ,   t h e   t o 10  s c o r e s   fo r   N a B Io T   da t a s e t   w a s   a l s o   c a l c ul a t e by   S e l e c t K B e s t (s c o r e _f un c = f _c l a s s i f ,   k= 10).   S a m e   a s   N S L - K D D   f e a t ur e   s c o r i ng,   t h e   f un c t i o n   us e i s   S e l e c t K B e s t (s c o r e _f un c = f _c l a s s i f ,   k= 10),   t h e   p a r a m e t e r   u s e i t hi s   f un c t i o n   i s   A N O V A ,   w hi c i s   t h e   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   22 ,   N o .   2 M a y   202 1   :     1165   -   1 176   1168   a l go ri t hm   t o   c a l c ul a t e   t h e   t o 10  s c o r e s   a n = 10  w hi c h   i s   t h e   t o 10  f e a t ur e   s c o r e s .   In   T a b l e   4,   t h e   f e a t ur e   t h a t   ha s   t h e   hi g h e s t   s c o r i n g   i N a B Io T   i s   M I_d i r _L 0. 1_w e i ght   w i t h   a   s c o r e   o f   1. 52e + 04,   a n d   t h e   l o w e s t   s c o r e   i n   t h e   t o 1 i s   H _L 5_w e i ght   w hi c ha s   a   s c o r i n g   o f   2. 18e + 0 3.             F i gu r e   1 .   W o r kf l o w   of   t h i s   r e s e a r c h       T h e   n e xt   p r o c e s s   fo r   t hi s   w o r kf l ow   w i l l   be   s e l e c t i n t h e   i nde pe n de nt   f e a t ur e   a f t e r   f e a t u r e   s c o r i n g .   A f t e r   f e a t ur e   s c o r i ng  f o r   i n de pe n de nt   f e a t u r e s ,   t h e   t o 10   f e a t u r e s   w e r e   s e l e c t e t o   f i t   i nt o   t h e   m o de l   i n   o r de r   t o   t ra i t h e   m o de l .   B e s i de s ,   c o m b i n a t i o n s   o f   f r o m   t h e   f e a t u r e   w e r e   s e l e c t e t o   t r a i n   t h e   m o de l   a s   s ow n   i T a b l e   5   a n d   T a b l e   6.       T a b l e   3 .   T o 10  F e a t u r e   S c o r e s   f o r   N S L - K D D   D a t a s e t   T o p   1 0   F e a t u r e s   S c o r e   s a m e _ s r v _ a rt e   1 . 6 4 e + 0 5   d s t _ h o s t _ s r v _ c o u n t   1 . 3 8 e + 0 5   d s t _ h o s t _ s a m e _ s r v _ ra t e   1 . 1 7 e + 0 5   l o g g e d - in   1 . 1 5 e + 0 5   d s t _ h o s t _ s r v _ s e rr o r_ ra t e   9 . 4 6 e + 0 5   d s t _ h o s t _ s e rro r_ ra t e   9 . 3 1 e + 0 5   s e rr o r_ ra t e   9 . 2 5 e + 0 5   s r v _ s e rr o r_ ra t e   9 . 1 3 e + 0 5   f l a g   7 . 4 8 e + 0 5   c o u n t   6 . 2 7 e + 0 5       T a b l e   4 .   T o 10  F e a t u r e   S c o r e s   f o r   N a B Io T   D a t a s e t   T o p   1 0   F e a t u r e s   S c o r e   M I_ d i r_ L 0 . 1 _ w i e g h t   1 . 5 2 e + 0 5   H _ L 0 . 1 _ w i e g h t   1 . 5 2 e + 0 5   M I_ d i r_ L 1 _ w i e g h t   6 . 0 1 e + 0 5   H _ L . 1 _ w i e g h t   6 . 0 1 e + 0 5   M I_ d i r_ L 0 . 0 1 _ w i e g h t   3 . 1 1 e + 0 5   M I_ L 0 . 0 1 _ w i e g h t   3 . 1 1 e + 0 5   M I_ d i r_ L 3 _ w i e g h t   2 . 8 9 e + 0 5   H _ L 3 _ w i e g h t     2 . 8 9 e + 0 5   M I_ d i r_ L 5 _ w i e g h t   2 . 1 8 e + 0 5   H _ L 5 _ w i e g h t   2 . 1 8 e + 0 5           Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A   c om par at i v e   anal y s i s   on  t r adi t i o nal   w i r e dat as e t s   and   t h e   ne e d   f or   w i r e l e s s …  ( T e h   B o on  Se on g )   1169   T a b l e   5 .   D i f f e r e n t   c o m b i na t i o n s   o f   f e a t ur e s         T a b l e   6 .   Co m b i n a t i o n   o f   N a B Io T   da t a s e t       Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   22 ,   N o .   2 M a y   202 1   :     1165   -   1 176   1170   5.   S I M U LA TI O N   R ES U L TS   I n   t hi s   re s e a r c h,   t he   i npu t   f o r   t he   m o de l   i s   nu m e ri c a l   i np u t ,   a nd  t he   o u t p u t   o f   t h e   m o de l   w i l l   b e   c a t e go ri c a l   o u t pu t .   T h e re f o r e ,   A N O V A   i s   t h e   f e a t u r e   s e l e c t i o a l go ri t hm   t ha t   us e d   t o   m e a s u re   t he   t o 1 0   f e a t u r e   s c o r e s   i n   t hi s   r e s e a r c h.   A N O V A   i s   a a l go ri t hm   t ha t   i s   b a s e d   o n   a   f - t e s t   t ha t   ha s   a   f   di s t ri b ut i o n   u nde r   t h e   nu l l   h y po t he s i s .   T he   e x i s t e nc e   v a ri a nc e   a m o ng  nu m e r o us   po p u l a t i o n   m e a ns   c a b e   de t e rm i ne d   b y   A N O V A ,   w hi c i s   a   s t a t i s t i c a l   t e c hni q ue .   I t   i s   u s e t o   di f f e r e nt i a t e   w h e t h e i t   ha s   a   d i f f e r e n c e   i n   t w o   o r   m o r e   d a t a s e t s   t ha t   a re   s t a t i s t i c a l l y   i m po rt a nt .   T h e   m o de l   us e s   nu m e ri c a l   v a ri a b l e s   a s   t h e   i np ut ,   w hi c h   i s   e i t h e r   i nt e ge r   v a ri a b l e s   o r   f l o a t i ng - po i nt   v a ri a b l e s ,   a nd  t h e   o u t pu t   o f   t h e   m o de l   i s   c a t e go ri c a l   v a ri a b l e s ,   w h i c a r e   B o o l e a n   v a ri a b l e s .   T he   o ut pu t   o f   t h e   m o de l   i s   e i t he r   o r   0 ,   w hi c h   i s   a n   a t t a c o r   no rm a l .   S e v e ra l   a dv a nt a ge s   c a n   a c hi e v e   i n   f e a t u re   s e l e c t i o n.   I t   r e d uc e s   o v e r f i t t i ng  t o   t h e   m o de l .   I n   o t he r   w o rd s ,   t h e re   i s   l e s s e r   c ha nc e s   t ha t   w h e n   t he   m o de l   i s   m a ki ng   a   de c i s i o n   i t   i s   b a s e o n   t h e   re d u nd a nt   d a t a   o r   n o i s e .   B e s i de s ,   f e a t u r e   s e l e c t i o n   a l s o   i nc r e a s e s   t h e   a c c u ra c y   o f   t h e   m o de l   i f   i t   i s   a b l e   t o   f i nd   t h e   o p t i m u m   nu m b e o f   f e a t u r e s   t o   f i t   i nt o   t he   m o de l .   T hi s   i s   due   t o   t h e re   i s   l e s s   n o i s e   i n   t he   d a t a ,   w hi c h   ha s   t h e   po s s i b i l i t y   t ha t   i t   w i l l   m i s l e a t h e   p r e d i c t i o n.   T h e   l a s t   a dv a nt a ge   t ha t   i s   a b l e   t o   o b t a i b y   f e a t u re   s e l e c t i o n   i s   r e duc i ng   t ra i ni ng   t i m e .   F o r   e x a m p l e ,   i t hi s   re s e a r c h,   t he   m a c hi ne   l e a rni ng   a l go ri t hm   t ha t   t a ke s   t h e   l o nge s t   t i m e   i s   t he   s u p po r t   v e c t o r   m a c hi ne .   If   a l l   o f   t h e   f e a t u re s   a r e   f i t t e i nt o   t h e   m a c hi ne   l e a rni ng  m o de l ,   i t   w i l l   b e   t a k i ng  t o o   l o n t o   t ra i n   t he   m o de l .   A f t e r   f e a t u r e   s e l e c t i o n   i s   do n e ,   t he   t ra i ni ng   t i m e   f o r   s up po rt   v e c t o r   m a c hi ne   de c r e a s e s   a s   c o m p a r e t o   a l l   o f   t he   f e a t u r e s   f i t   i nt o   t h e   m o de l .   T h e   c o m b i na t i o o f   3   i s   ra ndo m l y   s e l e c t e d   f r o m   t he   t o p   10   f e a t u r e s   o f   t h e   d a t a s e t .     A   c o m pa r i s o n   b e t w e e n   N S L - K D D   a n N a B Io T   w a s   c on d uc t e d.   F i r s t ,   t h e   a c c ura c y   b e t w e e n   di f fe r e nt   c o m b i n a t i o n s   o f   f e a t ur e s   f o r   N S L - K D D   w a s   c o m p a r e d.   F i gu r e   s h o w s   t h e   a c c ur a c y   of   a   di ff e r e n t   c o m b i na t i o n s   o f   fe a t u r e s   f o r   N S L - K D D   da t a s e t .   T h e   hi g h e s t   a c c ura c y   i s   c o m b i n a t i o C   f r o m   s uppo r t   v e c t o r   m a c h i n e   c l a s s i f i e r.   T h e   a l go r i t hm   S V M   h a s   t h e   h i g h e s t   a c c ur a c y   a m o n a l l   o f   t h e   c o m b i n a t i o n s   a n d   c l a s s i f i e r ,   i t   h a s   a n   a c c ur a c y   of   0. 748.   T h e   c o m b i n a t i o n   c o n t a i n s   i m po r t a n t   f e a t u r e s ,   w h i c h   a r e   s e rr o r _ ra t e ,   s r v _e rr o r _ ra t e ,   a nd  f l a g .   S e rr o r _ ra t e   i s   t h e   pe r c e nt a ge   o f   c o nn e c t i o n s   t h a t   a c t i v a t e t h e   f l a g   s 0,   s 1 ,   s 2 ,   a nd  s a m o ng  t h e   c o nn e c t i o n   i n   t h e   c o un t .   S r v _e rr o r_ r a t e   i s   t h e   pe rc e n t a ge   o f   c o n n e c t i o n s   t h a t   a c t i v a t e t h e   f l a s 0 ,   s 1,   s 2,   a n s a m o n t h e   c o n n e c t i o n s   i n   s r v _c o un t .   T h e   f l a i s   t h e   c o n n e c t i o n   s t a t us ,   i t   i s   e i t h e r   n o rm a l   o r   e rr o r.   T h e   c o m b i na t i o n   t ha t   ha s   t h e   l o w e s t   de t e c t i o n   a c c ur a c y   i s   c o m b i n a t i o n   f r o m   n a ï v e   B a y e s .   It   ha s   o n l y   a   de t e c t i o a c c ur a c y   of   0. 574.           F i gu r e   2 .   A c c ura c y   of   di f fe r e nt   c o m b i na t i o o f   fe a t ur e s   (N S L - KDD)       F i gu r e   s h o w s   t h e   a c c ura c y   of   di f fe r e n t   c o m b i na t i o n s   o f e a t ur e s   fo r   t h e   N a B Io T   da t a s e t .   T h e   hi g h e s t   a c c ura c y   i n   N a B Io T   da t a s e t   i s   0 . 959 ,   w h i c h   i s   a   c o m b i n a t i o n   B   f r o m   t h e   s uppo rt   v e c t o r   m a c h i n e   c l a s s i f i e r .   T h e   c o m b i n a t i o n   ha s   i m po rt a nt   f e a t ur e s   t h a t   c o n t ri b ut e   t o   s u c h   hi g h   a c c u r a c y .   T h e   i n v o l v e d   f e a t ur e s   a r e   H _L 1_w e i ght ,   M I_di r_L 0. 01 _w e i gh t ,   a n H _L 0. 01_w e i ght .   H _L 1_w e i gh t   i s   t h e   w e i gh t   o f   t h e   s t r e a m   o f   s um m a r i z i n g   t h e   p a c ke t   f r o m   t h e   f o l l ow i n g   h o s t ’s   pa c ke t   (IP i n   t h e   t i m e   f ra m e   L 1.   M I_di r _L 0. 01_w e i ght   i s   t h e   w e i ght   o f   t h e   s t r e a m   o f   s um m a r i s i ng  pa c ke t   f r o m   t h e   f o l l ow i n h o s t ’s   pa c ke t   (IP + M A C)  i n   t h e   t i m e   f ra m e   L 0. 01 .   H _L 0. 01_w e i ght   i s   t h e   s t r e a m   o f   s um m a r i z i ng  p a c ke t   f r o m   t h e   f l ow i n g   h o s t ’s   pa c ke t   (IP i t h e   t i m e   f r a m e   L 0. 01 .   T h e   c o m b i n a t i o n   t h a t   g i v e s   t h e   l o w e s t   de t e c t i o n   a c c ur a c y   i s   c o m b i na t i o n   B   f r o m   t h e   s uppo rt   v e c t o r   m a c h i n e .   T h e r e f or e ,   f e a t u r e   s e l e c t i o n s   gi v e   a   c e r t a i de g r e e   o c o n t ri b ut i o n   i n   o r de r   t o   i n c r e a s e   t h e   a c c ura c y   of   t h e   m o de l .   In   a dd i t i o n,   t h e   a c c ur a c y   of   t h e   s uppo r t   v e c t o r   m a c h i n e   f r o m   N a B Io T   w a s   c o m pa r e w i t a   r e l a t e w o r w h i c i s   do n e   by   [15].   T h e   da t a s e t s   us e i t h e   r e l a t e w o r i s   f r o m   t h e   C y be r   R a n ge   L a b   of  t h e   A us t ra l i a n   Ce n t r e   f o r   C y b e r   S e c ur i t y .   T h e   de t e c t i o n   a c c ur a c y   fo r   s uppo rt   v e c t o r   b a s e de t e c t i o n   i n   t h e   r e l a t e w or i s   0 . 880  w hi l e   t h e   a c c ur a c y   f o r   s uppo r t   v e c t o r   m a c h i n e   f r o m   N a B Io T   da t a s e t   i t hi s   r e s e a r c h   i s   0 . 959 .   A   d i ff e r e n t   d a t a s e t   i s   us e t o   t r a i n   t h e   s uppo rt   v e c t o r   m a c h i n e   c l a s s i f i e r.     Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A   c om par at i v e   anal y s i s   on  t r adi t i o nal   w i r e dat as e t s   and   t h e   ne e d   f or   w i r e l e s s …  ( T e h   B o on  Se on g )   1171   In   a ddi t i o n ,   t h e   pe r f o r m a n c e   m a t r i o t h e   c o m b i n a t i o n s   a n c l a s s i f i e r   f o r   t h e   N S L - K D D   da t a s e t   w a s   m e a s ur e i n   a   f a l s e   po s i t i v e   r a t e ,   a s   s h o w n   i n   F i gu r e   a n t h e   t r ue   po s i t i v e   r a t e   s h o w n   i n   F i gu r e   5.   T h e   l o w e s t   f a l s e   p o s i t i v e   r a t e   a m o ng  a l l   o t h e   c o m b i na t i o n s   i s   c o m b i n a t i o n   f r o m   n a ï v e   B a y e s ,   w h i c h   h a s   a   s c o r e   o f   0. 00536.   T h e   hi g h e s t   t r ue   po s i t i v e   ra t e   a m o ng  a l l   o f   t h e   c o m b i n a t i o n s   i s   c o m b i na t i o n   A   f r o m   na ï v e   B a y e s ,   w h i c h a s   a   s c o r e   o f   0. 579 .   A l t h o ug b o t h   o f   t hi s   c om b i na t i o n   f r o m   n a ï v e   B a y e s   gi v e s   t h e   b e s t   r e s ul t   i n   f a l s e   po s i t i v e   ra t e   a nd  t r ue   po s i t i v e   ra t e .   B ut   i t   do e s   n o t   gi v e   t h e   b e s t   r e s ul t   i a c c u r a c y ,   w h i c h   ha s   b e e n   di s c us s e d.   I n   t e rm s   o f   ov e r a l l ,   c o m b i na t i o n   f r o m   t h e   s upp o r t   v e c t o r   m a c hi n e   ha s   t h e   m o s t   b a l a n c e s c o r e .   F o r   c o m b i n a t i o n   f r o m   na ï v e   B a y e s ,   i t   doe s   gi ve s   t h e   be s t   r e s ul t   i n   a   f a l s e - po s i t i v e   r a t e   b ut   t h e   pe r f o r m a n c e   fo r   t rue   po s i t i v e   r a t e   i s   o n l y   0. 256  a n w i t h   a n   a c c ura c y   s c o r e   of   0. 574.   F o r   c o m b i n a t i o n   A   f r o m   n a ï v e   B a y e s ,   i t   do e s   gi v e   t h e   b e s t   r e s ul t   i t h e   t r ue   po s i t i v e   ra t e ,   b ut   t h e   pe r f o r m a n c e   f o r   f a l s e   po s i t i v e   i s   o n l y   0. 0601.   W i t t h e   c o m pa ri s o n   i n   t e rm s   o f   ov e r a l l   i n   a c c u r a c y ,   f a l s e - p o s i t i v e   r a t e ,   a n t rue   po s i t i v e   r a t e .   T h e   b e s t   c o m b i na t i o n s   t ha t   pe r f o r m   t h e   b e s t   i s   c o m b i na t i o n   C   f r o m   s uppo r t   v e c t o r   m a c hi n e ,   w h i c h   ha s   a   s c o r e   of   a   f a l s e   po s i t i v e   r a t e   o f   0. 00834 ,   a   t r ue   po s i t i v e   ra t e   o f   0. 563 ,   a n d   a a c c ura c y   of   0. 748 .     T h e   pe r f o r m a n c e   m a t ri f o r   c o m b i n a t i o n   a nd  c l a s s i f i e r   f o r   t h e   N a B Io T   da t a s e t   w a s   m e a s ur e i n   a   fa l s e   po s i t i v e   r a t e   s h o w n   i n   F i gu r e   6,   a n t h e   t r ue   po s i t i v e   ra t e   s h o w s   i n   F i gu r e   7.   T h e   l o w e s t   f a l s e   pos i t i v e   ra t e   a m o n a l l   o f   t h e   c o m b i n a t i o n s   o f   fe a t u r e s   i s   c o m b i n a t i o n   f r o m   na ï v e   B a y e s   c l a s s i f i e r ,   w h i c h   h a s   a   r a t e   of   0. 059 .   T h e   h i g h e s t   f a l s e - po s i t i v e   r a t e   po s i t i v e   ra t e   a m o ng  a l l   o f   t h e   c o m b i n a t i o n s   i s   c o m b i na t i o n   E   f r o m   t h e   s uppo r t   v e c t o r   m a c h i n e ,   w hi c h   h a s   a   s c o r e   o f   0. 295.   T h e   c l a s s i f i e r   t ha t   pe r f o r m s   t h e   b e s t   a m o n a l l   o f   t h e   c o m b i na t i o n s   i s   a   s uppo r t   v e c t o r   m a c hi n e   c l a s s i f i e r ,   w hi c h   h a s   a   s c o r e   of   0. 965.   A m o n a l l   o f   t h e   c o m b i na t i o n s ,   c o m b i n a t i o B   f r o m   t h e   de c i s i o t r e e   g i v e s   t he   l o w e s t   t rue   po s i t i v e   r a t e ,   w hi c i s   0. 891 .           F i gu r e   3 .   A c c ura c y   of   di f fe r e nt   c o m b i na t i o o f   fe a t ur e s   (N a B Io T )           F i gu r e   4 .   F a l s e   po s i t i v e   r a t e   f o r   di f f e r e n t   c o m b i n a t i o n   o f   f e a t ur e s   (N S L - KDD)           F i gu r e   5 .   T r ue   po s i t i v e   r a t e   f o r   d i f fe r e nt   c o m b i na t i o n   o f   f e a t ur e s   (N S L - KDD)   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   22 ,   N o .   2 M a y   202 1   :     1165   -   1 176   1172       F i gu r e   6 .   F a l s e   po s i t i v e   r a t e   f o r   di f f e r e n t   c o m b i n a t i o n   o f   f e a t ur e s   (N a B Io T )             F i gu r e   7 .   T r ue   po s i t i v e   r a t e   f o r   d i f fe r e nt   c o m b i na t i o n   o f   f e a t ur e s   (N a B Io T )       T h e   f 1   s c o r e   i s   c o m p a r e d   i b o t o f   t h e   d a t a s e t s ,   a s   s h o w i F i g u r e   8 .             F i gu r e   8 .   Co m p a r i s o o f   F s c o r e       I n   N S L - K D D   d a t a s e t s ,   t h e   c o m b i na t i o a nd  c l a s s i f i e a l go ri t hm   t ha t   g i v e s   t h e   hi g he s t   f s c o r e   i s   c o m b i na t i o C   f r o m   t he   s u ppo rt   v e c t o r   m a c hi ne ,   w hi c ha s   a   s c o r e   o f   0 . 7 18 .   T he   c o m b i na t i o ns   o f   f e a t u re s   t ha t   Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A   c om par at i v e   anal y s i s   on  t r adi t i o nal   w i r e dat as e t s   and   t h e   ne e d   f or   w i r e l e s s …  ( T e h   B o on  Se on g )   1173   c o nt ri b ut e   a r e   s e rro r_ ra t e ,   w hi c h   i s   t h e   pe r c e nt a g e   o f   c o nn e c t i o n s   t ha t   ha v e   a c t i v a t e t h e   f l a s 0 , s 1 , s 2 ,   o r   s 3   a m o ng  t he   c o nne c t i o ns   a gg re g a t e d   i t h e   c o u nt .   T h e   s e c o n d   f e a t u re   i t he   c o m b i na t i o i s   s rv _s e rro r_ ra t e ,   w hi c i s   t he   pe r c e nt a ge   o f   c o nn e c t i o n s   t ha t   ha v e   a c t i v a t e t h e   f l a s 0 , s 1 , s 2 ,   o r   s a m o ng   t he   c o nne c t i o ns   a gg re g a t e i s r v _c o u nt .   T h e   l a s t   f e a t u re   i t h e   c o m b i na t i o i s   a   f l a w hi c i s   t he   s t a t us   o f   t he   c o nne c t i o n.   I t   i s   e i t he n o rm a l   o r   e rro r.   T h e   l o w e s t   a m o ng  a l l   o f   t h e   c o m b i na t i o i s   c o m b i n a t i o n   f r o m   na ï v e   B a y e s .   I t   o nl y   ha s   a   s c o r e   o 0 . 4 06 .   I t he   N a B Io T   d a t a s e t ,   t h e   hi g h e s t   f s c o r e   a m o ng  a l l   o f   t h e   c o m b i na t i o n s   i s   c o m b i na t i o n   B   f r o m   t h e   s up po rt   v e c t o r   m a c hi ne ,   w hi c h   i s   0 . 9 77 .   T he   f i r s t   f e a t u r e   t ha t   c o nt ri b u t e s   i s   H _L 1 _w e i g ht ,   w hi c h   i s   t he   w e i g ht   o f   t h e   s t r e a m   o f   t h e   s u m m a ri z e   p a c ke r   f r o m   t he   f o l l o w i ng  h o s t ’s   p a c ke t   (IP i n   t h e   t i m e   f ra m e   L 1 .   T he   s e c o n d   f e a t u r e   i s   M I _ d i r_L 0 . 01 _w e i g ht ,   w h i c i s   t he   w e i g ht   o f   t h e   s t r e a m   o f   t h e   s u m m a ri z e   p a c ke t   f r o m   t h e   f o l l o w i ng  h o s t ’s   p a c ke t   ( IP + M A C i n   t h e   t i m e   f ra m e   L 0 . 0 1 .   T h e   l a s t   f e a t u r e   i n   t he   c o m b i na t i o n   i s   H _L 0 . 0 1_w e i g ht ,   w hi c i s   t he   w e i g ht   o f   t h e   s t re a m   o f   t he   s u m m a ri z e   p a c ke t   f r o m   t h e   f o l l o w i ng  h o s t ’s   p a c ke t   ( IP )   i t he   t i m e   f ra m e   L 0 . 0 1 .         6.   DISCUSSIO N   A f t e r   t h e   F s c o r e   o f   t h e   c o m p a re d ,   t he   c h o s e n   c o m b i na t i o n   a nd  c l a s s i f i e a l go ri t hm   f r o m   b o t d a t a s e t s   i s   a   s u ppo rt   v e c t o r   m a c hi ne ,   a s   s h o w n   i n   F i g u r e   9 .   T he   f a l s e - po s i t i v e   ra t e   i s u p po rt   v e c t o r   m a c hi ne   f r o m   t he   NSL - K D D   d a t a s e t   i s   0 . 0 08 34 ,   w hi c h   i s   l o w e r   t ha t h e   s up po rt   v e c t o r   m a c hi ne   f r o m   N a B Io T ,   w h i c i s   0 . 09 2 3 .   T h e   t rue   po s i t i v e   ra t e   f o r   s up po rt   v e c t o r   m a c hi ne   N a B Io T   ha s   a   s c o r e   o f   0. 9 59 ,   w hi c h   i s   s i g ni f i c a nt l y   hi g he t ha n   N S L - K D D .   T he   a c c u ra c y   s c o r e   f o r   t h e   s u p po rt   v e c t o r   m a c hi ne   f r o m   N a B Io T   i s   hi g h e r   t ha t he   s u ppo rt   v e c t o r   m a c hi ne   f r o m   N S L - K D D .   T h e   a c c u ra c y   s c o r e   o f   t h e   s u ppo rt   v e c t o r   m a c hi ne   f r o m   N a B Io T   i s   0 . 9 59 .   T he   t hi rd   pe r f o rm a nc e   m a t ri t o   c o m p a re   w i t r e c a l l s   s c o r e .   T he   r e c a l l   s c o r e   f o r   t h e   s u p po rt   v e c t o m a c hi ne   f r o m   N a B Io T   i s   s i g ni f i c a nt l y   hi g he r   t ha n   N S L - K D D .   I t   ha s   a   s c o r e   o f   0. 96 5 .   T he   p re c i s i o n   s c o r e   f o r   N a B Io T   i s   hi g he r   t ha N S L - K D D .   T he   hi g h e s t   p re c i s i o s c o r e   i s   0 . 9 90 ,   w hi c h   i s   hi g he t ha 0 . 98 9 .   T he   F s c o r e   i s   t h e   f i na l   pe r f o rm a n c e   m a t ri t ha t   m e a s u re d   i n   t hi s   re s e a r c h.   T h e   f s c o r e   f o r   N a B Io T   i s   hi g he t ha N S L - K D D ,   w hi c h   i s   0 . 9 77 .   A m o ng  a l l   o f   t hi s   c o m p a ri s o n,   t he   s u ppo rt   v e c t o r   m a c hi ne   f r o m   N a B Io T   ha s   a   pe r f o rm a n c e   m a t ri t ha t   i s   hi g h e t ha N S L - K D D .   I a d d i t i o n,   t he s e   d a t a s e t s   a r e   us e i a   d i f f e r e nt   pe rs pe c t i v e   f o r   s e v e ra l   o t h e r   r e s e a r c he s ,   f e w   o f   t h e m   a re   s uc a s   [1 6 ] - [ 2 1] .   M o s t   o f   t he   r e s e a r c he s   us e   f o r   t he   I nt e rne t   o f   T hi ngs   o i t s   c l o s e l y   r e l a t e a pp l i c a t i o n   o f   w i r e l e s s .   F u rt he rm o re ,   t h e   w i re l e s s   s e ns o r   ne t w o r a nd  Io T   d a t a s e t s   w e r e   b e i ng  us e b y   t h e   [ 22 ] - [ 2 4 ] .   T he   f e w   o t h e   o l de r   d a t a s e t s   w e r e   us e b y   t h e   w i r e l e s s   s e ns o r   n e t w o rks   [ 25 ] .   T he   r e s e a r c he i re v i e w   [ 26 ]   e l a b o ra t e   m o r e   Io T   re l a t e d   I D S   da t a s e t s   i s s ue s   a nd   c ha l l e nge s .             F i gu r e   9 .   Co m p a r i s o b e t w e e n   N S L - K D D   a n d   N a B Io T       7.   C O N C LU S I O N   T h e   m a i n   f o c us   of   t h i s   r e s e a r c h   i s   t o   i de n t i fy   t h e   b e s t   da t a s e t s   fo r   w i r e l e s s   Io T   ID S .   A   c o m pa r i s o w a s   m a de   b e t w e e n   N S L - K D D   a n N a B Io T   da t a s e t   w i t v a ri o us   m a c h i n e   l e a rni n a l go r i t h m s .   B e s i de s   t h a t ,   w i t h   t h e   s i m u l a t e a nn e a l i ng  a pp r o a c h   w i t h   di f f e r e n t   c o m b i na t i o n s   of   f e a t ur e s ,   t h e   m o s t   pr o m i n e n t   f e a t u r e s   n e c e s s a r y   fo r   ID S   a r e   i de n t i f i e d.   T h e   da t a s e t   t ha t   pe r f o r m s   t h e   b e s t   i n   de t e c t i n n o rm a l   t ra f f i c   a n a t t a c t r a f f i c   i s   N a B Io T .   T h e   h i g h e s t   f s c o r e   a m o n a l l   o f   t h e   c om b i na t i o n s   a n c l a s s i f i e r s   i s   c o m b i na t i o n   B   f r o m   t h e   s uppo r t   v e c t o r   m a c h i n e   c l a s s i f i e r.   It   h a s   a   f s c o r e   of  0. 977,   a n   a c c ur a c y   of   0. 959,   f a l s e   p o s i t i v e   r a t e   of  0. 0923 ,   a nd  a   t rue   po s i t i v e   r a t e   o f   0. 965.   T h e   f e a t u r e   t ha t   i s   i n v o l v e i n   t h e   t ra i ni n o f   t h e   m o de l   i s   H _L 1_ w e i ght ,   M I_d i r _L 0. 01_w e i ght ,   a nd  H _L 0. 01_w e i gh t .   I n   t h e   f u t ur e ,   r e s e a r c h e r s   i n   a   s i m i l a r   do m a i c a c o n s i de r   us i ng  N a B Io T   da t a s e t s   f o r   ID S   de s i g i w i re l e s s   n e t w o r ks   a n d   f oc us   o n   t h e   pu r po s e b e s t   f e a t ur e s   t o   r e duc e   t h e   de t e c t i o n   t i m e   w h i l s t   i m p r o v i n t h e   de t e c t i o n   a c c ura c y .     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   22 ,   N o .   2 M a y   202 1   :     1165   -   1 176   1174   R EF ER EN C ES   [ 1]   E.   R a t t a g a n,   W i - F i   u s a g e   m o ni t o r i ng   a nd  po w e r   m a n a g e m e nt   po l i c y   f o r   s m a r t pho ne   b a c kg r o und  a ppl i c a t i o ns , "   I 2016  M ana ge m e nt   and  I nn ov a t i on  T e c hno l og y   I n t e r na t i o nal   C o nf e r e nc e   ( M I T i c on) ,   I E E E ,   pp.   M I T - 171 ,   do i :   10. 1 109 / M I T I C O N . 2016 . 802 5223 .     [ 2]   M.   E .   A m i na nt o ,   R .   C ho i ,   H .   C .   T a nuw i dj a j a ,   P .   D .   Y o o ,   a nd  K ,   K i m ,   D e e a b s t r a c t i o a nd  w e i g ht e f e a t u r e   s e l e c t i o f o r   W i - F i   i m pe r s o na t i o de t e c t i o n ,   201 I E E E   T r a ns a c t i ons   on  I n f o r m at i on  F or e ns i c s   an Se c ur i t y v o l .   13,   no .   3 ,   p p.   62 1 - 636 ,   do i :   10. 110 9/ T I F S . 201 7. 2762 828 .     [ 3]   M .   R o us e ,   S .   S he a ,   a nd   M /   H a ug hn,   M ,   I o T   de v i c e s   ( i n t e r ne t   o f   t h i ng s   de v i c e s ) ,   2 018 ,   D o s e g l j i v o:   ht t ps : / / i nt e r n e t o f t h i ng s a g e nda .   t e c h t a r g e t .   c o m / de f i n i t i o n/ I o T - de v i c e .     [ 4]   C a l y pt i x T o N e t w o r A t t a c ks   by   t y pe   i 2 017 ,   pp.   1 ,   201 7,   [ O n l i n e ] .   A v a i l a b l e   f r o m   : < ht t p s : / / w w w . c a l y pt i x . c o m / t o p - t hr e a t s / t o p - 8 - ne t w o r k - a t t a c ks - t y pe - 2017 / >   [ A c c e s s e d   o 12   N o v .   201 8] .   [ 5]   Y.   M e i da n ,   M .   B o ha da n a ,   Y .   M a t ho v ,   Y .   M i r s ky ,   A .   S ha bt a i ,   D .   B r e i t e nb a c he r ,   a nd   Y .   E l o v i c i ,   N - ba i o t - ne t w o r k - ba s e de t e c t i o o f   i o t   bo t ne t   a t t a c ks   u s i ng   de e a ut o e nc o de r s ,   201 I E E E   P e r v as i v e   C om pu t i ng v o l .   17  , no .   3 pp .   12 - 22 ,   do i :   10. 1 109 / M P R V . 2 018 . 03 3677 31 .     [ 6]   S.   C ha w l a ,   D e e p   l e a r n i ng   ba s e d   i nt r u s i o de t e c t i o n   s y s t e m   f o r   I nt e r ne t   o f   T h i ng s ,   2 017   ( D oc t or a l   di s s e r t at i o n) .     [ 7]   M.   S.   H o que ,   M .   M uk i t ,   M .   B i ka s a nd ,   a nd  A .   N a s e r ,   A i m p l e m e nt a t i o o f   i nt r us i o de t e c t i o s y s t e m   us i ng   g e ne t i c   a l g o r i t hm ,   2 012 ,   a r X i v   pr e p r i n t   a r X i v : 1204. 133 6.     [ 8]   J .   J ha ,   a nd  L   R a g ha ,   I nt r u s i o de t e c t i o s y s t e m   us i ng   s uppo r t   v e c t o r   m a c hi ne ,   I n t e r na t i o na l   J ou r na l   of   A ppl i e d   I nf or m a t i on  Sy s t e m s   ( I J A I S) v o l .   3 ,   pp.   25 - 30 ,   20 13 ,   do i :   10 . 110 9/ S A C I . 2014. 68 4005 2 .     [ 9]   B.   M . ,   A s l a h i - S ha h r i ,   R .   R a hm a n i ,   M .   C hi z a r i ,   A .   M a r a l a ni ,   M .   E s l a m i ,   M .   J .   G o l ka r ,   a n A .   E br a hi m i ,   A ,   A   hy br i m e t ho c o ns i s t i ng   o f   G A   a nd  S V M   f o r   i nt r u s i o de t e c t i o s y s t e m ,   2016   N e ur al   c om p ut i ng  and   appl i c at i on s v o l .   2 7,   no .   6 ,   p p.   16 69 - 167 6 ,   do i :   10. 1 007 / s 0 0521 - 015 - 1964 - 2 .     [ 10]   Z .   M .   F a dl u l l a h ,   H .   N i s h i y a m a ,   N .   K a t o   a nd  M .   M .   F o uda ,   " I nt r us i o de t e c t i o s y s t e m   ( I D S )   f o r   c o m ba t i ng   a t t a c ks   a g a i ns t   c og ni t i v e   r a di o   ne t w o r k s , "   i I E E E   N e t w or k ,   v o l .   2 7,   no .   3,   pp .   51 - 56 ,   M a y - J une   2013 ,   do i :   10. 1 109 / M N E T . 2 013 . 65 2380 9.     [ 11]   L .   D h a na ba l ,   a nd  S .   P .   S ha n t ha r a j a h ,   A   S t udy   o N S L - K D D   D a t a s e t   f o r   I nt r us i o D e t e c t i o S y s t e m   B a s e o C l a s s i f i c a t i o A l g o r i t hm s ,   I n t e r na t i o na l   J our na l   of   A dv anc e d   R e s e ar c i C om pu t e r   and  C om m un i c a t i on   E ngi ne e r i n g ,   v ol .   4,   no .   6,   2 015 .     [ 12]   Y .   M e i da n ,   M .   B o ha da n a ,   Y .   M a t ho v ,   Y .   M i r s ky ,   A .   S ha bt a i ,   D .   B r e i t e nb a c he r ,   a nd   Y .   E l o v i c i ,   N - ba i o t - ne t w o r k - ba s e de t e c t i o o f   i o t   b o t ne t   a t t a c ks   us i ng   de e a u t o e nc o de r s ,   I E E E   P e r v as i v e   C om put i ng v o l .   17,   no .   3 ,   pp .   12 - 22,   20 18 ,   do i :   10. 1109 / M P R V . 2018 . 0 3367 731 .     [ 13]   M .   P e ñ a   e t   a l . ,   " A N O V A   a nd  C l u s t e r   D i s t a nc e   B a s e C o nt r i bu t i o ns   f o r   F e a t u r e   E m pi r i c a l   A na l y s i s   t o   F a u l t   D i a g no s i s   i n   R o t a t i ng   M a c hi n e r y , "   2017   I nt e r na t i ona l   C onf e r e n c e   on  Se ns i ng ,   D i a gnos t i c s ,   P r og nos t i c s ,   and   C ont r ol   ( SD P C ) ,   S ha ng ha i ,   p p.   69 - 74 ,   20 17 ,   do i :   10. 1109 / S D P C . 20 17. 2 3 .     [ 14]   Z .   A .   B a ka r ,   D .   I .   I s pa w i ,   N .   F .   I br a h i m ,   a nd  N .   M .   T a h i r ,   C l a s s i f i c a t i o o f   P a r ki n s o n’ s   d i s e a s e   ba s e o n   M ul t i l a y e r   P e r c e pt r o ns   ( M L P s )   N e u r a l   N e t w o r a n A N O V A   a s   a   f e a t ur e   e x t r a c t i o n,   20 12  I E E E   8 t I n t e r nat i o nal   C ol l oqu i um   on  Si gna l   P r oc e s s i n and  i t s   A pp l i c at i ons ,   M e l a k a ,   pp .   63 - 67 ,   2012 do i :   10. 1 109 / C S P A . 201 2. 6 1946 92 .     [ 15]   M.   N . ,   C ho w dhur y ,   K .   F e r e ns ,   a nd  M . ,   F e r e n s ,   N e t w o r i nt r us i o de t e c t i o us i ng   m a c hi ne   l e a r n i ng ,   I P r oc e e di ngs   o f   t he   I n t e r na t i ona l   C on f e r e nc e   on  Se c u r i t y   and   M ana ge m e nt   ( SA M ) T h e   S t e e r i ng   C o m m i t t e e   o f   T he   W o r l C o ng r e s s   i C o m pu t e r   S c i e nc e ,   C o m put e r   E ng i ne e r i ng   a n A ppl i e d   C o m put i ng   ( W o r l dC o m p) ,   ,   p .   30,   2 016 .     [ 16]   Z a hr a A .   A l m us a y l i m ,   A bdul a z i z   A l hum a m ,   N .   Z .   J h a nj hi ,   | P r o po s i ng   a   S e c u r e   R P L   ba s e d   I nt e r n e t   o f   T hi ng s   R o ut i ng   P r o t o c o l :   A   R e v i e w ,   A H o c   N e t w o r ks ,   V o l um e   101 ,   20 20,   102 096 ,   I S S N   1570 - 8705 ,   do i 10. 1 016 / j . a dho c . 2020 . 102 096   [ 17]   D i r o ,   H .   R e da ,   N .   C h i l a m ku r t i ,   A .   M a hm o o d,   N .   Z a m a n ,   a nd   Y .   N a m ,   " L i g ht w e i g h t   A ut he n t i c a t e d - E nc r y pt i o n   S c he m e   f o r   I nt e r ne t   o f   T hi ng s   B a s e o P ubl i s h - S ub s c r i b e   C o m m uni c a t i o n, "   i I E E E   A c c e s s ,   v o l .   8,   pp .   605 39 - 60551 ,   202 0,   do i :   10. 1 109 / A C C E S S . 202 0. 2983 117   [ 18]   A l m us a y l i m ,   Z . ,   J ha nj h i ,   N ,   C o m pr e he n s i v e   R e v i e w :   P r i v a c y   P r o t e c t i o o f   U s e r   i L oc a t i o n - A w a r e   S e r v i c e s   o f   M o bi l e   C l o ud  C o m put i ng ,   W i r e l e s s   P e r s   C om m un .,   v o l .   111 ,   p p.   541 - 564 ,   202 0,   do i 10. 10 07 / s 11 277 - 01 9 - 06872 - 3   [ 19]   F a t i m a - t uz - Z a hr a ,   N .   J ha n j h i ,   S .   N .   B r o hi   a nd  N .   A .   M a l i k,   " P r o po s i ng   a   R a nk  a nd  W o r m ho l e   A t t a c D e t e c t i o n   F r a m e w o r u s i ng   M a c h i ne   L e a r ni ng , "   2019  13 t I nt e r na t i ona l   C onf e r e nc e   on  M a t he m at i c s ,   A c t u ar i al   S c i e nc e ,   C om put e r   S c i e nc e   and  S t a t i s t i c s   ( M A C S) ,   K a r a c hi ,   P a k i s t a n ,   201 9,   pp.   1 - 9,   do i :   10. 1 109 / M A C S 4884 6. 2019 . 90 2482 1.     [ 20]   A l m us a y l i m ,   Z .   A . ,   Z a m a n ,   N ,   A   r e v i e w   o s m a r t   ho m e   p r e s e n t   s t a t e   a n c ha l l e ng e s :   l i nk e t o   c o nt e xt - a w a r e n e s s   i nt e r ne t   o f   t h i ng s   ( I o T ) ,   W i r e l e s s   N e t w ,   v o l .   25 ,   pp .   319 3 - 3204 ,   20 19,   do i 10. 1 007 / s 1 1276 - 01 8 - 1712 - 5   [ 21]   K .   H us s a i n ,   S .   J .   H us s a i n,   N .   J ha nj h i ,   a nd  M .   H um a y un,   " S Y N   F l o o A t t a c D e t e c t i o b a s e o B a y e s   E s t i m a t o r   ( S F A D B E )   F o r   M A N E T , "   2019  I n t e r nat i o nal   C onf e r e nc e   on  C om p ut e r   and  I n f or m at i on  Sc i e nc e s   ( I C C I S) ,   S a ka k a ,   S a ud i   A r a b i a ,   p p .   1 - 4 ,   201 9 ,   do i :   10. 1 109 / I C C I S c i . 201 9. 8 7164 16 .     [ 22]   S .   M .   M uz a m m a l ,   R .   K .   M u r ug e s a a nd   N .   Z .   J ha n j h i ,   " A   C o m pr e he ns i v e   R e v i e w   o S e c ur e   R o ut i ng   i I nt e r ne t   o f   T hi ng s :   M i t i g a t i o M e t ho ds   a n T r us t - B a s e A ppr o a c he s , "   i n   I E E E   I n t e r ne t   o f   T hi n gs   J ou r na l ,   v o l .   8 ,   no .   6,   pp .   4186 - 421 0,   15   M a r c h1 5,   20 21,   do i :   10 . 110 9/ J I O T . 2020. 3031 162 .     [ 23]   N .   Z a m a n ,   T .   J .   L o w ,   a nd  T .   A l g ha m di ,   " E nh a nc i ng   r o ut i ng   e ne r gy   e f f i c i e nc y   of   W i r e l e s s   S e ns o r   N e t w o r ks , "   2015   17t I n t e r nat i o nal   C o nf e r e nc e   on  A dv anc e C om m un i c at i on  T e c h nol o gy   ( I C A C T ) ,   P y e o ng C ha ng ,   K o r e a   ( S o ut h) ,   pp.   58 7 - 595 ,   2 015 ,   do i :   10. 110 9/ I C A C T . 2015. 7 2249 28 .     Evaluation Warning : The document was created with Spire.PDF for Python.