I n d on e s i an   Jo u r n al   o El e c t r i c al   En gi n e e r i n g   an d   C o m p u te r   S c i e n c e   V o l .   19 ,   N o .   1 J ul y   20 20 ,   pp .   1 96 ~ 2 06   IS S N :   2502 - 4752 ,   D O I :   10. 1 1591 / i j e e c s . v 1 9 .i 1 . pp 196 - 2 06             196       Jou r n al   h o m e pa ge ht t p: / / i j e e c s . i a e s c or e . c om   Fuzz y - b a s e d   v o i c e d - u n v o i c e d   se g m e n t a t i o n   f o r   e m o t i o n   r e c o g n i t i o n   u s i n g   sp e c t r a l   f e a t u r e   f u si o n s       Y u s n i ta  M o h d   A l i 1 A l h an   F ar h an ah   A b d   R ah i m 2 ,   Em i l i a   N o o r s al 1 3 ,   Zu h ai l M at   Y as s i n 4 ,   N o r   F ad z i l ah   M o k h ta r 5 ,   M o h am ad   H e l m R am l an 6   1 , 2 , 3 , 4 , 5 F a c ul t y   of   E l e c t r i c a l   E ng i ne e r i ng ,   U n i v e r s i t i   T e k no l o g i   M A R A ,   M a l a y s i a   6 A S E   E l e c t r o ni c s   ( M )   S dn .   B hd .   P ha s e   4 ,   M a l a y s i a       A r ti c l e   I n fo     A B S TR A C T   Ar t i c l e   h i s t or y :   R e c e i v e O kt   24 ,   2 019   R e v i s e D e c   10 ,   20 19   A c c e pt e F e b   2,   2020       D e s p i t e   a bund a n t   g r o w t h   i a ut o m a t i c   e m o t i o r e c og ni t i o n   s y s t e m   ( E R S )   s t ud i e s   u s i ng   v a r i o us   t e c hn i qu e s   i n   f e a t ur e   e x t r a c t i o ns   a n c l a s s i f i e r s ,   s c a r c e   s o ur c e s   f o und  t o   i m pr o v e   t he   s y s t e m   v i a   pr e - p r o c e s s i ng   t e c hni que s .   T hi s   pa pe r   pr o po s e a   s m a r t   pr e - pr o c e s s i ng   s t a g e   u s i ng   f uz z y   l o g i c   i nf e r e n c e   s y s t e m   ( F I S )   ba s e d   o M a m da ni   e ng i ne   a n s i m p l e   t i m e - ba s e d   f e a t ur e s   i . e .     z e r o - c r o s s i ng   r a t e   ( Z C R )   a nd  s ho r t - t i m e   e ne r gy   ( S T E )   t o   i ni t i a l l y   i de n t i f y   a   f r a m e   a s   v o i c e ( V )   o r   unv o i c e ( U V ) .   M e l - f r e que nc y   c e ps t r a l   c o e f f i c i e nt s   ( M F C C )   a nd   l i ne a r   p r e d i c t i o c o e f f i c i e n t s   ( L P C )   w e r e   t e s t e w i t K - ne a r e s t   ne i g hbo ur s   ( K N N )   c l a s s i f i e r s   t o   e v a l ua t e   t he   p r o po s e F I S   V - UV  s e g m e nt a t i o n.   W e   a l s o   i nt r o duc e t w o   f e a t ur e   f us i o ns   o f   M F C C   a nd   L P C   w i t h   f o r m a nt s   t o   o bt a i n   be t t e r   p e r f o r m a nc e .   E x pe r i m e nt a l   r e s u l t s   o f   t he   pr o po s e d   s y s t e m   s ur pa s s e t he   c o nv e nt i o na l   E R S   w h i c y i e l de d   a   r i s e   i a c c ur a c y   r a t e   f r o m   3. 7%   t o   9 . 0 % .   T he   f us i o o f   L P C   a nd  f o r m a nt s   n a m e d   a s   S F F   L P C - f m nt   i nd i c a t e a   pr o m i s i ng   r e s ul t   be t w e e n   1 . 3 %   a n 5. 1 %   h i g he r   a c c ur a c y   r a t e   t h a n   i t s   ba s e l i ne   f e a t u r e s   i n   c l a s s i f y i ng   b e t w e e n   ne u t r a l ,   a ng r y ,   ha pp y   a nd  s a d   e m o t i o ns .   T h e   be s t   a c c ur a c y   r a t e s   y i e l de d   f o r   m a l e   a n f e m a l e   s pe a ke r s   w e r e   79. 1 %   a n 79. 9%   r e s pe c t i v e l y   us i ng   S F F   M F C C - f m nt   f us i o t e c hni que .     Ke y w or d s :   E m o t i o n   r e c o gn i t i o n   F uz z y   l o gi c     L i n e a p r e di c t i o c o e ff i c i e n t s   M e l - f r e que n c y   c e ps t r a l   c oe ff i c i e n t s   S h o rt - t i m e   e n e r gy   Z e r o - c r o s s i n ra t e   C opy r i gh t   ©   20 20   I n s t i t ut e   o f   A dv anc e E ng i ne e r i ng   and   S c i e nc e .     A l l   r i gh t s   r e s e r v e d .   Cor r e s pon di n g   Au t h or :   Y us n i t a   M o h d   A l i ,     F a c ul t y   of   E l e c t r i c a l   E n g i n e e ri n g,   U n i v e r s i t i   T e kn o l o gi   M A R A ,   Ca w a n ga P u l a u   P i na n g   13500  P e r m a t a n g   P a u h,   P ul a P i n a ng,   M a l a y s i a .   E m a i l :   y us n i t a 0 82@ u i t m . e du. m y       1.   I N TR O D U C TI O N   E m o t i o n s   a r e   c o m pl e m a ni f e s t a t i o n s   o f   ps y c h o l o gi c a l   a nd  p h y s i o l o gi c a l   p h e n o m e n a   o f   h u m a b e i n gs   t ha t   i n v o l v e   ps y c h o l o gi c a l   a r o us a l ,   e xp r e s s i v e   b e h a v i o ur s   a n d   c o n s c i o us   e xpe r i e n c e   [1] .   It   c a n   b e   c o n v e y e t hr o ug h   hum a a c t i o n s ,   f a c i a l   e xp r e s s i o n s   a n d   v o i c e s .   T h e   e xp r e s s i o o f   e m o t i o n   v i a   s pe e c h   s i g na l   c a b e   r e ga r de d   a s   t h e   m o s t   na t u r a l ,   f a s t   a n e f f i c i e n t   c o m m uni c a t i o n   m e a n s   t o   t e l l   t h e   o t h e r   p a r t y   of   w h a t   i s   i n s i de   o f   o n e ’s   h e a rt .   T h e r e   h a s   b e e n   a   l a rge   b o d y   of   r e s e a r c h   i n   e m o t i o n   r e c o gn i t i o n   us i n p h y s i o l o gi c a l   s i gna l s   [2,   3] ,   f a c i a l   i m a ge s   a n d   v i de o s   [4,   5]   i n c l u di n g   hum a s pe e c h   [6 - 9]   t o   c o rr e l a t e   w i t e m o t i o n s   f o v a ri o us   a ppl i c a t i o n s   s uc a s   i s e c ur i t y   s y s t e m ,   c l a s s r o o m   pe da go gy ,   c us t o m e s e r v i c e   c a l l   c e n t r e s   a n d   j o b   m a t c h i ng  m a r ke t pl a c e   t hr o ug p h o n e   i nt e r v i e w s .   E m o t i o n a l   s t a t e s   c a b e   de s c r i b e us i n t hr e e -   o r   s i m p l y   t w o - di m e n s i o n a l   m o de l   n a m e l y   v a l e n c e ,   a r o us a l   a n d   c o nt r o l .   H ow e v e r   t h e   t hi r d   d i m e n s i o i s   ra r e l y   us e s i n c e   i t   o c c upi e s   o n l y   a   n a rr o w   r a n ge   i   t h e   m o de l .   V a l e n c e   r e l a t e s   t o   a   c o n t i n uu m   r a nge   o f   po s i t i v e   e m o t i o ( pl e a s a nt )   t o   n e ga t i v e   e m o t i o (unpl e a s a nt ) ,   w h i l e   a r o us a l   o a c t i v a t i o i s   c ha r a c t e r i z e b y   t h e   i nt e n s i t y   of   e m o t i o n a l   s t a t e   f r o m   e n e rgi z e d,   e xc i t e a nd  a l e rt   t o   c a l m ,   d r o w s y   a n pe a c e f ul   [10] .   H ow e ve r ,   E l   A y a di ,   K a m e l   a nd  K a rra y   [11]   i n   t h e i r   s u r v e y   Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       F uz z y - bas e v oi c e d - un v oi c e d   s e gm e nt at i on  f o r…  ( Y us ni t a   M ohd  A l i )   197   di d   n o t   f i n d   a a g r e e m e nt   a m o n g   r e s e a r c h e r s   t o   c o rr e l a t e   a c o us t i c   s pe e c h   f e a t u r e s   t o   t h e s e   di m e n s i o n s .     E v e n   s o ,   t h e r e   i s   c e rt a i c o r r e l a t i o n s   b e t w e e n   t h e   p h y s i o l o gi c a l   p r o c e s s   i n   t h e   s y m pa t h e t i c   a nd    pa r a s y m pa t h e t i c   a u t o n o m i c   n e r v o us   s y s t e m s   o f   e m o t i o n   p r o duc t i o m e c h a ni s m   t o   s pe e c p r o duc t i o s y s t e m   w h i c a f f e c t   pi t c h,   t i m i ng,   v o i c e   qua l i t y   a n a r t i c ul a t i o n   o f   s pe e c h   s i g n a l .   I pa t t e rn  r e c o gn i t i o n ,   c a t e go r i c a l   a pp r o a c o f   e m o t i o n a l   s t a t e s   a r e   m o r e   us e f ul   t o   di s c r i m i na t e   b e t w e e n   e m o t i o na l   c l a s s e s .   A   l a r ge   num b e o e m o t i o n a l   c a t e go r i e s   w e r e   pr o po s e by   W h i s s e l ,   P l ut c hi a n Co w i e   i n   t h e   20 t h   a nd  21s t   c e n t u ri e s .   N e ve r t h e l e s s ,   t h e   c u rr e n t   e m o t i o n   r e c o gn i t i o s y s t e m   (E R S c a o n l y   de t e c t   be t w e e n   t w o   t o   e i gh t   c l a s s e s   of  e m o t i o n a l   s t a t e s   w i t r e a s o n a b l y   goo r e s ul t s .   S pe e c h   i s   c o m pl e s i g n a l   a n d   n o n - s t a t i o na r y   i na t u r e .   A s   s uc h ,   s pe e c h   i s   p r e - p r o c e s s e i n     f r a m e - w i s e   of   20  m s   t o   50   m s   l e ngt t o   e n s u r e   s t a t i o na r y   p r o pe rt y   [12]   a n t h e   c h o i c e   o f   s ui t a b l e   f r a m e   o w i n do w   s i z e   i s   a l s o   v i t a l   t o   e n s u r e   a pp r o p r i a t e   s pe c t r a l   e s t i m a t e   o f   e a c h   f r a m e   [13] .   T h e r e   w e r e   a l s o   di s put e s   of   w h e t h e r   l o c a l   s pe e c h   f e a t u r e s ,   c a l c ul a t e f r o m   e a c f r a m e ,   o r   gl o b a l   f e a t u r e s   t a ki n g   s t a t i s t i c s   o f   a l l   l o c a l   s pe e c f e a t u r e s   o f   a u t t e r a n c e   w a s   b e t t e i ndi c a t o f o r   e m o t i o n   c ue s .   T h e r e   ha d   b e e n   t r a de - o ff   b e t w e e n   t h e s e   t w o   t e c hn i que s   w h e r e i n   t h e   l a t t e pe r f o r m e b e t t e r   i n   t e rm s   o f   a c c ur a c y   r a t e   a nd  p r o c e s s i n t i m e   a s   c o m pa r e d   t o   t h e   l o c a l   f e a t u r e s   [ 11] .   H ow e v e r ,   i t   c o ul d   n o t   di f f e r e n t i a t e   e m o t i o n s   o f   s i m i l a a r o us a l   s uc a s   a nge a n d   j oy   a n l o s i n o f   t e m po ra l   i n f o r m a t i o n .   I t hi s   w o r k,   w e   pr e f e rr e t o   t a ke   a   f i xe d - l e n gt ut t e ra n c e - l e v e l   s t a t i s t i c s ,   na m e l y   m e a n   v a l ue s   w h i l e   i g n o r i n g   t h e   t e m po r a l   dy n a m i c s   a t t r i b ut e s   s uc a s   i [14] .   T o   d a t e ,   v a r i o us   m e t h o ds   ha v e   b e e n   p r o po s e t h a t   f oc us   o n   f e a t u r e   e xt ra c t i o a n d   c l a s s i f i c a t i o s t a ge s .   T h e r e   i s   n o   c o n s e n s us   o f   w h i c f e a t ur e s   o c l a s s i f i e r s   a r e   t h e   b e s t   m e t h o ds   f o e m o t i o r e c o gni t i o t a s k   b e c a us e   r e c o gn i z i ng   h u m a e m o t i o n   i s   a   di f f i c ul t   p r o b l e m   ha v i n hi g h   n o n l i n e a ri t y   a n d   v a r i a b i l i t y .   H e n c e ,   i t   i s   s t i l l   a o pe n   q ue s t i o n   t o   e xpl o r e     th e   f e a t u r e s   a n d   c l a s s i f i e r s   t ha t   c a a c c o m pl i s t h e   b e s t   r e s ul t s .   S pe c t r a l - b a s e f e a t ur e s   e xt r a c t e f r o m   s h o r t - t i m e   f ra m e   s i g na l   w e r e   m o r e   po pul a r l y   us e d,   fo r   i n s t a n c e   l i n e a p r e di c t i o c o e ff i c i e n t s   (L P C),   l o g - f r e que n c y   pow e r   c o e ff i c i e n t s   (L F P C)  a n d   c e ps t ra l - b a s e f e a t ur e s   s uc h   a s   l i n e a p r e di c t i o c e ps t r a l   c o e ff i c i e n t s   (L P CC)   a n d   M e l - f re que n c y   c e ps t r a l   c o e ff i c i e n t s   (M F C C).   B a n de l a   a n d   K um a p r o po s e a   f us i o o f   T e a ge e n e r gy   o pe r a t o ( T E O w i t M F CC   [ 15]   a nd   a   f us i o o f   T E O   w i t h   L P [16]   o n   B e rl i E m o t i o na l   A c t e D a t a b a s e   (E M O - D B fo r   f i v e   e m o t i o n a l   s t a t e s   c l a s s i f i c a t i o us i ng  ga us s i a m i x t u r e   m o de l   (G M M ).   T h e y   fo un d   a c c ura c y   r a t e s   of   93. 3%   a nd  88. 0%  us i n g   t h e   p r o po s e fe a t ur e s ,   s ur p a s s i n g   t h e   b a s e l i n e   f e a t u r e s   o f   M F CC  a n d   L P b y   6. 7%  a n d   9 . 3 %   r e s pe c t i v e l y .   A n o t h e r e c e n t   w o r us i ng  A m r i t a e m o   d a t a b a s e   [17]   c o m pa r e d   t h e   pe r f o r m a n c e   o f   a rt i f i c i a l   n e u ra l   n e t w o r ks   (A N N )   a n d   K - n e a r e s t   n e i g h b o ur s   (K N N )   t o   c l a s s i fy   ha ppy ,   a n g r y   a nd  s a d   i T e l e gu   a nd   T a m i l   l a n g ua ge s   a n d   o b t a i n e d   76%   a n d   75 a c c ur a c y   r a t e s   us i n g   a   c o m b i n a t i o n   o f   H ur s t   p a r a m e t e r s   a n l i n e a r   p r e d i c t i v e   c e ps t r a l   c o e ff i c i e n t s   (L P CC).   In   a   r e c e n t   a rt i c l e ,   J i a n g   e t   a l .   [ 18]   i n v e s t i ga t e t h e   e f f e c t i v e n e s s   o f   di f fe r e n t   c l a s s i f i e r s   s uc h   a s   K N N ,   G M M   a n d   s uppo r t   v e c t o r   m a c h i n e   (S V M f o r   de t e c t i n de pre s s i o n   f r o m   po s i t i v e ,   n e ga t i v e   a n n e u t r a l   s pe e c e m o t i o n s   f r o m   170  s ub j e c t s .   A   h i g h l y   di m e n s i o na l   f e a t u r e s   u s i ng  p r o s o di c ,   v o i c e   qua l i t y   a n s pe c t r a l   f e a t u r e s   w e r e   us e d.   It   w a s   f o un t ha t   S V M   s u rpa s s e t h e   o t h e t w o   w i t h   6 5. 7 a c c u r a c y   r a t e .   A m o n t hr e e   t y p e s   o s pe e c h ,   pi c t u r e   de s c r i p t i o y i e l de t h e   b e s t   i n pu t   f o r   m a l e   w h i l e   i nt e r v i e w   s p e e c h   w a s   t h e   o n e   f o r   f e m a l e   s pe a ke r s .   I m o s t   pa s t   s t udi e s ,   r e s e a r c h e r s   us e d   a   c o m b i na t i o o f   t h e   a f o r e m e nt i o n e d   f e a t u r e s   t o   o b t a i t h e   b e s t   a c c ur a c y   of   e m o t i o n   de t e c t i o n   [7 ,   11 ,   19] .   A l t h o ug v a r i o us   t e c hni que s   ha v e   be e n   i n v e s t i ga t e i f e a t u r e   e xt ra c t i o a nd  c l a s s i f i c a t i o n   s t a ge   i n   s pe e c h   p r o c e s s i n g   [2 0] ,   t h e r e   i s   s c a r c e   r e s o ur c e s   o n   p r e - p r o c e s s i n s t a ge   i n   E R S .   S i n c e   f r a m e   b l o c ki n i s   n e c e s s a r y   i n   s pe e c h   p r o c e s s i ng,   s e l e c t i n g   a pp r o p r i a t e   f ra m e s   b e fo r e   fe a t u r e   e xt ra c t i o i s   i m po rt a nt   t a s t o   i m p r o v e   t h e   pe r f o r m a n c e   o f   E RS   b e c a us e   n o t   a l l   f ra m e s   c o n t a i n   e m o t i o n   a t t ri b ut e   e s pe c i a l l y   w h e n   gl o b a l   f e a t u r e s   o f   a ut t e ra n c e   i s   t a ke s uc i n   t h i s   pa pe r.   O n e   o f   t h e   s i m pl e   s e l e c t i o c ri t e r i a   i s   t o   c l a s s i fy   t h e   s pe e c f ra m e s   a s   v o i c e (V o r   u n v o i c e (U V ).   T h e   pe r f o r m a n c e   o f   E R S   o n   c o m pr e s s e s pe e c h   w a s   i n v e s t i ga t e i [9]   us i ng  s e v e n   di g i t a l   t e l e c o m m uni c a t i o c o d e c s   b a s e o n   a da p t i v e   di f f e r e n t i a l   pul s e   c o de   m o dul a t i o n   (A D P CM a n A na l y s i s - by - S y n t h e s i s .   V   a n d   U V   s e gm e n t s   o f   s pe e c h   da t a   w a s   c l a s s i f i e us i n a ut o c o r r e l a t i o n   m e t h o i n   P r a a t   s o f t w a r e   t o o l .   S e ve r a l   p a ra m e t e r s   w e r e   e xt r a c t e us i n M F C C,   B a rk  s pe c t ra l   e n e r gy ,   n o i s e   m e a s u r e s ,   a nd  n o n l i n e a r   dy n a m i c s   f e a t u r e s   f r o m     V   a nd   U V   s pe e c f r a m e s   t o   b ui l d   t w o   r e c o gn i t i o m o de l s   s e pa r a t e l y   b a s e o n   G M M .   T hi s   r e s e a r c c o n c l ude d   t h a t   t h e   U V - b a s e E R S   pr o duc e a   s i g ni f i c a nt   de gra d a t i o n   i a c c ura c y   w h i l e   j us t   a   l i t t l e   d r o i a c c ura c y   w a s   n o t i c e f o V - b a s e E R S   due   t o   c o m p r e s s i o n   b y   t h e   c o de c s   o n   E M O - D B   a nd   e nt e r f a c e 05  e m o t i o na l     s pe e c h   d a t a b a s e s .     E xt ra c t i n g   pa ra l i n gu i s t i c s   t ra i t s   t ha t   a r e   r e l a t e t o   e m o t i o n   re c o gn i t i o n   us i n p r o s o di c   f e a t ur e s   s uc a s   f o r m a n t s   a n f u n da m e n t a l   f r e que n c y   (F 0)  w o ul b e   i n c orr e c t   f o u n v o i c e s pe e c h   b e c a us e   t h e s e   f e a t ur e s   w e r e   v a l i f o r   v o i c e s pe e c h   [21] .   I n   [22] ,   V   a nd  U V   s e gm e n t s   w e r e   de t e rm i n e us i n F e s t i m a t i o n     a n d i f fe r e nt   s e t s   o f   fe a t u r e s   w e r e   e xt r a c t e f r o m   t h e s e   t y pe s   of   s e gm e n t s   t o   r e c o gn i z e   e m o t i o n s   i c o n t i nuo us   s c a l e   i n s t e a d   o f   di s c r e t e   e m o t i o n s   us i ng  t hr e e   di m e n s i o na l   v a l ue s   o f   v a l a n c e ,   a c t i v a t i o a n d   do m i na n c e .     T h e   a u t h o r s   a l s o   s ugge s t e o pt i m i z i n g   f e a t u r e s   us i n p a rt i c l e   s w a r m   o p t i m i z a t i o (P S O t o   r e duc e   t h e   f e a t u r e   s pa c e   di m e n s i o n a l i t y   f r o m   830   o f   V - s e gm e n t s   a n d   71 o f   U V - s e gm e n t s   t o   o nl y   40  o pt i m a l   f e a t u r e s   s e l e c t e d   by   P S O   s e pa r a t e l y   fo r   V   a nd  U V   s e gm e n t s .   O v e r a l l ,   t h i s   ha r e s ul t e d   b e t t e c l a s s i f i c a t i o n   ra t e s   o f   e m o t i o n a l   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   19 ,   N o .   1 J ul y   202 0   :     196   -   20 6   198   di m e n s i o n s . B a s e o n   t h e   l i m i t a t i o n   o f   pr e v i o us   s t udi e s ,   t h i s   pa pe p r o po s e s   a   de v e l o pm e n t   o f   E R S   w h i c e m pl oy s   a   s m a rt   p r e - p r o c e s s i n g   s t a ge   t o   i de nt i fy   a   f ra m e   a s   V - f r a m e   o r   U V - f r a m e   us i n g   f uz z y   l o gi c   i n f e r e n c e   s y s t e m   (F IS m o de l l e w i t s i m pl e   t i m e - b a s e f e a t ur e s   i . e .   z e r o - c r o s s i ng  r a t e   (Z CR a nd  s h o r t - t i m e   e n e r gy   (S T E ) .   S i n c e   v o i c e s pe e c h   h a s   s t r o n ge r   e m o t i o n a l   t ra i t   t ha u n v o i c e d,   t h e   p r o po s e F IS   V - U V   s e gm e n t a t i o w i l l   o ut put   o nl y   V - f r a m e s   t o   f e a t u r e   e xt ra c t i o n   s t a ge   f o r   m o re   e ff i c i e n t   a nd  a c c ura t e   pe r f o r m a n c e .   T h i s   s t udy   us e s   a n   a c t e s pe e c h   c o r po r a   c o n s i s t e o f   fo ur   b a s i c   e m o t i o na l   s t a t e s   na m e l y   n e ut r a l ,   a n g r y ,   h a ppy   a nd  s a d .   A pa r t   f r o m   b a s e l i n e   f e a t u r e s   s uc a s   M F CC   a n d   L P C,   t h i s   p a pe p r o po s e s   f e a t ur e   f us i o n s   o f   M F CC  a n d   L P w i t t h e   f i r s t   f i v e   fo r m a nt s .       2.   R ES EA R C H   M ET H O D   T h e   de v e l o pm e n t   o f   f uz z y   i n f e r e n c e   s y s t e m   (F IS )   f o r   v o i c e d - un v o i c e s e gm e nt a t i o i E R S   f o l l ow s   t h e   s t e ps   de s c ri b e i n   F i gu r e   1 .   B a s i c a l l y ,   t h e   s y s t e m   c o n s i s t s   o f   pr e - p r o c e s s i n a n d   f e a t u r e   e xt ra c t i o i   t h e   f r o nt - e n w h i l e   i t h e   b a c k - e n d,   i t   i n v o l v e s   s i g n a l   m o de l l i n g   a n d   c l a s s i f i c a t i o n   s t a ge   o f   t h e   u nk n o w n   s pe e c h   s a m pl e s .   A   m o di f i c a t i o n   i s   m a de   by   c l a s s i fy i n t h e   p r e - p r o c e s s e f r a m e s   i nt o   e i t h e r   v o i c e (V o r   un v o i c e d   (U V f r a m e   b e fo r e   e xt ra c t i n g   t h e   a c o us t i c   f e a t u r e s .   T h e   de v e l o pm e n t   s t a ge s   a r e   e xpl a i n e d   i t hi s   s e c t i o n .     T h e   h y po t h e s e s   pr e s um e s   t ha t   by   i n c o r po r a t i ng   F IS   f o i de n t i fy i n V - f r a m e   o U V - f r a m e   t h e   s y s t e m   e ff i c a c y   c o ul be   i m p r o v e i n   t e rm s   o f   a c c ur a c y   a n p r o c e s s i n t i m e   w h e r e i n   o nl y   v o i c e f r a m e s   a r e   t a ke f o r   f ur t h e r   pr o c e s s i n a f t e F IS   de c i s i o h a s   b e e n   m a de .     S t a r t   F I S   E v a l u a t i o n o u t p u t ( i )   5 ? N o   Y e s E n d     R A V D E S S   D a t a b a s e F r a m e - b l o c k i n g   &   o v e r l a p p i n g   E x t r a c t i o n   o f   L o g   S T E   a n d   Z C R   F r a m e ( i )   l a b e l e d   a s   v o i c e d   ( V )       F r a m e ( i )   l a b e l e d   a s   u n v o i c e d   ( U V ) P r e - e m p h a s i s   f i l t e r i n g H a m m i n g   w i n d o w i n g F e a t u r e   e x t r a c t i o n C l a s s i f i c a t i o n   m o d e l i n g     F i gu r e   1 .   E m o t i o n   r e c o gn i t i o n   w i t f uz z y   i n f e r e n c e   s y s t e m   fo r   v o i c e d - un v o i c e d   s e gm e n t a t i o n       2 . 1 .      Em o ti o n a d atab as e   T h e   s pe e c d a t a b a s e   us e i t h i s   p a pe w a s   c o l l e c t e f r o m   T h e   R y e r s o n   A u di o - V i s ua l     D a t a b a s e   o f   E m o t i o S pe e c h   a n d   S o n g   (R A V D E S S ).   T hi s   d a t a b a s e   [ 23]   e l i c i t e d   s pe e c h   f r o m   2 p r o fe s s i o n a l   a c t o r s   c o n s i s t e d   o f   a e qua l   n u m b e r   o f   m a l e   a nd   f e m a l e   s pe a ke r s   r e s pe c t i v e l y .   T h e   a c t o r s   v o c a l i z e d   t w   l e xi c a l l y - m a t c h e s t a t e m e nt s   i N o r t A m e ri c a a c c e n t .   T h e   da t a b a s e   w a s   a v a i l a b l e   i t h r e e   m o da l i t y   i . e .   a ud i o n l y ,   a ud i o - v i de o   a n d   v i de o   o nl y .   O n l y   a udi o   f o r m a t   . w a v   f i l e s   w e r e   t a ke w hi c w e r e   s a m pl e d   a t   48   kH z     a n qua nt i z e a t   16  b i t .   T h e   s a m pl i ng  f r e que n c y   w a s   do w n s a m p l e t o   1 kH z .   T h e   s pe a ke r s     ut t e r e t w o   s e n t e n c e s   n a m e l y   K i ds   a r e   t a l ki n g   by   t h e   do o r   a n d   D o gs   a r e   s i t t i n b y   t h e   do o r   i n   f o ur   a c t e e m o t i o n a l l y   c o n di t i o n s   s uc a s   a n g r y ,   s a d ,   ha ppy   a nd  n e ut ra l   e m o t i o n s .   T h e r e   e xi s t e d   t w o   di ff e r e n t   e m o t i o na l   i n t e n s i t y   w h i l e   s pe a ki n g   t h e   s e n t e n c e s   l a b e l l e a s   n o r m a l   i nt e n s i t y   a n s t r o n g   i n t e n s i t y .   H ow e ve r ,   n e ut ra l   e m o t i o n   w a s   o n l y   a v a i l a b l e   w i t n o r m a l   i n t e n s i t y .   A s   s uc h,   w e   o n l y   t o o s t r o n g   i nt e n s i t y   f o r   t hi s   s t udy .     E a c s t a t e m e n t   w a s   r e pe a t e d   t w o   t i m e s   f o r   e a c e m o t i o n .   T a b l e   1   s u m m a r i z e s   t h e   n um b e o f   s a m pl e s   e xt r a c t e fo r   t hi s   r e s e a r c h   us e .   Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       F uz z y - bas e v oi c e d - un v oi c e d   s e gm e nt at i on  f o r…  ( Y us ni t a   M ohd  A l i )   199   T a b l e   1 .   R A V D E S S   e m o t i o na l   d a t a b a s e   s a m pl e s   E m o t i o n a l   S t a t e   G e n d e r   N o .   o f   u t t e ra n c e s   M a l e   F e m a l e   A n g r y   48   48   96   S a d   48   48   96   H a p p y   48   48   96   N e u t ra l   48   48   96   T o t a l   192   192   384       2 . 2    F u z z i n fe r e n c e   s ys te m   s e gm e n ta ti o n   T h e   f uz z y   i n f e r e n c e   s y s t e m   (F IS i s   de s i g n e d   us i n g   M A T L A B   f uz z y   l o gi c   t o o l bo G U Is   a s   de pi c t e i F i gu r e   2   ha v i ng   t w o   i n put s   a n d   o n e   o ut put .   T h e   m o s t   w i de l y   a c c e pt e f uz z y   i n f e r e n c e   m e t h o f o c a pt u r i n g   e xpe r t   k n o w l e dge   i s   M a m d a n i   c o i n e d   by   E b r a hi m   M a m da ni   of   L o n do n   U ni v e r s i t y   i 1975   t o   c o n t r o l   a   s t e a m   e n gi n e   a n d   b o i l e r   c o m b i n a t i o n.   D e s pi t e   t h e   f a c t   t ha t   M a m da ni - t y pe   f uz z y   i n f e r e n c e   e n t a i l s   a   s ub s t a nt i a l   c o m put a t i o n a l   b ur de n,   i t   a l l o w s   t h e   de s c r i pt i o o f   e xpe r t i s e   i m o r e   i nt ui t i v e   a nd   h u m a n - l i ke   m a nn e [2 4,   2 5] T h e r e   a r e   m a n y   w a y s   t o   a s s i gn  m e m b e r s hi p   v a l ue s   a nd  f u n c t i o n s   t o   f uz z y   v a r i a b l e s   a n d   t h e   o n e   t ha t   i s   p r o po s e d   i n   t h i s   pa pe i s   b y   i n duc t i v e   r e a s o ni n g   us i n g   v a l ue s   de r i v e f r o m   e xpe r i m e n t a l   da t a .   T h e   de s i g n e d   F IS   V - U V   us i ng   m e m b e r s h i f u n c t i o n s   o f   s h o rt - t i m e   e n e r gy   (S T E )   a nd   z e r o - c r o s s i n g   ra t e   (Z CR a s   i n pu t s   a r e   s h o w n   i F i gu r e   2 .   T ri a ngul a a nd   t ra pe z o i da l   m e m b e r s h i p   f un c t i o n s   a r e   a do pt e a s   t h e s e   f un c t i o n s   a r e   p ra c t i c a l   a n d   o n e   o f   t h e   s i m pl e s t   l i n e a r - f i t   f un c t i o n s .   T h e   l o c a l   s t a t i s t i c a l   t hr e s h o l ds   f o r   S T E   a n Z CR   e xpe ri m e nt a l   d a t a   a s   p r o po s e i n   t h i s   pa pe a r e   m a t h e m a t i c a l l y   gi v e n   a s   i n   ( 1)  a n d   (2)   r e s pe c t i v e l y .     ( , ) =   [         11 12 13 21 22 23 31 32 33                     1 2 3 ]           (1)     ( , ) =   [         11 12 13 21 22 23 31 32 33                     1 2 3 ]           (2)     w h e r e   θ ( k , s )   a n d   φ ( k , s )   a r e   t h e   l o c a l   t hr e s h o l ds   o f   S T E   a n d   Z CR .   T h e   f i r s t   s ub s c r i p t ,   k   de n o t e s     t h e   s pe e c n u m b e r   t h a t   i s   c o n t a i n e d   i t h e   c u rr e n t   di r e c t o r y ,   a n d   t h e   s e c o n d   s ub s c r i pt   s   r e p r e s e n t s   t h e   s t a t i s t i c a l   de s c r i pt o r s   s   wh i c h   t a ke s   v a l ue   f o r   m i ni m um   (m i n ) ,   fo r   m e di a n   ( m e d)  a nd  f o r   m a x i m u m   ( m a x).     F i na l l y ,   gl o b a l   s t a t i s t i c a l   t hr e s h o l ds   (G S T s )   c a b e   c a l c ul a t e d   f r o m   t h e   m a t r i c e s   o f   t h e   l o c a l   t hr e s h o l ds   a s   g i v e n   in   (3 a n d   ( 4) .     ( ) =   [ m i n m e d m a x m i n m e d m a x m i n m e d m a x ]   (3)     ( ) =   [ m i n m e d m a x m i n m e d m a x m i n m e d m a x ]   (4)     w h e r e   θ G   ( k , s )   a nd   a r e   φ G   ( k , s )   t h e   gl o b a l   t hr e s h o l ds   o f   S T E   a n d   Z CR   a nd   s   i s   t h e   s t a t i s t i c a l   de s c r i p t o r s   a s   de s c r i b e a b ove .   T a b l e   s h o w s   t h e   r e s ul t e g l o b a l   t hr e s h o l ds   c a l c ul a t e f ro m   a l l   s pe e c h   s a m pl e s   o f   bo t h   ge n de r.     S i n c e   t h e   h i s t o g r a m s   s h o w n   f o r   S T E   a n d   Z CR   ha v e   s ke w e di s t r i b ut i o n s ,   m e di a n   v a l ue s   a r e   c a l c ul a t e i n s t e a of   m e a n.   T h e   w o r ki n o f   t h e   V - U V   s e gm e n t a t i o n   us i n F IS   c a b e   de m o n s t r a t e by   f e e di n s o m e   i nput   c o m b i na t i o n   t o   p r e di c t   t h e   o ut pu t   o f   a   f r a m e   e i t h e r   V   o r   U V .   F i gu r e   3 ( a i s   a n   e xa m p l e   of   un v o i c e de t e c t e d   f r a m e ,   w hi l e   F i gu r e   3 (b i s   a n   e x a m p l e   o f   v o i c e de t e c t e f r a m e .   T h e   f uz z y   r u l e s   w h i c a r e   e s t a b l i s h e i t hi s   de s i gn  o f   F IS   V - U V   a r e   t a b ul a t e i T a b l e   3   a f t e s o m e   j us t i f i c a t i o n   o f   e xpe r t   k n o w l e dge   of   hum a s pe e c h   pr o duc t i o n .   F o u r   r u l e s   c o n s i s t   o f   t w o   a nt e c e de n t s   a n d   o n e   c o n s e que nt   w e r e   f o r m ul a t e i c o n di t i o n a l   s t a t e m e n t s   i f - t h e n   rul e s   b a s e o n   t h e   s t ud i e c ha r a c t e r i s t i c s   of   V - U V   o n   S T E   a nd  Z CR   us i n r i go r o us   a n a l y s i s   a n o b s e r v a t i o n .   T h e   f i r s t   a nd  s e c o n r u l e s   a r e   h i g hl y   c o r re l a t e w i t h   t h e   p a s t   s t u di e s   [26,   27] .   T h e   t hi r d     a n f o ur t r ul e s   a r e   f o r m ul a t e t o   s a v e   m o s t   pa r t   o f   t h e   s pe e c s i n c e   f r o m   t h e   p r o po s e G S T s   a n a l y s i s   t h a t   c a b e   r e f e r r e d   f r o m   F i gu r e   2 (b a nd   F i gu r e   2 (c ).   T h e   ra n ge   o f   t h e   l a r ge   Z CR   s ub s e t   e xt e n ds   t h e   l a rge s t .     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   19 ,   N o .   1 J ul y   202 0   :     196   -   20 6   200   O t h e   o t h e r   ha n d ,   t h e   s m a l l   a n d   m e di a s ub s e t s   of   S T E   o c c up y   m o r e   s pa c e s   t ha n   t h e   l a r ge   s ub s e t   o f   S T E .   H e n c e ,   i t   i s   p r o po s e t ha t   m e di a S T E   w i t s m a l l   Z CR   w ou l d   m a ke   a   f r a m e   l a b e l   a s   V   a nd   l a r ge   S T E   w i t m e di a Z CR   w o ul a l s o   m a ke   a   f ra m e   a s   V .   By   t h e s e   r u l e s ,   i t   m e a n s   r o ug h l y   75%   o f   t h e   s pe e c h a s   po s s i b i l i t y     t o   b e   V   f r a m e s .   T o   de m o n s t r a t e   t h e   r e s ul t e v o i c e a n u n v o i c e f r a m e s   us i n t h e   a b o ve   f o r m ul a t e r ul e s ,   F i gu r e   4   s h o w s   a   m i x t u r e   o f   c h a r a c t e r i s t i c s   o f   S T E   a n d   Z CR   pl o t t e a g a i n s t   f r a m e   n u m b e r   o f   a   s pe e c h   s i g n a l   o f   a   f e m a l e   s pe a ke r   ha v i ng  s a d   e m o t i o n   i de n t i f i e a s   03 - 01 - 04 - 02 - 01 - 01 - 16.   T h i s   s pe e c h   c o n s i s t e o f   117  f r a m e s ,   42  o w h i c w e r e   l a b e l e a s   U V   a n t h e   r e m a i n i ng   75   w e r e   l a b e l e a s   V   a f t e F IS   e v a l ua t i o n.   T h e   v o i c e f r a m e s   (l a b e l e a s   V - f r a m e s w o ul t o   b e   pr e s e r v e fo r   t h e   n e xt   s t e of   s pe e c h   p r o c e s s i n g .   I n   a dd i t i o n   t o   t hi s ,     F i gu r e   5   d i s pl a y s   t h e   s h o rt - t i m e   s pe e c w a v e fo r m s   o f   a   v o i c e f r a m e ,   t h e   12 th   f r a m e ,   a nd  a u n v o i c e f r a m e ,   t h e   6 th   f r a m e   f r o m   t h e   p r e v i o us   r e s ul t .   T h e   v a l ue s   o f   S T E   a nd  Z CR   f o r   t h e   12 th   f ra m e   o f   t h i s   s i g na l   a r e   f o un t o   be   17. 70  a nd  32  r e s pe c t i v e l y ,   a s   t h e   V - U V   s e gm e n t a t i o n   F IS   de c i de i t   t o   b e   a   vo i c e d - t y p e   a f t e r   F IS   e v a l ua t i o n.   W hi l s t   t h e   v a l ue s   o f   S T E   a nd  Z CR   f o r   t h e   6 th   f ra m e   o f   t hi s   s i g na l   a r e   f o un t o   b e   - 2. 56  a n d   226   r e s pe c t i v e l y ,   a s   t h e   V - U V   s e gm e n t a t i o n   F IS   de c i de i t   t o   b e   a n   u n v o i c e d - t y pe   a f t e r   F IS   e v a l ua t i o n .                                    F i gu r e   2 (a ) .   F IS   s e gm e n t a t i o n   s y s t e m                                                     F i g ur e   2 (b ) .   M e m b e r s h i f u n c t i o n s   t o   f uz z i fy                         F i g ur e   2 ( c ) .   Z e r o - c r o s s i ng   r a t e   i n put s   F i gu r e   2 (d) .   M e m b e r s hi p   f un c t i o n s   t o   de - fu z z i fy   t h e   t y pe   of   s pe e c h   f r a m e s       Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       F uz z y - bas e v oi c e d - un v oi c e d   s e gm e nt at i on  f o r…  ( Y us ni t a   M ohd  A l i )   201   T a b l e   2 .   G l o b a l   s t a t i s t i c a l   t hr e s h o l ds   (G S T s )   f o r   S T E   a n d   Z C R   S T E   g l o b a l   t h r e s h o l d   ( G)   S t a t   S T E   l o c a l   t h re s h o l d   ( )   Z CR  g l o b a l   t h r e s h o l d   ( G)   S t a t   Z CR  l o c a l   t h r e s h o l d   ( )   M i n   m i n   - 123   M i n   m i n   0   m e d   - 70   m e d   0   m a x   - 33   m a x   7   M e d   m i n   - 46   M e d   m i n   9   m e d   - 22   m e d   35   m a x   3   m a x   72   M a x   m i n   1 4 . 8   M a x   m i n   103   m e d   1 9 . 5   m e d   213   m a x   2 6 . 8   m a x   316       T a b l e   3 .   F u z z y   r u l e s   t o   b ui l d   v o i c e d - un v o i c e F uz z y   i n f e r e nc e   s y s t e m   Ru l e   N o .     S T E   O p e ra t o r   Z CR     O u t p u t   1   IF   S m a l l   or   l a rg e   T H E N   UV   2   L a rg e   or   s m a l l   V   3   m e d i a n   a n d   s m a l l   V   4   L a rg e   a n d   m e d i a n   V         (a )       (b )     F i gu r e   3 .   R ul e   v i e w e r   e di t o t o   s h o w   f uz z y   r ul e s   e v a l ua t i o n   o a   gi v e i nput   c o m b i n a t i o n   f o r     (a U V - f r a m e ( b )   V - f r a m e   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   19 ,   N o .   1 J ul y   202 0   :     196   -   20 6   202   0 20 40 60 80 100 120 - 5 0 0 50 100 150 200 250 300 350 400 450 A m p l i t u d e / N u m b e r F r a m e   N u m b e r V - U V   L a b e l   u si n g   S T E   a n d   Z C R   C h a r a ct e r i st i cs: K i d a r e   t a l ki n g   b y   t h e   d o o r   ( S a d   E m o t i o n )     Z C R S T E U V ( 1 8 ) V ( 9 1 8 ) U V ( 1 9 , 2 0 ) V ( 2 1 , 2 2 ) U V ( 2 3 ) V ( 2 4 3 1 ) U V ( 3 2 4 0 ) V ( 4 1 4 9 ) U V ( 5 0 5 6 ) V ( 5 7 7 8 ) U V ( 7 9 ) V ( 8 0 8 5 ) U V ( 8 6 8 9 ) V ( 9 0 1 0 7 ) U V ( 1 0 8 1 1 7 )   F i gu r e   4 .   C l a s s i f i c a t i o o f   f r a m e s   i nt o   V - U V   c l a s s   b a s e o n   t h e   p r o f i l e s   o f   S T E   a n Z CR           F i gu r e   5 .   V o i c e f r a m e   (up pe f i gu r e a nd  a u n v o i c e f r a m e   (l o w e r   f i gur e )   a f t e F IS   V - U V   s e gm e n t a t i o n       3.   R ES U LTS   A N D   A N A L Y S I S     In  t h i s   p a pe r ,   w e   e m p l oy e a   s i m p l e   c l a s s i f i c a t i o t e c hni qu e   i . e .   K N N   [28]   t o   c l a s s i f y   a u n k n o w n   s pe e c h   i nt o   f o ur   e m o t i o na l   c l a s s e s   na m e l y ,   Cl a s s   1:   N e ut r a l ,   Cl a s s   2 :   A n g r y ,   Cl a s s   3:   H a ppy   a n C l a s s   4:   S a us i n di f f e r e n t   di s t a n c e   m e a s u r e s   a nd   n um b e o f   n e a r e s t   n e i g h b o ur s .   T h e   r u l e   us e h e r e   t o   c l a s s i f y   t h e   s a m p l e   w a s   n e a r e s t   w h i c h   m e a n s   m a j o ri t y   r u l e   w i t h   n e a r e s t   po i n t   t i e - b r e a t o   m a ke   t h e   c l a s s   p r e di c t i o n.   T h e   po pul a rl y   us e pa r a m e t r i c   f e a t u r e s   s uc h   a s   L P a n M F CC  w e r e   a do pt e a s   t h e   i n p ut s   t o   KNN  m o de l s .   A n o t h e i m po rt a nt   f e a t u r e s   us e d   w a s   f o r m a nt   f r e qu e n c y   o s i m pl y   f o r m a n t s   w hi c c a b e   e xt ra c t e f r o m   L P s pe c t r u m   a s   pe a ks   s t a rt i ng  f r o m   t h e   hi g h e s t   e n e rg y   r e pr e s e n t e a s   t h e   f i r s t   f o r m a nt   F 1 ,   f o l l ow e b t h e   s e c o n f o r m a nt   F 2 ,   a n d   s o   f o r t h   up  t o   t h e   f i f t h   f o r m a n t   F i o r de r.   T h e   m i x t u r e   o f   s pe c t r a l - b a s e f e a t ur e s   (L P a n d   M F CC)   a nd  p r o s o di c   f e a t ur e s   (f o r m a n t s )   w e r e   t e s t e t o   c o m pa r e   t h e   pe r f o r m a n c e   o f   t h e   p r o po s e d   F IS   V - U V   s e gm e n t a t i o i nt o   t h i s   E R S   s y s t e m .   T h e   s y s t e m   w e r e   a na l y s e a s   fo l l ow s .   F i r s t l y ,   t h e   pe r f o r m a n c e   of   t h e   p r o po s e V - U V   s e gm e n t a t i o n   i s   s h o w n   by   c o m pa r i ng  t h e   o v e r a l l   a c c ura c y   r a t e s   o f   E R S   s y s t e m   w i t   a n w i t h o ut   e m pl oy i n g   F IS   V - U V   s e gm e n t a t i o a l go r i t hm .   I n   a dd i t i o n ,   t h e   f o r m a nt s   w e r e   f us e w i t   t h e   s pe c t ra l   f e a t u r e s   t o   ge n e ra t e   t w o   n e w   f e a t ur e   v e c t o r s   na m e l y   s pe c t r a l   f e a t u r e   f us i o n   o f   M F CC  a n d   f o r m a n t s   (S F F   M F CC - f m n t a nd  L P m i xe w i t h   f o r m a nt s   (S F F   L P C - f m n t ) .   T h e   c o m b i n a t i o n s   o f   fo r m a nt s   w i t h   M F CC   a n L P w e r e   m o t i v a t e by   pr e v i o us l y   ob t a i n e po o r   r e s ul t s   of   us i n f o r m a n t s   a l o n e .   T h e   c h o s e n   pa ra m e t e r s   0 0 . 0 0 1 0 . 0 0 2 0 . 0 0 3 0 . 0 0 4 0 . 0 0 5 0 . 0 0 6 0 . 0 0 7 0 . 0 0 8 0 . 0 0 9 0 . 0 1 - 0 . 5 0 0 . 5 A m p l i t u d e V o i ce d   F r a m e - t h e   1 2 t h : " K i d a r e   t a l ki n g   b y   t h e   d o o r "   ( i d :   0 3 - 0 1 - 0 4 - 0 2 - 0 1 - 0 1 - 1 6 . w a v ) 0 0 . 0 0 1 0 . 0 0 2 0 . 0 0 3 0 . 0 0 4 0 . 0 0 5 0 . 0 0 6 0 . 0 0 7 0 . 0 0 8 0 . 0 0 9 0 . 0 1 - 0 . 1 - 0 . 0 5 0 0 . 0 5 0 . 1 A m p l i t u d e T i m e   ( s) U n v o i ce d   F r a m e - t h e   6 t h : " K i d a r e   t a l ki n g   b y   t h e   d o o r "   ( i d :   0 3 - 0 1 - 0 4 - 0 2 - 0 1 - 0 1 - 1 6 . w a v Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       F uz z y - bas e v oi c e d - un v oi c e d   s e gm e nt at i on  f o r…  ( Y us ni t a   M ohd  A l i )   203   of   K N N   c l a s s i f i e r   w e r e   K   =   a n c i t y b l oc di s t a n c e   m e t r i c   fo r   a l l   a c o us t i c   fe a t u r e s   e xc e pt   fo r   M F CC - b a s e d   f e a t ur e s   f o f e m a l e   s pe a ke r s   w hi c a do pt e d   c o rr e l a t i o m e t r i c .   T a b l e   4   s h o w s   t h e   r e duc t i o i nu m b e o f   f r a m e s   t o   b e   pr o c e s s e f o r   f e a t u r e   e xt ra c t i o us i ng   F IS   i m p l e m e n t a t i o n .   T h e   p r o po s e s e gm e n t a t i o s c h e m e   w a s   a b l e   t o   s a v e   31. 7%   a n d   36 . 4%   o f   f r a m e s   f o r   ge n de s e n s i t i v e   E R S   p ri o t o   f e a t u r e   e xt ra c t i o n   a n d   e m o t i o c l a s s i f i c a t i o s t a ge s .   F i gu r e   s h o w s   t h e   r e s ul t s   us i ng  b a s e l i n e   M F CC   a nd  L P a s   w e l l   a s   t h e i f us i o n   f e a t u r e s   w i t fo r m a n t s   f o r   b o t h   m a l e   a n d   f e m a l e   s pe a ke r s .   I t   w a s   f o un t ha t   t h e   m i x t u r e   o f   M F CC  a n f o r m a n t s   di n o t   gi v e   m uc ri s e   i a c c ura c y   of   e m o t i o n   de t e c t i o n   b o t i n   m a l e   a n d   f e m a l e   s pe e c h.   T h e   c ha n ge   w a s   l e s s   t ha n   1%   a f t e F IS   V - U V   s e gm e n t a t i o n.   H ow e ve r ,   t h e r e   w a s   a   n o t i c e a b l e   i n c r e a s e   i n   a c c ura c y   w i t h   a nd  w i t h o ut   F IS   V - U V   s e gm e n t a t i o n   f o r   S F F   L P C - f o r m a n t s   f r o m   i t s   b a s e l i n e   f e a t u re s   by   a ppr o xi m a t e l y   1. 3%   t o   5 . 1% .         T a b l e   4 .   R e duc t i o n   ra t e   o f   n um b e o f   f r a m e s   us i ng  F IS   V - U V   s e gm e nt a t i o n   F ra m e   t y p e   N o   o f   f ra m e s   M a l e   F e m a l e   V o i c e d   ( V )   9 1 , 0 2 1   8 7 , 0 5 5   U n v o i c e d   ( U V )   4 2 , 2 6 9   4 9 , 8 3 7   Re d u c t i o n   ra t e   (% )   3 1 . 7   3 6 . 4       T a b l e   5 .   A c c ura c y   r a t e   c h a nge s   us i n g   F IS   V - U V   E R S   S p e e c h   f e a t u re s   Cl a s s i fi c a t i o n   ra t e   ( % )   M a l e   F e m a l e   M F C C   - 2 . 0   + 1 . 1   L P C   + 6 . 4   + 9 . 0   S F F   M F C C - fm n t   - 0 . 5   + 2 . 9   S F F   L P C - fm n t   + 3 . 7   + 7 . 5         F i gu r e   6 .   Co m p a r i s o o f   pe r f o r m a n c e   b e t w e e n   c o n v e n t i o n a l   E R S   a n d   E R S   e m pl o y i n F IS   V - U V   s e gm e n t a t i o n   f o r   di f f e r e n t   a c o us t i c   f e a t u r e s       Co m pa r i ng  t h e   e f fe c t   of   F IS   V - U V   s e gm e n t a t i o n   o E R S   s y s t e m s ,   w e   s uc c e e d e t o   s h o w   t h a t     t h e   p r o po s e s e gm e n t a t i o n   us i n g   f uz z y   l o gi c   w o r ke e f fe c t i ve l y   o n   m o s t   o f   t h e   f e a t u r e   v e c t o r s   b a s e o K N N   c l a s s i f i e r s .   T a b l e   t a b ul a t e s   t h e   a c c ura c y   r a t e   c h a nge s   f r o m   c o n v e n t i o n a l   E R S   t o   F IS   V - U V   E R S   us i n a l l   fo ur   f e a t u r e   v e c t o r s   e xt r a c t e f r o m   m a l e   a n d   f e m a l e   e m o t i o na l   s pe e c h.   T h e   po s i t i v e   s i g i ndi c a t e s   a n   i n c r e a s e   w h i l e   a   n e ga t i v e   s i g i n d i c a t e s   a   de c r e a s e   i o v e r a l l - c l a s s   m e a c l a s s i f i c a t i o ra t e .   T h e   s uc c e s s   r a t e s   w e r e   c o n s i s t e n t l y   pr o m i s i n g   us i n g   L P C - b a s e fe a t u r e s   na m e l y   i n c r e m e n t   b e t w e e n   3 . 7%  a n d   9. 0 f o r   m a l e   a n d   f e m a l e   s pe e c h   f o de t e c t i n g   f o ur - c l a s s   e m o t i o na l   s t a t e   (o ve r a l l   c l a s s   pe r f o r m a n c e ).   F e m a l e   ha v e   gr e a t e r   ri s e   i n   c l a s s i f i c a t i o ra t e s   t h a m a l e   f o r   a l l   t y p e s   of   f e a t ur e   v e c t or s .   O v e ra l l ,   t h e   hi g h e s t   a c c ura c y   r a t e s   f o r   m a l e     a n f e m a l e   ge n de r - s e n s i t i v e   E R S   w e r e   79. 1%  a n 79 . 9 r e s pe c t i v e l y   a s   a   r e s ul t   o f   F IS   V - U V   i m pl e m e nt a t i o n .   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   19 ,   N o .   1 J ul y   202 0   :     196   -   20 6   204   F i na l l y ,   w e   s h ow   t h e   pe r f o r m a n c e   ( m e a n   c l a s s i f i c a t i o n   ra t e )   of   i n di v i du a l   c l a s s   e m o t i o n a l   s t a t e   f r o m   vo i c e s e gm e n t s   o f   m a l e   a nd  f e m a l e   s pe a ke r s   a s   de pi c t e i F i gu r e   7.   A ga i n ,   m o s t   f e a t u r e s   y i e l de t h e   b e s t   r e s ul t s   f o r   e m o t i o n a l - f r e e   s pe e c h ,   n a m e l y   n e ut r a l   i . e .   9 1. 1 %   f o r   m a l e   s pe e c h   (M F CC a nd  91 . 6%   f o r   f e m a l e   s pe e c (L P a n d   S F F   M F CC - f m nt ) .   T hi s   w a s   f o l l o w e by   a ng r y ,   h a p py   a n d   s a d   i t h e   s a m e   s e que n c e   a s   ob t a i n e d   p r e v i o us l y .   S a d   e m o t i o b e i n g   t h e   l o w e s t   c l a s s   c o rr e c t l y   r e c o gn i z e d,   a ppe a r e d   s t r o n ge i f e m a l e   s pe e c h   7 3. 7 a s   c o m pa r e t o   64 . 7%   i m a l e   s pe e c us i n g   M F CC.           F i gu r e   7 .   I ndi v i dua l - c l a s s   pe r f o r m a n c e   o f   F IS   V - U V   E R S   us i n di f f e r e n t   a c o us t i c   f e a t ur e s       4.   C O N C LU S I O N     In  t hi s   pa pe r,   w e   i nt r o duc e a n   e f f i c i e n t   t e c hni que   t o   i m p rov e   e m o t i o n   r e c o gn i t i o s y s t e m   (E R S us i n g   f uz z y   e xpe r t   s y s t e m   f o r   s e gm e n t i ng   s pe e c h   i nt o   e i t h e v o i c e o r   u n v o i c e (V - U V c l a s s .   T h e   s y s t e m   w a s   de ve l o pe us i n g   g l o b a l   s t a t i s t i c a l   t hr e s h o l ds   (G S T s )   o f   t i m e - b a s e f e a t ur e s   na m e l y ,   l o o f   s h o r t - t i m e   e n e r gy   (S T E )   a n d   z e r o - c r o s s i ng   r a t e   (Z CR a n d   M a m d a ni   i n f e r e n c e   m e t h o d   a s   t h e   e n gi n e .   S pe e c u t t e r a n c e s   f r o m   m a l e   a n d   f e m a l e   s pe a ke r s   o b t a i n e f r o m   R A V D E S S   d a t a b a s e   w e r e   e xt ra c t e us i n g   t h e   s pe c t r a l   f e a t u r e s ,     M F CC  a nd  L P C   a nd  f us e w i t h   t h e   p r o s o di c   f e a t ur e s ,   f i v e   fo r m a nt   f r e que n c i e s   i a a t t e m pt   t o   i m p r o v e   t h e   r e c o gn i t i o ra t e .   W e   s uc c e e de t o   s h o w   t ha t   t h e   p r o po s e s y s t e m ,   F IS   V - U V   s e gm e n t a t i o w h e n   e m pl oy e i n   E R S   r e s ul t e d   a   b e t t e pe r f o r m a n c e   o v e r   t h e   c o n v e n t i o n a l   E R S   w h i c y i e l de i n c r e m e nt   o f   a c c ura c y   ra t e   f r o m   3. 7%   t o   9 . 0%   o L P C - b a s e f e a t u r e s   us i ng   K N N   c l a s s i f i c a t i o a l go r i t h m .   Co m p a r i ng   b e t w e e n   ge n de r s ,     i t   s h o w s   t ha t   F IS   V - U V   s e gm e n t a t i o ha s   b e t t e c l a s s i f i c a t i o ra t e s   o f e m a l e   da t a b a s e   f o a l l   f o ur  t e s t e d   f e a t u r e   v e c t o r s   i . e .   M F CC ,   L P C ,   S F F   M F CC - f m nt   a n d   S F F   L P C - f m nt   a s   c o m pa r e t o   m a l e   d a t a b a s e .     T h e   f us i o n   o f   L P a n d   f o r m a nt s   na m e a s   S F F   L P C - f m nt   a l s o   s h o w e a   p r o m i s i ng  r e s ul t s   o f   1. 3%  t o   5. 1%   hi g h e i o v e r a l l   c l a s s i f i c a t i o r a t e   t h a i t s   b a s e l i n e   f e a t u r e s   f o r   t h i s   f o ur - c l a s s   p r o b l e m .   It   i s   a l s o   f o un t h a t   e m o t i o na l - f r e e   s pe e c h ,   n e u t r a l   w a s   c l a s s i f i e m o s t   c o r re c t l y   t h a o t h e r   e m o t i o n a l   s pe e c h   s uc h   a s   a n g r y ,   ha ppy   a n d   s a d   w i t h   s a d   c l a s s i f i e t h e   l o w e s t   ra t e .   T hi s   c a n   i ndi r e c t l y   m e a n   t h a t   e m o t i o n   t ra i t s   i n   s pe e c h   c o ul de gr a de   t h e   a u t o m a t i c   s pe e c h   r e c o gn i t i o s y s t e m s   i ge n e ra l .   A s   f i na l   c o n c l us i o n,   t h e   p r o po s e F IS   V - U V   s e gm e n t a t i o n   a c hi e v e t h e   h i g h e s t   o v e r a l l   c l a s s   m e a c l a s s i f i c a t i o n   ra t e s   o f   79. 1%  a nd  79 . 9 f o r   m a l e -   a n f e m a l e - s e n s i t i v e   E R S   r e s pe c t i v e l y   us i n S F F   M F C C - f m n t   f e a t u r e   f us i o t e c hni que .       R EF ER EN C ES   [ 1]   D .   G .   M y e r s ,   " T he o r i e s   o f   e m o t i o n , "   v o l .   50 0,   20 04.   [ 2]   J .   R .   Z hua ng ,   e t   al . ,   " T w o - di m e n s i o na l   e m o t i o n   e v a l u a t i o w i t h   m ul t i p l e   phy s i o l og i c a l   s i g na l s , "   A dv an c e s   i n   A f f e c t i v e   and  P l e as u r ab l e   D e s i g n.   A H F E   201 8.   A d v an c e s   i I n t e l l i ge nt   S y s t e m s   an C om pu t i n g,   v o l .   774 ,   2019 .   [ 3]   C .   L i ,   e t   a l . ,   " E m o t i o r e c o g ni t i o n   o f   hum a n   phy s i o l og i c a l   s i g na l s   ba s e d   o n   r e c ur s i v e   qua n t i t a t i v e   a na l y s i s , "     T e nt I n t e r nat i o nal   C on f e r e nc e   on   A d v anc e d   C om pu t a t i ona l   I n t e l l i ge nc e ,   pp .   217 - 22 3 ,   20 18 .   Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       F uz z y - bas e v oi c e d - un v oi c e d   s e gm e nt at i on  f o r…  ( Y us ni t a   M ohd  A l i )   205   [ 4]   B .   M .   G ha nd i ,   R .   N a g a r a j a n,   a nd  H .   D e s a ,   " R e a l - t i m e   s y s t e m   f o r   f a c i a l   e m o t i o de t e c t i o us i ng   G P S O   a l g o r i t hm , "   I E E E   Sy m po s i um   on  I nd us t r i al   E l e c t r on i c s   an A pp l i c at i on s ,   p p.   40 - 45 ,   2010 .   [ 5]   F .   Z .   S a l m a m ,   A .   M a da ni ,   a n d   M .   K i s s i ,   " E m o t i o n   r e c o g ni t i o f r o m   f a c i a l   e x pr e s s i o ba s e d   o n   f i duc i a l   po i n t s   de t e c t i o a nd   us i ng   n e ur a l   n e t w o r k , "   I nt .   J .   of   E l e c t .   a nd  C om p .   E n gi ne e . ,   v o l .   8 ,   p.   5 2,   20 1 8.   [ 6]   P .   H e r a c l e o us ,   e t   a l . ,   " S pe e c e m o t i o r e c o g ni t i o i n   no i s y   a nd  r e v e r be r a n t   e nv i r o nm e n t s , "   Se v e nt h   I n t e r na t i ona l   C onf e r e nc e   on   A f f e c t i v e   C om pu t i ng  and   I nt e l l i ge n t   I n t e r ac t i o n ,   pp .   262 - 266 ,   2018 .   [ 7]   L .   K e r k e ni ,   e t   a l . ,   " A   r e v i e w   o s p e e c e m o t i o r e c o g ni t i o n:   C a s e   o f   pe da g o g i c a l   i nt e r a c t i o i c l a s s r o o m , "   I nt e r n at i on al   C on f e r e nc e   on   A dv anc e d   T e c hno l og i e s   f or   S i gn al   an d   I m a ge   P r oc e s s i ng ,   p p.   1 - 7 ,   2 017 .   [ 8]   T .   S a s t e   a nd   S .   M .   J a g da l e ,   " E m o t i o n   r e c o g ni t i o f r o m   s pe e c h   u s i ng   M F C C   a nd   D W T   f o r   s e c ur i t y   s y s t e m , "   I nt e r n at i on al   c o nf e r e nc e   o f   E l e c t r on i c s ,   C om m un i c at i on   an A e r o s pac e   T e c hno l o gy ,   p p.   70 1 - 704 ,   2 017 .   [ 9]   N .   G a r c i a ,   e t   al . ,   " A ut o m a t i c   e m o t i o r e c o g ni t i o i c o m pr e s s e d   s pe e c u s i ng   a c o us t i c   a n no n - l i ne a r   f e a t u r e s , "     20t h   S y m pos i um   on   S i gn al   P r oc e s s i ng ,   I m age s   and   C om put e r   V i s i o n ,   pp .   1 - 7 ,   201 5.   [ 10]   L .   H e ,   " S t r e s s   a n d   e m o t i o n   r e c o g ni t i o n   i n   na t u r a l   s p e e c i n   t he   w o r a nd   f a m i l y   e nv i r o nm e n t s , "   Sc ho ol   of   E l e c t r i c al   and  C om pu t e r   E n gi ne e r i n Sc i e nc e ,   E n gi ne e r i ng  and   T e c hno l og y   P or t f o l i o ,   p .   218 ,   2010 .   [ 11]   M .   E l   A y a di ,   M .   S .   K a m e l ,   a n F .   K a r r a y ,   " S ur v e y   o s pe e c h   e m o t i o r e c o g ni t i o n:   F e a t u r e s ,   c l a s s i f i c a t i o s c he m e s ,   a nd  da t a b a s e s , "   P at t e r n   R e c og ni t i on,   v o l .   44,   p p.   57 2 - 587 ,   2 011 .   [ 12]   S .   F u r ui ,   " F i f t y   y e a r s   o f   pr o g r e s s   i n   s pe e c a nd   s pe a ke r   r e c o g ni t i o n, "   E C T I   T r a ns a c t i on   on   C om p ut e r   an d   I n f o r m at i on   T e c hnol o gy ,   v o l .   1 ,   p p.   64 - 74 ,   200 5.   [ 13]   M .   G ha i ,   S .   L a l ,   S .   D ug g a l ,   a n S .   M a n i k,   " E m o t i o r e c o g ni t i o o s pe e c s i g na l s   us i ng   m a c hi n e   l e a r ni ng , "   I nt e r n at i on al   C on f e r e nc e   on   B i D a t a   A na l y t i c s   an C om pu t at i o nal   I n t e l l i ge nc e ,   pp .   34 - 39 ,   2017 .   [ 14]   Z .   W a ng   a n d   I .   T a s he v ,   " L e a r ni ng   u t t e r a nc e - l e v e l   r e p r e s e n t a t i o ns   f o r   s p e e c h   e m o t i o n   a nd   a g e / g e nde r   r e c o g ni t i o n   us i ng   de e p   ne ur a l   ne t w o r ks , "   I E E E   I n t .   C onf e r e nc e   o A c ou s t i c s ,   Spe e c and  Si g na l   P r oc e s s i n g ,   pp .   515 0 - 5154 ,   2017 .   [ 15]   S .   R .   B a n de l a   a nd  T .   K .   K um a r ,   " S t r e s s e s pe e c e m o t i o r e c og ni t i o us i ng   f e a t ur e   f us i o o f   t e a g e r   e n e r g y   o pe r a t o r   a nd  M F C C , "   I n t e r nat i o nal   C on f e r e nc e   on   C om p ut i ng ,   C om m un i c a t i on   and   N e t w or k i ng   T e c hno l og i e s ,   p p.   1 - 5 ,   2 017 .   [ 16]   S .   R .   B a nde l a   a nd  T .   K .   K um a r ,   " E m o t i o R e c o g ni t i o o f   S t r e s s e S pe e c U s i ng   T e a g e r   E ne r gy   a nd  L i ne a r   P r e di c t i o F e a t ur e s , "   I E E E   18t I n t e r na t i o nal   C o nf e r e nc e   on   A d v an c e L e ar n i ng  T e c h nol ogi e s ,   pp .   4 22 - 425 ,   201 8.   [ 17]   S .   R e n j i t h   a n K .   G .   M a nj u,   " S pe e c b a s e e m o t i o r e c o g ni t i o i T a m i l   a nd   T e l ug us i ng   L P C C   a n hur s t   pa r a m e t e r s :   A   c o m pa r i t i v e   s t udy   us i ng   K N N   a nd   A N N   c l a s s i f i e r s , "   I nt e r na t i ona l   C on f e r e nc e   on   C i r c ui t ,   P ow e r   and  C om put i ng   T e c hn ol o gi e s ,   pp.   1 - 6 ,   2017 .   [ 18]   H .   J i a ng ,   e t   a l . ,   " I nv e s t i g a t i o o f   d i f f e r e n t   s p e e c t y pe s   a n e m o t i o ns   f o r   de t e c t i ng   d e pr e s s i o us i ng   d i f f e r e n t   c l a s s i f i e r s , "   S pe e c C om m un i c a t i on ,   v o l .   90 ,   pp.   3 9 - 46,   20 17.   [ 19]   A .   K ha l i l ,   e t   al . ,   " A ng e r   D e t e c t i o i n   A r a bi c   S p e e c D i a l o g s , "   I nt e r nat i ona l   C onf e r e nc e   on   C om pu t i ng  Sc i e nc e s   and   E ngi ne e r i n g ,   pp .   1 - 6 ,   20 18 .   [ 20]   T .   S .   G u na w a n ,   N .   A .   M .   S a l e h ,   a nd  M .   K a r t i w i ,   " D e v e l o pm e nt   o f   qur a ni c   r e c i t e r   i d e nt i f i c a t i o s y s t e m   u s i ng   M F C C   a nd  G M M   c l a s s i f i e r , "   I nt e r n at i on al   J o ur n al   o f   E l e c t r i c al   an C om p ut e r   E ngi ne e r i ng ,   v o l .   8,   pp .   37 2 - 378,   2 018 .   [ 21]   Y .   L i ,   e t   a l . ,   " C l a s s i f i c a t i o o f   v o i c e s   t ha t   e l i c i t   s o o t hi ng   e f f e c t   by   a ppl y i ng   a   v o i c e v s .   unv o i c e f e a t ur e   e ng i ne e r i ng   s t r a t e gy , "   I E E E   I n t e r na t i ona l   C on f e r e nc e   on  A c ou s t i c s ,   Spe e c and   Si gn al   P r oc e s s i ng ,   pp .   2 489 - 249 3 ,   20 16 .   [ 22]   M .   H r i c ,   M .   C hm u l í k,   I .   G uo t h ,   a nd   R .   J a r i na ,   " S V M   ba s e d   s pe a ke r   e m o t i o r e c o g ni t i o i n   c o nt i nuo us   s c a l e , "   2 5t I nt e r n at i on al   C on f e r e nc e   R ad i oe l e k t r on i k a ,   pp .   339 - 342 ,   201 5.   [ 23]   S .   R .   L i v i ng s t o ne ,   K .   P e c k ,   a nd   F .   A .   R us s o ,   " R A V D E S S :   t he   r y e r s o a ud i o - v i s ua l   da t a ba s e   o f   e m o t i o na l   s pe e c a nd   so ng , "   A nnua l   M e e t i n o f   t he   C ana di a S oc i e t y   f o r   B r a i n ,   B e ha v i o u r   a nd  C ogn i t i v e   Sc i e nc e K i ng s t o n,   20 12.   [ 24]   L .   A .   Z a de h,   " O u t l i n e   o f   a   N e w   A ppr o a c t o   t he   A na l y s i s   o f   C o m pl e x   S y s t e m s   a nd   D e c i s i o P r o c e s s e s , "   Sy s t e m s ,   M an   an C y be r ne t i c s ,   I E E E   T r ans ac t i o ns   on ,   v o l .   S M C - 3,   pp .   28 - 4 4,   197 3.   [ 25]   A .   A m i ndo us t ,   e t   a l . ,   " S us t a i na b l e   s upp l i e r   s e l e c t i o n:   A   r a nki ng   m o de l   ba s e d   o f uz z y   i nf e r e nc e   s y s t e m , "   A pp l i e d   So f t   C om put i ng ,   v o l .   12 ,   pp .   1668 - 16 77 ,   2012 .   [ 26]   B .   S .   A t a l   a nd  L .   R .   R a b i ne r ,   " P a t t e r n   r e c o g ni t i o a pp r o a c t o   v o i c e d - unv o i c e d - s i l e nc e   c l a s s i f i c a t i o w i t a pp l i c a t i o ns   t o   s pe e c r e c o g ni t i o n, "   I E E E   T r ans a c t i on s   on   A c o us t i c s ,   S pe e c h,   an S i gna l   P r oc e s s i ng ,   pp.   2 01 - 212 ,   1976 .   [ 27]   M .   M a l c a ng i ,   " S o f t c om put i ng   a pp r o a c t o   s e g m e nt a t i o o f   s p e e c i n   pho ne t i c   un i t s , "   I n t e r na t i ona l   J ou r na l   of   C om put e r   and   C om m u ni c at i on s ,   v o l .   3,   p p.   41 - 48 ,   200 9.   [ 28]   M .   A .   Y us n i t a e t   al . ,   " M a l a y s i a E ng l i s a c c e nt s   i de nt i f i c a t i o us i n g   L P C   a nd  f o r m a nt   a na l y s i s , "   I E E E   I n t e r na t i o nal   C onf e r e nc e   on   C on t r ol   Sy s t e m ,   C om p ut i ng   a nd  E ng i ne e r i ng ,   pp.   4 7 2 - 476 ,   20 11.       B I O G R A P H I ES   O F   A U T H O R S       Y us ni t a   M o hd  A l i   i s   a   s e n i o r   l e c t u r e r   a t   t he   F a c ul t y   o f   E l e c t r i c a l   E ng i ne e r i ng ,   U n i v e r s i t i   T e k no l o g i   M A R A ,   P e na ng   C a m pus ,   M a l a y s i a .   S he   r e c e i v e he r   P hD   D e g r e e   i M e c ha t r o ni c   E ng i n e e r i ng   f r o m   U ni v e r s i t i   M a l a y s i a   P e r l i s   i n   201 s pe c i a l i z i ng   i A udi o / A c o us t i c   E ng i ne e r i ng .   S he   w a s   c o n f e r r e d   w i t h   a   M a s t e r   D e g r e e   i n   E l e c t r o ni c s   S y s t e m   D e s i g E ng i ne e r i ng   f r o m   U n i v e r s i t y   S a i n s   M a l a y s i a   i 2 004 .   S he   c o m pl e t e he r   B a c he l o r   D e g r e e   i E l e c t r i c a l   &   E l e c t r o ni c s   E ng i ne e r i ng   f r o m   t he   s a m e   un i v e r s i t y   i 1998 .   H e r   f i e l d   o f   i nt e r e s t   i nc l ude s   s pe e c pr o c e s s i ng ,   s pe e c a n a l y s i s ,   hum a n - m a c hi ne   i n t e r a c t i o n,   b r a i n - m a c hi n e   c o m m uni c a t i o n   a nd   a r t i f i c i a l   i n t e l l i g e nc e .       Evaluation Warning : The document was created with Spire.PDF for Python.