I nte rna t io na l J o urna l o f   E lect rica l a nd   Co m p ute E ng in ee ring   ( I J E CE )   Vo l.   11 ,   No .   6 Dec em b er   202 1 ,   p p .   5 4 3 8 ~ 5 4 4 9   I SS N:  2088 - 8708 DOI : 1 0 . 1 1 5 9 1 / i j ec e . v 11 i 6 . pp 5 4 3 8 - 5 4 4 9           5438       J o ur na l ho m ep a g e h ttp : //ij ec e. ia esco r e. co m   E m o tion r ecog nit io n f ro m  sy lla bic  u nits  u sing   k - nea rest - neig hbo r   cla ss ific a tion a nd  e nerg y   d istribut io n       Abdella h Ag ri m a 1 ,   I l ha m   M o un ir 2 ,   Abdel m a j i d F a rc hi 3 ,   L a ila   E l m a a zo uzi 4 ,   B a dia   M o un ir 5     1, 3 IM M L a b o ra t o ry ,   F a c u lt y   o f   S c ien c e s a n d   T e c h n ics ,   Un iv e rsity   Ha ss a n   F irst,   S e tt a t,   M o r o c c o   2, 4, 5 L A P S S II  L a b o ra to ry ,   Hig h   S c h o o o f   T e c h n o lo g y ,   Un iv e rsit y   C a d Ay y a d ,   S a f i,   M o ro c c o       Art icle  I nfo     AB ST RAC T   A r ticle  his to r y:   R ec eiv ed   J u l 2 1 ,   2 0 20   R ev i s ed   A p r   2 6 ,   2 0 2 1   A cc ep ted   J u n   1 2 ,   2 0 2 1       In   th is  a rti c le,  w e   p re se n a n   a u to m a ti c   te c h n iq u e   f o re c o g n izin g   e m o ti o n a l   sta tes   f ro m   sp e e c h   sig n a ls.  T h e   m a in   f o c u o f   th is  p a p e is  to   p re se n a n   e ff ici e n a n d   re d u c e d   se o f   a c o u stic  fe a tu re th a a ll o ws   u to   re c o g n ize   th e   f o u b a sic   h u m a n   e m o ti o n (a n g e r,   sa d n e ss ,   jo y ,   a n d   n e u tral) .   T h e   p ro p o se d   f e a tu re v e c to is  c o m p o se d   b y   t w e n t y - e ig h m e a su re m e n ts  c o rre sp o n d i n g   to   sta n d a rd   a c o u st ic f e a tu re s su c h   a s   f o r m a n ts,  f u n d a m e n tal  f re q u e n c y   (o b tai n e d   b y   P ra a so f t wa re a w e ll   a s   in tro d u c in g   n e w   f e a tu re b a s e d   o n   th e   c a lcu latio n   o f   th e   e n e rg ies   in   so m e   sp e c i f ic  f re q u e n c y   b a n d a n d   t h e ir   d istri b u ti o n (th a n k to   M ATLAB  c o d e s).  T h e   e x trac ted   m e a su re m e n ts  a re   o b tai n e d   f ro m   s y ll a b ic  u n it s’  c o n so n a n t/ v o w e (CV d e riv e d   f ro m   M o ro c c a n   A ra b ic  d iale c e m o ti o n a d a ta b a se   (M A DED)  c o rp u s.  T h e re a f ter ,   th e   d a ta   w h ich   h a b e e n   c o ll e c ted   is  th e n   train e d   b y   a   k - n ea r est - n eig h b o r   ( KNN)   c las si f ier  to   p e rf o r m   th e   a u to m a ted   re c o g n it io n   p h a se .   T h e   re su lt re a c h   6 4 . 6 5 %   in   th e   m u lt i - c las c la ss if ic a ti o n   a n d   9 4 . 9 5 %   f o c l a ss if i c a ti o n   b e tw e e n   p o siti v e   a n d   n e g a ti v e   e m o ti o n s.   K ey w o r d s :   E m o tio n   r ec o g n itio n   KNN    Sp ee ch   s i g n a l   S y llab le s   u n its   T h is i a n   o p e n   a c c e ss   a rticle   u n d e r th e   CC B Y - SA   li c e n se .     C o r r e s p o nd ing   A uth o r :   Ag r i m A b d ellah     I MI I   L ab o r ato r y   Facu lt y   o f   Sc ien ce s   an d   T ec h n ics   Un i v er s it y   Has s an   First   FS T   o f   Settat,  K m   3 ,   B . P : 5 7 7   R o ad   o f   C asab lan ca ,   Set tat,   Mo r o cc o   E m ail:  a g r i m a. ab d ella h @ g m ai l.c o m       1.   I NT RO D UCT I O N     I n ter p r etin g   e m o tio n al  i n f o r m atio n   i s   i m p er ati v f o r   th s o cial  in ter ac tio n s   t h at  w h a v ev er y   d a y   [ 1 ] ,   [ 2 ] .   T h is   in v o lv e s   m a n y   d if f er en co m p o n e n ts   s u c h   as  b o d y   la n g u a g e,   p o s tu r e,   f ac ial  a n d   v o ca l   ex p r ess io n s .   An y   i n f o r m atio n   th at  r elate s   t o   th e s co m p o n e n ts   is   u s u all y   o b tain ed   f r o m   p h y s io lo g ical  s e n s o r s ,   s o u n d ,   o r   im a g [ 3 ] - [ 8 ] .   T h d ata  is   m a n ip u lated   o f   v e r y   lo w   lev e ( s o u n d   s a m p les   o r   ev en   p ix els  o f   i m a g es).   B et w ee n   t h i s   lo w - le v el  d ata  an d   t h i n ter p r etatio n   t h at  h u m an s   m ak o f   it,  t h e   g ap   is   e n o r m o u s .   I n d ee d ,   th m a n i f estat io n   o f   e m o tio n s   i s   a n   e s p ec iall y   i n tr icate   ar ea   o f   h u m a n   co m m u n icatio n   l y i n g   at   th e   in ter s ec tio n   o f   m u lt id is cip li n a r y   s cien ce s   s u ch   as  p s y c h o lo g y ,   p s y ch ia tr y ,   au d io lo g y ,   an d   co m p u ter   s cie n ce   [ 9 ] - [ 1 1 ] .   T h an al y s i s   o f   c o n v er s atio n s   s p ee c h   an a l y t i cs’ ,   i s   o n o f   t h r ec e n c h alle n g e s   i n   m a n y   ap p licatio n s ,   f o r   ex a m p le,   h e alth   m o n ito r i n g   [ 1 2 ] ,   v id eo   g a m es  [ 1 3 ] ,   an d   co m p u ter   s cie n ce   [ 1 4 ] .   A   t y p ica l   d o m ai n   o f   lear n in g   e m o tio n al  s tate  f r o m   an a l y s is   o f   c o n v er s atio n s   is   ca ll  c e n ter s .   I n d ee d ,   b etter   u n d er s ta n d in g   o f   t h n ee d s   o f   cu s to m er   m ea n s   f o r   th en t er p r is b etter   m a n ag e m e n an d   g r ea ter   b en ef it   [ 1 5 ] - [ 1 7 ] .   T h s cien ce   o f   lear n in g   la y s   o n   d ata  w h ic h   co m u s u all y   f r o m   d if f er en s ig n al s .   On o f   th m o s t   f r eq u en tl y   u s ed   s i g n als  is   t h s p ee ch   s ig n al.   Sp ee c h   i s   i n d ee d   o n o f   t h f u n d a m en tal  m o d alities   t h at  m e n   u s e   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J   E lec  &   C o m p   E n g     I SS N:  2088 - 8708       E mo tio n   r ec o g n itio n   fr o s ylla b ic  u n its   u s in g     ( A b d ella h   A g r ima )   5439   to   co m m u n icate .   Au to m a tic  s p ee ch   r ec o g n itio n   s y s te m s   g i v th m ac h i n t h ab ilit y   to   tr an s f o r m   th s o u n d   s ig n al  in to   s er ies  o f   w o r d s .   T h f ield   o f   au to m atic  la n g u a g p r o ce s s in g   p r o v id es  ac ce s s   to   th m ea n i n g   o f   th is   s er ie s   o f   w o r d s .   Star tin g   f r o m   t h ese  to o ls   ( r elativ el y   e f f ec tiv e) ,   it  is   n ec ess ar y   to   g o   f u r th er .   T h q u esti o n   is   n o   lo n g er   m er el y   ab o u k n o w i n g   w h at  i s   s aid ,   b u also   to   k n o w   t h co n te x o f   t h p r o n u n c iatio n   o f   th e   s en te n ce .   I is   at  th is   le v el  th a th e m o tio n a d i m en s io n   i n t er v en es.  E m o tio n   r ec o g n itio n   is   d if f ic u lt  er r an d   s in ce   it s   ex p r ess io n   an d   p er ce p tio n   v ar y   e x tr ao r d in ar il y   a cr o s s   cu lt u r es,  s p o k e n   lan g u a g es,  an d   s e n te n ce s   [ 1 8 ] - [ 2 1 ] .   L ik an y   e m e r g i n g   f ield ,   it  h a s n 't  b ee n   co m p lete l y   w ell - es tab lis h ed   y et,   b u to   q u alif y   e m o tio n al   s p ee ch ,   r esear c h er s   h av e   atte m p ted   to   r ep r esen t   it  b y   v ar io u s   d e s cr ip to r s   r elate d   to   s p o k en   co n ten t   ( I f   w d o   n o tak e   in to   ac co u n th e   v ar iatio n   o f   th s e n ten ce ,   i is   d if f icu lt  to   d if f er e n tiate  b et w e en   li n g u i s tic  a n d   e m o tio n al   v ar iatio n ) ,   ar ticu lat o r y   p o s it io n   ( p o s itio n   o f   t h j a w   ac co r d in g   to   th e   p r o n o u n ce d   e m o tio n )   [ 2 2 ] ,   an d   ac o u s tic  p r o p er ties   [ 2 3 ] ,   [ 2 4 ] .   T h co n tr ib u tio n   w ar p r ese n ti n g   h er w i s h   to   g ai n   an   u n d er s tan d in g   o f   t h s u b j ec an d   ex p o s in g   an   ex p lo r ato r y   asp ec o f   it.  Fir s t,  u n li k th m aj o r ity   o f   t h e x is t in g   w o r k ,   w w ill  co n s id er   A r ab ic  p h o n e m es   C ( p lo s i v co n s o n a n t/ v o w e l )   in s tead   o f   w h o le  s e n te n ce s .   Seco n d ,   w w il lo o k   at   d ata  ac o u s tic  f ea t u r es  i n   t er m s   o f   e n er g y   a n d   it s   d is tr ib u tio n   i n   s o m e   s p ec i f ic  b a n d s .   Fin a ll y ,   to   lear n   f r o m   t h co n s tr u cted   d ata  s e ts   an d   p r ed ict  e m o tio n al  s tate  o f   s p ea k er ,   w u s t h i n s ta n ce - b ased   class i f icat io n   al g o r ith m s   k - n ea r est - n ei g h b o r   ( KNN) .   Ov er   th p ast  f i f tee n   y ea r s ,   i n cr ea s i n g   n u m b er   o f   r esear c h er s   h av b ee n   in ter ested   in   t h s tu d y   o f   e m o tio n s   in   s p ee ch   [ 2 5 ] .   Fro m   d ata  lab elled   e m o tio n all y ,   f ea tu r s et  b ased   o n   s p ec tr o - te m p o r al  f ea t u r es ( f o r   in s ta n ce   p itc h ,   i n ten s it y ,   an d   en er g y   o f   th s p ee ch   t h at  a r ex tr ac ted   u s in g   al g o r ith m s )   is   d ev elo p ed   f o r   p r o ce s s in g   t h v o ice  s i g n al.   Su p r a - s eg m e n tal  r ep r esen tat io n s   ( also   ca lled   lo w - lev el  d es cr ip to r s   ( L L D) )   ar e   d er iv ed   f r o m   li n g u i s tic  u n it s   s u ch   as  s e n te n ce s ,   w o r d s ,   o r   p h o n e m e s   [ 2 6 ] ,   [ 2 7 ] .   Hig h - le v el  d escr ip to r s   ( HL D)   s u c h   a s   i n   [ 2 8 ] - [ 3 0 ]   ar co m m o n l y   ex tr ac ted   b y   co m p u ti n g   v ar io u s   s ta tis tic s   f r o m   t h L L Ds  o v er   th e   d ef in ed   lin g u i s tic   u n it s .   T h s ize  o f   t h f ea t u r s et  e x ce ed s   t h o u s a n d s   ( H L a n d   L L D)   co n ti n g e n u p o n   t h n u m b er   o f   s tatis t ics  ex tr ac ted .   T h d is cr i m i n ati n g   cla s s i f ie r s   ar th e n   tr ain ed   o n   th ese  h i g h - lev el  ch ar ac ter is tic s   f o r   m u ltit u d o f   ta s k s   s u ch   a s   b in ar y   ( v ale n ce ,   ac ti v atio n )   o r   ca t eg o r ical  ( h ap p y ,   s ad ,   j o y ,   s ad ,   etc. )   class i f icatio n s   as  w ell   as  r e g r ess io n   o n   co n ti n u o u s   e m o tio n al  attr ib u tes.  M an y   clas s i f icatio n   ap p r o ac h es  h av e   b ee n   ap p lied   to   em o tio n   r ec o g n itio n   s y s te m s   ( SER).   I n d ee d ,   th h y b r id   Gau s s ia n   m ix t u r m o d el  ( GM M) ,   n eu r al  n et w o r k   w it h   ( R B F,  P NN,   SVM,   E L M)   [ 3 1 ] ,   [ 3 2 ] ,   an d   h id d en   Ma r k o v   m o d el  ( HM M)   [ 3 3 ]   w er u s ed   to   g e n er ate  a   m o d el  o f   r ec o g n itio n   b y   e m o t i o n   an d   b y   g e n d er   ( m a n / w o m a n )   o f   th s p ea k er .   A l s o ,   s u p p o r v ec to r   m ac h i n e   ( SVM)   co m b i n ed   w it h   p o l y n o m ial  n u c leu s   w as  ap p lie d   f o r   m u lt i - cla s s   a n d   m u lti - co r p u s   r ec o g n itio n   s y s te m s   [ 3 4 ] ,   [ 3 5 ] .   R ec en tl y ,   d ee p   n eu r al  n et w o r k s   ( DN Ns)  [ 3 6 ]   h av b ee n   d esi g n e d   to   ad d r ess   SER   p r o b lem s .   O n o f   t h ad v a n ta g es  o f   th i s   ap p r o ac h   is   tr an s f e r   lear n in g .   T r an s f er   lear n in g   c o n s is ts   o f   lear n i n g   th f ir s t la y er s   o f   th n et w o r k   p er f o r m in g   j o in t o p er atio n s   f r o m   o n co r p u s   to   an o t h er ,   o r   f r o m   o n e m o tio n   to   an o th er - o n   m o r d at th a n   t h d ee p er   lay er s   a s s i g n ed   to   s p ec if ic  ta s k   [ 3 7 ] .   Kay a n d   Kar p o v   [ 3 8 ]   u s ed   k er n el  e x tr e m lear n in g   m ac h in es  ( E L M) ,   ad ap ted   to   b ase  o f   f e w   s a m p les  f o r   m an y   c h ar ac ter is tic s .   T h e y   also   p r o p o s ed   n e w   m eth o d   o f   n o r m alizi n g   t h c h ar ac ter is ti cs  as  a n   a lter n ati v to   th e   s ta n d ar d   n o r m al izatio n   o f   ce n ter i n g - r ed u ctio n .   T o   s u m m ar ize  th s tate - of - th e - ar t o f   th f ie ld ,   w r ef er   t h r ea d er   to   T ab le  1 .   I n   o u r   s tu d y ,   w i n v e s ti g ate  t h u til izatio n   o f   s p ee c h   s i g n al s   f o r   d etec tin g   e m o tio n .   W p r o p o s an   e m o tio n   r ec o g n itio n   m eth o d   f r o m   v o ca d ata  b ased   o n   s i g n al  p r o ce s s i n g   al g o r ith m   as  s h o w n   i n   Fi g u r 1 .   Ou r   m et h o d   co n s is t s   o f   th r ee   s tep s ( 1 )   d ata  p r ep a r atio n   ( 2 )   s p ee ch   f ea t u r es  ex tr ac tio n   a s   s h o w n   i n   T ab le  2 ,   an d   ( 3 )   class if icat io n   u tili zi n g   th KNN  al g o r ith m .           Fig u r 1 .   Glo b al  s p ee ch   e m o ti o n   r ec o g n itio n   s y s te m   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 0 8 8 - 8708   I n t J   E lec  &   C o m p   E n g ,   Vo l.  11 ,   No .   6 Dec em b er   2021     5 4 3 8   -   5 4 4 9   5440   T ab le  1 .   A   b r ief   s u m m ar y   o f   S E R   w ith   d i f f er en t d atab ases ,   d if f er en f ea t u r es a n d   clas s i f ica tio n   alg o r it h m s   R e f e r e n c e s   D a t a se t   F e a t u r e s   M o d e l s/ C l a ssi f i e r s   B e st   r e su l t   H a n   e t   a l .   [ 3 9 ]   I EM O C A P - DB   P i t c h - b a se d   f e a t u r e s,   a n d   t h e i r   d e l t a   f e a t u r e   a c r o ss  t i me   f r a me s.   M F C C   C o e f f i c i e n t s,   D N N   a n d   Ex t r e me   L e a r n i n g   M a c h i n e     5 4 . 3 0 %   a v e r a g e   r e c o g n i t i o n   r a t e .   D e n g   e t   a l .   [ 4 0 ]     A B C   D B ,   A I B O   D B ,   S U S A S   DB   L o w - L e v e l   D e scri p t o r s   D e n o i si n g   a u t o - e n c o d e r s   a n d   S V M     6 4 . 1 8 %   r e c o g n i t i o n   r a t e   f o r   A B C   D B .     6 2 . 7 4 %   a v e r a g e   r e c o g n i t i o n   r a t e   f o r   S U S A S   D B .   M i r sa ma d i   e t   a l .   [ 4 1 ]   I EM O C A P   c o r p u s   A u t o mat i c a l l y   l e a r n e d   b y   D R N N ,   a s   w e l l   a s h a n d - c r a f t e d   L L D s   c o n si st i n g   o f   F 0 ,   v o i c i n g   p r o b a b i l i t y ,   f r a me   e n e r g y ,   Z C R ,   a n d   M F C C   D e e p   R N N     P r o p o se d   sy st e w i t h   r a w   sp e c t r a l   f e a t u r e s h a s   6 1 . 8 r e c o g n i t i o n   r a t e .       P r o p o se d   sy st e w i t h   L L D   f e a t u r e s h a s   6 3 . 5 r e c o g n i t i o n   r a t e .   M a o   e t   a l .   [ 4 2 ]   S A V EE  D B ,   B e r l i n   EM O   D B ,   D ES D B ,   M ES   D B   A u t o mat i c a l l y   l e a r n e d   b y   C N N   C N N     7 3 . 6 a c c u r a c y   f o r   S A V EE  D B .     7 9 . 9 f o r   D ES D B .     7 8 . 3 f o r   M ES D B .     8 5 . 2 f o r   E M O D B .   I ssa,   D i a s,  e t   a l .   [ 4 3 ]   R A V D ESS ,   B e r l i n   EM O   D B ,   I EM O C A P   M e l - f r e q u e n c y   c e p st r a l   c o e f f i c i e n t s ( M F C C s) ,   C h r o ma - g r a m,   M e l - sca l e d   sp e c t r o g r a m,   S p e c t r a l   c o n t r a st   f e a t u r e ,   T o n n e t z   r e p r e se n t a t i o n .   D e e p   C N N     7 1 . 6 1 %   f o r   R A V D ESS   D B   w i t h   8   c l a sse s.     8 6 . 1 f o r   E M O - D B   7   c l a sse s.     9 5 . 7 1 %   f o r   EM O - D B   w i t h   7   c l a sse s.     6 4 . 3 f o r   I EM O C A P   w i t h   4   c l a sse s.   S i n i t h   e t   a l .   [ 4 4 ]   B e r l i n - Emo   S A V EE   P i t c h ,   i n t e n s i t y ,   M F C C   S u p p o r t   V e c t o r   R e g r e ssi o n     M a l e s:   6 7 . 5   %.     F e mal e s :   7 0 % .       B o t h :   7 5 %,   6 1 . 2 5 %       2.   P RO P O SE M E T H O D   I n   th i s   ar ticle,   n e w   c h ar ac t er is tic  ex tr ac tio n   s ch e m is   p r o p o s ed   w h ic h   is   b ased   o n   p s eu d o - p h o n etic  ap p r o ac h   [ 4 5 ] ,   [ 4 6 ] .   T h k e y   p o in o f   o u r   w o r k   i s   t o   ex tr ac th ch ar ac ter i s tics   ac co r d in g   to   d if f er e n t   s eg m e n ts   s u ch   as  t h s y l lab ic  u n it s   to   r em ed y   t h lin g u is t ic  v ar iatio n   co n s tr ain t.  T h ese  s e g m en t s   ar id en ti f ied   b y   m a n u al  s eg m e n t atio n   o f   t h s p ee ch   s i g n al.   O u r   d ev elo p ed   m et h o d   is   b ased   o n   ex tr ac tin g   c lu e s   u tili zi n g   s i g n a p r o ce s s in g   m eth o d s .   L o w - lev e d escr ip to r s   ( L L D s )   an d   h i g h - le v el  d esc r ip to r s   ( HL Ds)  as   s h o w n   i n   T ab le  2   ar o b tain ed   f r o m   v o ice  s ig n al  lab el led   b y   f o u r   e m o tio n s   ( a n g er ,   s ad n es s ,   j o y ,   a n d   n eu tr al) .   E ac h   c h o s e n   a u d io   s e q u en ce   m u s t   f ir s tl y   s atis f y   t h au d ib ilit y   cr iter io n   an d   t h er ea f ter   p ass es   th r o u g h   th f o llo w i n g   p r o ce s s :     Mo d u latin g   th s ig n al  ac co r d in g   to   s et  o f   co n tex tu al,   c u lt u r al,   an d   lin g u i s tic  v ar iab le s   w h o s p u r p o s is   to   allo w   co m m u n ica tio n   ( e m o tio n al  o r   n o t) ,     C ap tu r i n g   t h s i g n al  p r o d u ce d   b y   t h s p ea k er ,     An n o tatin g   t h s i g n a l [ 4 7 ] ,     Seg m en tin g   t h s i g n al  in   s y l la b ic  f o r m at,     E x tr ac tin g   ac o u s tic  f ea tu r e s   b y   u s in g   s ig n al  p r o ce s s i n g   tec h n iq u e s ,     C las s i f y i n g   u s in g   K - NN  al g o r ith m .       T ab le  2 .   Hig h   an d   lo w - le v el  s ettin g s   f o r   th e m o t io n   r ec o g n itio n   s y s te m   L o w - l e v e l   d e scri p t o r s   H i g h - l e v e l   d e scri p t o r s   T h e   f o u r   f i r st   f o r man t s   I n t e n si t y   P i t c h   Ji t t e r   ( L o c a l ,   A b so l u t e )   S h i mm e r   ( L o c a l ,   a b so l u t e )   P u l se s   T h e   e n e r g y   i n   t h e   si x   b a n d s ( 1 ,   2 ,   3 ,   3 ,   4 ,   5 ,   6 )   P e r c e n t a g e   o f   e n e r g y   i n   t h e   s i x   b a n d ( 1 ,   2 ,   3 ,   3 ,   4 ,   5 ,   6 )   S t a n d a r d   d e v i a t i o n   M e d i a n   p i t c h   M e a n   p i t c h   M a x i m u m   p i t c h   M i n i m u m   p i t c h       2. 1 .     Da t a   prepa ra t i o n   An y   s cie n ti f ic  s t u d y   i n   m ac h i n lear n i n g   is   ex tr e m el y   d ep en d en o n   t h d ata  th at  i s   u s ed   to   d escr ib th p h e n o m e n o n   to   b m o d elled .   T h er ef o r e,   th co llectio n   o f   in f o r m at io n   ad ap ted   to   th task   t h at  w w an to   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J   E lec  &   C o m p   E n g     I SS N:  2088 - 8708       E mo tio n   r ec o g n itio n   fr o s ylla b ic  u n its   u s in g     ( A b d ella h   A g r ima )   5441   m o d el  b ec o m e s   m aj o r   is s u f o r   o b tain in g   d et ec tio n   m o d el  w it h   s u f f ic ien t l y   s tr o n g   g e n er aliza tio n   p o w er .   No w ad a y s   t h er h a s   b ee n   s o m g en u i n w o r k   in   th zo n e   o f   e m o t io n   r ec o g n itio n   i n   g en er al  an d   e m o tio n   f r o m   s o u n d   s p ec i f icall y h o w e v er ,   an   en o r m o u s   p o r tio n   o f   t h is   w o r k   h as  b ee n   as s es s ed   o n   ac ted   s p ee ch   [ 4 8 ] ,   [ 4 9 ] ,   an d   v er y   litt le  w o r k   h as  b ee n   d o n o n   r ea l a n d   s p o n tan eo u s   s p ee ch   [ 5 0 ] .   T h s tu d y   p r ese n ted   i n   t h is   ar ticle  is   lo ca ted   i n   t h co n te x o f   e m o tio n   d etec tio n   d u r in g   i n ter ac tio n s   b et w ee n   Mo r o cc an   citize n s ,   a g ed   1 6 6 0   y ea r s   ex p r es s i n g   f o u r   b a s ic  e m o t io n s : h ap p in e s s ,   an g er ,   n eu tr al  s tate,   an d   s ad n ess .   O u r   co r p u s   Mo r o cc an   A r ab ic  d ialec e m o tio n al   d atab ase  ( M A DE D )   is   o b tai n ed   f r o m   u n co n tr o lled   r ec o r d in g s ,   co ll ec ted   f r o m   r ea s it u atio n s   t h a ca n   b ex tr e m el y   d i v er s e.   T h s elec ted   s u b s et  in cl u d es  s it u atio n s   tak i n g   p lace   in   d if f er e n co n tex ts   ( in d o o r ,   o u td o o r   s ce n es,  m o n o lo g u e,   an d   d ialo g u e) .   T h e m o tio n s   ar v alid ated   a n d   la b elled   b y   t h i n ter f ac s h o w n   in   Fig u r 2   b u ilt   b y   o u r   tea m .   Firstl y ,   t h d ata  s et   is   ch a n g ed   o v er   to   . w av   f o r m a an d   cu in to   s y llab ic  s tr u ct u r as  b ein g   t h b asic  u n it  s i m ilar   to   th ess en tial   u n i o f   o u r   h a n d li n g .   T h en   it  g o es  t h r o u g h   a n o th er   cla s s i f ic atio n   s tep   o f   t h s y llab ic  t y p s to r ed   in   t h s a m e   f o ld er .           Fig u r 2 .   Desk to p   an n o tatio n   t o o l u s ed   f o r   e m o tio n   e v alu a tio n       I n   th liter atu r e,   th er is   g r e at  d ea o f   d is cu s s io n   o n   t h len g t h   o f   t h au d io   f o r   w h ich   t h em o tio n   ca n   b ex tr ac ted   d ep en d ab ly   [ 5 1 ] - [ 5 4 ] .   I n   o u r   s tu d y ,   w p r o p o s b asic  m et h o d o lo g y   f o r   s eg m e n ti n g   t h e   au d io   b ased   o n   p s eu d o - p h o n etic  ap p r o ac h .   T h m ain   id e is   to   ex tr ac s o m f ea t u r es  l ik ( f o r m a n ts ,   p itc h ,   an d   en er g ies  i n   s ix   b an d s )   f r o m   t h s p ee c h   s i g n al  ac co r d in g   to   th s y llab ic  s e g m e n ( C V) ,   w h er C   in d icate s   C o n s o n an t a n d   Vo w el.   Fo r   all  o u r   ex p er i m e n ts ,   w co n s id er ed   o n ly   f o u r   e m o tio n s ,   in   p a r ticu lar ,   j o y ,   an g er ,   s ad n es s ,   an d   n eu tr al  b ec au s t h r u le - b ased   e m o tio n   ex tr ac ti o n   s y s te m   t h at  w u s ed   ca ter ed   to   o n l y   th e s f o u r   e m o tio n s .   T h er w er 9 7 9   s o u n d   r ec o r d s   r elatin g   to   th e s 4   e m o tio n s ,   s p ec if ica ll y   2 5 0   s y l lab les  f o r   /b a/,   2 4 0   f o r   /Du /,  2 7 0   f o r   /Ki/,  an d   2 1 9   f o r   /T a/  as sh o w n   in   T ab le   3 .         T ab le  3 .   Nu m b er   o f   au d io   f ile s   co r r esp o n d in g   to   4   e m o tio n s   V a r i a b l e   N   J   S   A   /b a/   51   63   66   70   /Du /   62   62   50   66   /Ki/   70   60   54   86   /T a/   54   50   54   61   N o t e :   N :   n e u t r a l ,   J:   j o y ,   S :   sad n e ss,  A :   a n g e r       2 . 2 .     Sp ee ch  f ea t ures e x t ra ct i o n   A t   p r esen t,   th er is   n o   a g r ee m en o n   t h b est   ar r an g e m e n o f   i m p o r tan d e s cr ip to r s   f o r   a n   au to m at ic   e m o tio n   r ec o g n i tio n   s y s te m .   T h m o s w ell - k n o w n   p r ac ti ce   is   to   s elec t   lar g e   n u m b er   to   h a v r ic h er   class i f icatio n .   Ho w e v er ,   in cr ea s in g   t h n u m b er   o f   d escr i p to r s   to o   h ig h   f o r   co r p u s   o f   r ed u ce d   s ize  ca n   p o s s ib l y   lead   to   p e r f o r m a n ce   d eg r ad atio n   an d   ac co r d in g l y   b co u n ter p r o d u ctiv e.   T o   s o lv th is   p r o b lem ,   it  is   n ec es s ar y   to   ad o p n e w   s tr ateg y   th a w ill  m a k it  p o s s i b le  to   r ed u ce   th n u m b er   o f   d escr ip to r s   w h ile   k ee p in g   an   ac ce p tab le  r ec o g n i tio n   r ate.       Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 0 8 8 - 8708   I n t J   E lec  &   C o m p   E n g ,   Vo l.  11 ,   No .   6 Dec em b er   2021     5 4 3 8   -   5 4 4 9   5442   T h s y s te m   w p r o p o s is   co m p o s ed   o f   s ta n d ar d   ac o u s tic  f ea tu r es   a s   s h o w n   i n   T ab le  2   th at  s er v ed   a s   th ch alle n g b aselin s e s in ce T h in ter s p ee ch   e m o tio n   ch alle n g 2 0 0 9   [ 5 5 ] .   T h n o v e lt y   co m es  f r o m   t h e   w a y   w co m p u ted   t h en er g y   o f   th C s eg m e n ts   [ 5 6 ] .   T h m ai n   to o ls   w u s ed   ar M A T L A B   co d es  an d   t h to o lb o x   P r aa [ 5 7 ] ,   [ 5 8 ] .       2 . 3 .     Co m p uta t io n o f   lo g a rit h m ic  ener g y   cha ra ct er is t ics ba s ed  o n DF T   I n   th p r e - p r o ce s s i n g   p h ase,   w d iv i d ed   th s p ee ch   s i g n al,   s a m p led   at  2 2 0 5 0   Hz,   in to   ti m s eg m en ts   o f   1 1 . 6   m s   w it h   a n   o v er lap   o f   9 . 6   m s .   T h er ea f ter   w a p p lied   h a m m i n g   w i n d o w i n g   to   ea c h   s eg m e n t   f o llo w ed   b y   ze r o - p ad d in g .   Fi n all y ,   w ca lcu lated   5 1 2 - p o in d is cr ete  f o u r ier   tr an s f o r m .   No w ,   to   co m p u te  th e   en er g y   a n d   its   d is tr ib u tio n   f o r   ea ch   s y llab le   as   s h o w n   in   Fig u r 3 ,   w ch o s s i x   s p ec i f ic  b a n d s   o f   f r eq u en c y   as   in   [ 5 9 ] ,   [ 6 0 ] ( 1   : 0 400   Hz ) ;   2   : 400 800   Hz 3   : 800 1200   Hz 4   : 1200 2000   Hz 5   : 2000 3500   Hz      6   : 3500 5000   Hz ) .           Fig u r 3 .   B lo ck   d iag r a m   o f   t h co m p u te  o f   e n er g y   in   s ix   b a n d s       T h ese  f r eq u e n c y   b a n d s   co r r esp o n d   in   f ac to   ea c h   p ar o f   t h v o ca tr ac t.  Fro m   t h s m o o th ed   s p ec tr u m   X( n , s )   ( t h s ca le  s p e ctr u m   f o r   ea ch   f r a m w as  s m o o th ed   b y   2 0   p o in m o v in g   a v er ag ta k e n   alo n g   th ti m in d e x   n ) ,   w ca lcu late d   th en er g y   i n   ea ch   b an d   b y   ( 1 ) :     ( ) = 10 l og 10   | ( , ) | 2        ( 1 )     w h er t h b an d   r ec o r d   B   g o es  f r o m   1   to   6 .   T h f r eq u en c y   in d ex   s   r an g es   f r o m   t h DF T   ( Dis cr ete  Fo u r ier   T r an s f o r m )   i n d ices   r ep r esen ti n g   b o u n d ar ies  ( t h lo w er   a n d   u p p er )   f o r   ea c h   f r eq u e n c y   b an d . Af ter   th at,   t h n o r m aliza t io n   is   ap p lied   to   ea ch   f r a m e,   ac co r d in g   to   ( 2 ) :      ( ) = ( ) ( )       ( 2 )     w h er   is   th s ta n d ar d ized   b a n d   en er g y   B   i n   t h f r a m n ,   ( n )   is   t h g en er al  e n er g y   in   t h f r a m e   n   an d     ( ) is   th b an d   e n er g y   B   i n   th f r a m n.       3.   T H E   R E CO G NI T I O M O DE L   T h r ec o g n itio n   m o d el  co n s i s ts   o f   t w o   s tep s ( 1 )   ex tr ac ti n g   th ac o u s tic   f ea tu r e s   to   h av e   d ata  s et   ( 2 )   ap p ly in g   t h c lass if ica tio n   m o d el.   T h d ata  s et  is   o b tai n ed   b y   u s in g   P r aa a n d   M A T L A B   co d es.  Fo r   t h task   o f   class i f ica tio n ,   w u tili z ed   th KNN  [ 6 1 ]   to   class if y   a n   in s ta n ce   o f   d ata  s et  i n to   an   e m o tio n   cla s s .     Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J   E lec  &   C o m p   E n g     I SS N:  2088 - 8708       E mo tio n   r ec o g n itio n   fr o s ylla b ic  u n its   u s in g     ( A b d ella h   A g r ima )   5443   T h KNN  alg o r ith m   i s   s u p er v is ed   lear n i n g   tec h n iq u e;  it   ca n   b u s ed   f o r   b o th   class if i ca tio n   an d   r eg r ess io n .   T o   m ak p r ed ictio n ,   th KN alg o r it h m   w ill  b f o u n d ed   o n   t h en t ir d ataset.   I n d ee d ,   f o r   an   o b s er v atio n ,   w h ich   i s   n o p ar o f   th d ataset,   t h at  w w a n t   to   p r ed ict,   th alg o r ith m   w i l s ea r ch   f o r   th K   in s ta n ce s   o f   th e   d ataset   clo s est   to   o u r   o b s er v at io n .   T h en   f o r   t h ese  n ei g h b o r s ,   t h al g o r ith m   i s   b ased   o n   t h ei r   o u tp u v ar iab le s   to   ca lcu lat th v al u o f   t h v ar iab le  o f   th o b s er v atio n   th at  w w a n to   p r ed ict.   A ls o   i f   K - NN  is   u s ed   f o r   th clas s i f ic atio n ,   it  is   th m o d o f   th v ar iab les  o f   th clo s est  o b s er v atio n s   w h ic h   w ill   b u s ed   f o r   th p r ed ictio n .     3 . 1 .     Alg o rit h m ic  co m po s it io n   W ca n   r ep r esen t th o p er atio n s   o f   K NN  b y   w r iti n g   th f o ll o w i n g   p s e u d o - co d e:     A l g o r ith m   1 :   Star A l g o r it h m   I n p u t d ata:   a)   A   d ata  s et  D.   b)   A   f u n ctio n   f o r   d ef i n i n g   t h d is tan ce   d .   c)   An   i n teg er   K   Fo r   n e w   o b s er v at io n   f o r   w h ich   w w an t to   p r ed ict  its   o u t p u t v ar iab le  d o :   Step   1 :   C alcu late  all  t h d is ta n ce s   o f   th i s   o b s er v atio n   w it h   th o th er   o b s er v atio n s   o f   t h d ata  s et  D.   Step   2 :   R etain   th o b s er v ati o n s   f r o m   t h d ata  s et  clo s est  to   u s in g   t h f u n c tio n   o f   c alcu lati n g   th e   d is tan ce   d .   Step   3 :   T ak th v alu e s   o f   f r o m   t h o b s er v atio n s   r etai n ed :   a)   I f   w p er f o r m   r eg r ess io n ,   ca l cu late  t h m ea n   ( o r   m ed ian )   o f   r etain ed .   b)   I f   w p er f o r m   class if ica tio n ,   ca lcu late  t h m o d o f   r etai n ed   ( th is   is   o u r   ca s e) .   c)   R etu r n   th v al u ca lcu lated   in   s tep   3   as th v al u t h at  w as p r ed icted   b y   K - NN  f o r   o b s er v atio n   X.   E n d     K - NN  n ee d s   d is tan ce   ca lcu l atio n   f u n ct io n   b et w ee n   t w o   o b s er v atio n s .   I n   o u r   ca s e,   w h a v e   co n ti n u o u s   d ata;   h en ce   t h E u c lid ea n   d is ta n ce   i s   g o o d   ca n d id ate.       3 . 2 .     E uclid ea n dis t a nce   I is   d is tan ce   th at   co m p u te s   th e   s q u ar r o o o f   th e   s u m   o f   t h s q u ar d if f er en ce s   b e t w ee n   t h co o r d in ates o f   t w o   p o in t s :     d ( x , y ) = = 1 ( ) 2      ( 3 )     w h er x =   ( )   an d   y =   ( ) j=1 ... n   Fo r   all  o u r   ex p er i m e n ts ,   w u s ed   th f r ee   s o f t w ar ST A T I ST I C A   [ 6 2 ]   w h ic h   is   s et  o f   d ata  m i n i n g   to o ls   allo w in g   t h p r o ce s s i n g   an d   s elec t io n   o f   t h p ar a m et er s   an d   p r o p o s in g   d i f f er en t   le ar n in g   al g o r ith m s .   T h is   s o f t w ar i s   cu r r en tl y   in c r ea s in g l y   u s ed   in   t h p atter n   r ec o g n itio n   co m m u n it y .   I i n c lu d es  m an y   k n o w n   alg o r ith m s   s u c h   as K NN,   SV M,   d ec is io n   tr ee s   ( J 4 8 ) ,   as  w el l a s   Me ta  alg o r it h m s .     ST A T I S T I C A   K NN  i s   m e m o r y - b a s ed   m o d el  c h ar ac ter i ze d   b y   b u n ch   o f   e x a m p les  ( o b j ec ts )   f o r   w h ic h   t h r esu lts   ar k n o w n   ( i.e . ,   th ex a m p les  ar lab e led ) .   I n   KNN   th i n d ep en d e n a n d   d ep en d en v ar iab les  ca n   b eith er   ca teg o r ical  o r   co n tin u o u s .   T h p r o b le m   is   th r eg r e s s io n   f o r   co n ti n u o u s   d ep en d en t   v ar iab les,  o th er w is e,   t h p r o b le m   is   t h class if ica tio n .   H en ce ,   KNN  in   ST A T I STI C A   c a n   h a n d le  b o th   class i f icatio n   an d   r eg r e s s io n   p r o b lem s .   I n   th e v e n th a we  h av a n o th er   m o d el  ( o b j ec t ) ,   w w o u ld   li k to   ap p r o x im a te  th o u tco m d ep en d en o n   t h KNN  e x a m p le s .   T o   s ettle  o n   th ch o ice  KNN   s h o u ld   d is co v er   K   m o d el s   t h at  ar n ea r est   in   d i s tan ce   to   o u r   n e w   m o d el  ( o b j ec t) .   KNN  p r ed ictio n s   d ep en d   o n   av er ag i n g   th e   r esu lt s   o f   th K - Nea r est - Nei g h b o r   f o r   th r eg r ess io n   p r o b le m s .   Fo r   th class i f ica tio n   p r o b le m s ,   KNN  u tili ze s   th v o te  d o m in a n p ar r u le.   T h v alu o f   s tr o n g l y   i m p ac ts   th p r ed ictio n   a cc u r ac y .   T o   f in d   th o p ti m a l   v alu f o r   w ca n   u tili ze   t h cr o s s - v alid atio n   al g o r ith m   i n   ST A T I S T I C A .       4.   E XP E R I M E NT A L   RE SUL T S   W h av r u n   th K NN  al g o r ith m   s ev er al  ti m es,  ea c h   t i m ai m i n g   f o r   d i f f er e n g o al.   T h class i f icatio n s   w m ad w er e   ac co r d in g l y   b i n ar y   o r   m u l tip le.   A ll  e x p er i m en t s   w er p er f o r m ed   o n   d ata  s e ts   co llected   f r o m   s y llab ic  u n it s : / b a/,   /d u /,  /k i/,  /ta/.  T h er ar f o u r   class i f icat io n   tas k s   p r ese n te d   in   th i s   w o r k :   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 0 8 8 - 8708   I n t J   E lec  &   C o m p   E n g ,   Vo l.  11 ,   No .   6 Dec em b er   2021     5 4 3 8   -   5 4 4 9   5444   a.   W test ed   th ab ili t y   o f   t h p r o p o s ed   m o d el  to   d etec ea ch   o f   th e   s t u d ied   e m o tio n s .   T h class i f icatio n   i n   th at  ca s is   b in ar y .   T h tar g e ted   e m o tio n   ( N n e u tr al,   H j o y ,   S:  s ad n es s ,   A a n g er )   w a s   lab elled   b y   i ts   n a m a n d   th o t h er s   b y   ( o th er s ) .     b.   Sti ll  f r o m   t h b in ar y   cla s s i f ica tio n   p er s p ec tiv e,   w tr ied   to   s e to   w h a t e x ten t o u r   m o d el  i s   ab le  to   s ep ar ate   a m o n g   p o s iti v an d   n e g ati v e m o tio n s .   c.   W ith in   ea ch   g r o u p   o f   e m o ti o n   ( p o s itiv e   an d   n e g ati v e) ,   w e   test ed   i f   th e   p r o p o s ed   f ea tu r v ec to r   is   a   s atis f ac to r y   to o to   d is tin g u is h   b et w ee n   t h e m   ( ac co r d in g   t o   [ 6 3 ] ,   p o s itiv e m o t io n s   i n clu d ( j o y   an d   n eu tr al)   a n d   n eg a tiv e m o tio n s   in cl u d ( s ad n es s   an d   an g er ) ) .   d.   A t la s t,  m u ltip le  cla s s i f icatio n   is   p er f o r m ed   to   ev al u ate  t h w h o le  s y s te m .   Fro m   th e s ex p er i m e n t s ,   r esu lts   ar p r esen ted   b elo w .   A s   s h o w n   i n   Fi g u r 4 ,   th a n al y s is   o f   th e   s y llab ic  u n it  /b a/  u s in g   t h p r o p o s ed   s et  o f   f ea tu r es  g i v es  h ig h   ac c u r ac y   p er ce n ta g o f   d e tectio n .   I n d ee d ,   w e   o b tain ed   f o r   ex a m p le  6 0 . 2 0 f o r   all  e m o tio n s   an d   7 3 . 6 3 to   d is tin g u i s h   b et w ee n   p o s i tiv a n d   n eg a tiv e   e m o tio n s .   I n   th e   s a m w a y ,   t h r ates  v ar y   r e s p ec tiv el y   f r o m   8 6 . 2 1 to   7 8 . 9 5 f o r   p o s itiv e m o tio n s   ( n eu tr al   v s   j o y )   an d   n e g ati v e m o t io n s   ( an g er   v s   s ad n ess ) .   T h KN alg o r ith m   r ec o g n ized   n e u tr al  s tate  w it h   m o r e   th an   8 9 . 5 5 %,  s ad n es s   w it h   8 5 . 0 7 %,  an g er   w it h   7 9 . 1 0 %,  an d   j o y   w ith   7 6 . 1 2 %.           Fig u r 4 .   An al y s is   o f   th s y l la b le  /b a/       I n   th s a m w a y ,   a n   an al y s is   p er f o r m ed   o n   th C /d u s h o w s   r es u lt s   w it h   r ates  t h at  ca n   g o   u p   to   9 4 . 9 5 to   d etec n eu tr al   e m o t io n .   W o b tain ed   9 1 . 4 1 to   r ec o g n ize  j o y ,   8 3 . 8 4 f o r   a n g er ,   an d   7 9 . 8 0 f o r   s ad n es s .   Fo r   a n al y s is   b et w ee n   p o s itiv e   an d   n e g ati v e m o tio n s ,   t h r ate   r ea ch ed   8 4 . 3 4 %,  an d   9 1 . 5 7 %,  7 0 . 1 8 %   f o r   p o s itiv e m o tio n s   ( n e u tr al   v s   j o y ) ,   an d   n e g ati v e m o t io n s   ( an g er   v s   s ad n e s s ) .   T h g l o b al  class if icat io n   in cl u d in g   all  e m o t io n s   r ea c h e d   r ate  o f   6 4 . 6 5 as sh o w n   i n   Fi g u r 5 .             Fig u r 5 .   An al y s is   o f   th s y l la b le  /d u /   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J   E lec  &   C o m p   E n g     I SS N:  2088 - 8708       E mo tio n   r ec o g n itio n   fr o s ylla b ic  u n its   u s in g     ( A b d ella h   A g r ima )   5445   Si m i lar l y ,   F ig u r 6   s h o w s   th ac cu r ac ies  t h at  w o b tain e d   f o r   th C / k i/.  T h KNN   alg o r ith m   r ec o g n ized   j o y   w it h   m o r t h a n   9 3 . 2 0 %,  an g er   w it h   8 4 . 4 7 %,  8 1 . 5 5 f o r   th e   n eu tr al   s t ate,   an d   7 8 . 1 5 f o r   s ad n es s .   A ls o ,   t h b i n ar y   cla s s if icatio n   b et w ee n   p o s iti v a n d   n e g ati v e m o t io n s   ac h ie v ed   a   r ec o g n itio n   r ate  o f   7 2 . 3 3 %.  Fu r th er m o r e,   b y   co n s id er in g   ea ch   g r o u p   o f   e m o ti o n s   ( p o s iti v an d   n e g ati v e) ,   th r es u lts   r ea ch e d   8 7 . 6 2   f o r   th p o s itiv e m o tio n s   a n d   7 5 f o r   th n e g ativ o n e s .   C o n ce r n i n g   th e   c la s s i f icatio n   o f   al e m o tio n s ,   th p er f o r m ed   r ate  r ea ch ed   its   m in i m u m   v al u o f   5 2 . 4 3 %.   Fin all y ,   t h s t u d y   o f   t h C /t a/  s h o w s   t h at:  n e u tr al  s tate  p r e s en t s   h i g h   r ec o g n itio n   r ate   o f   9 0 . 1 3 %,  f o llo w ed   b y   a n g er   w it h   8 4 . 5 7 %,  s ad n e s s   w it h   7 8 . 1 5 %,  an d   last l y   j o y   w it h   7 7 . 1 6 %.  Fo r   n eg ati v v s   p o s it iv e   e m o tio n s ,   t h ac cu r ac y   i s   7 5 . 9 2 %.  W ith in   ea ch   ca teg o r y   o f   e m o tio n   ( p o s itiv e   an d   n e g ati v e) ,   th e   ac cu r ac y   i s   8 9 . 7 4 an d   7 7 . 3 8 r esp ec ti v el y .   T h r ate  o b tain ed   f o r   th w h o le  e m o tio n s   is   6 1 . 7 3 w h ic h   ca n   b e   co n s id er ed   as a n   ac ce p tab le  r ate  as sh o w n   i n   Fi g u r 7 .           Fig u r 6 .   An al y s is   o f   th s y l la b le  /k i/           Fig u r 7 .   An al y s is   o f   th s y l la b le  /ta/       5.   DIS CU SS I O N   Ou r   s t u d y   ai m s   to   p r o v id a n   au to m a tic  e m o tio n   r ec o g n iti o n   m o d el  w i th   a   r ed u ce d   s et  o f   ac o u s tic   f ea t u r es.  Me as u r e m en t s   w er e   ca r r ied   o u u s in g   th e   M A DE d atab ase  f r o m   w h ic h   w e   ex tr ac ted   f o u r   p lo s i v e   co n s o n a n /b /,  /d /,  / k /,  /t/  a s s o ciate d   w i th   t h t h r ee   v o w el s   /a /,  /u a n d   /i/.  T h ese  c h o ices  ar b ased   o n   p r ev io u s   w o r k s   [ 6 4 ] ,   w h er t h a u t h o r s   p r o v ed   th at   th e   en er g y   a n d   it s   d is tr ib u tio n   in   s p ec i f ic  b a n d s   p la y   an   i m p o r ta n t   r o le  in   ch ar ac ter is in g   a r ab ic  p lo s iv co n s o n a n ts .   T h r esu lts   w o b tain ed   ar q u ite  s atis f a cto r y   co m p ar i n g   to   p r ev io u s   w o r k s   as s h o w n   i n   T ab le  1 .   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 0 8 8 - 8708   I n t J   E lec  &   C o m p   E n g ,   Vo l.  11 ,   No .   6 Dec em b er   2021     5 4 3 8   -   5 4 4 9   5446   I s h o u ld   b p o in ted   o u t h at  o u r   s t u d y   r aised   m an y   q u e s tio n s .   I n d ee d ,   it  is   s ee n   f r o m   th r esu lt s   t h at   co n s o n a n /d ac h iev e s   t h b est  r ates  i n   al m o s all  ca s e s   ( e s p ec iall y   i n   t h n e u tr al  ca s 9 4 . 9 5 %)  w h ic h   m a y   lead   u s   to   th i n k   t h at  p lace   o f   a r ticu latio n   o f   th co n s o n a n h a s   r o le  to   p lay   in   d eter m i n i n g   th e m o tio n   u n d er   co n s id er atio n .   Mo r eo v er ,   s y ll ab les  ass o ciate d   w it h   t h s a m v o w el  ( /b a/  an d   /ta/)   s ee m   t o   p r esen al m o s t h s a m r es u lt s .   B u t a s   w co m to   in v e s ti g ate  m o r ca r ef u ll y   t h r ec o g n i tio n   r ates,  w ca n   s e th at:   a.   Neg ati v e m o tio n s   p r esen t h b est  r ates  ( 7 8 . 9 5 f o r   /b a/  an d   7 7 . 3 8 f o r   /ta/  w h ile  f o r   / d u 7 0 . 1 8 an d   f o r   /k i/ 7 5 %)   b.   W h en   th v o w e /a/  is   ass o ciate d   w it h   th p lo s iv /b /,  s ad n ess   is   m o r r ec o g n ized   t h an   a n g er .   T h o p p o s ite  o cc u r s   w h e n   /a/  i s   as s o ciate d   w it h   /t/.   s li g h co m p ar i s o n   b et w ee n   s y llab les  / k i/   an d   /d u s h o w s   th at   f o r   b o th   th e   j o y   p r esen t s   t h b est   r ec o g n itio n   r ates  ( 9 3 . 2 0 r e s p .   9 1 . 4 1 %).   B u d if f er e n ce s   o cc u r   in   th n e u tr al  an d   m u ltip le  clas s i f icatio n   ca s es.  T h ese  r ates  estab lis h   i n   f ac h o w   f ar   o b j ec ts   f r o m   t h e m o tio n a r ep r esen ta tio n   w p r o p o s ar cl o s to   ea ch   o th er .   I n d ee d ,   th e x p lo r ato r y   n at u r o f   o u r   s tu d y   h a s   d ictated   th ch o ice  o f   KNN  al g o r ith m   r ath er   t h a n   SVM  o r   ar tif icial  n eu r o n a n et w o r k   ( A NN) .   in   th cla s s i f icat io n   task .   O u r   m ain   co n ce r n   is   to   estab lis h   to   h o w   ex ten t th f ea t u r es v ec to r   s u cc ee d s   to   ev alu ate  s i m ilar ities   b e t w ee n   t h s a m e m o tio n s .       6.   CO NCLU SI O   T h is   w o r k   g i v es  a   g o o d   g r o u n d in g   i n   m o d eli n g   e m o tio n   with   ac o u s tic   f ea tu r es.   T h m e t h o d   g i v e n   h er u s es  e n er g y   a n d   its   d is tr i b u tio n   i n   s ix   b an d s   a s   p r in ci p al  to o f o r   d is tin g u is h i n g   b etw ee n   t h f o u r   b asi c   e m o tio n s n e u tr al,   s ad n es s ,   j o y ,   a n d   an g er .   T h cla s s ica K NN  al g o r ith m   is   u s ed   to   p er f o r m   t h c lass if ica tio n   task .   I n   s o m ca s es,  t h r e s u l ts   w er co n c lu s i v b u t   n o e x h a u s tiv e.   T h is   s tu d y   ca n   b e   ex te n d ed   in   f u t u r e   w o r k s   to   r ic h er   co r p o r w it h   d if f er en t   u t ter an ce   r ep r ese n t atio n s   in   d if f er en t   la n g u a g es   an d   w it h   d if f er en t   alg o r ith m s   l ik n eu r al  n et w o r k s   a n d   s u p p o r t v ec to r   m ac h in e   alg o r ith m s .       RE F E R E NC E   [1 ]   L .   A .   P .   G a sp a r,   S .   O.  C.   M o r a les ,   a n d   F .   T .   Ro m e ro ,   M u l ti m o d a Em o ti o n   Re c o g n it io n   w it h   Ev o lu ti o n a ry   Co m p u tatio n   f o Hu m a n - Ro b o t   In tera c ti o n ,   Ex p e rt  S y ste m w it h   A p p li c a ti o n s,  v o l.   6 6 ,   p p .   4 2 - 6 1 ,   2 0 1 6 ,     d o i:   1 0 . 1 0 1 6 /j . e sw a . 2 0 1 6 . 0 8 . 0 4 7 .   [2 ]   L.   F .   Ch e n ,   Z .   T .   L iu ,   M .   W u ,   M .   Din g ,   F .   Y.  Do n g ,   a n d   K.   Hiro ta Em o ti o n - A g e - Ge n d e r - Na ti o n a li ty   Ba se d   In ten ti o n   Un d e rsta n d i n g   in   Hu m a n - Ro b o In tera c ti o n   Us in g   T w o - La y e F u z z y   S u p p o rt  V e c to Re g re ss io n ,   In ter n a t io n a J o u rn a o S o c i a R o b o ti c s ,   v o l.   7 ,   n o .   5 ,   p p .   7 0 9 - 7 2 9 ,   2 0 1 5 ,   d o i:   1 0 . 1 0 0 7 /s1 2 3 6 9 - 0 1 5 - 0 2 9 0 - 2   [3 ]   A .   F .   Ca b a ll e ro   e t   a l .,  S m a rt  En v iro n m e n A rc h it e c tu re   f o E m o ti o n   De tec ti o n   a n d   Re g u latio n ,   J o u rn a l   o f   Bi o me d ica l   In f o rm a ti c s ,   v o l .   6 4 ,   p p .   5 5 - 7 3 ,   2 0 1 6 ,   d o i:   1 0 . 1 0 1 6 / j. j b i. 2 0 1 6 . 0 9 . 0 1 5 .   [4 ]   M .   Eg g e r ,   M .   L e y ,   a n d   S .   Ha n k e E m o ti o n   Re c o g n it io n   f ro m   P h y sio lo g ica S ig n a A n a l y si s:  A   R e v ie w ,   El e c tro n ic No tes   i n   T h e o re ti c a l   C o mp u ter   S c ien c e ,   v o l.   3 4 3 ,   p p .   3 5 - 5 5 ,   2 0 1 9 ,   d o i:   1 0 . 1 0 1 6 /j . e n tcs . 2 0 1 9 . 0 4 . 0 0 9 .   [5 ]   H.  Bo u b e n n a   a n d   D.  L e e ,   I m a g e - Ba se d   E m o ti o n   Re c o g n it i o n   Us in g   Ev o lu ti o n a ry   A l g o rit h m s,   Bi o lo g ica ll y   In sp ire d   C o g n it ive   Arc h it e c tu re s ,   v o l.   2 4 ,   p p .   7 0 - 7 6 ,   2 0 1 8 ,   d o i:   1 0 . 1 0 1 6 /j . b ica . 2 0 1 8 . 0 4 . 0 0 8 .   [6 ]   A .   R a h e e l ,   M .   M a ji d ,   M .   A ln o w a m i,   a n d   S .   M .   A n w a r ,   P h y sio lo g ica S e n so rs  Ba se d   E m o ti o n   Re c o g n it io n   W h il e   Ex p e rien c in g   T a c ti le E n h a n c e d   M u l ti m e d ia,   S e n so rs ,   v o l.   2 0 ,   n o .   1 4 ,   2 0 2 0 ,   A rt.   n o .   4 0 3 7 ,   d o i:   1 0 . 3 3 9 0 /s2 0 1 4 4 0 3 7   [7 ]   W .   M e ll o u k   a n d   W .   Ha n d o u z i,   F a c ial  E m o ti o n   Re c o g n it i o n   Us in g   De e p   L e a rn in g Re v ie a n d   In sig h ts,   Pro c e d ia   C o mp u ter   S c ien c e ,   v o l.   1 7 5 ,   p p .   6 8 9 - 6 9 4 ,   2 0 2 0 ,   d o i:   1 0 . 1 0 1 6 /j . p ro c s. 2 0 2 0 . 0 7 . 1 0 1 .   [8 ]   J.  W u ,   S .   G u o ,   H.  Hu a n g ,   W .   L i u ,   a n d   Y.  X ian g I n f o rm a ti o n   a n d   Co m m u n ica ti o n T e c h n o lo g ies   f o S u sta in a b le   De v e lo p m e n G o a ls:  S tate - of - th e - A rt,   Ne e d a n d   P e rsp e c ti v e s ,”   IEE Co mm u n ica ti o n S u rv e y a n d   T u to ri a ls   v o l.   2 0 ,   n o .   3 ,   p p .   2 3 8 9 - 2 4 0 6 2 0 1 8 ,   d o i:   1 0 . 1 1 0 9 /COM S T . 2 0 1 8 . 2 8 1 2 3 0 1 .   [9 ]   M .   J.  W e st,  A .   J.  A n g w in ,   D.  A .   Co p lan d ,   W .   L .   A rn o tt ,   a n d   N.  L .   Ne lso n Cr o ss - M o d a Em o ti o n   Re c o g n it io n   a n d   A u ti s m - li k e   T ra it in   Ty p i c a ll y   De v e lo p in g   Ch il d re n ,   J o u r n a l   o Exp e rime n ta Ch il d   Psy c h o l o g y ,   v o l.   1 9 1 ,     2 0 2 0 ,   A rt.   n o .   1 0 4 7 3 7 ,   d o i:   1 0 . 1 0 1 6 /j . jec p . 2 0 1 9 . 1 0 4 7 3 7 .   [1 0 ]   M .   Ja n ss e n e t   a l. Em o ti o n   Re c o g n it io n   i n   P sy c h o sis:  No   Ev id e n c e   f o a n   A ss o c iatio n   w it h   Re a W o rld   S o c ial   F u n c ti o n i n g ,   S c h izo p h re n i a   Res e a rc h ,   v o l.   1 4 2 ,   n o .   1 - 3 ,   p p .   1 1 6 - 1 2 1 ,   2 0 1 2 ,   d o i:   1 0 . 1 0 1 6 /j . sc h re s. 2 0 1 2 . 1 0 . 0 0 3 .   [1 1 ]   R.   Na k a tsu ,   A .   S o lo m id e s,  a n d   N.  T o sa E m o ti o n   Re c o g n it io n   a n d   Its  A p p li c a ti o n   t o   Co m p u t e A g e n ts  w it h   S p o n tan e o u In tera c ti v e   Ca p a b il it ies ,   Kn o wle d g e - Ba se d   S y st e ms ,   v o l.   1 3 ,   n o .   7 - 8 ,   p p .   4 9 7 - 5 0 4 ,   2 0 0 0 ,     d o i:   1 0 . 1 1 4 5 /3 1 9 4 6 3 . 3 1 9 6 4 1 .   [1 2 ]   S .   T iv a tan sa k u l,   M .   Oh k u ra ,   S .   P u a n g p o n ti p ,   a n d   T .   A c h a lak u l Em o ti o n a He a lt h c a re   S y ste m E m o ti o n   De tec ti o n   b y   F a c ial  Ex p re ss io n Us in g   J a p a n e se   Da tab a s e ,   2 0 1 4   6 t h   Co mp u ter   S c ien c e   a n d   El e c tro n ic  En g i n e e rin g   Co n fer e n c e   ( CEE C) ,   2 0 1 4 ,   p p .   4 1 - 46 ,   d o i:   1 0 . 1 1 0 9 /C EE C. 2 0 1 4 . 6 9 5 8 5 5 2 .   [1 3 ]   R.   L .   M a n d ry k   a n d   M .   S .   A tk in s,  A   F u z z y   P h y sio lo g ica A p p ro a c h   f o Co n ti n u o u sly   M o d e li n g   Em o ti o n   d u rin g   In tera c ti o n   w it h   P lay   T e c h n o lo g ies ,   In ter n a ti o n a J o u rn a o Hu m a n - C o mp u ter   S tu d ies ,   v o l.   6 5 ,   n o .   4 ,     pp .   3 2 9 - 3 4 7 ,   2 0 0 7 ,   d o i:   1 0 . 1 0 1 6 / j . ij h c s.2 0 0 6 . 1 1 . 0 1 1 .   [1 4 ]   D.   J .   L it m a n   a n d   K.   F o rb e s - Ril e y ,   P re d icti n g   stu d e n e m o ti o n i n   c o m p u ter - h u m a n   tu to ri n g   d ialo g u e s ,   Pro c e e d in g o t h e   4 2 n d   A n n u a M e e ti n g   o t h e   Asso c ia t io n   f o Co mp u ta ti o n a L in g u ist ics   ( ACL ) ,   Ba rc e lo n a ,   S p a in ,   2 0 0 4 ,   p p .   3 5 1 - 3 5 8 ,   d o i:   1 0 . 3 1 1 5 / 1 2 1 8 9 5 5 . 1 2 1 9 0 0 0 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t J   E lec  &   C o m p   E n g     I SS N:  2088 - 8708       E mo tio n   r ec o g n itio n   fr o s ylla b ic  u n its   u s in g     ( A b d ella h   A g r ima )   5447   [1 5 ]   M .   Bo jan ić,  V .   De li c ,   a n d   A .   Ka p o v Ca ll   R e d istri b u t io n   fo a   Ca ll   Ce n ter  B a se d   o n   S p e e c h   Em o ti o n   Re c o g n it io n ,   Ap p li e d   S c ien c e s ,   v o l.   1 0 ,   n o .   1 3 ,   2 0 2 0 ,   A rt.   n o .   4 6 5 3 ,   d o i:   1 0 . 3 3 9 0 /a p p 1 0 1 3 4 6 5 3 .   [1 6 ]   L .   V id ra sc u   a n d   L .   De v il lers ,   Re a l - L i f e   E m o ti o n   Re p re se n tati o n   a n d   De tec ti o n   in   Ca ll   Ce n ters   Da ta,   Af fec ti v e   Co mp u t in g   a n d   In telli g e n t   In ter a c ti o n 2 0 0 5 ,   p p .   7 3 9 - 7 4 6 ,   d o i:   1 0 . 1 0 0 7 / 1 1 5 7 3 5 4 8 _ 9 5 .   [1 7 ]   D.  M o rriso n ,   R.   W a n g ,   a n d   L .   C.   De   S il v a En se m b le   M e th o d f o S p o k e n   Em o ti o n   Re c o g n it io n   in   Ca ll - Ce n tres ,   S p e e c h   Co mm u n ica ti o n ,   v o l .   4 9 ,   n o .   2 ,   p p .   9 8 - 1 1 2 ,   2 0 0 7 ,   d o i:   1 0 . 1 0 1 6 /j . sp e c o m . 2 0 0 6 . 1 1 . 0 0 4 .   [1 8 ]   C.   M .   W h it in g ,   S .   A .   Ko tz,  J.  Gro ss ,   B.   L .   G io rd a n o ,   a n d   P .   Be li n T h e   P e rc e p ti o n   o f   Ca rica tu re d   Em o ti o n   in   V o ice ,   C o g n it i o n ,   v o l.   2 0 0 ,   2 0 2 0 ,   A rt.   n o .   1 0 4 2 4 9 ,   d o i:   1 0 . 1 0 1 6 /j . c o g n it io n . 2 0 2 0 . 1 0 4 2 4 9 .   [1 9 ]   N .   Ka m a ru d d in A .   W a h a b ,   a n d   C.   Qu e k Cu lt u ra De p e n d e n c y   A n a l y sis  f o Un d e rsta n d i n g   S p e e c h   E m o ti o n ,   Exp e rt S y ste ms   wit h   A p p l ica ti o n s ,   v o l.   3 9 ,   n o .   5 ,   p p .   5 1 1 5 - 5 1 3 3 ,   2 0 1 2 ,   d o i:   1 0 . 1 0 1 6 / j. e sw a . 2 0 1 1 . 1 1 . 0 2 8 .   [2 0 ]   G .   D a v id ,   J.  M .   M o li n a ,   a n d   Z .   Ca ll e jas Co m b in in g   S p e e c h - Ba se d   a n d   L in g u isti c   Clas si f iers   to   Re c o g n ize   Em o ti o n   in   Us e S p o k e n   Uttera n c e s,”   Ne u ro c o mp u ti n g ,   v o l .   3 2 6 - 3 2 7 ,   p p .   1 3 2 - 1 4 0 ,   2 0 1 9 ,     d o i:   1 0 . 1 0 1 6 /j . n e u c o m . 2 0 1 7 . 0 1 . 1 2 0.   [2 1 ]   S .   L   Ca stro   a n d   C.   F   L im a ,   Re c o g n izin g   e m o ti o n in   sp o k e n   lan g u a g e A   v a li d a ted   se o f   P o rtu g u e se   se n ten c e a n d   p se u d o se n ten c e f o re se a r c h   o n   e m o ti o n a p r o so d y ,”   Beh a v io Res e a rc h   M e th o d s,   v o l.   4 2 ,   n o .   1 ,   p p .   7 4 - 8 1 ,   2 0 1 0 ,   d o i:   1 0 . 3 7 5 8 /BR M . 4 2 . 1 . 7 4 .   [2 2 ]   S .   M o h it ,   M .   T u ,   V .   Be rish a ,   C.   Ch a k ra b a rti ,   a n d   A .   S p a n ias A r ti c u latio n   Co n stra i n e d   L e a rn in g   w it h   A p p li c a ti o n   to   S p e e c h   Em o ti o n   Re c o g n it i o n ,”   EURA S IP   J o u r n a l   o n   A u d i o ,   S p e e c h ,   a n d   M u sic   Pro c e ss in g ,   v o l.   2 0 1 9 ,   n o .   1 ,   2 0 1 9 ,   A rt.   n o .   1 4 ,   d o i:   1 0 . 1 1 8 6 /s1 3 6 3 6 - 0 1 9 - 0 1 5 7 - 9.   [2 3 ]   L .   Ch e n X .   M a o ,   Y.  X u e ,   a n d   L .   L .   Ch e n g S p e e c h   Em o ti o n   Re c o g n it io n F e a tu re a n d   Clas sif ic a ti o n   M o d e ls,   Dig it a l   S i g n a Pr o c e ss in g ,   v o l.   2 2 ,   n o .   6 ,   p p .   1 1 5 4 - 1 1 6 0 ,   2 0 1 2 ,   d o i:   1 0 . 1 0 1 6 / j. d s p . 2 0 1 2 . 0 5 . 0 0 7 .   [2 4 ]   Ö.  T u rg u t,   A   No v e F e a tu re   S e lec ti o n   M e th o d   f o S p e e c h   Em o t io n   Re c o g n it io n ,”   Ap p li e d   Aco u s ti c s ,   v o l.   1 4 6 ,     p p .   3 2 0 - 3 2 6 ,   2 0 1 9 ,   d o i:   1 0 . 1 0 1 6 / j . a p a c o u st. 2 0 1 8 . 1 1 . 0 2 8 .   [2 5 ]   S .   K.  Da v is,  M .   M o rn in g sta r,   M .   A .   Dirk s,  a n d   P .   Qu a l ter A b il it y   E m o ti o n a In telli g e n c e W h a a b o u t   Re c o g n it io n   o f   Em o ti o n   in   Vo ic e s? ,   Per so n a li ty  a n d   In d ivid u a l   Diff e re n c e s ,   v o l.   1 6 0 ,   2 0 2 0 ,   A rt.   n o .   1 0 9 9 3 8 ,     d o i:   1 0 . 1 0 1 6 /j . p a id . 2 0 2 0 . 1 0 9 9 3 8 .   [2 6 ]   C.   S .   L u ís  a n d   C.   F .   L im a ,   Re c o g n izin g   Em o ti o n i n   S p o k e n   L a n g u a g e A   V a li d a ted   S e o f   P o rt u g u e se   S e n ten c e s   a n d   P se u d o - se n ten c e f o R e se a r c h   o n   Em o ti o n a P ro so d y ,”   Beh a v io Res e a rc h   M e th o d s ,   v o l.   4 2 ,   n o .   1 ,   p p .   7 4 - 8 1 ,   2 0 1 0 ,   d o i:   1 0 . 3 7 5 8 /BR M . 4 2 . 1 . 7 4 .   [2 7 ]   K.  H .   H y u n E.   H.  Ki m ,   a n d   Y.  K w a k E m o ti o n a F e a tu re   Ex trac ti o n   M e th o d   Ba se d   o n   th e   Co n c e n trati o n   o f   P h o n e m e   In f lu e n c e   f o Hu m a n - Ro b o In tera c ti o n ,”   Ad v a n c e d   Ro b o ti c s ,   v o l.   2 4 ,   n o .   1 - 2 ,   p p .   4 7 - 6 7 ,   2 0 1 0 ,     d o i:   1 0 . 1 1 6 3 /0 1 6 9 1 8 6 0 9 X1 2 5 8 5 5 3 0 4 8 7 8 2 2 .   [2 8 ]   D .   Ka m in sk a ,   T .   S a p in sk i,   a n d   G .   A n b a rja f a ri E ff icie n c y   o f   C h o se n   S p e e c h   De sc rip to rs  in   Re l a ti o n   t o   Em o ti o n   Re c o g n it io n ,”   EURA S I J o u r n a o n   A u d i o ,   S p e e c h ,   a n d   M u sic   Pro c e ss in g ,   v o l.   2 0 1 7 ,   n o .   1 ,   2 0 1 7 ,     d o i:   1 0 . 1 1 8 6 /s1 3 6 3 6 - 0 1 7 - 0 1 0 0 - x.   [2 9 ]   A .   M .   Be r k e h a n   a n d   K.  O ğ u z ,   S p e e c h   E m o ti o n   Re c o g n it i o n Em o ti o n a M o d e ls,  Da tab a se s,  F e a tu re s,  P re p ro c e ss in g   M e th o d s,  S u p p o rt in g   M o d a li ti e s,  a n d   Clas sif iers ,”   S p e e c h   Co mm u n ica ti o n ,   v o l.   1 1 6 ,   p p .   5 6 - 7 6 ,     2 0 2 0 ,   d o i:   1 0 . 1 0 1 6 / j. sp e c o m . 2 0 1 9 . 1 2 . 0 0 1 .   [3 0 ]   M.  E Ay a d i,   M .   S .   Ka m e l,   a n d   F .   Ka rra y S u rv e y   o n   S p e e c h   Em o ti o n   Re c o g n it io n F e a tu re s,  Clas si f ica ti o n   S c h e m e s,  a n d   Da tab a se s,”   Pa tt e rn   Rec o g n it i o n ,   v o l.   4 4 ,   n o .   3 ,   p p .   572 - 5 8 7 ,   2 0 1 1 ,     d o i:   1 0 . 1 0 1 6 /j . p a tco g . 2 0 1 0 . 0 9 . 0 2 0 .   [3 1 ]   Y.  D.  Ch a v h a n ,   B.   S .   Ye lu re ,   a n d   K.  N.  T a y a d e S p e e c h   Em o ti o n   Re c o g n it io n   Us in g   RBF   Ke rn e o f   L IBS V M ,   2 0 1 5   2 n d   In ter n a ti o n a Co n fer e n c e   o n   El e c tro n ics   a n d   Co mm u n ica ti o n   S y ste ms   ( ICECS ),   2015 ,   p p .   1 1 3 2 - 11 35   d o i:   1 0 . 1 1 0 9 /E CS . 2 0 1 5 . 7 1 2 4 7 6 0 .   [3 2 ]   F .   A lb u ,   D.  Ha g ies c u ,   L .   V lad u tu ,   a n d   M .   A .   P u ica N e u ra Ne t w o rk   a p p ro a c h e f o c h il d re n ’s  e m o ti o n   re c o g n it io n   i n   i n telli g e n lea rn in g   a p p li c a ti o n s,   7 th   In ter n a ti o n a Co n fer e n c e   o n   Ed u c a ti o n   a n d   Ne L e a rn i n g   T e c h n o l o g ies 2 0 1 5 ,   p p .   3 2 2 9 - 3 2 3 9 .   [3 3 ]   T .   L .   N w e S .   W .   F o o ,   a n d   L .   C.   De   S il v a S p e e c h   Em o ti o n   Re c o g n it io n   Us in g   Hi d d e n   M a rk o v   M o d e ls,   S p e e c h   Co mm u n ica ti o n ,   v o l .   4 1 ,   n o .   4 ,   p p .   6 0 3 - 6 2 3 2 0 0 3 ,   d o i:   1 0 . 1 0 1 6 /S 0 1 6 7 - 6 3 9 3 ( 0 3 ) 0 0 0 9 9 - 2.   [3 4 ]   Z .   W a n g R.   Jia o ,   a n d   H.  Jia n g Em o ti o n   Re c o g n it io n   Us in g   WT - S V M   i n   Hu m a n - Co m p u ter  In tera c ti o n ,   J o u r n a l   o Ne M e d ia ,   v o l.   2 ,   n o .   3 ,   p p .   1 2 1 - 1 3 0 ,   2 0 2 0 ,   d o i:   1 0 . 3 2 6 0 4 /j n m . 2 0 2 0 . 0 1 0 6 7 4 .   [3 5 ]   W .   Zh a n g X .   M e n g ,   Z.   L i,   Q.  L u ,   a n d   S .   T a n Em o ti o n   Re c o g n i ti o n   i n   S p e e c h   Us in g   M u lt i - Clas sif ica ti o n   S V M ,   2 0 1 5   IEE 1 2 th   In tl   Co n o n   Ub i q u it o u I n telli g e n c e   a n d   Co m p u t i n g   a n d   2 0 1 5   IEE E   1 2 th   I n tl   C o n f   o n   A u t o n o mic   a n d   T ru ste d   Co mp u ti n g   a n d   2 0 1 5   IE EE   1 5 t h   In ter n a ti o n a C o n fer e n c e   o n   S c a la b le  Co mp u t in g   a n d   Co mm u n ica ti o n a n d   Its  Asso c i a ted   W o rk sh o p ( UIC - AT C - S c a l Co m) ,   2 0 1 5 ,   p p .   1 1 8 1 - 1 1 8 6 ,   d o i 1 0 . 1 1 0 9 /UIC - AT C - S c a lCo m - CBDC o m - Io P . 2 0 1 5 . 2 1 5 .   [3 6 ]   D.  Ba laji,   S p e e c h   Em o ti o n   Re c o g n it io n   Us i n g   De e p   Ne u ra Ne tw o rk s ,”   In ter n a ti o n a J o u rn a f o Res e a rc h   i n   Ap p li e d   S c ien c e   a n d   En g in e e rin g   T e c h n o lo g y   ( IJ RA S ET ) ,   v o l.   8 ,   n o .   6 ,   p p .   2 4 6 0 - 2 4 6 5 ,   2 0 2 0 ,     d o i:   1 0 . 2 2 2 1 4 / ij ra se t. 2 0 2 0 . 5 3 5 9 .   [3 7 ]   L .   Ch e n ,   W .   S u ,   Y.   F e n g ,   M .   W u ,   J.  S h e ,   a n d   K.  Hir o ta,  T w o - La y e F u z z y   M u lt ip le  Ra n d o m   F o re st  f o S p e e c h   Em o ti o n   Re c o g n it i o n   i n   Hu m a n - Ro b o In tera c ti o n ,   I n fo rm a ti o n   S c ien c e s ,   v o l.   5 0 9 ,   p p .   1 5 0 - 1 6 3 ,   2 0 2 0 ,     d o i:   1 0 . 1 0 1 6 /j . in s. 2 0 1 9 . 0 9 . 0 0 5 .   [3 8 ]   H.  Ka y a   a n d   A .   A .   Ka rp o v ,   E ff icie n a n d   e ff e c ti v e   stra teg i e f o c ro ss - c o rp u a c o u stic  e m o ti o n   re c o g n it io n ,   Ne u ro c o mp u ti n g v o l .   2 7 5 ,   p p .   1 0 2 8 - 1 0 3 4 ,   2 0 1 8 ,   d o i:   1 0 . 1 0 1 6 /j . n e u c o m . 2 0 1 7 . 0 9 . 0 4 9 .   [3 9 ]   K.  Ha n ,   D.  Yu ,   a n d   I.   T a sh e v ,   S p e e c h   e m o ti o n   re c o g n it io n   u s in g   d e e p   n e u ra n e tw o rk   a n d   e x trem e   lea rn in g   m a c h in e ,   Fi ft e e n th   a n n u a l   c o n fe re n c e   o th e   i n ter n a ti o n a sp e e c h   c o mm u n ica t io n   a ss o c i a ti o n ,   2 0 1 4 .   Evaluation Warning : The document was created with Spire.PDF for Python.