I n d on e s ian   Jou r n al   o f   E lec t r ica l   E n gin e e r in g  a n d   Com p u t e r   S c ience   Vo l .   3 6 ,   N o .   2 ,  N o v e m b e r   20 24 ,   pp.   1 261 ~ 1 272   I S S N:  2 502 - 4 7 52 ,   DO I :  10 . 11591/i j e e cs .v 3 6 . i 2 . pp 1 261 - 1 272             1261     Jou r n al  h o m e page :  ht tp: // ij e e cs . iaes c or e . c om   E n h a n c in g  d ia gon a l  c o m p r e h e n si on  w ith  ad v an c e d  t op ic   m od e li n g t e c h n iq u e :  D IAG - L D A       F at im a - Z ah r ae   S if i 1 ,  Waf ae   S ab b ar 1 ,   Am al   E l   M z ab i 2   1 L a b o r a t o r y   of   M a c hi ne   I nt e ll ig e nc e   ( L I M ) , F a c ul t y   of  S c ie n c e s  a nd T e c hn o l o g y ,  H a s s a n - I I  U ni ve r s it y , M o ha mm e di a , M or oc c o   2 L a b o r a t o r y   of   E c o n o mi c  P e r f o r ma nc e s  a nd  L o gi s ti c s   ( P E L ) , F a c ul t y   of   L a w ,  E c o n o m ic  a nd S oc ia l  S c i e n c e s ,   H a s s a n - I I  U ni ve r s it y ,  M o ha mm e di a , M o r oc c o       Ar t ic l e   I n f o     AB S T RA CT   A r ti c le  h is tor y :   R e c e i ve d  M a y   7 ,   202 4   R e vi s e d  A ug   6 ,  202 4   A c c e pt e d  A ug   11 ,   202 4       W i t h   t h e   s p ee d   i n c r e as e   o f  r e v i ew s   o r  o t h e r  f o r m s   o f  t e x t ,   n at u ral   l a n g u ag e  h as   t h e  ab i l i t y   t o   c o n v ey   l arg e  an d   co m p l e x   a m o u n t s   o f  i n fo r m at i o n   i n   re l at i v e l y   s m a l l   c o mmu n i c at i o n s .   T h i s   c ap ab i l i t y   i s   b e i n g   l ev e rag ed   b y   t h e  m a c h i n e - l e arn i n g   a l g o ri t h m  k n o w n   as   l at e n t   d i r i c h l et   al l o c at i o n   (L D A ) ,   w h i ch   c a n   b e   u t i l i z ed   t o   d i s c o v e r  l at en t   t o p i c s   w i t h i n   d o cu me n t s .   L DA   c an   b e   a l s o   u s ed   t o   g e n e rat e  s u mm ar i e s   o r   ab s t rac t s   fro m   a   g i v en   s e t   o f  d o c u men t s .   H o w e v e r ,   L D A   c an   s t ru g g l e   t o   i d en t i fy   t o p i c s   i n   s h o rt   d o c u men t s   o r  i n   d at a  w i t h   h i g h   l e v el s   o f  n o i s e.   T h i s   art i cl e   w i l l   i n t ro d u ce   a  n ew   me t h o d   f o r  t o p i c  m o d e l i n g   w i t h   L D A   b as ed   o n   d i ag o n a l   r e ad i n g   f o r  s e n t en ce s   (D IA G - L D A ).   Pri m ar i l y ,   t h e  f e at u r e s   ar e   s e l ec t ed   u s i n g   t h e  T F - I D F  al g o r i t h m ,   an d   t h e   h i g h e s t   rel e v a n t   fe at u r e s   ar e  e x t rac t e d   u s i n g   t h e   c o n fi d e n ce  v a l u e .   B e s i d e s ,   t h e   c l as s i fi c at i o n   s t e p   i s   ex e cu t ed   u t i l i zi n g   t h e  L D A   c l as s i fi e r.   U l t i m at e l y ,   w e  e v a l u at e   o u r  m o d e l   u s i n g   t h e   co n v o l u t i o n a l   n eu ral   n e t w o rk   al g o r i t h m .   T h e  e x p e ri men t   re s u l t s   s h o w   t h at   D I A G - L D A   p e rfo r m s   w el l   i n   i d e n t i f y i n g   f e at u re s   fr o m   t e x t   d at a,   a ch i e v i n g   a   9 4 . 4 % ,   a n d   8 9 . 5 %   i n   a cc u ra cy   f o r  t h e   d at as e t s   o n   i n t e r n at i o n al   eco n o m i c s   a n d   t h e  p o l i t i c al   ec o n o my .   K e y w o r d s :   C o n v o l ut i o n a l   n e ur a l   n e t wo r k   D i a go n a l   r e a d i ng    L a t e n t   di r i c hl e t   a l l o c a t i o n   Na t ur a l   l a n gua ge   pr o c e s s i n g   T o pi c   m o de l i ng    Th i s   i s   a n   o p en   a c ces s   a r t i c l e  u n d e r   t h e  CC  B Y - SA   l i cen s e.     C or r e s pon din g  A u th or :   F a t i m a - Z a h r a e   S i f i   De pa r t m e n t   o f   M a c hi ne   I n t e l l i g e n c e ,  F a c u l t y   o f   S c i e n c e s   a n d  T e c hn o l o g y ,   Ha s s a n - II  Uni ve r s i t y   M o h a m m e d i a   28806 ,   M or o c c o   E m a i l :  f a t i m a z a h r a e . s i f i @u ni vh2c . m a       1.   I NT RODU C T I ON   T h e   e x t r a c t i o n   o f   m e a ni ng f u l   i nf o r m a t i o n   f r o m   l a r ge   da t a s e t s   i s   a   c r i t i c a l   c h a ll e n ge   i n  f i e l ds   s u c h   a s   e l e c t r o ni c s ,   t e l e c o m m u ni c a t i o n s   a n d  c o m put e r   s c i e n c e .   E f f i c i e n t   a n d  a c c ur a t e   da t a   a n a l y s i s   m e t h o ds   a r e   n e c e s s a r y   t o   h a n d l e   t h e   e ve r - gr o wi n g  v o l u m e   o f   t e x t ua l   i nf o r m a t i o n   [ 1 ].   T o   a ddr e s s   t hi s   c ha l l e n g e ,   a dv a n c e d   t e c h ni que s   i n   n a t ur a l   l a n gua ge   pr o c e s s i n g  ( NL P )   [ 2 ]   a n d  i nf o r m a t i o n   r e t r i e v a l   a r e   e m p l o y e d.   S pe c i f i c a ll y ,   c o m bi n i ng  l a t e n t   di r i c hl e t   a l l o c a t i o n   ( L D A )   f o r   top i c   m o de li ng  [ 3]   wi t h   e f f e c t i v e   r e a d i ng  t e c hni qu e s   s uc h   a s   D i a go n a l   r e a d i ng  e nh a n c e s   t h e   c a pa bil i t y   t o   e x t r a c t   a n d  c o m pr e h e n d  i nf o r m a t i o n   f r o m   e x t e n s i ve   t e x t   c o r p or a .   F ur t h e r m o r e ,   i n c o r por a t i n g  c o nv o l ut i o n a l   n e ur a l   ne t w o r ks   ( C NN )   a i ds   i n   i de n t i f yi ng  t r e n ds   w i t hi n   t he s e   l a r ge   da t a s e t s .     T h e   pr o bl e m   a t   h a n d  i nv o l v e s   t h e   n e e d  f o r   e f f i c ien t   m e t h o ds   to  e x t r a c t   ke y   t h e m e s   a n d  s ub t o pi c s   f r o m   v a s t   a m o un t s   o f   t e x t   da t a   [ 4 ] .   T h i s   i s   a ddr e s s e d  by   i n t e gr a t i n g  d i a go n a l   r e a d i ng  t e c hni que s   w it h   L DA   [ 5 ] ,   whi c h   a ut o m a t i c a ll y   u n c o v e r s   hi dde n   to pi c s   w i t hi n   do c u m e n t s   [ 6 ] .   Di a go na l   r e a d i ng  h e l p s   i n  s w i f t l y  i de n t i f y i ng  c r uc i a l   e l e m e n t s   l i ke   to pi c   s e n t e nc e s   a nd  h e a d i ngs   [ 7 ] ,   t h us   e nh a nc i n g  t h e   t o pi c   m o de l i ng  pr o c e s s .   P r e vi o us   wo r ks   h a v e   ut i li z e d  L D A   t o   di s c o v e r   to pi c s   a c r o s s   v a r i o us   do m a i ns ,   i nc l ud i ng  e c o n o m y   a n d   po l i t i c s   Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2 5 0 2 - 4 7 52   In do n e s i a n   J   E l e c   E n g   &   C o m p  S c i ,  Vo l .   3 6 ,   N o .   2 ,  N o v e m b e r   20 24 :   1 261 - 1 272   1262   [ 8 ] ,   by   l e a r ni ng  to pi c - wo r d  di s t r i b ut i o n s   t h r o ugh   wor d  c o - o c c ur r e n c e s   [ 9 ] .   H o we v e r ,   t h e s e   m e t h o ds   we r e   us ua l ly   i ns u f f i c i e n t   o r   o f   l im i t e d  a c c ur a c y /pr e c i s i o n   f o r   l a r ge   a n d  c o m p l e x   da t a s e t s   [ 10 ] .   T hi s   pa pe r   pr o p o s e s   a   n o v e l   a ppr o a c h   t h a t   s ur pa s s e s   e xi s t i n g  L D A   m o de l s   i n   t he   l i t e r a t ur e ,   de m o ns t r a t i n g  s upe r i o r   a c c ur a c y   a n d  pr e c i s i o n   i n   f e a t ur e   i de n t i f i c a t i o n .   K e y   a s pe c t s   o f   t hi s   a ppr o a c h   i n c l ud e   t h e   i m p l e m e n t a t i o n   o f   n u m e r o us   pr e t r e a t m e n t   t e c hni que s   [ 1 1 ]   s uc h   a s   t e x t   l o we r c a s i ng,   n e ga t i o n   ha n d li ng,   unif o r m   r e s o ur c e   l o c a t or   ( UR L )   a n d  n u m be r   r e m o v a l ,   s to p  w o r d   e l im i na t i o n ,   to ke ni z a t i o n ,   a n d  l e mm a t i z a t i o n   t o   e n h a n c e   da t a   qua l i t y .   T h e   da t a   i s   t h e n   s e g m e n t e d  i n t o   s e n t e n c e s   ba s e d   o n   t h e   a v e r a g e   n u m be r   o f   wo r ds   pe r   s e n t e nc e .   T e r m   f r e que nc y - i nve r s e   do c u m e n t   f r e que n c y   ( TF - I DF )   i s   a pp l i e d  t o   de t e r m i ne   s i g ni f i c a n t   f i x i ng  po i n t s .   A s s o c i a t i o n   r u l e s   a r e   i n t e gr a t e d   us i n g  c o nf i de nc e   va l u e s   t o  s e l e c t   t h e   m o s t   pe r t i n e n t   f e a t ur e s .   L D A   i s   e m p l o y e d  a s   a   c las s if i e r   to   c a t e g o r i z e   e a c h   f e a t ur e   i n t o   f i ve   l a b e l e d  to pi c s ,   e ns ur i n g  t h e   c a pt ur e   o f   pr i m a r y   t o pi c s   w i t h o ut  o v e r l o a d i n g  o r   di mi n i s hi ng  t h e i r   s i g nif i c a n c e .   Our   r e c e n t  a ppr o a c h   s ur pa s s e s   a l t e r n a t i v e   L D A   m o de l s   f o un d  i n   t h e   l i t e r a t ur e ,   de m o n s t r a t i n g  s upe r i o r   a c c ur a c y   a n d   pr e c i s i o n   i n   f e a t ur e   i de n t i f i c a t i o n .   F i n a ll y ,   o ur   pr opo s a l   u t i li z e s   a   C NN   to  tr e a t  t e x t  a s   a   s e que n c e ,   c a pt ur i n g  r e l a t i o n s hi p s   w i t hi n   s e n t e n c e s .   B y   c o m bi n i ng  d i a g o n a l   r e a d i ng  w i t h   L D A   a n d  C NN ,   o ur   a ppr o a c h   f a c i li t a t e s   r a p i d  c o m pr e h e n s i o n   o f   m a i n  t h e m e s   a n d  s u b t op i c s   w i t hi n  t e x t ,   r e v e a li ng  t r e n ds   f r o m   e x t e ns i v e   t e x t ua l   da t a s e t s .   T h e   pa pe r   i s   o r ga ni z e d  a s   f o l l o w s   :  i n   s e c t i o n   2,   r e l a t e d  wor k  i s   r e vi e w e d.   I n   s e c t i o n   3,   t h e   pr o bl e m  i s   f o r m a ll y   de f i ne d  a n d  t h e   pr o p o s e d   a ppr o a c h   i s   o u t l i n e d.   I n   s e c t i o n   4,   t h e   r e s u l t s   o f   o u r   i nv e s t i ga t i o n s   a r e   pr e s e n t e d  a n d  c o m pa r e d  w i t h   o t h e r   m e t h o do l o g i e s   i n   t h e   f i e l d.   F i n a ll y ,   a   c o n c l u s i o n   i s   g i ve n .       2.   RE L AT E D  WORK S   NL P   i nv o l ve s   a n a ly z i ng  v a s t   a m o un t s   o f   da t a   i n   n a t ur a l   l a n gua g e   [ 12] .   C h a l l e n ge s   i n   NL P   i n c l ude   s e n t e n c e   mi s u n de r s t a n d i ng,   v a r i e d  wo r d  m e a ni n gs ,   i nf o r m a l   l a n gua ge ,   a n d  i nc o r r e c t   s e gm e n t a t i o n .   T e x t  pr e pr o c e s s i ng  b e f o r e   a n a ly s i s   i s   c r uc i a l   f o r   c l a r i t y   a n d  o pt i m a l   r e s u l t s   [ 13] .     De s p i t e   t h e   a b u n da n c e   o f   a v a il a bl e   b o o ks ,   t h e r e   i s   l im i t e d  li t e r a t ur e   o n   d i a go na l   r e a d i ng.   Yu  [ 14]   c o n duc t e d  a   s t udy   c o m p a r i n g  r e a d i n g  s pe e ds   f o r   h or i z o n t a l   a n d  v e r t i c a l   t e x t ,   di s c o v e r i ng  t h a t  d i a go n a l  r e a d i n g  i s   f a s t e r   a n d  m o r e   e f f i c i e n t ,   pa r t i c u l a r ly   f o r   s m a l l   f o n t   s i z e s .   W i ns l e r   e t  al.   [ 15]   pr o p o s e   t h a t  d i a go n a l  t e x t  pr o c e s s i n g  d i f f e r s   f r o m   h o r i z o n t a l   t e x t   due   to   c o n t a i ni ng  m o r e   hi g h - s p a t i a l   f r e que n c y   i n f o r m a t i o n .   R e ga r d i n g  s pe e d  r e a d i ng,   t h e   a r t i c l e   [ 16]   e m p h a s ize s   i t s   i m p a c t   o n   t e x t   c o m pr e h e n s i o n   a n d  r e t e n t i o n .   W hil e   s a c r i f i c i ng  s o m e   c o m pr e he n s i o n   f o r   s pe e d  m a y   b e   s u i t a bl e   f o r   t a s ks   l i ke   s k im mi ng,   m a ny   s i t ua t i o ns   r e qu i r e   a   s l o we r   pa c e   f o r   a de qua t e   un de r s t a n d i n g.   T h e   s t udy   [ 17]   e x a m i ne s   t h e   i m pa c t   o f   di f f e r e n t   o r i e n t a t i o n  c o n d i t i o n s   o n   r e a d i ng  pe r f o r m a nc e ,   m e a s ur i n g  r e s po n s e   t i m e s   a n d  a c c ur a c y   r a t e s ,   pr o vi d i ng  i ns igh t s   i n t o  h o w  s pa t i a l   o r i e n t a t i o n   i nf l u e n c e s   r e a d i ng  pr o c e s s e s   a n d  c o gni t i v e   pr o c e s s i n g  i n   r e a d i ng  t a s ks .   T h e s e   s t udi e s   pr o vi de   t h a t  di a go n a l   r e a d i ng  c a n   b e   m o r e   e f f i c i e nt  a n d  f a s t e r   t h a n   h o r i z o n t a l   r e a d i n g,   de pe n d i ng  o n   t h e   f o n t   s i z e ,   a n d  t h a t   di a go n a l   r e a d i n g  m a y   h a v e   a   d i f f e r e nt  pr o c e s s i n g  m e c h a ni s m   t h a n   h o r i z o n t a l   r e a d i ng.   L D A   i s   a   w i de ly   u s e d  m e t h o d  f o r   i de n t i f yi ng  t he m a t i c   s t r uc t ur e s   i n   l a r ge   t e x t   da t a s e t s .   I ni t i a l ly  i n t r o duc e d  by   B l e i   e t  al.   i n   2003,   L D A   ha s   b e c o m e   pr o m i ne n t   i n   N L P ,   i nf o r m a t i o n   r e t r i e v a l ,   a n d   c o m put a t i o n a l   s o c i a l   s c i e n c e s .   B l e i   e t  al.   [ 1 ]   i n t r oduc e d  L D A   a s   a   ge n e r a t i v e   m o de l   r e pr e s e n t i n g  do c u m e n t s   a s   c o m bi na t i o n s   o f   hi dde n   to pi c s .   T h e i r   s e m i na l   pa pe r   o u t l i ne s   L D A's   f u n da m e n t a l   c o n c e pt s ,   m a t h e m a t i c a l  f r a m e wo r k,   a n d  i nf e r e n c e   t e c hni que s ,   s e tt i n g  a   be n c hm a r k  f o r   s ub s e que n t   r e s e a r c h .   A ddr e s s i ng  t h e   c h a ll e n g e   o f   l a r ge - s c a l e   to pi c   m o de li ng,   a n o t h e r   s t udy   [ 18]   pr o p o s e s   a   f l e xi b l e   a n d  s c a l a bl e   a ppr o a c h   us i ng  va r i a t i o n a l   i n f e r e n c e .   T hi s   s t a t i s t i c a l   m e t h o d  e f f i c i e n t l y   e s t i m a t e s   l a t e n t   to pi c s   i n   v a s t   do c um e n t   c o r p or a ,   e s s e n t i a l   f o r   d i s c o v e r i n g  t h e m a t i c   pa t t e r n s   i n   n a t ur a l   l a n gua g e   pr o c e s s i n g  a n d  t e x t - m i ni ng  t a s ks .   I n   s o c i a l   m e d i a   a n a ly s i s ,   R o h a ni   e t  al.   [ 19]   i nve s t i ga t e   to pi c   m o de li ng ' s   a p p l i c a t i o n .   T h e i r   s t ud y   a ddr e s s e s   c h a ll e n g e s   li ke   no i s y   t e x t   a n d  s c a l a bil i t y   f o r   l a r ge   da t a s e t s .   E v a l u a t i o n   i s   c r i t i c a l   f o r   a s s e s s i ng  L D A   m o de l s .   W a ll a c h   e t  al.   [ 20]   pr o p o s e   a   c o m pr e h e ns i ve   f r a m e wo r k,   i n c l ud i ng  m e t r i c s   l i k e   pe r pl e xi t y   a n d  to pi c   c o h e r e n c e ,   to   m e a s ur e   m o de l   qua li t y   a n d  i n t e r pr e t a bi li t y .       3.   M E T HO D   I n   d i a go n a l   r e a d i ng  us i n g  NL P ,   s e v e r a l   i s s ue s   we r e   a ddr e s s e d  whil e   e x e c ut i n g  s y s t e m   pr o c e s s e s   a n d   e x t r a c t i n g  wo r ds .   F i r s t l y ,   t h e r e 's   a   r i s k  o f   l o s i n g  im po r t a n t  i nf o r m a t i o n ,   r e s u l t i ng  i n   a   s u pe r f i c i a l   c o m pr e h e ns i o n   o f   t h e   t e x t .   I n   a dd i t i o n ,   qui c k  r e a d i n g  a i m s   t o  c o v e r   m o r e   t e x t   i n   l e s s   t i m e ,   hi g hli g h t i n g  ke y wo r ds   f o r   e f f i c i e nc y .   R e t a i ni ng  i nf o r m a t i o n   a nd  e n h a nc i n g  r e t e n t i o n   a r e   c r uc i a l .   Our   p r o p o s e d  a ppr o a c h   a ddr e s s e s   t h e s e   c o n c e r n s ,   a s   s h o wn   i n   F i g ur e   1 .         Evaluation Warning : The document was created with Spire.PDF for Python.
I n do n e s i a n   J   E l e c   E n g  &   C o m p  S c i     I S S N:   2 5 0 2 - 4 7 52         E nhanc ing  diagona l  c ompr e he ns ion  w it h  adv anc e d  topi c   mode li ng  tec hnique:   …  ( F ati ma - Z ahr ae   Sif i )   1263       F i gur e   1.   Gl o b a l   a r c hi t e c t ur e   o f   o ur   DI A G - L D A   m e t h o d       3. 1.     Dat a   p r e t r e at m e n t   s t e p   I n   t h e   di g i t a l   a ge ,   o nl i ne   b o o ks   h a ve   b e c o m e   po pul a r   s o ur c e s   o f   r e a di n g  m a t e r i a l   wo r l dw i de .   Ho we v e r ,   n o n - pr e pr o c e s s e d  s e n t e n c e s   i n   t h e s e   b o o ks   c a n   hi n de r   c o m pr e h e ns i o n .   T o  a ddr e s s   thi s   i s s u e ,   publi s h e r s   a n d  p l a t f o r m s   m us t   pr i o r i t i z e   r o b us t   pr e - pr o c e s s i n g  s t r a t e gi e s   f o r   a c c ur a c y   a n d  r e a da bil i t y .   Upo n   a n a ly z i ng  t h e   d o c um e n t ,   we   o b s e r ve d  e m pt y   wo r ds   a n d  e x c e s s i ve   punc t ua t i o n .   Our   a ppr o a c h   i nv o l ve d  n o i s e   r e duc t i o n   f o r   s e n t e n c e   n o r m a li z a t i o n ,   i n c l ud i ng  UR L   r e m o v a l   a n d  pu n c t ua t i o n   e li mi na t i o n .   S to p  w or ds   l a c k i ng  m e a ni ng f u l   c o n t e x t   w e r e   a l s o   r e m o v e d,   a n d  a ll   t e x t   wa s   t r a n s f o r m e d  t o  l o we r c a s e   f o r   c o n s i s t e n c y .   A dd i t i o na l ly ,   s t e m mi ng  wa s   a pp li e d  t o   uni f y   wo r d  f o r m s .   F ur t h e r   de t a i l s   o n   t h e s e   pr e pr o c e s s i n g   s t e ps   a r e   pr o vi de d  a s   d i s p l a y e d   i n   F i g ur e   2 .           F i gur e   2.   T e x t  pr e pr o c e s s i n g  pr o c e ss       3. 2.     Wor d   a n al ys is   D i a go n a l   r e a d i ng  i nv o l v e s   un de r s t a n d i ng  wo r ds   p r e s e n t e d  di a go n a ll y ,   hy po t h e s i z e d  to   r e l y   o n   vi s ua l   pe r c e pt i o n   r a t h e r   t h a n   l i ngu i s t i c   pr o c e s s i n g.   R e s e a r c h   s ugge s t s   d i a go n a l   r e a d i ng  c a n   b e   f a s t e r   a n d  m o r e   e f f i c i e n t ,   e s pe c i a l ly   w i t h   s m a l l   t e x t   s i z e s   [ 21] .   I n   li t e r a t ur e ,   s h o r t e r   w or ds   a r e   m o r e   f r e que n t l y   s k i p pe d  t h a n  l o n ge r   o n e s .   F o r   i ns t a n c e ,   t h r e e - l e t t e r   w o r ds   a r e   o m i t t e d  a ppr o xi m a t e l y   67%   o f   t h e   t i m e ,   whi l e   7 – 8  l e t t e r   wo r ds   a r e   e x c l ude d  o nly   a r o un d  20%   o f   t h e   t i m e   [ 22] .   I n   o ur   a ppr o a c h ,   we   a d j u s t   t h e   wo r d  l e n gt h   t h r e s h o l d   f o r   r e m o va l   b a s e d  o n   da t a s e t  c h a r a c t e r i s t i c s   a n d  r e s e a r c h   go a l s .   B y   f il t e r i ng  o u t  s h o r t   w or ds ,   we   e n ha n c e   t h e   qua l i t y   a n d  e f f i c i e n c y   o f   s u b s e que n t   di a go na l   a n d  NL P   a n a ly s e s .     3. 3 .     S e n t e n c e   s e gm e n t at ion   P r e vi o us   s t ud i e s   h a v e   u s e d  s e n t e nc e   l e n gt h   t o   a s s e s s   s y n t a c t i c   c o m p l e xi t y   [ 23] ,  [ 24] .   T h e   s t ud y   [ 23]   i n t r o duc e s   a   c o m put e r - b a s e d  a ppr o a c h   t h a t   e v a l ua t e s   t e x t  r e a da bi li t y   by   c o n s i de r i ng  l i ngu i s t i c   a n d  s t r uc t u r a l   f e a t ur e s   l i k e   s e n t e n c e   l e n gt h ,   v o c a b u l a r y   c o m p l e xi t y ,   a n d  c o h e r e nc e .   F o r t i   e t  al.   [ 24 ] ,   e x a m i ne   lan gua g e   m o de l s   pr o duc i n g  l o n ge r   o r   s h o r t e r   s e n t e n c e s   a n d  e v a l ua t e   t h e i r   e f f e c t   o n   n a r r a t i v e   c o h e r e n c e   a n d   e n ga g e m e n t .   F o r   o u r   p r o p o s a l ,   s e n t e n c e   s e g m e n t a ti o n   i nv o l v e s   c a l c u l a t i n g  t h e   m e a n   wo r d  c o un t  pe r   s e n t e n c e   i n   t h e   pr o c e s s e d  da t a s e t :     Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2 5 0 2 - 4 7 52   In do n e s i a n   J   E l e c   E n g   &   C o m p  S c i ,  Vo l .   3 6 ,   N o .   2 ,  N o v e m b e r   20 24 :   1 261 - 1 272   1264   A v e r a g e ( w / s ) = Sum ( w ) Sum ( s )   ( 1)     Av e r a ge ( w/s ) :  a v e r a ge   wo r ds   pe r   s e n t e n c e ;   s u m ( w) :  o v e r a l l   c o un t   o f   wo r ds   i n   t h e   t e x t  a f t e r   pr e pr o c e s s i n g ;  s u m ( s ) :  o v e r a l l   c o un t   o f   s e n t e n c e s   i n   t h e   r a w  t e x t .  On c e   t h e   a v e r a ge   wo r d   c o un t  pe r   s e n t e n c e   i s   c a l c u l a t e d,   i t   c a n   b e   u s e d  a s   a   t h r e s h o l d  to   s e g m e n t   t h e   t e x t.   I f   th e   a v e r a g e   i s   c a l c u l a t e d  to   b e   10,   o ur   da t a s e t   i s   d i v i de d  i n t o   a   s e que n c e   o f   wo r ds   t h a t   c o n t a i n s   10  wo r ds   i n   e a c h   s e n t e n c e .     3. 4 .     Re f e r e n c e   p oin t   Dur i n g  r e a d i n g,   o u r   e y e s   do n' t   c o n t i n uo us l y   m o ve   a l o n g  t h e   t e x t ,   r e l y i ng  i ns t e a d  o n   s t a bl e   po s i t i o n s   f o r   vi s ua l   pe r c e pt i o n   [ 25] .   T o   o p t i m i z e   r e a d i n g,   we   a i m   t o  e x pa n d  f i xa t i o na l   ga z e   a n d  m i n im i z e   f i xa t i o n s ,   r e pr e s e n t i n g  t h e   i nf o r m a t i o n   w i t hi n   a   f i xa t i o n .   R e s e a r c h e r s   l i nk  e y e   f i xa t i o n   dur a t i o n   w i t h   de e pe r   c o gni t i v e   e n ga g e m e n t   [ 26 ] .   Our   m e t h o d  us e s   T F - I DF   to  i de nt i f y   r e f e r e nc e   po i n t s :     TF − I DF ( m , s ) = TF ( m , s ) × log ( T DF ( m ) )   ( 2)     m :  wo r d;   s :  s e n t e n c e ;   T F ( m ,   s ) :  t e r m   f r e que n c y   o f   m   w i t hi n  s e n t e nc e   s ;   D F ( m ) :  n u m be r   o f   s e n t e n c e s   w h e r e   t h e   m   wo r d  a ppe a r s ;   T :  tot a l   c o un t   o f   s e n t e n c e s .   D i s t i n c t i v e   f e a t ur e s   i n   o ur   di a go n a l   a l go r i t hm   a r e   i de n t i f i e d  us i n g  r e l e v a n t   w o r ds   wi t h   hi g h   T F - I DF   r a t e s ,   a i d i ng  c o gni t i v e   pr o c e s s i ng.   I n s p i r e d  by   d i a go na l   r e a di ng   m e t h o ds ,   o ur   s t udy   s e l e c t s   t w o   r e f e r e n c e   po i n t s   pe r   s e n t e n c e   b a s e d  o n   t h e i r   hi g h   T F - I DF   s c o r e s .     3. 5 .     T r ac k in g  gu id e   Un t r a i n e d  r e a de r s   o f t e n   e x pe r i e n c e   r e gr e s s i o n s ,   c o n s c i o us ly   r e r e a d i ng  t e x t   [ 27] ,  [ 28 ] .   U t i l i z i ng   vi s u a l   gu i de s   a i m s   t o   e a s e   a n a l y s i s   by   a i d i ng  t e x t   t r a c ki n g  s k i pp i n g  c r uc i a l   wo r ds   [ 29] ,   ul t i m a t e l y   e nh a n c i n g   r e a d i n g  s pe e d  [ 30] .   Af t e r   i de n t i f yi ng  t w o   r e f e r e n c e   po i n t s   pe r   s e n t e n c e ,   a s s o c i a t i o n   r u l e s   a r e   us e d  to   r e v e a l   wo r d   r e l a t i o n s hi ps .   T hi s   i t e r a t i v e   pr o c e s s   i nv o l ve s   e l im i na t i n g  wor ds   t h a t  f a ll   b e l o w  a   c e r t a i n   mi n im u m   t h r e s h o l d  a n d  a na l y z i ng  a s s o c i a t i o ns .   F o r m a ll y ,   t he   c o n f i d e n c e   va l ue   f o r   a n   a s s o c i a t i o n   r u l e   ( wo r d1 →wo r d2 )   c a n   b e   de f i ne d  a s :     Co nfid e nce ( m1 →   m2 ) = N ( m1 , m2 ) N ( m1 )   ( 3)     N( m 1,   m 2) :  n u m be r   o f   tr a n s a c t i o ns   c o n t a i ni ng  b o t h   w o r d1  a n d  w o r d2;   N( m 1) :  n u m be r   o f   t r a n s a c t i o n s   c o n t a i ni ng  w1 ;   c o nf i de nc e   a s s e s s e s   t h e   c o n d i t i o na l   pr o b a bi li t y   o f   wo r d1  gi v e n   wo r d2,   r a n g i n g  f r o m   0  to   1 .   H i g h e r   c o nf i d e n c e   s c o r e s   s i g nif y   s t r o n ge r   a s s o c i a t i o ns   be t we e n   wo r ds   w i t hi n  t h e   s a m e   s e n t e n c e .   F o r   i ns t a nc e ,   's to c k - e x c h a n ge '   a n d  'f i na nc i a l - m a r ke t '   e xhi b i t   a   s t r o n g  a s s o c i a t i o n ,   r e s u l t i ng  i n   hi g h   c o nf i de n c e   v a l ue s .     L D A ,   f i r s t   pr e s e n t e d  i n   2003  [ 2] ,   s t a n ds   a s   o n e   o f   t h e   p i o n e e r i ng  to pi c   m o de l s .   Ope r a t i n g  a s   a   'b a g   o f   wo r ds '   m o de l ,   L D A   f o c us e s   s o l e ly   o n   t e r m - do c u m e n t   f r e que n c y ,   d i s r e ga r d i ng   t e x t  o r ga ni z a t i o n   [ 31] .   T h e   vi s u a l   de p i c t i o n   o f   L D A   i s   il l u s t r a t e d   i n   F i gur e   3 .           F i gur e   3.   Gr a phi c a l   de p i c t i o n   o f   L D A       D:  c o un t   o f   do c um e n t s ;   α :  d i s t r i b ut i o n   o f   do c u m e n t - to pi c   θ;   M :  wor ds   pr e s e n t   i n   t h e   d o c um e n t ;   β :  d i s t r i b ut i o n   o f   wo r ds   wi t hi n  e a c h   t o pi c ;   w:  wor d;   θ:   to pi c   d i s t r i b ut i o n   pe r   do c um e n t ;   z :  to pi c s   to   w hi c h   t h e   wo r d   i s   a s s o c i a t e d.   Evaluation Warning : The document was created with Spire.PDF for Python.
I n do n e s i a n   J   E l e c   E n g  &   C o m p  S c i     I S S N:   2 5 0 2 - 4 7 52         E nhanc ing  diagona l  c ompr e he ns ion  w it h  adv anc e d  topi c   mode li ng  tec hnique:   …  ( F ati ma - Z ahr ae   Sif i )   1265   Our   a l go r i t hm   c o m put e s   t h e   c o nf i de n c e   t h r e s h o l d   by   c o ns i de r i n g  c o nf i de n c e   v a l ue s   f o r   e a c h   wo r d  pa i r   a n d  a   pe r c e n t i l e   t h r e s h o l d.   R u l e s   s ur pa s s i ng  t he   c o nf i de n c e   t h r e s h o l d  a r e   c o n s i de r e d  s t r o n g  a n d  p r a c t i c a l .   F i gur e   4  o u t l i n e s   t h e   pr o c e s s   o f   de t e r m i n i ng  t h e   a ppr o p r i a t e   c o nf i de n c e   t h r e s h o l d  va l u e .           F i gur e   4.   C o nf i de n c e   t h r e s h o l d  f l o w       T o  e v a l u a t e   r e s ul t s ,   we   us e d  c o h e r e n c e   a n d  pe r p l e xi t y   a s   e v a l ua t i o n   m e t r i c s :     C o h e r e nc e :  m e a s ur e s   t h e   c o h e r e n c e   a m o n g  wo r ds   w i t hi n   a   t o pi c ,   i n d i c a t i n g  t h e   i n t e r pr e t a bi li t y   o f   to pi c s   ge n e r a t e d  by   L D A .   C o h e r e n c e   c a n   be   c o m put e d  us i n g  po i n t w i s e   m ut ua l   i nf o r m a t i o n   ( P M I ) .   W e   c a l c u l a t e   t h e   P M I   s c o r e s   f o r   a l l   wo r d  pa i r s   w i t hi n  a   t o pi c .   W e   t a ke   t h e   a v e r a ge   t o   o b t a i n   t h e   c o h e r e n c e   s c o r e   f o r   e a c h  to pi c .   W e   c o m put e   e v e n t ua l ly   t h e   o v e r a l l   c o h e r e n c e   s c o r e   by   a v e r a g i ng  t h e   c o h e r e nc e   s c o r e s   a c r o s s   a l l  to pi c s .   T h e   f o r m u l a   f o r   w o r d  pa i r s   ( m 1,   m 2)   i s :     P M I ( m 1 , m 2 ) = log 2 ( P ( m 1 , m 2 ) P ( m 1 ) ⋅ P ( m 2 ) )   ( 4)     P ( m 1,   m 2) :  t h e   l i ke li h o o d  o f   wo r d  c o - o c c ur r e n c e   m 1  a n d  m 2 ;   P ( m 1)   a n d  P ( m 2) :  t h e   l i k e l i h o o d  o f   i n d i v i dua l   wo r ds   m 1  a n d  m 2,   c o r r e s p o n d i n g ly .   P e r pl e xi t y :  i s   a   wi de ly   u s e d  m e a s ur e   to   e v a l ua t e   t h e   qua l i t y   o f   L D A  m o de l s .   I t  a s s e s s e s   t h e   m o de l 's   pr e d i c t i v e   c a pa bil i t y .   I t  i s   c a l c u l a t e d  us i n g  ( 5) .     P e r p l e xity ( D ) = e xp ( - ∑ log ( p ( w ) ) )   ( 5)     D:  t h e   da t a s e t ;   p( w) :   t h e   pr o b a bi li t y   a s s i g n e d  to   w o r d   w.   Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2 5 0 2 - 4 7 52   In do n e s i a n   J   E l e c   E n g   &   C o m p  S c i ,  Vo l .   3 6 ,   N o .   2 ,  N o v e m b e r   20 24 :   1 261 - 1 272   1266   3. 6 .    T r ain in g  an d   e val u at ion   d at as e t   F o r   e x t e n s i ve   e c o n o m i c   d a t a   c l a s s i f i c a t i o n ,   de e p   l e a r ni ng  m o de l s   s uc h   a s   C NN   i s   f a v o r e d.   C NN   a r c hi t e c t ur e   t y p i c a ll y   i nc l ude s   a n   e m be dd i ng  l a y e r ,   a   c o n v o l ut i o n a l   l a y e r ,   a n d  a   m a x - po o l i n g  l a y e r   f o r   o u t pu t,   a s   de p i c t e d  i n   F i gur e   5 .   T h e   pr e pr o c e s s e d  da t a   i s   c o n v e r t e d  i n t o   a   s e que n c e   o f   wo r ds ,   whi c h   a r e   m a ppe d  to  c o r r e s po n d i n g  wo r d  v e c to r s   i n de x e s .   T h e s e   i nde x e s   s e r v e   a s   i nput   to   t h e   C NN   m o de l .   Our   c o n v o l ut i o n  ut i li z e s   64  f il t e r s ,   w i t h   e a c h   f il t e r   gr o up   r e duc i n g  d i m e n s i o na l i t y   t h r o ugh   1 - m a x   poo l i ng.   A   f u ll y   c o nn e c t e d   l a y e r   w i t h   a   de ns e   f u nc t i o n   a n d  r e c t i f i e d  l i ne a r   unit   ( R e L U)   a c t i v a t i o n   c o m put e s   pr o b a bil i t i e s   f o r   t h e   5  l a b e l s   i n   o ur   c a s e .   T h e   m o de l   i s   pr e pa r e d  t h r o ugh   t r a i ni n g  us i n g  5  e p o c h s   a n d  a   b a t c h   s i z e   o f   32.   E v a l ua t i o n   m e t r i c s   f o r   o u r   m o de l   i nc l ud e   a c c ur a c y ,   pr e c i s i o n ,   r e c a l l ,   a n d  t h e   F 1 - m e a s ur e .           F i gur e   5 .   E x a m p l e   o f   o n e   f il t e r   o f   C NN   c l a s s if i e r   i n   a   wo r ds - s e n t e n c e       4.   RE S UL T S   AN D  DI S CU S S I ON   T hi s   s t udy   i nv e s t i ga t e d  t h e   e f f e c t s   o f   DI A G - L D A   o n   t e x t  c o m pr e h e ns i o n   a n d  i nf o r m a t i o n   r e t e n t i o n .   W hil e   e a r li e r   s t ud i e s   h a v e   e x p l o r e d  t h e   i m pa c t   o f   v a r i o us   r e a d i ng  t e c hni que s   o n   l e a r ni ng  o u t c o m e s ,   th e y   h a v e   n o t  e x p l i c i t ly   a ddr e s s e d  i t s   i nf l u e n c e   o n   t h e   e f f e c t i v e n e s s   o f   L D A   i n   i de n t i f yi ng  t h e m a t i c   s t r uc t ur e s   w i t hin  t e x t s .   B y   f o c us i ng  o n   h o w  d i a go n a l   r e a d i ng,   a   m e t h o d  t h a t   i nv o l ve s   s k i mm i ng  a n d  s c a nni ng  t e x t   d i a go n a l ly ,   i n t e r a c t s   w i t h   L DA ’ s   t o pi c   m o de l i ng,   t hi s   r e s e a r c h  a i m s   t o  f i ll   a   ga p  i n   un de r s t a n d i ng  h o w  r e a d i n g  s tr a t e gi e s   c a n   e nh a n c e   o r   i m pe de   t h e   a l go r i t hm ’ s   a bil i t y   t o  u n c o v e r   c o h e r e n t   t h e m e s   i n   l a r ge   t e x t ua l   da t a s e t s .   T o  a s s e s s   t h e   e f f i c a c y   o f   t h e   m o de l ,   we   t e s t e d  o ur   a ppr o a c h   us i n g  m e t r i c s   l i k e   a c c ur a c y ,   pr e c i s i o n ,   r e c a l l ,   a n d  e xe c ut i o n   t i m e .   W e   e v a l ua t e d  i t s   pe r f o r m a n c e   w i t h   t h e   DI A G - L D A   c l a s s i f i e r   o n   e c o n o m i c   b o o ks   a n d  a n a ly z e d  r e s u l t s   f r o m   t h e   C NN   c l a s s i f i e r   w i t hi n   o ur   m o de l .   T h e n ,   we   c o m pa r e d  o u r   f r a m e wo r k's   pe r f o r m a n c e   w i t h   e xi s t i n g  m e t h o ds   i n   s im il a r   s t ud i e s .   T h e   f i r s t   da t a s e t  wi t hi n   t hi s   r e s e a r c h   i s   a   B o ok  [ 32]   o f   3 , 930  s e n t e n c e s   i n   t h e   E n g li s h   l a n gua ge   a b o ut  t h e   po l i t i c a l   e c o n o m y .   A dd i t i o n a ll y ,   we   h a ve   e v a l u a t e d  t h e   pr o p o s e d  m e t h o d  o n   t h e   i n t e r n a t i o n a l   e c o n o m i c s   b o o k   [ 33]   o f   10 , 918  s e n t e n c e s   i n   t h e   E n g li s h   l a ngua ge   to   m a ke   a   li t e r a t ur e   c o m pa r i s o n .   T h e   r e s u l t s   r e ga r d i ng  c o h e r e n c e ,   a n d  t i m e   e x e c ut i o n   o f   DI A G - L D A   a n d  L D A  a r e   pr e s e n t e d  i n   T a bl e s   1  a n d  2.       T a bl e   1.   C o h e r e n c e   o f   d i f f e r e n t   da t a s e t s   M o de l   C o he r e nc e  ( % )   I nt e r na ti o na l  e c o n o mi c s   C o he r e nc e  ( % )   P o li ti c a l  e c o n o m y   D I A G - L D A   75 . 65   74 . 86   L D A   41 . 32   36 . 46       T a bl e   2 .   E x e c ut i o n   t i m e   o f   d i f f e r e n t   da t a s e t s   M o de l   E xe c ut i o n t i me   ( s e c o nds )   I nt e r na ti o na l  e c o n o mi c s   E xe c ut i o n t i me   ( s e c o nds )   P o li ti c a l  e c o n o m y   D I A G - L D A   1 . 395   1 . 087   L D A   106 . 256   42 . 403       T h e   DI A G - L D A   m e t h o d  a c hi e ve d  a   c o h e r e n c e   o f   75. 64%   a n d  a   t i mi ng  o f   1. 395  s e c o n ds   t o wa r d  t h e   i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t  a n d  a   c o h e r e n c e   o f   74. 86% ,   a   t i mi ng  o f   1. 087   s e c o n ds   to wa r d  t h e   p o l i t i c a l  e c o n o m y   da t a s e t .   Our   m e t h o d  o u t pe r f o r m s   oth e r   t e c h ni que s   i n   c o h e r e n c e   a n d  e x e c ut i o n   t i m e .   T hi s   s upe r i o r i t y   i s   due   to  l e v e r a g i ng  L D A   w i t h   d i a go na l   a ppr o a c h ,   whi c h   i n c o r por a t e s   w o r d   c o nf i de n c e   to  de f i ne   to pi c s   a n d  a s s i g n   a ppr o pr i a t e   w o r ds   to  s e n t e n c e s .   T h e   h a r m o ny   o f   L D A' s   t o pi c   c l a s s if i c a t i o n   w i t hi n   o ur   c o n t e x t ua l   f r a m e wo r k,   a i de d  by   a   C NN   c l a s s if i e r ,   f ur t h e r   e n h a n c e s   i t s   e f f e c t i v e n e s s .   R e ga r d i n g  c o h e r e n c e ,   t h e   pr e s e n c e   a n d  qua l i t y   o f   s e m a n t i c   r e l a t i o ns hi ps   be t we e n   wo r ds   g r e a t l y   im pa c t   t h e i r   v a l u e .   W e l l - a s s o c i a t e d  w o r ds   c o n t r i b u t e   p o s i t i v e ly .   A dd i t i o n a ll y ,   e x e c ut i o n   t i mi ng  i s   de ter m i ne d   by   t h e   c o m p l e xi t y   o f   t h e   e m p l o y e d  a l go r i t hm ,   t h e   v o l u m e   o f   da t a   b e i n g  pr o c e s s e d,   a n d  t h e   ha r dwa r e   Evaluation Warning : The document was created with Spire.PDF for Python.
I n do n e s i a n   J   E l e c   E n g  &   C o m p  S c i     I S S N:   2 5 0 2 - 4 7 52         E nhanc ing  diagona l  c ompr e he ns ion  w it h  adv anc e d  topi c   mode li ng  tec hnique:   …  ( F ati ma - Z ahr ae   Sif i )   1267   r e s o ur c e s   a v a il a bl e .   F a s t e r   e x e c ut i o n   i s   o f t e n   a c hi e v e d  t h r o ugh   o p t i mi z e d  a l go r i t hm s ,   pa r a l l e l   pr o c e s s i ng,   a nd   e f f i c i e n t   r e s o ur c e   a l l o c a t i o n .   Ho we v e r ,   us i n g  t h e   b a s i c   L D A   f o r   o ur   da t a s e t s ,   we   a c hi e v e d  a   c o h e r e n c e   o f   41. 32%   a n d  t i mi ng  o f   106. 256   s e c o n ds   f o r   in t e r n a t i o n a l   e c o n o m i c s   da t a s e t  a n d  a   c o h e r e n c e   o f   36. 46% ,   t i mi ng  o f   42. 403  s e c o n ds   to wa r d  p o l i t i c a l   e c o n o m y   d a t a s e t .   DI A G - L DA   h a s   t h e   b e s t   s c or e s   i n   c o h e r e n c e   a n d   i s   l e v e l - h e a de d  i n   t i m e   e x e c ut i o n .   Al t h o ugh   t h e   b e n e f i t s   o f   L D A ,   o ur   a ppr o a c h   s ur pa s s e d  t h e   pe r f o r m a n c e   o f   t h e s e   e nh a n c e d   c l a s s if i c a t i o n   t e c h ni qu e s .   T hi s   c a n   b e   a tt r i b ut e d  to  t h e   ut i l i z a t i o n   o f   a   di a go n a l   m e t h o d  u t i li z i ng  th e   L D A   to pi c   m o de li ng  a ppr o a c h .   Our   m e t h o do l o g y   i nc o r por a t e s   c o n t e x t ua l   da t a   i n   t h e   f o r m   o f   wo r d  c onf i de n c e ,   pr e s e n t i n g  c o nf i de n c e   va l ue s   f o r   e v e r y   wo r d  w i t hi n  a   t o pi c .   T h r o ugh   c o n s i de r i ng  pr o m i ne n t   wo r ds   w i t h  hi g h e r   v a l ue s ,   t h e   t o pi c   i s   de f i ne d,   a n d  s u bs e que n t l y ,   a ppr o pr i a t e   wo r ds   a r e   a s s i g n e d  t o   r e pr e s e n t  s pe c i f ic   s e n t e n c e s   w i t hi n  t h e   t e x t .   T hi s   s i t ua t i o n a ll y   r e p r e s e n t a t i ve   d i a g o n a l   m e t h o d  y i e l d e d  b e tt e r   o u t c o m e s   in  c o m pa r i s o n   t o  t h e   a f o r e m e n t i o ne d  a ppr o a c h e s .   T h e   s upe r i o r   e f f e c t i v e n e s s   o f   t h e   DI A G - L D A   a ppr o a c h   c a n  a l s o   b e   a tt r i b ut e d  to   i t s   c o n s i de r a t i o n   o f   a   s e t   o f   h a r m o ni o us   pr o c e dur e s   f o r   to pi c   c l a s s i f i c a t i o n   w it hi n   t h e   c o n t e x t ua l   f r a m e wo r k.   T hi s   wa s   a c c o m p li s he d  by   im p l e m e n t i n g  a   C NN   c l a s s if i e r   to  e v a l ua t e   t h e   pr o c e s s .   F i gur e   6  d i s p l a y   t h e   a c c ur a c y   r a t e   o f   C NN   c l a s s i f i e r   a pp li e d  t o  o ur   da t a s e t s ,   a s   a   f u n c t i o n   o f   5   e po c h s .   I n   t h e   i n s t a nc e   o f   t h e   C NN   c l a s s if i e r   ut i li z e d  to   D I A G - L D A   f o r   t h e   i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t,   t h e   a c c ur a c y   s c o r e   a c hi e v e d  o f   94. 4%   a tt a i n e d   a f t e r   5  e p o c h s .   T h e   DI A G - L D A   f o r   t h e   i n t e r n a t i o n a l  e c o n o m i c s   da t a s e t  wi t h   C NN   c l a s s if i e r   a c hi e v e d  t h e   hi g h e s t   a c c ur a c y   r e s u l t .   S i m il a r ly ,   C NN   c l a s s if i e r   a pp l i e d  t o  D I A G - L DA   f o r   t h e   po l i t i c a l   e c o n o m y   da t a s e t  a c hi e v e d  89. 5%   o f   a c c ur a c y   s c o r e   a f t e r   5   e po c h s .   T h e   C NN   m e a s ur e s   o f   DI A G - L D A   f o r   t h e   po l i t i c a l   e c o n o m y   da t a s e t   a l s o   g o e s   up  to  a   s a t i s f a c t or y   l e v e l .     I n   t h e   ot h e r   s i d e ,   t h e   C NN   c l a s s if i e r   a pp l i e d  to  L D A   f o r   t h e   in t e r n a t i o n a l   e c o n o m i c s   da t a s e t  e xhibi t e d  t h e   a c c ur a c y   o f   67%   a f t e r   5  e po c h s .   F ur t h e r m o r e ,   t h e   C NN   c l a s s if i e r   a pp li e d  to   L DA   f o r   t h e   po l i t i c a l   e c o n o m y  da t a s e t  r e v e a l e d  t h e   a c c ur a c y   o f   52. 9%   r e a c h e d  a f t e r   5  e p o c h s .   I n   t e r m s   o f   pr e c i s i o n ,   t h e   C NN   c l a s s if i e r   a p p li e d  to   D I A G - L D A   o n   t h e   i n t e r na t i o na l   e c o n o m i c s   da t a s e t  a c hi e v e d,   i n   F i gur e   7,   a   pr e c i s i o n   o f   94. 7%   a f t e r   5  e po c h s ,   whi l e   f o r   t h e   po l i t i c a l   e c o n o m y   da t a s e t ,   t h e   pr e c i s i o n   wa s   93. 3%   a f t e r   t h e   s a m e   n u m be r   o f   e po c h s .   T h e s e   r e s u l t s   s h o w  t h e   m o de l 's   hi g h   a bil i t y   t o  a c c ur a t e l y   pr e d i c t   c l a s s e s   i n   b o t h   d o m a i ns .   C o n v e r s e ly ,   t h e   C NN   c l a s s if i e r   a pp l i e d  to  L DA   f o r   t h e   i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t  h a d  a   pr e c i s i o n   o f   66. 7% ,   a n d  f o r   t h e   po l i t i c a l   e c o n o m y   da t a s e t ,   t h e   p r e c i s i o n  wa s   54. 3%   a f t e r   5   e po c h s .   F o r   r e c a l l   i n   F i gur e   8,   t h e   C NN   c l a s s if i e r   a pp l i e d  to   DI A G - L DA   o n   t h e   i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t  a c hi e v e d  a   r e c a ll   s c o r e   o f   94. 5%   a f t e r   5  e p o c h s ,   wh e r e a s   f o r   t h e   po l i t i c a l   e c o n o m y   d a t a s e t ,   th e   r e c a l l   wa s   89. 4%   a f t e r   t h e   s a m e   n u m be r   o f   e po c h s .   T h e s e   r e s u l t s   i n d i c a t e   t h e   m o de l 's   e f f e c t i v e n e s s   i n   i de n t i f yi ng   po s i t i v e   i ns t a nc e s   w i t hi n   e a c h   da t a s e t .   I n   c o n tr a s t,   t h e   C NN   c l a s s if i e r   a pp l i e d  t o  L DA   f o r   t h e   i n t e r n a t i o n a l  e c o n o m i c s   da t a s e t  h a d  a   r e c a l l   o f   66. 8% ,   a n d  f o r   th e   po l i t i c a l   e c o n o m y   d a t a s e t ,   t h e   r e c a l l   wa s   52. 5 %   a f t e r   5   e po c h s .   R e ga r d i n g  t h e   F 1 - m e a s ur e ,   t h e   C NN   c l a s s if i e r   a pp li e d  to  DI A G - L D A   o n   t h e   i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t,   i n   F i gur e   9,   a tt a i ne d  a n   F 1 - m e a s ur e   o f   94. 4%   a f t e r   5  e p o c h s ,   whi l e   f o r   t h e   po l i t i c a l   e c o n o m y  da t a s e t ,   t h e   F 1 - m e a s ur e   wa s   90. 3%   a f t e r   t h e   s a m e   n u m be r   o f   e po c h s .   T h e s e   f i nd i ngs   hi g hli g h t   a n   e f f e c t i v e   b a l a n c e   b e t we e n   pr e c i s i o n   a n d  r e c a l l   i n   c l a s s i f i c a t i o n   f o r   b ot h   d o m a i ns .   I n   c o n t r a s t ,   t h e   C NN   c l a s s i f i e r   a pp l i e d  to  L D A   f o r   t h e   i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t   a c hi e v e d  a n   F 1 - m e a s ur e   o f   66. 7% ,   a n d  f o r   t h e   p o l i t i c a l  e c o n o m y   da t a s e t ,   t h e   F 1 - m e a s ur e   wa s   52. 8%   a f t e r   5  e po c h s .           F i gur e   6.   A c c ur a c y   c o m pa r i s o n   o f   C N N  o n   DI A G - L D A   a n d  L D A   o f   da t a s e t s   Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2 5 0 2 - 4 7 52   In do n e s i a n   J   E l e c   E n g   &   C o m p  S c i ,  Vo l .   3 6 ,   N o .   2 ,  N o v e m b e r   20 24 :   1 261 - 1 272   1268       F i gur e   7.   P r e c i s i o n   c o m pa r i s o n   o f   C NN   o n   DI A G - L D A   a n d  L D A   o f   da t a s e t s           F i gur e   8.   R e c a l l   c o m p a r i s o n   o f   C NN   o n   DI A G - L D A   a n d  L D A   o f   da t a s e t s       W h e n   t r a i ni ng  o ur   da t a s e t s   wi t h   m o r e   o r   l e s s   t h a n  5  e p o c h s ,   v a r i a t i o n s   i n   r e s u l t s   e m e r ge   due   to  t h e   i n t e r p l a y   b e t we e n   da t a   v o l u m e   a n d  t r a i ni ng  dur a t i o n .   T hi s   pot e n t i a ll y   r e s u l t s   i n   a   r i s k  o f   i n a de qua t e   un c o v e r i ng  o f   d i ve r s e   f e a t ur e s   f o un d  w i t hi n   t h e   da t a .   H o we v e r ,   t r a i ni ng  w i t h   5  e po c h s   o n   a   l a r ge r   da t a s e t  o f f e r s   e x t e n de d  l e a r ni ng  o pp o r t uni t i e s ,   a l l o w i ng  th e   m o de l   to   r e f i ne   i t s   un de r s t a n d i ng  o f   da t a   n ua n c e s   a n d   pr o duc e   m o r e   a c c ur a t e   p r e d i c t i o ns .   T h us ,   i t   i s   i m p o r t a n t   to   f i n d  a   b a l a nc e   to   a c hi e v e   o pt i m a l   pe r f o r m a n c e .   T h e   c o m pa r i s o n   r e s u l t s   a m o n g  t h e   C NN   c l a s s if i e r   i n d i c a t e   t h a t  t h e   DI A G - L D A   f o r   t h e   da t a s e t   o f   i n t e r n a t i o n a l   e c o n o m i c s   a n d  DI A G - L D A   f o r   t h e   da t a s e t   o f   po l i t i c a l   e c o n o m y   a c hi e ve d  hi g he r   r e s u l t s   t h a n  L D A   f o r   t h e   da t a s e t  o f   i n t e r n a t i o n a l   e c o n o m i c s   a nd  L DA   f o r   t h e   da t a s e t   o f   po l i t i c a l   e c o n o m y ,   whi c h   s ugge s t s   t h a t  o ur   c l a s s i f i e r   m o de l   i s   ge n e r a ll y   e f f e c t i v e   i n   d i s t i n gu i s hi ng  b e t we e n   c l a s s e s ,   a n d  i t   a l s o   i n d i c a t e s   s t r o n g  pe r f o r m a n c e   i n   c a t e go r i z a t i o n .   T h e   DI A G -   LD A   f o r   t h e   i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t  wi t h   C NN   c l a s s if i e r   a c hi e ve d  t h e   hi g h e s t   c l a s s if i c a t i o n   r e s u l t s .   S i mi lar l y ,   t h e   C NN   m e a s ur e s   o f   DI A G - L D A   f o r   t h e   p o l i t i c a l   e c o n o m y   da t a s e t   a l s o   g o e s   up  to  a   s a t i s f a c t or y   l e v e l .   F ur t h e r m o r e ,   i n   a dd i t i o n   t o   o u r   c o m pa r i s o n   o f   D I A G - L D A   w i t h   t r a d i t i o na l   L D A ,   we   c o m pa r e   i t   w i t h   t h r e e   ot h e r   L DA   a da pt a t i o ns   m e n t i o n e d  i n  t h e   r e s e a r c h :  J o   a n d  O h   [ 34]   pr o p o s e d  S L DA   f o r   e x t r a c t i n g   a s pe c t s   f r o m   us e r   r e vi e w s .   T h e   o bj e c t i ve   o f   t hi s   m e t h o d o l o g y   i s   to   i de n t i f y   t o pi c s   o n   a   s e n t e n c e   l e v e l,   a s   we l l   a s   a s s i g n   l i k e l i h o o ds   o f   to pi c s   to   w or ds   i n   e v e r y   s e n t e n c e .   Ya n   e t  al.   [ 35]   s ugge s t e d  a   m o d i f i c a t i o n   o f   L D A  f o r   t h e   s h o r t   t e x t  t h a t   t h e y   de s i g n a t e   t h e   bi t e r m   to pi c   m o de l   ( B T M )   f o r   s o l vi ng  da t a   s pa r s i t y   t h a t  m a k e s   c o n v e n t i o n a l   t o pi c   m o de l s   o n   s h o r t  t e x t s .   T h e   wor k  o f   Oz y ur t   e t   al .   [ 36 ]   pr o p o s e d  a n   i nn o v a t i v e   m o d i f i c a t i o n  o f   L D A   a l go r i t hm   f o r   to pi c   e x t r a c t i o n   b a s e d  o n   s e n t e n c e   s e g m e n t a t i o n   a n d  s e n t i m e n t   a n a ly s i s   ( S S - L DA ) .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n do n e s i a n   J   E l e c   E n g  &   C o m p  S c i     I S S N:   2 5 0 2 - 4 7 52         E nhanc ing  diagona l  c ompr e he ns ion  w it h  adv anc e d  topi c   mode li ng  tec hnique:   …  ( F ati ma - Z ahr ae   Sif i )   1269       F i gur e   9.   F 1 - m e a s ur e   c o m pa r i s o n   o f   C NN   o n   DI AG - L D A   a n d  L D A   o f   da t a s e t s       W e   i m p l e m e n t e d  a n d  v a li da t e d  t h r e e   L DA   a da ptat i o n s   o n   da t a s e t s   o f   po l i t i c a l   e c o n o m y   [ 32]   a n d   i n t e r n a t i o n a l   e c o n o m i c s   [ 33] .   W e   m a d e   s o m e   a d j us t m e n t s   to  t h e   c o de   to  i n c o r p o r a t e   D I A G - L D A   a n d  t o   e ns ur e   a   j u s t   a n d  e qu i t a bl e   c o m p a r i s o n   w i t h   B T M ,  s e n t e n c e - L D A ,   a n d  S S - L DA .   W e   e x e c ut e d  t h e s e   L D A  a da pt a t i o ns   o n   o ur   t w o  da t a s e t s   a n d  c o m pa r e d  th e i r   s uc c e s s   i n  t o pi c   m o de li ng.   A c c o r d i n g  t o  t h e   r e s u l t s   s h o w n   i n   F i gur e s   10  a n d  11,   DI A G - L D A   o u t pe r f o r m s   o t h e r   m e t h o ds   w i t h   t h e   hi g h e s t   s c or e s .             F i gur e   10.   E v a l ua t i o n   m e t r i c s   c o m pa r i s o n   o f   C NN   c l a s s i f i e r   o n   DI A G - L D A ,   S S - L DA ,   S L D A ,   a n d  b it e r m   a ppr o a c h e s   a pp l i e d  to  p o l i t i c a l   e c o n o m y   da t a s e t           F i gur e   11 .   E v a l ua t i o n   m e t r i c s   c o m pa r i s o n   o f   C NN   o n   D I A G - L DA ,   S S - L DA ,   S L D A ,   a n d  b i t e r m   a ppr o a c h e s   a pp l i e d  t o  i n t e r n a t i o n a l   e c o n o m i c s   da t a s e t   Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2 5 0 2 - 4 7 52   In do n e s i a n   J   E l e c   E n g   &   C o m p  S c i ,  Vo l .   3 6 ,   N o .   2 ,  N o v e m b e r   20 24 :   1 261 - 1 272   1270   W hil e   S S - L DA   de m o n s t r a t e s   c o m m e n da bl e   r e c a l l,   i t s   pr e c i s i o n   v a l ue   i s   c o m pa r a t i v e ly   l o we r .   T h e   S L D A   m e t h o d  a c hi e v e d  s a t i s f a c t or y   o ut c o m e s   r e ga r d i n g  a c c ur a c y ,   pr e c i s i o n ,   r e c a l l ,   a n d  F 1 - m e a s ur e   a pp l i e d   to  t h e   i n t e r n a t i o n a l   e c o n o m i c s ,   a n d  t h e   p o l i t i c a l  e c o n o m y   da t a s e t s .   T h us ,   a n   a c c ur a c y   va l ue   o f   86. 76% ,   pr e c i s i o n   s c o r e   o f   86. 75% ,   r e c a l l   s c o r e   o f   86. 68% ,   a n d  F 1 - m e a s ur e   v a l u e   o f   86. 71%   f o r   t h e   po l i t i c a l   e c o n o m y   da t a s e t ,   a l t h o ugh   DI A G - L D A   a c hi e ve d   t h e   a c c ur a c y   va l u e   o f   89. 5% ,   p r e c i s i o n   s c o r e   o f   93. 3 % ,   r e c a l l   s c o r e   o f   89. 4% ,   a n d  F 1 - m e a s ur e   v a l ue   o f   9 0. 3%   a s   we l l   f o r   t h e   po l i t i c a l   e c o n o m y   da t a s e t .   T h e r e f o r e ,   DI A G - L D A   s h o ws   s upe r i o r   r e a c hi ng  i n   t o pi c   e x t r a c t i o n .   Ne v e r t h e l e s s ,   t h e   pe r f o r m a n c e   o f   t h e   B T M   i n   to pi c   e x t r a c t i o n   i s   d i s a ppo i n t i n g.   T hi s   u n de r pe r f o r m a n c e   hi g hli g h t s   t h e   l i mi t a t i o ns   o f   t h e   B T M   i n   e f f e c t i v e l y   c a pt ur i n g  a n d  e x t r a c t i n g  t o pi c s   f r o m   t e x t   da t a .   I t  r e a f f i r m s   t h e   n e e d  f o r   m o r e   s o phi s t i c a t e d  a n d  a dv a n c e d   a ppr o a c h e s ,   s uc h   a s   DI A G - L D A ,   to   a c hi e ve   b e t t e r   r e s u l t s   i n   to pi c   e x t r a c t i o n   t a s ks .   B y   r u nni ng  c o m pr e h e ns i ve   l i t e r a t ur e   c o m pa r i s o ns ,   o u r   s t udy   pr o vi d e s   v a l ua bl e   pe r c e pt i o n s   o f   t h e   a c hi e ve m e n t   o f   DI A G - L D A   to   a s s e s s   t h e   i m pa c t   o f   to pi c   m o de li ng   o n   t e x t   a n a l y s i s   e f f i c i e nc y .   T he   r e s u l t s   c l e a r ly   de m o n s t r a t e   t h e   s upe r i o r i t y   o f   DI A G - L DA   i n  t o pi c   e x t r a c t i o n   w h e n   c o m pa r e d  t o   a l t e r n a t i v e   a ppr o a c h e s ,   e s pe c i a ll y   c o n c e r ni n g  a c c ur a c y ,   pr e c i s i o n ,   r e c a l l ,   a n d  F 1 - m e a s ur e .   Our   m e t h o do l o gy   a l s o   e n r i c h e s   t h e   e xi s t i n g  k n o w l e dge   b a s e   a n d  un de r s c o r e s   t h e   pot e n t i a l   o f   DI A G - L D A   a s   a   po we r f u l   a n d  pu i s s a n t   im p l e m e n t   f o r   to pi c   e x t r a c t i o n .   Ho we v e r ,   f ur t he r   a n d  i n - de pt h   s t udi e s   m a y   b e   n e e de d  to   c o n f i r m   i t s   e f f e c t i v e n e s s   i n   o p t i mi z i ng  L D A ’ s   pe r f o r m a n c e ,   e s pe c i a ll y   r e ga r d i n g  t h e   a c c ur a c y   o f   t h e m a t i c   i de n t if i c a t i o n  a n d  t h e   c o m pr e h e ns i ve   i n t e r pr e t a bi li t y   o f   to pi c   m o de l s   ge n e r a t e d  f r o m   v a r i o us   r e a d i n g  s t r a t e gi e s .     Our   s t udy   de m o ns t r a t e s   t h a t   D I A G - L D A   o f f e r   m o r e   r e s i li e nc e   i n   t h e m a t i c   e x t r a c t i o n   c o m pa r e d  to  ot h e r   m e t h o ds   s uc h   a s   S S - L DA ,   S L D A ,   a n d  B T M s .   Unli ke   S S - L DA   a n d  S L D A ,   whi c h   o f t e n   s t r u gg l e   w i t h  m a i n t a i n i ng  c o h e r e n c e   a c r o s s   d i v e r s e   t e x t ua l   da t a s e t s ,   a n d  b i t e r m ,   whi c h   c a n   b e   s e n s i t i ve   to   s pa r s i t y   i n   l a r ge   c o r p or a ,   o u r   m e t h o d  s h o ws   i m pr o v e d  r o b us t n e s s   i n   i d e n t i f yi ng  a n d  m a i n t a i ni ng  c o h e r e n t   to pi c s .   F ut u r e   s t udi e s   m a y   e x p l o r e   i n t e gr a t i n g  a d v a nc e d  pr e pr o c e s s i n g  s t e ps   w i t h   d i a go n a l   r e a d i ng  m e t h o ds   to   f ur t h e r   e nh a nc e   L D A’ s   pe r f o r m a n c e .   T hi s   c o u l d  i nv o l ve   e m p l o yi ng  s o phi s t i c a t e d  t e x t   n o r m a li z a t i o n   pr o c e dur e s ,   s uc h   a s   s e m a n t i c   e n r i c hm e n t   a n d  s y n t a c t i c   pa r s i n g,   to  b e tt e r   pr e pa r e   t h e   da t a   f o r   a n a l y s i s .   B y   c o m bi n i ng   t h e s e   a d v a n c e d  pr e pr o c e s s i ng  s t r a t e g i e s   w i t h   DI A G - L D A   a ppr o a c h ,   we   c o ul d  f o c us   o n   f e a s i b l e   wa y s   o f   pr o duc i n g  m o r e   s t a bl e   a n d  i n t e r pr e t a bl e   to pi c   m o d e l s   a c r o s s   v a r y i ng  t y pe s   o f   t e x t ua l   da t a .   R e c e n t   o b s e r v a t i o n s   s ugge s t   t h a t   D I A G - L D A   c a n   l e a d  t o  m o r e   s t a bl e   a n d  c o h e r e n t   to pi c   m o de l s ,   whi c h   r e pr e s e n t s   a   s i g ni f i c a n t   a dv a nc e m e n t   i n   t he   f i e l d  o f   c o m put a t i o n a l   li ngu i s t i c s .   Our   f i nd i ng s   pr o vi de   c o n c l u s i ve   e vi de n c e   t h a t   t h i s   ph e n o m e n o n   i s   a s s o c i a t e d  wi t h   i m pr o v e m e n t s   i n   t h e m a t i c   c o h e r e n c e   a n d   i n t e r pr e t a bi li t y ,   r a t h e r   t h a n   be i ng  dr i v e n   by   e l e v a t e d  n u m be r s   o f   t o pi c s   o r   i n c r e a s e d  c o m put a t i o n a l   r e s o ur c e s .   T hi s   s ugge s t s   t h a t  t h e   e nh a n c e d  pe r f o r m a n c e   o b s e r v e d  w i t h   o ur   a ppr o a c h   i s   due   to  t h e   e f f e c t i ve n e s s   o f   t h e   r e a d i n g  s t r a t e gy   i n   pr e pr o c e s s i ng  a n d  s t r uc t u r i n g  t h e   da t a   f o r   L DA ,   r a t h e r   t h a n   s im p ly   i nc r e a s i n g  t h e   c o m p l e xi t y   o r   s c a l e   o f   t h e   m o de l .   M o r e o v e r ,   o ur   a ppr o a c h   DI A G - L D A   s t a n ds   o u t  f o r   i t s   a bi li t y   t o  e f f e c t i v e l y   m a n a ge   a n d  i n t e r pr e t  l a r ge   v o l u m e s   o f   t e x t ua l   da t a .   B y   c a pt ur i n g  t h e   e s s e n c e   o f   t h e   or i g i na l   c o nt e n t,   o ur   m e t h o do l o g y   e n a bl e s   c o m pr e h e n s i ve   a n d  r a p i d  u nde r s t a n d i n g  o f   t h e   e n t i r e   da t a s e t .         5.   CONC L USI ON   T hi s   s t ud y   i n t r o duc e s   DI A G - L D A ,   a   n o v e l   t o pi c   m o de l i ng  a ppr o a c h ,   ut i li z i ng  d i a go n a l   r e a d i ng.   W hil e   pr e vi o us   m e t h o ds   o f t e n   r e l i e d  o n   m a n ua l  l a b e li ng,   o u r   f r a m e wo r k  c o m bi ne s   d i a go n a l   r e a d i n g  a n d   L D A   f o r   e x t r a c t i n g  m e a ni n g f u l   t o pi c s .   Us i ng  E n g li s h   l a n gua ge   da t a s e t s   o f   i n t e r n a t i o n a l   e c o n o mi c s   a nd   po l i t i c a l   e c o n o m i c s   b o o ks ,   we   a ddr e s s   c h a l l e nge s   p o s e d  by   t e x t   l e n gt h   a n d  c o m p l e xi t y .   W hil e   t a i lo r e d   f o r   E n g l i s h ,   DI A G - L D A's   a da pt a bi li t y   e x t e n ds   t o  ot h e r   l a n gu a ge s .   A dd i t i o n a ll y ,   we   e nh a n c e   c l a s s if i c a t i o n  pe r f o r m a n c e   by   l e ve r a g i n g  s e n t e n c e   a v e r a ge s   a n d   T F - I DF   f o r   f e a t ur e   e x t r a c t i o n .   W e   e v a l ua t e   o u r   pr o p o s e d   f r a m e wo r k,   whi c h   a c hi e ve s   a n   a c c ur a c y   o f   94. 4% ,   a   pr e c i s i o n   o f   94. 7% ,   a n d  a n   F 1 - m e a s ur e   o f   94. 4 %   us i n g  t h e   C NN   c l a s s i f i e r   a pp li e d  t o   t h e   DI A G - L D A   a p pr o a c h .   C o m pa r a t i ve   a n a ly s i s   a ga i ns t   t h e   tr a d i t i o n a l   L D A  a ppr o a c h   f ur t h e r   hi g hli g h t s   t h e   s upe r i o r i t y   o f   o u r   p r o p o s e d  m e t h o d.   W hil e   o ur   m e t h o d  s h o ws   pr o m i s e   i n  e c o n o m i c   b o o ks ,   i t   c o ul d  e x t e n d  to   ot h e r   d o m a in s   li ke   c us t o m e r   f e e d b a c k  r e vi e ws ,   e duc a t i o na l   t e x t s ,   a n d  s c i e n t i f i c   pa pe r s .   I n   f ut ur e   s t udi e s ,   we   a i m   t o   i nv e s t i ga t e   a dd i t i o n a l   m e t h o ds   f o r   to pi c   m o de l i ng  f o r   a n a ly z i ng   to pi c s   f o r   l a b e li ng  a n d  e nh a nc i ng  c l a s s if i c a t i o n  pe r f o r m a n c e .   A   po s s i b l e   a ve n ue   f o r   f ut ur e   w o r k   i s   to  a m e li o r a t e   t h e   s e n t e n c e   s e g m e n t a t i o n   t a s k,   s uc h   a s   ut i li z i ng  n e w  m e a s ur e s   o r   r e f i ni ng  e xi s t i n g  a pp r o a c h e s ,  we   w i ll   e x p l o r e   i n c o r por a t i n g  m e d i a n - b a s e d  t e c hni que s   f o r   e n ha n c e d  a c c ur a c y   a n d  r o b us t n e s s .   A c c ur a t e   s e n t e n c e   s e g m e n t a t i o n   i s   c r uc i a l   f o r   t h e   o v e r a l l   s uc c e s s   o f   t h e   DI AG - L D A   m e t h o d.     T h e   de v e l o p m e n t   o f   o ur   s u m m a r i z a t i o n   DI A G - L D A   m e t h o d  r e pr e s e n t s   a   s i g nif i c a n t   a dv a n c e m e n t   i n  t h e   f i e l d  o f   c o m put a t i o n a l   li ngu i s t i c s ,   pa r t i c u l a r l y  i n   m a na g i n g  a n d  c o m p r e h e n d i ng  l a r ge - s c a l e   t e x t ua l   da t a .   T h e   e l e m e n t s   o f   o ur   m e t h o do l o g y   e n c a p s u l a t e   t h e   e s s e n c e   o f   t h e   o r i g i na l   c o n t e n t ,   f a c i li t a t i n g  a   c o m pr e h e ns i ve   y e t   e x pe d i t e d  u n de r s t a n d i ng  o f   th e   e n t i r e   da t a s e t .   B y   b r i dg i ng  t h e   ga p  be t we e n   e x t e ns i ve   Evaluation Warning : The document was created with Spire.PDF for Python.