I nd o ne s ia n J o urna l o f   E lect rica l En g ineering   a nd   Co m p u t er   Science   Vo l.   1 2 ,   No .   2 N o v e m b er   201 8 ,   p p .   6 6 2 ~ 6 6 9   I SS N:  2502 - 4752 ,   DOI : 1 0 . 1 1 5 9 1 / i j ee cs . v 1 2 .i 2 . p p 662 - 6 6 9           662       J o ur na l ho m ep a g e h ttp : //ia e s co r e. co m/jo u r n a ls /in d ex . p h p / ijeec s   M o deling  Ba seline Energ y  Using  A rtif icia Neura N etw o rk :     A S m a ll  Da tas et  Appro a ch       Wa n Na zira h Wa n M d Adna n 1 ,   No f ri  Yenit a   Da hla n 2 ,   I s m a il M us irin 3   1, 2 ,3 F a c u lt y   o f   El e c tri c a En g in e e rin g ,   Un iv e rsiti   T e k n o lo g M A RA ,   S h a h   A lam ,   S e lan g o r,   M a lay sia   1 F a c u lt y   o f   En g in e e rin g   a n d   L if e   S c ien c e s,  Un iv e rsiti   S e lan g o r,   B e sta ri  Ja y a ,   S e lan g o r,   M a lay sia       Art icle  I nfo     AB ST RAC T   A r ticle  his to r y:   R ec eiv ed   J u n   1 ,   2 0 1 8   R ev i s ed   J u l 3 0 ,   2 0 1 8   A cc ep ted   A u g   7 ,   2 0 1 8       In   th is  w o rk ,   b a se li n e   e n e rg y   m o d e d e v e lo p m e n u sin g   A rti f icia Ne u ra l   Ne tw o rk   ( A NN )   w it h   re sa m p li n g   tec h n iq u e s;  Cro ss   V a li d a ti o n   (CV a n d   Bo o tstrap   (B S a re   p re se n ted .   Re s a m p li n g   tec h n i q u e s are   u se d   t o   e x a m in e   th e   a b il it y   o th e   A NN   m o d e to   d e a w it h   a   s m a ll   d a tas e t.   W o rk in g   d a y s,  c las s   d a y a n d   Co o li n g   De g re e   Da y ( CDD a re   u se d   a A NN   in p u m e a n w h il e   th e   A N o u tp u is  m o n th ly   e lec tri c it y   c o n su m p ti o n .   T h e   c o e ff icie n o c o rre latio n   (R)  is  u se d   a p e rf o rm a n c e   f u n c ti o n   to   e v a lu a te  th e   m o d e a c c u ra c y .   F o th is  a n a ly si s,  is  c a lcu late d   f o th e   e n ti re   d a ta   se ( R_ a ll a n d   se p a ra tel y   f o train in g   se (R_ tra in ),   v a li d a ti o n   se (R _ v a li d d a n   tes ti n g   se (R_ tes t).   T h e   c lo se to   1 ,   t h e   h ig h e sim il a rit ies   b e t w e e n   ta rg e ted   a n d   p re d icte d   o u t p u t.   T h e   to tal   o f   two   d if f e re n m o d e ls  w it h   se v e ra n u m b e o f   n e u ro n a re   d e v e lo p e d   a n d   c o m p a re d .   It  c a n   b e   c o n c lu d e d   t h a a ll   m o d e ls  a re   c a p a b le  to   train   th e   n e tw o rk .   A rti f icia Ne u ra Ne t w o rk   w it h   Bo o ts trap   Cro ss   V a li d a ti o n   tec h n iq u e   (A NN - B S C V o u tp e rf o rm s   A rti f ici a Ne u ra l   Ne t w o rk   w it h   Cro ss   V a li d a ti o n   tec h n i q u e   (A NN - CV ).     T h e   3 - 6 - 1   A NN - B S CV ,   w it h   R_ train   =   0 . 9 5 6 6 8 ,   R_ v a li d   =   0 . 9 7 5 5 3 ,   R _ tes =   0 . 8 5 7 2 6   a n d   R _ a ll   =   0 . 9 4 0 7 9   is  se lec ted   a th e   b a se li n e   e n e rg y   m o d e to   p re d ict  e n e rg y   c o n su m p ti o n   f o Op ti o n   I P M VP .     K ey w o r d s :   B aselin E n er g y   Mo d el   A r ti f icial  Ne u r al  Net w o r k   C r o s s   Valid atio n   B o o ts tr ap   S m all  d ata s et   Co p y rig h ©   2 0 1 8   In stit u te o A d v a n c e d   E n g i n e e rin g   a n d   S c ien c e   Al rig h ts  re se rv e d .   C o r r e s p o nd ing   A uth o r :   W an   Naz ir ah   W an   Md   A d n a n ,   Fac u lt y   o f   E lectr ical  E n g in ee r in g ,   Un i v er s iti T ek n o lo g i M A R A ,     Sh a h   A la m ,   Selan g o r ,   Ma la y s i a .   E m ail:  w a n _ n az ir a h @ u n is e l.e d u . m y       1.   I NT RO D UCT I O N   I n   r ec en d ec ad es,  elec tr ic it y   co n s u m p tio n   h as  d r a m atica l l y   i n cr ea s ed   d u to   th e   p o p u latio n   a n d   ec o n o m ic  g r o w th .   I n   P en i n s u lar   Ma la y s ia,   elec tr icit y   co n s u m p tio n   c u r r en tl y   i n cr ea s ed   b y   7 . 5 in   2   y ea r s ,   f r o m   2 0 1 2   to   2 0 1 4   [ 1 ] .   T h is   s i tu atio n   h a s   e n co u r a g ed   Ma la y s i an   g o v er n m e n to   i m p le m en en er g y   ef f icie n c y   o f   en er g y   co n s er v a tio n   m ea s u r es  to   r ed u ce   elec tr icit y   co n s u m p tio n .   T o   ev alu ate  th i m p ac o f   th i s   i m p le m en ta tio n ,   t h r ed u cti o n   in   e n er g y   co n s u m p tio n   an d   en er g y   s av i n g   m u s b e   d eter m in ed .   T h ev alu a tio n s   ar v er y   d ep en d en o n   Me as u r e m en a n d   Ve r if icatio n   ( M & V)   ac ti v itie s .   T h ap p licatio n   o f   I n ter n atio n al  P er f o r m an ce   Me asu r e m en a n d   Ver i f icatio n   P r o to co ( I P MV P)  is   r eq u ir ed   as  M& r e f er en ce   p r o to co to   ev alu ate  en er g y   s av i n g s .   T h I P MV P   p r o v id es  f r a m e w o r k   f o r   d e ter m i n in g   s av in g   a f ter   i m p le m en ta tio n   o f   a n   en er g y   s av in g   p r o j ec [ 2 ] .   T h er ar e   f o u r   M& o p tio n s   d ef in ed   b y   t h I P MV P   i.e .   1 )   Op tio n   A R etr o f it  i s o latio n   w it h   k e y   p ar am eter   m ea s u r e m en t,  2 )   Op tio n   B     R etr o f it  is o latio n   w i th   a ll  p ar a m eter   m ea s u r e m en t,  3 )   Op tio n   C w h o le  f ac ili t y   a n d   4 )   Op tio n   D ca lib r ated   s im u lat io n .   Fo r   th is   s t u d y ,   o n l y   I P MV P   Op tio n   C -   W h o le  f ac ilit y   en er g y   u s e   is   ch o s e n   a n d   d ata   ar n o r m a ll y   d er iv ed   f r o m   m o n th l y   u til it y   b ills .   On e   o f   th e   M& V   ac ti v itie s   i s   d ev elo p in g   th e   b aseli n en er g y   m o d el.   C u r r en tl y ,   b ase lin en er g y   m o d el  is   an al y ze d   th r o u g h   li n ea r   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin E n erg Us in g   A r ti ficia l Neu r a l Net w o r   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   663   r eg r ess io n   [3 - 4] .   Ho w ev er ,   th i s   m eth o d   m a y   n o t a cc u r atel y   r ep r esen t t h d ata   ch ar ac ter is ti c,   esp ec iall y   f o r   th e   n o n - li n ea r   ch ar ac ter is tic.   R ec en t l y ,   A r tific ial  Neu r a l   N et w o r k   ( A NN)   i s   a   p o p u lar   t ec h n iq u f o r   f o r ec asti n g   a n d   class i f y in g   th o u tp u t.  I h a s   b ee n   u s ed   in   d if f er e n f ield s   b y   r esear c h er s   to   s o lv v ar io u s   p r o b le m s .   T h ab ilit y   o f   A N N   to   f in d   th r elatio n s h ip   b et w e en   in p u ts - o u tp u ts   is   h i g h l y   ac cu r ate.   Fo r   th i s   s t u d y ,   A NN  h as  b ee n   s elec ted   to   r ep lace   th lin ea r   r eg r ess io n .   A s   p r ev io u s l y   m e n tio n ed ,   Op tio n   C   d ata  is   d er iv ed   f r o m   u tili t y   b ills   an d   u s u all y ,   th a v ailab le  d ata  is   in s u f f icien to   tr ain   t h n et w o r k .   T h d ata  ar d iv id ed   in to   th r ee tr ai n i n g ,   v alid atio n   a n d   te s ti n g   s et.   T r ain i n g   an d   v alid atio n   s et  ar p ar ticip atin g   i n   t h A NN   lear n i n g   p r o ce s s ,   an d   t h e   test i n g   s et  is   u s ed   to   ev alu ate   th p er f o r m a n ce   o f   th tr ai n e d   m o d el.   A NN  lear n s   f r o m   e x a m p le s th er e f o r e,   s m al l d ata  s ets  n o r m all y   cr ea tes in ac c u r ate  r es u l ts   a n d   p r o d u ce   lar g tr ain in g   er r o r .   A   f e w   r esear c h er s   r ep o r ted   an d   ex p lo r ed   s ev er al  r esa m p li n g   tech n iq u es  to   d ea w it h   s m all   d ata  s ize   in   ANN  ap p licatio n   [5 - 8] .   T h is   s t u d y   f o cu s es   o n   th d ev elo p m en t   o f   b aseli n e n e r g y   m o d el  a n d   t h e   in te g r atio n   o f   A NN  w it h   C r o s s   Valid atio n   ( C V)   an d   B o o ts tr ap   ( B S)   to   g et  b etter   ac cu r ac y   o f   A NN   p r ed ictio n .   T h is   m et h o d   m a y   av o id   an y   o v er f itti n g   o f   t h d ata.   Ov er f itt in g   cr ea tes  th n e t w o r k   to   m e m o r ize   tr ain i n g   p atter n s ,   b u t t h e y   ca n n o t g e n er alize   w ell  to   n e w   d at ( test in g   s et)   an d   g en er ate s   p o o r   ac cu r ac y .   T h s tr u ct u r o f   t h is   p ap er   is   o r g an ized   a s   f o llo w s Secti o n   2   b r ief l y   ex p lai n s   th m e th o d o lo g y   in cl u d in g   d ata  co llectio n ,   b as elin e n er g y   m o d el  d ev elo p m en t,  an d   p er f o r m an ce   ev al u ati o n .   T h is   is   f o llo w ed   b y   p r esen ta tio n   o f   t h r esu l an d   d is cu s s io n   o f   t h p r o p o s ed   m et h o d s .   Fi n all y ,   t h co n cl u s io n   is   s u m m ar ized   in   s ec tio n   4 .         2.   RE S E ARCH   M E T H O D   T h is   s ec tio n   d escr ib es  t h p r o p o s ed   m eth o d o lo g y   f o r   th e   d ev elo p m e n o f   b aseli n e n er g y   m o d el   f o r   I P MV P   O p tio n   C   s m all  d ata  s et  as il lu s tr ated   in   F ig u r 1 .       S T A R T D a t a   C o l l e c t i o n A N N   s t r u c t u r e   d e t e r m i n a t i o n I P M V P   O p t i o n   C   B a s e l i n e   E n e r g y   M o d e l A N N - C V M e t h o d A N N   i n p u t s :   W o r k i n g   d a y , C l a s s   d a y ,   C D D A N N   o u t p u t :   M o n t h l y   E n e r g y   C o n s u m p t i o n M o d e l   S e l e c t i o n P e r f o r m a n c e   E v a l u a t i o n   a n d   C o m p a r i s o n E N D A N N - B S C V   M e t h o d     Fig u r 1 .   P r o p o s ed   I P MV P Op tio n   C   B aseli n E n er g y   Mo d el       2 . 1 .   Da t a   Co llect io n   T h b aselin d ata   is   p r o v id ed   b y   t h Faci lit y   Ma n ag e m e n O f f ice,   U n i v er s it T ek n o l o g Ma r a   ( UiT M) ,   Sh ah   Ala m ,   Sela n g o r ,   Ma la y s ia  f o r   2 3   m o n t h s   p e r io d .   T h in p u v ar iab les   ar UiT w o r k i n g   d a y s   ( W D) ,   Ui T class   d ay s   ( C D)   an d   C o o lin g   De g r ee   Da y s   ( C DD) .   T h ese  th r ee   v ar iab les  ar ass ig n ed   as  A NN   in p u t a n d   tar g eted   o u tp u t is  m o n th l y   elec tr icit y   co n s u m p tio n ,   k W h .     B aselin s tati s tical   d ata;  m i n i m u m ,   m a x i m u m   a n d   m ea n   o f   b aselin e   a n d   p o s t - r etr o f it  ar e   s h o w n   in   T ab le  1 .   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l 1 2 ,   No .   2 No v e m b er   201 8   :   6 6 2     6 6 9   664   T ab le  1 .   Statis tical  d ata  f o r   B aselin e   P a r a me t e r   R a n g e   M e a n   B a se l i n e   i n p u t :   w o r k i n g   d a y s   17    2 3   d a y s   2 1   d a y s   B a se l i n e   i n p u t :   c l a s d a y s     2 3   d a y s   1 4   d a y s   B a se l i n e   i n p u t :   c o o l i n g   d e g r e e   d a y s   511  -   649   579   B a se l i n e   o u t p u t :   e l e c t r i c a l   e n e r g y   c o n s u m p t i o n   6 3 , 0 0 2   k W h - 1 1 3 , 6 1 3   k W h   8 6 , 3 7 7 k W h       2 . 2 .   I P M VP   O ptio n C  B a s eline  E nerg y   M o del D ev elo p m ent   Sin ce   li m ited   d ata  is   a v ailab l f o r   th is   s t u d y ,   C a n d   B tech n iq u es  ar e m b ed d ed   w it h   A NN  to   d ev elo p   an   ac cu r ate  b aseli n en er g y   m o d el.   I n   t h i s   s ec tio n ,   t w o   b aseli n en er g y   m o d els ,   A r ti f icial  Ne u r al   Net w o r k C r o s s   Valid atio n   ( A N N - C V)   m o d el  an d   A r tif ic ial   Neu r al  Net w o r k B o o ts tr ap   C r o s s   Valid atio n   ( A NN - B S C V)   m o d el  ar d ev elo p ed .     A N s tr u ct u r es  an d   p ar a m e ter s   n ee d   to   b e   d eter m i n ed   to   d ev elo p   th m o d el.   Feed - f o r w ar d   m u ltil a y er   p er ce p tr o n   w it h   s in g le  h id d en   la y er   is   c h o s e n   d u e   to   th is   is   th e   m o s t p o p u lar   AN ar ch itec tu r [ 9 ] T h tr ain i n g   alg o r it h m   u s ed   an d   r ec o m m en d ed   b y   t h M A T L A B   a n d   m o s tl y   u s ed   to   tr ain   t h n et w o r k   i s   tr ain l m   ( L e v e n b er g - Ma r q u ar d t)   [ 1 0 - 11] .   T h s el ec ted   tr an s f er   f u n ctio n s   ar lo g s i g   f o r   h id d en   la y er   an d   p u r elin   f o r   th o u tp u la y er .   T h 2 3   s ets  o f   d ata  ar d iv id ed   in to   tr ai n in g   s et,   v al id atio n   s et  an d   test   s et.   T h e   tr ain i n g   s et  i s   u s ed   to   tr ain   th n et w o r k   an d   to   ad j u s ANN   w ei g h t s   an d   b iases .   T h e   v ali d atio n   s et  is   u s ed   to   v alid ate  t h tr ai n i n g   p r o ce s s   an d   to   co n tr o o v er f itti n g   t h r o u g h   ea r l y   s to p p in g .   T h tes tin g   s et   is   u s ed   t o   ev alu a te  t h p er f o r m an ce   o f   th tr ai n ed   m o d el   s i n ce   t h test   s et  i s   n o d ir ec tl y   i n v o l v ed   i n   t h tr ai n i n g   p r o ce s s .   I n   A NN - C a n d   A N N - B SC V,   t h n et w o r k s   ar r u n   f o r   s ev er al   ti m es   an d   a v er ag v al u es  o f   all   f o u r   R s   ar r ec o r d ed .     T w o   t y p es  o f   C ar i m p le m en ted   in   A NN - C m et h o d s   as  illu s tr ated   in   Fi g u r 2 ,   1 )   K - Fo ld   C r o s s   Valid atio n   ( KF C V) :   th e   d ata   ar p ar titi o n s   i n to   k - s a m p le s   an d   2 )   R a n d o m   Sa m p li n g   C r o s s   Valid atio n   ( R SC V) :   ea ch   d ata  s p lits   r an d o m l y   i n to   k - s u b s a m p les.  T r ain in g   a n d   v al id atio n   s et  ar d iv id ed   in to   k - s u b s a m p le  an d   k =5   is   s elec te d   in   th i s   s t u d y .   I n   f ir s iter atio n ,   k - 1   s u b s a m p le s   ar d ed icate d   to   tr ain in g   s et  to   tr ain   th d ata  m ea n w h ile  t h r e m ai n in g   s u b s a m p le  is   u s ed   to   v alid ate  th d ate  an d   th p r o ce s s   is   r ep ea ted   f o r   k   iter atio n s .   T h n u m b er   o f   n eu r o n s   i n   th h id d en   la y er   is   s et  b et w ee n   6   an d   2 0   n eu r o n s   o n l y   [ 9 ] .   T h g r ap h ical  ill u s tr atio n   o f   A N N _ C is   p r esen ted   i n   Fi g u r 2 .       T h b est  s tr u ctu r e   o f   ANN - C is   u s ed   to   d ev elo p ed   A NN - B SC m o d el.   T h p u r p o s o f   b o o ts tr ap   r esa m p li n g   i s   to   cr ea te  s et  o f   b o o ts tr ap   s a m p les  th at  ca n   p r o v id b etter   u n d er s ta n d in g   o f   th a v er ag a n d   v ar iab ilit y   o f   t h o r ig in al   u n k n o w n   d is tr ib u tio n   o r   p r o ce s s   [ 1 2 ] .   B o o ts tr ap   r esa m p lin g   is   p er f o r m ed   b y   r ep ea ted   s am p li n g   w it h   r ep lace m en f r o m   t h o r ig i n al  s a m p le.   I in v o l v es  g e n er ati n g   a   lar g n u m b er   o f   n e s a m p les  f r o m   t h o r ig i n al  s a m p le.     Fig u r 4   i llu s tr ated   t h p r o ce s s   o f   b o o ts tr ap   r esa m p li n g   a n d   Fi g u r 5   g r ap h icall y   d escr ib ed   A N N_ B SC m o d el.   T h o r ig i n al  s a m p le   o f   s ize   ( N =8   in   th i s   i llu s tr atio n )   r an d o m l y   s a m p les   w it h   r ep lace m e n t   an d   r ep ea ted   B   t i m es   to   p r o d u ce   B   d ataset s ,   ea ch   co n tain s   d i f f er en t   d ata  w it h   s ize  o f   N.   B   n eu r al   n et w o r k   m o d els  ar d e v elo p ed   to   tr ain   an d   v alid ate   B   b o o ts tr ap   d ata,   m ea n w h ile   th u n u s ed   d ata  i s   u s ed   to   te s t h n eu r al  n et w o r k s .   I n s tead   o f   s elec t in g   s i n g l n e u r al  w o r k   t h at  i s   t h b est ”,   B   n eu r al  n et w o r k   m o d el s   ar co m b i n ed   to   ap p r o x i m ate  t h r elatio n s h ip   b et w ee n   m o d el  in p u ts   a n d   m o d el  o u tp u ts   a n d   also   to   i m p r o v m o d el  ac cu r ac y   a n d   r o b u s tn e s s .   I n   t h is   s t u d y ,   B   1 0 0   is   s elec ted   s i n ce   m o s co m m o n   v al u i s   b et w ee n   5 0   an d   2 0 0   [ 7 ] ,   [ 1 3 - 14] .   T h A NN_ B SC m o d el   f itted   to   ea ch   o f   th g e n er ate d   b o o ts tr ap   d ataset   an d   A NN_ B SC es ti m a te  v alu i s   ca lc u lated   a s   t h a v er ag r eg r es s io n   f u n ctio n   o f   ea ch   m o d el  as   i n     E q u atio n   1 .                   (   )                     (   )                       ( 1 )         Fig u r 2 .   C r o s s - Valid atio n   r es a m p lin g   m et h o d : a )   KFC V;  b )   R SC V     S u b s a m p l e   1 S u b s a m p l e   2 S u b s a m p l e   3 S u b s a m p l e   4 S u b s a m p l e   5 T o t a l   n u m b e r   o f   t r a i n   a n d   v a l i d a t i o n   s e t s T o t a l   n u m b e r   o f   t r a i n   a n d   v a l i d a t i o n   s e t s S u b s a m p l e   1 S u b s a m p l e   2 S u b s a m p l e   3 S u b s a m p l e   4 S u b s a m p l e   5 a ) b ) Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin E n erg Us in g   A r ti ficia l Neu r a l Net w o r   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   665   S u b s a m p l e 1 S u b s a m p l e   2 S u b s a m p l e   k T r a i n i n g   a n d   V a l i d a t i o n   s e t f A N N _ C V _ 1 f A N N _ C V _ 2 f A N N _ C V _ k . . . . . . T e s t   s e t     Fig u r 3 .   A NN_ C Mo d el           Fig u r 4 .   B o o ts tr ap   r esa m p lin g   m et h o d       B o o t s t r a p   1 B o o t s t r a p   2 B o o t s t r a p   B C o m p l e t e   D a t a s e t f A N N _ B S C V _ 1 f A N N _ B S C V _ 2 f A N N _ B S C V _ B . . . . . .     Fig u r 5 .   A NN_ B S C Mo d el       2 . 3 .   P er f o r m a nce   E v a lua t io n a nd   M o del Sele ct io n   Sev er al  m et h o d s   ar in teg r ate d   w it h   ANN  i n   o r d er   to   o v er co m e   th e   s m all  d ata s et  p r o b lem s   a n d   to   in cr ea s ac c u r ac y   i n   A NN.   T h p er f o r m a n ce   o f   ANN  is   n o o n l y   e v alu a ted   o n   s i n g le  A N b u r ep ea ted l y   m ea s u r ed   w it h   d i f f er en t   co n f i g u r atio n   s u c h   a s   s p li o f   t r ain i n g ,   v alid atio n   a n d   test in g   s e i n   C V;   an d   r an d o m l y   ch o o s i n g   d ata  i n   B S .   I n   ea c h   r u n ,   s e v er al  ANN  w i th   v ar io u s   co n f i g u r atio n s   ar e   t r ain ed ,   p r o d u cin g   r an g o f   s u cc e s s f u l a n d   u n s u c ce s s f u ANN  r esu lts .       X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 C o m p l e t e   d a t a   s e t B o o t s t r a p   1 B o o t s t r a p   2 B o o t s t r a p   3 B o o t s t r a p   4 B o o t s t r a p   B X 3 X 1 X 1 X 7 X 7 X 7 X 5 X 5 X 3 X 7 X 2 X 1 X 3 X 3 X 3 . . . . T r a i n i n g   a n d   V a l i d a t i o n   s e t s T e s t   s e t Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l 1 2 ,   No .   2 No v e m b er   201 8   :   6 6 2     6 6 9   666   T o   ev alu ate  t h ANN  m o d el  p er f o r m a n ce ,   th e   C o e f f icien o f   C o r r elatio n ,   R   b et w ee n   t h tar g eted   o u tp u a n d   p r ed icted   o u tp u t   is   m ea s u r ed .   R   m ea s u r es  t h s tr en g t h   o f   co r r elatio n   b et w ee n   t w o   v ar iab les  [ 1 8 ] T h clo s er   R   to   1 ,   th h ig h er   s i m ilar it ies   b et w ee n   tar g et ed   an d   p r ed icted   o u tp u t.  Fo r   th is   s m all  d atase t   an al y s is ,   C o e f f icie n o f   C o r r elatio n   is   ca lcu lated   f o r   th en t i r d ata  s et  ( R _ all)   an d   s ep ar at el y   f o r   tr ain i n g   s et   ( R _ tr ain ) ,   v al id atio n   s et  ( R _ v alid )   d an   te s ti n g   s et   ( R _ tes t) .   Fo r   I P MV P ,   R   0 . 7 5   d ef i n es  s tati s ticall y   s ig n i f ica n t p er f o r m a n ce .   T h m o d el  w i th   t h h ig h es t R is   s e lecte d   as th b aseli n m o d el.       3.   RE SU L T S AN AN AL Y SI S   T h is   s ec tio n   ex p lai n s   t h r esu lt  o f   b aselin e n er g y   m o d el  u s in g   t w o   m et h o d s ,   ANN - C an d   A N N - B SC V.   At  th en d   o f   t h is   s ec tio n ,   p er f o r m an ce   co m p ar is o n s   o f   b o th   m o d els  ar ev alu ate d .   T h m o d el  w it h   th h i g h est  v al u es o f   R   is   s ele cted   as th b est b aseli n en er g y   m o d el.       3 . 1 .   B a s eline  E nerg y   M o del R esu lt   As  p r ev io u s l y   m e n tio n ed ,   ANN - C m o d el  s tr u ct u r is   d ev elo p ed   u s i n g   R S C a n d   K F C V.   Si n c e   th er is   n o   p r in cip le  i n   c h o o s i n g   th p r o p er   A N ar ch itect u r e,   th n u m b er   o f   h id d en   n e u r o n s   is   d eter m i n ed   u s i n g   cr o s s - v alid atio n   tech n iq u to   o b tain   th e   b est  s tr u ct u r e .   T h h id d en   n eu r o n s   i n   s i n g l h id d en   la y er   ar e   v ar ied   an d   th n et w o r k   i s   tr ai n ed   f o r   ea ch   ad d itio n   o f   n e u r o n s .   T h to tal  th ir t y   s tr u ct u r es  ar tr ain ed   an d   ev alu a ted   f o r   b o th   A NN - C V   m o d el.   I n   th i s   A NN - C m eth o d ,   d ata  is   d iv id ed   in to   5   s u b s a m p le s   an d   r an d o m l y   r u n s   f o r   s e v er al  t i m es.  T h ab ilit y   o f   ANN  to   lea r n   is   also   s u p p o r ted   b y   t h ac cu r ac y   o f   tr ai n i n g ,   v alid atio n   a n d   test i n g   d ata.   T h av er a g v al u es  o f   tr ai n i n g ,   v alid atio n ,   test in g   as  w ell  a s   en tire   d ata  f o r   ea ch   n eu r o n   is   r ec o r d ed   an d   th e   ef f ec o f   h id d en   n e u r o n s   o n   o v er all  p er f o r m an ce   f o r   all  R s   ar s u m m ar ized   i n   Fig u r 6   f o r   A NN - K FC an d   Fig u r 7   f o r   A NN - R S C V.           Fig u r 6 .   P er f o r m a n ce   co m p ar is o n   o f   C o ef f icie n t o f   C o r r elatio n   ( R _ tr ain ,   R _ v alid ,   R _ test   a n d   R _ all)   f o r   d if f er e n t n e u r o n s   u s in g   A NN - KFC m o d el           Fig u r 7 .   P er f o r m a n ce   co m p ar is o n   o f   C o ef f icie n t o f   C o r r elatio n   ( R _ tr ain ,   R _ v alid ,   R _ test   a n d   R _ all)   f o r   d if f er e n t n e u r o n s   u s in g   A NN - R S C m o d el     Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin E n erg Us in g   A r ti ficia l Neu r a l Net w o r   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   667   I n   Fi g u r 6 ,   th lo w e s R _ tr ai n   i s   0 . 8 8 9 3 ,   R _ v alid   is   0 . 6 8 8 8 ,   R _ test   i s   0 . 8 2 0 0   an d   R _ all   is   0 . 8 4 4 9 ,   m ea n w h i le  th h ig h es R _ tr ai n   is   0 . 9 0 7 4 ,   R _ v alid   is   0 . 7 5 9 1 ,   R _ test   is   0 . 8 5 8 0   an d   R _ all  is   0 . 8 7 2 5 .   I n   Fig u r 7 ,   th lo w e s R _ tr ai n   i s   0 . 8 5 7 0 ,   R _ v alid   is   0 . 4 3 0 1 ,   R _ test   is   0 . 7 5 0 6   an d   R _ all  is   0 . 8 3 9 1 ,   m ea n w h ile  th e   h ig h e s R _ tr ain   is   0 . 9 1 3 9 ,   R _ v alid   is   0 . 8 4 8 0 ,   R _ test   is   0 . 8 7 1 9   an d   R _ all  is   0 . 8 7 5 8 .   I n   b o th   f ig u r es,   th e   tr ain i n g   s et  g iv e s   th h ig h es p er f o r m a n ce   m ea n w h ile  th v alid atio n   s et  g i v es  t h lo w e s p er f o r m an ce .   T h er ef o r e,   it is   i m p o r tan t to   s e lect  th b est s tr u ct u r to   av o id   o v er f itti n g ,   esp ec iall y   in   v alid atio n   s et.   I n   g e n er al,   t h i n cr ea s i n g   o f   h i d d en   n e u r o n s   n o n ec es s ar il y   i n cr ea s t h p er f o r m an ce   o f   ANN.   Mo r h id d en   n e u r o n s   ar ad d ed   to   th n et w o r k ,   t h n et w o r k   b ec o m es  m o r co m p le x   an d   tak e s   lo n g er   ti m to   r u n .   I n   f ac t,  n et w o r k   w it h   6   a n d   9   o f   n e u r o n s   g iv h i g h er   p er f o r m an ce   in   ANN - KF C b u i n   A NN - R S C V,   t h e   n et w o r k   w it h   2 0   n eu r o n s   g iv e s   th b est  r esu lt s .   T h is   A NN - C s tr u c tu r w it h   6 , 9   an d   2 0   n u m b er   o f   n e u r o n s   in   h id d en   la y er   w h ich   g i v th e   b est p er f o r m a n ce   h a s   b ee n   s el ec ted   an d   u s ed   in   A N N - B S C V   m eth o d .   I n   A N N - B S C m eth o d s ,   b o o ts tr ap   r esa m p lin g   m e th o d   is   u s ed   to   g en er ate  d if f er en co m b i n atio n s   o f   th d ata  s ets  to   cr ea te  s et  o f   1 0 0   b o o ts tr ap   s am p le s   u s in g   r esa m p li n g   w it h   r ep lace m e n t.   T h is   m ea n s   t h at  to tal  o f   3   s tr u c tu r es   ar d ev e l o p ed   w it h   1 0 0   d if f er en t   s et   o f   b o o ts tr ap   s a m p le s   i n   ea c h   m o d el  ar ev al u ated .   T h p er f o r m a n ce   o f   a v er a g e   all  R s   f o r   6 ,   9   an d   2 0   n eu r o n s   i n   h id d en   la y er   ar s u m m ar ized   in   s e v er al   b o x p lo ts   as  in   Fig u r 8   w h ic h   s h o w s   th m ed ian ,   m in i m u m   an d   m a x i m u m   v alu e s   an d   als o   u p p er   an d   lo w er   qu ar tiles   o f   t h r e s u l ts .   T h R s   v al u es   t h at  a w a y   f r o m   t h e   to p   o r   th b o tto m   o f   t h b o x   ar co n s id er ed   as   o u tlier s   an d   d en o ted   b y   t h d o t sig n s .         Fig u r 8 .   B o x p lo ts   o f   C o ef f ici en t o f   C o r r elatio n   ( R _ tr ain ,   R _ v alid ,   R _ test   an d   R _ all )   f o r   d if f er en n eu r o n s   u s i n g   A NN - B SC m o d el       R _ all  v ar ies  b et w ee n   0 . 6 5 5 5   an d   0 . 9 2 7 0 ,   R _ tr ain   v ar ie s   b et w ee n   0 . 7 5 1 8   an d   1 ,   R _ v a lid   v ar ies  f r o m   0 . 5 0 6 1   an d   1 ,   an d   R _ test   v ar ies  f r o m   - 0 . 1 5 3 1   an d   0 . 9 7 9 6   w it h   6   n e u r o n s   in   h id d en   la y e r .   Me an w h ile,   R _ all   v ar ies  b et w ee n   0 . 7 4 6 5   an d   0 . 9 3 0 1 ,   R _ tr ain   v ar ies  b et w ee n   0 . 7 6 3 1   an d   1 ,   R _ v al id   v ar ies  f r o m   0 . 4 9 6 9   an d   1 ,   an d   R _ te s v ar ies   f r o m   0 . 0 1 5 8   an d   0 . 9 7 3 6   w it h   9   n e u r o n s   in   h id d en   la y er .   R _ all  v ar ies   b et w ee n   0 . 7 8 1 7   an d   0 . 9 2 3 2 ,   R _ tr ain   v ar ies  b et w e en   0 . 7 8 5 4   an d   1 ,   R _ v alid   v a r ies  f r o m   0 . 5 4 8 4   an d   1 ,   an d   R _ test   v ar ies  f r o m   0 . 1 1 7 6   an d   0 . 9 6 9 1   w i th   2 0   n e u r o n s   in   h id d en   la y er .   As ca n   b s ee n ,   all  t h e   th r ee   n e u r o n s   t en d   to   u n d er p r ed ict   R _ v alid   an d   R _ test ,   t h is   is   d u to   th A N p o o r   ab ilit y   t o   p r e d ict  th v alu es.  T h m e d ian   f o r   all  R s   f o r   6   n eu r o n s   i n   h id d en   la y er   is   h ig h er   t h a n   th o t h er   t w o   n e u r o n s .   B y   co m p ar is o n ,   all  t h r ee   s tr u ct u r es  h av e   ac ce p tab le  m ed ian   v al u es  an d   also   h av s m aller   r an g f o r   all  R _ all.   I n   th is   ca s e,   R _ all  a n d   R _ tr ain   ar less   s en s iti v to   th av a ilab le  d ata  s ets  w it h   les s   o u tlier s .       3 . 2 .   P er f o r m a nce  Co m pa riso n a nd   M o del Sele ct io n   T h r esu lts   o f   b o th   p r o p o s ed   m et h o d s   w i th   t h r ee   b est  s tr u c tu r es  f o r   ea ch   m et h o d   ar s elec ted   an d   s u m m ar ized   as  in   T ab le  2 .   T h r esu lts   o f   ANN  m e th o d   w i th o u an y   r e s a m p li n g   tech n iq u e s   ar also   p r esen ted   in   t h is   tab le  to   h ig h li g h t h s t r en g t h   o f   t h p r o p o s ed   m o d el.   I n   v ie w   o f   t h r esu l ts   o b tain e d ,   th co ef f icien o f         Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l 1 2 ,   No .   2 No v e m b er   201 8   :   6 6 2     6 6 9   668   co r r elatio n   f o r   b o th   p r o p o s ed   m et h o d s   ar ab o v 0 . 9   w h ic h   ca n   b co n s id er ed   ac ce p tab le   an d   ad h er to   th e   s p ec if icatio n   o f   I P VM P   [ 2 ] .   I ca n   b s ee n   t h at  all   R _ v alid   f o r   A NN  w it h o u a n y   r esa m p l in g   tec h n iq u es   ar less   t h an   0 . 4   w h ich   t h is   s it u atio n   cr ea tes  o v er f it tin g   d u r i n g   A N tr ain i n g   p r o ce s s .   I n   s elec tin g   th b est   b aselin e n er g y   m o d el,   all  f o u r   R s   n ee d   to   b co n s id er ed   to   av o id   o v er f itti n g .   T h ese  r esu lt s   i n d icate   t h at  a ll  th p r o p o s ed   m o d els  h av a   h ig h   q u ali t y   o f   p r ed ictio n   a n d   ca p ab le  to   tr ain   t h n et w o r k .   T h ANN - B SC m et h o d   ev id en tl y   o u tp er f o r m s   A NN - C m et h o d .   Fu r th er   co m p ar is o n   o f   all  s tr u ct u r es i s   m ad a n d   clea r l y   s h o w s   t h at  t h e   m o d el  o f   ANN - B S C w i th   6   n eu r o n s   in   h id d en   la y er   h as   t h e   h ig h e s v al u o f   R _ all  an d   is   n o m i n ated   as  t h b est  p er f o r m an ce .   I is   b ased   o n   t h h ig h er   v alu es  o f   all  f o u r   Rs  w h ic h   ar clo s to   u n it y   an d   th er ef o r th m o s t a cc u r ate.         T ab le  2 .   R esu lt s u m m ar izat io n   M e t h o d   N u mb e r   o f   h i d d e n   n e u r o n s   R_ t r a i n   R_ v a l i d   R_ t e st   R_ a l l   A N N   6   0 . 9 1 9 1 5   0 . 3 4 4 1 4   0 . 8 8 5 0 0   0 . 8 9 8 4 9     9   0 . 9 2 2 4 2   0 . 2 5 2 2 7   0 . 9 1 2 3 6   0 . 8 8 1 8 2     20   0 . 9 1 1 4 8   0 . 1 7 8 0 4   0 . 8 8 1 7 9   0 . 8 6 9 3 5   A N N - CV   6   0 . 9 3 3 2 2   0 . 8 7 1 9 2   0 . 9 6 1 0 3   0 . 9 0 7 6 1     9   0 . 8 4 0 1 5   0 . 9 0 6 4 9   0 . 9 4 0 1 0   0 . 9 0 5 0 8     20   0 . 9 3 4 2 1   0 . 8 9 3 0 8   0 . 9 8 2 8 6   0 . 9 0 0 9 9   A N N - B S C V   6   0 . 9 5 6 6 8   0 . 9 7 5 5 2   0 . 8 5 7 2 6   0 . 9 4 0 7 9     9   0 . 9 4 5 0 6   0 . 9 7 4 7 8   0 . 8 8 6 8 4   0 . 9 3 8 5 8     20   0 . 9 8 5 7 3   0 . 9 3 3 1 7   0 . 8 3 5 3 2   0 . 9 3 9 2 8       4.   CO NCLU SI O N   T h m ain   o b j ec tiv o f   th is   p ap er   is   to   d ev elo p   b aseli n en er g y   m o d el  f o r   Op tio n   C   I P MV P   f o r   s m all   d ataset  av ailab le.   I n   t h is   p ap er ,   co m b i n atio n   o f   ANN  w it h   r esa m p li n g   tec h n iq u e s ,   B S a n d   C ar p r esen ted .   T w o   m et h o d s ,   A NN - C V   an d   A N N - B S C w i th   s e v er al  s tr u ctu r es  ar p r o p o s ed   in   t h is   p a p er .   I is   f o u n d   t h at   th p r o p o s ed   tech n iq u es  to   i n t eg r ate  A NN  w it h   r esa m p l in g   t ec h n iq u es  i m p r o v ed   th p r ed ictio n   p er f o r m an ce .   T h A NN   i n p u v ar iab les  co n s i s ted   o f   w o r k i n g   d a y s ,   cla s s   d a y s   a n d   C o o li n g   De g r ee   Da y s   a n d   tar g eted   o u tp u i s   m o n t h l y   elec tr icit y   co n s u m p tio n ,   k W h .   B ased   o n   R _ all,   R _ tr ain ,   R _ v alid   a n d   R _ test ,   s i g n i f ica n t   i m p r o v e m en i s   o b s er v ed   in   th co m p ar is o n   o f   t h r esu lts   o f   b o th   m o d els  an d   it  is   f o u n d   th at  th ANN - B S C V   m o d el   w it h   3 - 6 - 1   s tr u ct u r g av e   b etter   ac cu r ac y   b ased   o n   h i g h est   v al u e s   o f   a ll  f o u r   R s   t h a n   t h o t h er   s tr u ct u r es.  T h is   s tr u ct u r is   s el ec ted   as th b aseli n e n er g y   m o d el  to   p r e d ict  en er g y   co n s u m p tio n   f o r   Op tio n   C   I P MV P .   T h r esu lts   o b tain ed   f r o m   t h i s   p ap er   s h o w   t h at  t h C an d   B m et h o d   ca p ab le  to   tr ain   n e u r al   n et w o r k s ,   av o id   o v er f it tin g   a n d   cr ea te  m o d el  d iv er s it y   w it h   li m i ted   d ataset.   Fo r   f u t u r w o r k s ,   o p ti m izatio n   tech n iq u n ee d s   to   b em b ed d ed   w ith   r esa m p li n g   tech n iq u es  to   o b tain   b etter   A NN  p er f o r m an ce   ac c u r ac y   i n   d ev elo p in g   b asel in e n er g y   m o d el .       RE F E R E NC E S   [1 ] .   M in istry   Co o rd in a to r   o f   S trate g ic S e c to rs,  Na ti o n a En e rg y   Ba lan c e   2 0 1 4 ,   2 0 1 4 .   [2 ] .   Eff icie n c y   V a lu a ti o n   Org a n iza ti o n ,   In tern a ti o n a P e rf o rm a n c e   M e a su re m e n a n d   V e rif ica ti o n   P r o to c o (IP M VP),   2 0 1 2 .   [3 ] .   O.  A k in so o to ,   D.  De   Ca n h a ,   a n d   J.  H.  C.   P re t o riu s,   En e rg y   sa v i n g re p o rti n g   a n d   u n c e rtain ty   in   M e a su re m e n &   V e rif ica ti o n ,   in   Au str a la si a n   Un ive rs it ies   Po we r E n g in e e rin g   Co n fer e n c e ,   AUPE 2 0 1 4 ,   Cu rtin   U n ive rs it y ,   Per th ,   Au stra li a ,   2 0 1 4 ,   n o .   Oc to b e r,   p p .   1 5.   [4 ] .   S .   M .   A ris,   N.  Y.  D a h lan ,   M .   N.  M .   Na w i,   T .   A .   Ni z a m ,   a n d   M .   Z .   T a h ir,   Qu a n ti fy in g   e n e rg y   sa v i n g f o r e tro f it   c e n tralize d   h v a c   s y ste m s at S e lan g o sta te se c re tar y   c o m p le x ,   J .   T e k n o l. ,   v o l .   7 7 ,   n o .   5 ,   p p .   9 3 1 0 0 ,   2 0 1 5 .   [5 ] .   A .   P a sin i,   A rti f icia n e u ra l   n e tw o rk s f o s m a ll   d a tas e a n a l y sis,”   J .   T h o ra c .   Dis. ,   v o l.   7 ,   n o .   5 ,   p p .   9 5 3 9 6 0 ,   2 0 1 5 .   [6 ] .   K.  G ro li n g e r,   A .   L ’H e u re u x ,   M .   A .   M .   Ca p re tz,  a n d   L .   S e e w a ld ,   En e rg y   f o re c a stin g   f o e v e n v e n u e s:  Big   d a ta   a n d   p re d ictio n   a c c u ra c y ,   En e rg y   Bu il d . ,   v o l .   1 1 2 ,   p p .   2 2 2 2 3 3 ,   2 0 1 6 .   [7 ] .   G .   S in g h ,   R.   K.  P a n d a ,   a n d   M .   L a m e rs,  M o d e li n g   o f   d a il y   ru n o f f   f ro m   a   s m a ll   a g ricu lt u ra w a t e rsh e d   u sin g   a rti f icia n e u ra n e tw o rk   w it h   re sa m p li n g   tec h n iq u e s,”  J .   Hy d r o in fo rm a ti c s ,   v o l.   1 7 ,   n o .   1 ,   p .   5 6 ,   2 0 1 5 .   [8 ] .   W .   N.  W .   M .   A d n a n ,   N.  Y.   Da h l a n ,   a n d   I.   M u siri n ,   M o d e li n g   b a se li n e   e lec tri c a e n e rg y   u se   o f   c h il ler  sy st e m   b y   a rti f icia n e u ra n e t w o rk ,   in   PE CON  2 0 1 6   -   2 0 1 6   IE EE   6 t h   In t e rn a ti o n a C o n fer e n c e   o n   P o we a n d   E n e rg y ,   Co n fer e n c e   Pro c e e d in g ,   2 0 1 7 ,   p p .   5 0 0 5 0 5 .   [9 ] .   M .   Co sta   e a l. ,   Ne w   m u lt i - obj e c ti v e   a lg o rit h m f o n e u ra n e tw o rk   train in g   a p p li e d   to   g e n o m ic  c las si f ic a ti o n   d a ta,”  S tu d .   C o mp u t.   I n tell. ,   v o l.   2 0 1 ,   p p .   6 3 8 2 ,   2 0 0 9 .   [1 0 ] .   T .   S .   G u n a w a n ,   I.   Z.   Ya a c o b ,   a n d   M .   Ka rti w i,   A rti f icia Ne u ra N e tw o rk   Ba se d   F a st E d g e   De te c ti o n   A lg o rit h m   f o M RI  M e d ica Im a g e s,”  In d o n e s.  J .   El e c tr.   En g .   C o mp u t.   S c i. ,   v o l.   7 ,   n o .   1 ,   p p .   1 2 3 1 3 0 ,   2 0 1 7 .   [1 1 ] .   N.  T e h lah ,   P .   Ka e w p ra d it ,   a n d   I.   M .   M u jt a b a ,   A rti f icia n e u ra n e tw o rk   b a se d   m o d e li n g   a n d   o p ti m iza ti o n   o f   re f in e d   p a lm   o il   p ro c e ss ,   Ne u ro c o mp u t in g ,   v o l .   2 1 6 ,   p p .   4 8 9 5 0 1 ,   De c .   2 0 1 6 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin E n erg Us in g   A r ti ficia l Neu r a l Net w o r   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   669   [1 2 ] .   V .   C.   Iv ă n e sc u ,   J.  W .   M .   Be rtra n d ,   J.  C.   F ra n so o ,   a n d   J.  P .   C.   K leijn e n ,   Bo o tstra p p i n g   to   so lv e   t h e   li m it e d   d a ta   p ro b lem   in   p ro d u c ti o n   c o n tro l:   a n   a p p li c a ti o n   in   b a tch   p r o c e ss   in d u stries ,   J .   Op e r.  Res .   S o c . ,   v o l.   5 7 ,   n o .   1 ,   p p .   2 9 ,   2 0 0 6 .   [1 3 ] .   G .   S in g h ,   R.   K.  P a n d a ,   a n d   M .   L a m e rs,  Bo o tstrap - b a se d   a rti f icia n e u ra n e tw o rk   a n a l y sis  f o e sti m a ti o n   o f   d a il y   se d im e n y ield   f ro m   a   s m a ll   a g ric u lt u ra w a ters h e d ,   In t .   J .   Hy d ro l.   S c i.   T e c h n o l . ,   v o l .   5 ,   n o .   4 ,   p .   5 6 ,   2 0 1 5 .   [1 4 ] .   E.   F e rra rio ,   N.  P e d r o n i ,   E.   Zi o ,   a n d   F .   L o p e z - Ca b a ll e ro ,   Bo o tstra p p e d   A rti f icia N e u ra Ne t w o rk f o th e   se is m ic   a n a ly sis o f   stru c tu ra sy ste m s,”  S tru c t.   S a f. ,   v o l.   6 7 ,   p p .   7 0 8 4 ,   2 0 1 7 .   [1 5 ] .   D.  Ka ra b o g a   a n d   B.   A k a y ,   A   c o m p a ra ti v e   stu d y   o f   A rti f ici a Be e   Co lo n y   a lg o rit h m ,   Ap p l.   M a t h .   Co mp u t. ,   v o l.   2 1 4 ,   n o .   1 ,   p p .   1 0 8 1 3 2 ,   2 0 0 9 .   [1 6 ] .   J.  C.   Ba n sa l,   H.  S h a rm a ,   a n d   S .   S .   Ja d o n ,   A rti f ici a b e e   c o lo n y   a lg o rit h m a   su rv e y ,   In t.   J .   Ad v .   In tell.   P a ra d ig . v o l.   5 ,   n o .   1 /2 ,   p .   1 2 3 ,   2 0 1 3 .   [1 7 ] .   C.   Oz tu rk   a n d   D.  Ka ra b o g a ,   H y b rid   A rti f icia B e e   Co lo n y   a lg o rit h m   f o n e u ra n e tw o rk   train in g ,   in   2 0 1 1   IEE E   Co n g re ss   o Evo l u ti o n a ry   Co mp u ta ti o n   ( CEC) ,   2 0 1 1 ,   p p .   8 4 8 8 .   [1 8 ] .   J.  M a ra is,   M .   Kle in g e ld ,   a n d   J.   V a n   Re n sb u rg ,   Ch a ll e n g e in   t h e   sc a li n g   o f   e n e rg y   sa v in g b a se li n e o n   m in e   c o m p re ss e d   a ir  s y ste m s,”  in   2 0 1 1   Pro c e e d in g o t h e   8 th   C o n fer e n c e   o n   th e   In d u stri a a n d   Co m me rc ia Us e   o En e rg y ,   2 0 1 1 ,   p p .   8 8 9 2 .     Evaluation Warning : The document was created with Spire.PDF for Python.