I nd o ne s ia n J o urna l o f   E lect rica l En g ineering   a nd   Co m p u t er   Science   Vo l.   1 2 ,   No .   2 ,  N o v e m b er   201 8 ,   p p .   6 6 2 ~ 6 6 9   I SS N:  2502 - 4752 ,   DOI : 1 0 . 1 1 5 9 1 / i j ee cs . v 1 2 .i 2 . p p 662 - 6 6 9           662       J o ur na l ho m ep a g e :  h ttp : //ia e s co r e. co m/jo u r n a ls /in d ex . p h p / ijeec s   M o deling  Ba seline Energ y  Using  A rtif icia l  Neura l  N etw o rk :     A S m a ll  Da tas et  Appro a ch       Wa n Na zira h Wa n M d Adna n 1 ,   No f ri  Yenit a   Da hla n 2 ,   I s m a il M us irin 3   1, 2 ,3 F a c u lt y   o f   El e c tri c a l  En g in e e rin g ,   Un iv e rsiti   T e k n o lo g i  M A RA ,   S h a h   A lam ,   S e lan g o r,   M a lay sia   1 F a c u lt y   o f   En g in e e rin g   a n d   L if e   S c ien c e s,  Un iv e rsiti   S e lan g o r,   B e sta ri  Ja y a ,   S e lan g o r,   M a lay sia       Art icle  I nfo     AB ST RAC T   A r ticle  his to r y:   R ec eiv ed   J u n   1 ,   2 0 1 8   R ev i s ed   J u l 3 0 ,   2 0 1 8   A cc ep ted   A u g   7 ,   2 0 1 8       In   th is  w o rk ,   b a se li n e   e n e rg y   m o d e l  d e v e lo p m e n t  u sin g   A rti f icia l  Ne u ra l   Ne tw o rk   ( A NN )   w it h   re sa m p li n g   tec h n iq u e s;  Cro ss   V a li d a ti o n   (CV )  a n d   Bo o tstrap   (B S )  a re   p re se n ted .   Re s a m p li n g   tec h n i q u e s are   u se d   t o   e x a m in e   th e   a b il it y   o f  th e   A NN   m o d e l  to   d e a l  w it h   a   s m a ll   d a tas e t.   W o rk in g   d a y s,  c las s   d a y s  a n d   Co o li n g   De g re e   Da y s  ( CDD )  a re   u se d   a s  A NN   in p u t  m e a n w h il e   th e   A N N  o u tp u t  is  m o n th ly   e lec tri c it y   c o n su m p ti o n .   T h e   c o e ff icie n t  o f  c o rre latio n   (R)  is  u se d   a s  p e rf o rm a n c e   f u n c ti o n   to   e v a lu a te  th e   m o d e l  a c c u ra c y .   F o r  th is  a n a ly si s,  R  is  c a lcu late d   f o r  th e   e n ti re   d a ta   se t  ( R_ a ll )  a n d   se p a ra tel y   f o r  train in g   se t  (R_ tra in ),   v a li d a ti o n   se t  (R _ v a li d )  d a n   tes ti n g   se t  (R_ tes t).   T h e   c lo se r  R  to   1 ,   t h e   h ig h e r  sim il a rit ies   b e t w e e n   ta rg e ted   a n d   p re d icte d   o u t p u t.   T h e   to tal   o f   two   d if f e re n t  m o d e ls  w it h   se v e ra l  n u m b e r  o f   n e u ro n s  a re   d e v e lo p e d   a n d   c o m p a re d .   It  c a n   b e   c o n c lu d e d   t h a t  a ll   m o d e ls  a re   c a p a b le  to   train   th e   n e tw o rk .   A rti f icia l  Ne u ra l  Ne t w o rk   w it h   Bo o ts trap   Cro ss   V a li d a ti o n   tec h n iq u e   (A NN - B S C V )  o u tp e rf o rm s   A rti f ici a l  Ne u ra l   Ne t w o rk   w it h   Cro ss   V a li d a ti o n   tec h n i q u e   (A NN - CV ).     T h e   3 - 6 - 1   A NN - B S CV ,   w it h   R_ train   =   0 . 9 5 6 6 8 ,   R_ v a li d   =   0 . 9 7 5 5 3 ,   R _ tes t  =   0 . 8 5 7 2 6   a n d   R _ a ll   =   0 . 9 4 0 7 9   is  se lec ted   a s  th e   b a se li n e   e n e rg y   m o d e l  to   p re d ict  e n e rg y   c o n su m p ti o n   f o r  Op ti o n   C  I P M VP .     K ey w o r d s :   B aselin e  E n er g y   Mo d el   A r ti f icial  Ne u r al  Net w o r k   C r o s s   Valid atio n   B o o ts tr ap   S m all  d ata s et   Co p y rig h t  ©   2 0 1 8   In stit u te o f  A d v a n c e d   E n g i n e e rin g   a n d   S c ien c e .    Al l  rig h ts  re se rv e d .   C o r r e s p o nd ing   A uth o r :   W an   Naz ir ah   W an   Md   A d n a n ,   Fac u lt y   o f   E lectr ical  E n g in ee r in g ,   Un i v er s iti T ek n o lo g i M A R A ,     Sh a h   A la m ,   Selan g o r ,   Ma la y s i a .   E m ail:  w a n _ n az ir a h @ u n is e l.e d u . m y       1.   I NT RO D UCT I O N   I n   r ec en t  d ec ad es,  elec tr ic it y   co n s u m p tio n   h as  d r a m atica l l y   i n cr ea s ed   d u e  to   th e   p o p u latio n   a n d   ec o n o m ic  g r o w th .   I n   P en i n s u lar   Ma la y s ia,   elec tr icit y   co n s u m p tio n   c u r r en tl y   i n cr ea s ed   b y   7 . 5 %  in   2   y ea r s ,   f r o m   2 0 1 2   to   2 0 1 4   [ 1 ] .   T h is   s i tu atio n   h a s   e n co u r a g ed   Ma la y s i an   g o v er n m e n t  to   i m p le m en t  en er g y   ef f icie n c y   o f   en er g y   co n s er v a tio n   m ea s u r es  to   r ed u ce   elec tr icit y   co n s u m p tio n .   T o   ev alu ate  th e  i m p ac t  o f   th i s   i m p le m en ta tio n ,   t h e  r ed u cti o n   in   e n er g y   co n s u m p tio n   an d   en er g y   s av i n g   m u s t  b e   d eter m in ed .   T h e  ev alu a tio n s   ar e  v er y   d ep en d en t  o n   Me as u r e m en t  a n d   Ve r if icatio n   ( M & V)   ac ti v itie s .   T h e  ap p licatio n   o f   I n ter n atio n al  P er f o r m an ce   Me asu r e m en t  a n d   Ver i f icatio n   P r o to co l  ( I P MV P)  is   r eq u ir ed   as  M& V  r e f er en ce   p r o to co l  to   ev alu ate  en er g y   s av i n g s .   T h e  I P MV P   p r o v id es  a  f r a m e w o r k   f o r   d e ter m i n in g   s av in g   a f ter   i m p le m en ta tio n   o f   a n   en er g y   s av in g   p r o j ec t  [ 2 ] .   T h er e  ar e   f o u r   M& V  o p tio n s   d ef in ed   b y   t h e  I P MV P   i.e .   1 )   Op tio n   A – R etr o f it  i s o latio n   w it h   k e y   p ar am eter   m ea s u r e m en t,  2 )   Op tio n   B   –   R etr o f it  is o latio n   w i th   a ll  p ar a m eter   m ea s u r e m en t,  3 )   Op tio n   C – w h o le  f ac ili t y   a n d   4 )   Op tio n   D – ca lib r ated   s im u lat io n .   Fo r   th is   s t u d y ,   o n l y   I P MV P   Op tio n   C -   W h o le  f ac ilit y   en er g y   u s e   is   ch o s e n   a n d   d ata   ar e  n o r m a ll y   d er iv ed   f r o m   m o n th l y   u til it y   b ills .   On e   o f   th e   M& V   ac ti v itie s   i s   d ev elo p in g   th e   b aseli n e  en er g y   m o d el.   C u r r en tl y ,   b ase lin e  en er g y   m o d el  is   an al y ze d   th r o u g h   a  li n ea r   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin e  E n erg y  Us in g   A r ti ficia l Neu r a l Net w o r k  –   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   663   r eg r ess io n   [3 - 4] .   Ho w ev er ,   th i s   m eth o d   m a y   n o t a cc u r atel y   r ep r esen t t h e  d ata   ch ar ac ter is ti c,   esp ec iall y   f o r   th e   n o n - li n ea r   ch ar ac ter is tic.   R ec en t l y ,   A r tific ial  Neu r a l   N et w o r k   ( A NN)   i s   a   p o p u lar   t ec h n iq u e  f o r   f o r ec asti n g   a n d   class i f y in g   th e  o u tp u t.  I t  h a s   b ee n   u s ed   in   d if f er e n t  f ield s   b y   r esear c h er s   to   s o lv e  v ar io u s   p r o b le m s .   T h e  ab ilit y   o f   A N N   to   f in d   th e  r elatio n s h ip   b et w e en   in p u ts - o u tp u ts   is   h i g h l y   ac cu r ate.   Fo r   th i s   s t u d y ,   A NN  h as  b ee n   s elec ted   to   r ep lace   th e  lin ea r   r eg r ess io n .   A s   p r ev io u s l y   m e n tio n ed ,   Op tio n   C   d ata  is   d er iv ed   f r o m   u tili t y   b ills   an d   u s u all y ,   th e  a v ailab le  d ata  is   in s u f f icien t  to   tr ain   t h e  n et w o r k .   T h e  d ata  ar e  d iv id ed   in to   th r ee ;  tr ai n i n g ,   v alid atio n   a n d   te s ti n g   s et.   T r ain i n g   an d   v alid atio n   s et  ar e  p ar ticip atin g   i n   t h e  A NN   lear n i n g   p r o ce s s ,   an d   t h e   test i n g   s et  is   u s ed   to   ev alu ate   th e  p er f o r m a n ce   o f   th e  tr ai n e d   m o d el.   A NN  lear n s   f r o m   e x a m p le s ;  th er e f o r e,   s m al l d ata  s ets  n o r m all y   cr ea tes in ac c u r ate  r es u l ts   a n d   p r o d u ce   a  lar g e  tr ain in g   er r o r .   A   f e w   r esear c h er s   r ep o r ted   an d   ex p lo r ed   s ev er al  r esa m p li n g   tech n iq u es  to   d ea l  w it h   s m all   d ata  s ize   in   ANN  ap p licatio n   [5 - 8] .   T h is   s t u d y   f o cu s es   o n   th e  d ev elo p m en t   o f   b aseli n e  e n e r g y   m o d el  a n d   t h e   in te g r atio n   o f   A NN  w it h   C r o s s   Valid atio n   ( C V)   an d   B o o ts tr ap   ( B S)   to   g et  a  b etter   ac cu r ac y   o f   A NN   p r ed ictio n .   T h is   m et h o d   m a y   av o id   an y   o v er f itti n g   o f   t h e  d ata.   Ov er f itt in g   cr ea tes  th e  n e t w o r k   to   m e m o r ize   tr ain i n g   p atter n s ,   b u t t h e y   ca n n o t g e n er alize   w ell  to   n e w   d at a  ( test in g   s et)   an d   g en er ate s   p o o r   ac cu r ac y .   T h e  s tr u ct u r e  o f   t h is   p ap er   is   o r g an ized   a s   f o llo w s :  Secti o n   2   b r ief l y   ex p lai n s   th e  m e th o d o lo g y   in cl u d in g   d ata  co llectio n ,   b as elin e  e n er g y   m o d el  d ev elo p m en t,  an d   p er f o r m an ce   ev al u ati o n .   T h is   is   f o llo w ed   b y   a  p r esen ta tio n   o f   t h e  r esu l t  an d   d is cu s s io n   o f   t h e  p r o p o s ed   m et h o d s .   Fi n all y ,   t h e  co n cl u s io n   is   s u m m ar ized   in   s ec tio n   4 .         2.   RE S E ARCH   M E T H O D   T h is   s ec tio n   d escr ib es  t h e  p r o p o s ed   m eth o d o lo g y   f o r   th e   d ev elo p m e n t  o f   b aseli n e  e n er g y   m o d el   f o r   I P MV P   O p tio n   C   s m all  d ata  s et  as il lu s tr ated   in   F ig u r e  1 .       S T A R T D a t a   C o l l e c t i o n A N N   s t r u c t u r e   d e t e r m i n a t i o n I P M V P   O p t i o n   C   B a s e l i n e   E n e r g y   M o d e l A N N - C V M e t h o d A N N   i n p u t s :   W o r k i n g   d a y , C l a s s   d a y ,   C D D A N N   o u t p u t :   M o n t h l y   E n e r g y   C o n s u m p t i o n M o d e l   S e l e c t i o n P e r f o r m a n c e   E v a l u a t i o n   a n d   C o m p a r i s o n E N D A N N - B S C V   M e t h o d     Fig u r e  1 .   P r o p o s ed   I P MV P Op tio n   C   B aseli n e  E n er g y   Mo d el       2 . 1 .   Da t a   Co llect io n   T h e  b aselin e  d ata   is   p r o v id ed   b y   t h e  Faci lit y   Ma n ag e m e n t  O f f ice,   U n i v er s it i  T ek n o l o g i  Ma r a   ( UiT M) ,   Sh ah   Ala m ,   Sela n g o r ,   Ma la y s ia  f o r   a  2 3   m o n t h s   p e r io d .   T h e  in p u t  v ar iab les   ar e  UiT M  w o r k i n g   d a y s   ( W D) ,   Ui T M  class   d ay s   ( C D)   an d   C o o lin g   De g r ee   Da y s   ( C DD) .   T h ese  th r ee   v ar iab les  ar e  ass ig n ed   as  A NN   in p u t a n d   tar g eted   o u tp u t is  m o n th l y   elec tr icit y   co n s u m p tio n ,   k W h .     B aselin e  s tati s tical   d ata;  m i n i m u m ,   m a x i m u m   a n d   m ea n   o f   b aselin e   a n d   p o s t - r etr o f it  ar e   s h o w n   in   T ab le  1 .   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l .  1 2 ,   No .   2 ,  No v e m b er   201 8   :   6 6 2   –   6 6 9   664   T ab le  1 .   Statis tical  d ata  f o r   B aselin e   P a r a me t e r   R a n g e   M e a n   B a se l i n e   i n p u t :   w o r k i n g   d a y s   17  –   2 3   d a y s   2 1   d a y s   B a se l i n e   i n p u t :   c l a s s  d a y s   0  –   2 3   d a y s   1 4   d a y s   B a se l i n e   i n p u t :   c o o l i n g   d e g r e e   d a y s   511  -   649   579   B a se l i n e   o u t p u t :   e l e c t r i c a l   e n e r g y   c o n s u m p t i o n   6 3 , 0 0 2   k W h - 1 1 3 , 6 1 3   k W h   8 6 , 3 7 7 k W h       2 . 2 .   I P M VP   O ptio n C  B a s eline  E nerg y   M o del D ev elo p m ent   Sin ce   li m ited   d ata  is   a v ailab l e  f o r   th is   s t u d y ,   C V  a n d   B S  tech n iq u es  ar e  e m b ed d ed   w it h   A NN  to   d ev elo p   an   ac cu r ate  b aseli n e  en er g y   m o d el.   I n   t h i s   s ec tio n ,   t w o   b aseli n e  en er g y   m o d els ,   A r ti f icial  Ne u r al   Net w o r k – C r o s s   Valid atio n   ( A N N - C V)   m o d el  an d   A r tif ic ial   Neu r al  Net w o r k – B o o ts tr ap   C r o s s   Valid atio n   ( A NN - B S C V)   m o d el  ar e  d ev elo p ed .     A N N  s tr u ct u r es  an d   p ar a m e ter s   n ee d   to   b e   d eter m i n ed   to   d ev elo p   th e  m o d el.   Feed - f o r w ar d   m u ltil a y er   p er ce p tr o n   w it h   s in g le  h id d en   la y er   is   c h o s e n   d u e   to   th is   is   th e   m o s t p o p u lar   AN N  ar ch itec tu r e  [ 9 ] .  T h e  tr ain i n g   alg o r it h m   u s ed   an d   r ec o m m en d ed   b y   t h e  M A T L A B   a n d   m o s tl y   u s ed   to   tr ain   t h e  n et w o r k   i s   tr ain l m   ( L e v e n b er g - Ma r q u ar d t)   [ 1 0 - 11] .   T h e  s el ec ted   tr an s f er   f u n ctio n s   ar e  lo g s i g   f o r   h id d en   la y er   an d   p u r elin   f o r   th e  o u tp u t  la y er .   T h e  2 3   s ets  o f   d ata  ar e  d iv id ed   in to   a  tr ai n in g   s et,   v al id atio n   s et  an d   test   s et.   T h e   tr ain i n g   s et  i s   u s ed   to   tr ain   th e  n et w o r k   an d   to   ad j u s t  ANN   w ei g h t s   an d   b iases .   T h e   v ali d atio n   s et  is   u s ed   to   v alid ate  t h e  tr ai n i n g   p r o ce s s   an d   to   co n tr o l  o v er f itti n g   t h r o u g h   ea r l y   s to p p in g .   T h e  tes tin g   s et   is   u s ed   t o   ev alu a te  t h e  p er f o r m an ce   o f   th e  tr ai n ed   m o d el   s i n ce   t h e  test   s et  i s   n o t  d ir ec tl y   i n v o l v ed   i n   t h e  tr ai n i n g   p r o ce s s .   I n   A NN - C V  a n d   A N N - B SC V,   t h e  n et w o r k s   ar e  r u n   f o r   s ev er al   ti m es   an d   a v er ag e  v al u es  o f   all   f o u r   R s   ar e  r ec o r d ed .     T w o   t y p es  o f   C V  ar e  i m p le m en ted   in   A NN - C V  m et h o d s   as  illu s tr ated   in   Fi g u r e  2 ,   1 )   K - Fo ld   C r o s s   Valid atio n   ( KF C V) :   th e   d ata   ar e  p ar titi o n s   i n to   k - s a m p le s   an d   2 )   R a n d o m   Sa m p li n g   C r o s s   Valid atio n   ( R SC V) :   ea ch   d ata  s p lits   r an d o m l y   i n to   k - s u b s a m p les.  T r ain in g   a n d   v al id atio n   s et  ar e  d iv id ed   in to   k - s u b s a m p le  an d   k =5   is   s elec te d   in   th i s   s t u d y .   I n   f ir s t  iter atio n ,   k - 1   s u b s a m p le s   ar e  d ed icate d   to   tr ain in g   s et  to   tr ain   th e  d ata  m ea n w h ile  t h e  r e m ai n in g   s u b s a m p le  is   u s ed   to   v alid ate  th e  d ate  an d   th e  p r o ce s s   is   r ep ea ted   f o r   k   iter atio n s .   T h e  n u m b er   o f   n eu r o n s   i n   th e  h id d en   la y er   is   s et  b et w ee n   6   an d   2 0   n eu r o n s   o n l y   [ 9 ] .   T h e  g r ap h ical  ill u s tr atio n   o f   A N N _ C V  is   p r esen ted   i n   Fi g u r e  2 .       T h e  b est  s tr u ctu r e   o f   ANN - C V  is   u s ed   to   d ev elo p ed   A NN - B SC V  m o d el.   T h e  p u r p o s e  o f   b o o ts tr ap   r esa m p li n g   i s   to   cr ea te  a  s et  o f   b o o ts tr ap   s a m p les  th at  ca n   p r o v id e  a  b etter   u n d er s ta n d in g   o f   th e  a v er ag e  a n d   v ar iab ilit y   o f   t h e  o r ig in al   u n k n o w n   d is tr ib u tio n   o r   p r o ce s s   [ 1 2 ] .   B o o ts tr ap   r esa m p lin g   is   p er f o r m ed   b y   r ep ea ted   s am p li n g   w it h   r ep lace m en t  f r o m   t h e  o r ig i n al  s a m p le.   I t  in v o l v es  g e n er ati n g   a   lar g e  n u m b er   o f   n e w  s a m p les  f r o m   t h e  o r ig i n al  s a m p le.     Fig u r e  4   i llu s tr ated   t h e  p r o ce s s   o f   b o o ts tr ap   r esa m p li n g   a n d   Fi g u r e  5   g r ap h icall y   d escr ib ed   A N N_ B SC V  m o d el.   T h e  o r ig i n al  s a m p le   o f   s ize   N  ( N =8   in   th i s   i llu s tr atio n )   r an d o m l y   s a m p les   w it h   r ep lace m e n t   an d   r ep ea ted   B   t i m es   to   p r o d u ce   B   d ataset s ,   ea ch   co n tain s   d i f f er en t   d ata  w it h   a  s ize  o f   N.   B   n eu r al   n et w o r k   m o d els  ar e  d e v elo p ed   to   tr ain   an d   v alid ate   B   b o o ts tr ap   d ata,   m ea n w h ile   th e  u n u s ed   d ata  i s   u s ed   to   te s t  t h e  n eu r al  n et w o r k s .   I n s tead   o f   s elec t in g   a  s i n g l e  n e u r al  w o r k   t h at  i s   t h e  “ b est ”,   B   n eu r al  n et w o r k   m o d el s   ar e  co m b i n ed   to   ap p r o x i m ate  t h e  r elatio n s h ip   b et w ee n   m o d el  in p u ts   a n d   m o d el  o u tp u ts   a n d   also   to   i m p r o v e  m o d el  ac cu r ac y   a n d   r o b u s tn e s s .   I n   t h is   s t u d y ,   B   =  1 0 0   is   s elec ted   s i n ce   m o s t  co m m o n   v al u e  i s   b et w ee n   5 0   an d   2 0 0   [ 7 ] ,   [ 1 3 - 14] .   T h e  A NN_ B SC V  m o d el   f itted   to   ea ch   o f   th e  g e n er ate d   b o o ts tr ap   d ataset   an d   A NN_ B SC V  es ti m a te  v alu e  i s   ca lc u lated   a s   t h e  a v er ag e  r eg r es s io n   f u n ctio n   o f   ea ch   m o d el  as   i n     E q u atio n   1 .                   (   )       ∑               (   )                       ( 1 )         Fig u r e  2 .   C r o s s - Valid atio n   r es a m p lin g   m et h o d : a )   KFC V;  b )   R SC V     S u b s a m p l e   1 S u b s a m p l e   2 S u b s a m p l e   3 S u b s a m p l e   4 S u b s a m p l e   5 T o t a l   n u m b e r   o f   t r a i n   a n d   v a l i d a t i o n   s e t s T o t a l   n u m b e r   o f   t r a i n   a n d   v a l i d a t i o n   s e t s S u b s a m p l e   1 S u b s a m p l e   2 S u b s a m p l e   3 S u b s a m p l e   4 S u b s a m p l e   5 a ) b ) Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin e  E n erg y  Us in g   A r ti ficia l Neu r a l Net w o r k  –   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   665   S u b s a m p l e 1 S u b s a m p l e   2 S u b s a m p l e   k T r a i n i n g   a n d   V a l i d a t i o n   s e t f A N N _ C V _ 1 f A N N _ C V _ 2 f A N N _ C V _ k . . . . . . T e s t   s e t     Fig u r e  3 .   A NN_ C V  Mo d el           Fig u r e  4 .   B o o ts tr ap   r esa m p lin g   m et h o d       B o o t s t r a p   1 B o o t s t r a p   2 B o o t s t r a p   B C o m p l e t e   D a t a s e t f A N N _ B S C V _ 1 f A N N _ B S C V _ 2 f A N N _ B S C V _ B . . . . . .     Fig u r e  5 .   A NN_ B S C V  Mo d el       2 . 3 .   P er f o r m a nce   E v a lua t io n a nd   M o del Sele ct io n   Sev er al  m et h o d s   ar e  in teg r ate d   w it h   ANN  i n   o r d er   to   o v er co m e   th e   s m all  d ata s et  p r o b lem s   a n d   to   in cr ea s e  ac c u r ac y   i n   A NN.   T h e  p er f o r m a n ce   o f   ANN  is   n o t  o n l y   e v alu a ted   o n   s i n g le  A N N  b u t  r ep ea ted l y   m ea s u r ed   w it h   d i f f er en t   co n f i g u r atio n   s u c h   a s   s p li t  o f   t r ain i n g ,   v alid atio n   a n d   test in g   s e t  i n   C V;   an d   r an d o m l y   ch o o s i n g   d ata  i n   B S .   I n   ea c h   r u n ,   s e v er al  ANN  w i th   v ar io u s   co n f i g u r atio n s   ar e   t r ain ed ,   p r o d u cin g   a  r an g e  o f   s u cc e s s f u l a n d   u n s u c ce s s f u l  ANN  r esu lts .       X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 X 1 X 2 X 3 X 4 X 5 X 6 X 7 X 8 C o m p l e t e   d a t a   s e t B o o t s t r a p   1 B o o t s t r a p   2 B o o t s t r a p   3 B o o t s t r a p   4 B o o t s t r a p   B X 3 X 1 X 1 X 7 X 7 X 7 X 5 X 5 X 3 X 7 X 2 X 1 X 3 X 3 X 3 . . . . T r a i n i n g   a n d   V a l i d a t i o n   s e t s T e s t   s e t Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l .  1 2 ,   No .   2 ,  No v e m b er   201 8   :   6 6 2   –   6 6 9   666   T o   ev alu ate  t h e  ANN  m o d el  p er f o r m a n ce ,   th e   C o e f f icien t  o f   C o r r elatio n ,   R   b et w ee n   t h e  tar g eted   o u tp u t  a n d   p r ed icted   o u tp u t   is   m ea s u r ed .   R   m ea s u r es  t h e  s tr en g t h   o f   co r r elatio n   b et w ee n   t w o   v ar iab les  [ 1 8 ] .  T h e  clo s er   R   to   1 ,   th e  h ig h er   s i m ilar it ies   b et w ee n   tar g et ed   an d   p r ed icted   o u tp u t.  Fo r   th is   s m all  d atase t   an al y s is ,   C o e f f icie n t  o f   C o r r elatio n   is   ca lcu lated   f o r   th e  en t i r e  d ata  s et  ( R _ all)   an d   s ep ar at el y   f o r   tr ain i n g   s et   ( R _ tr ain ) ,   v al id atio n   s et  ( R _ v alid )   d an   te s ti n g   s et   ( R _ tes t) .   Fo r   I P MV P ,   R   >  0 . 7 5   d ef i n es  s tati s ticall y   s ig n i f ica n t p er f o r m a n ce .   T h e  m o d el  w i th   t h e  h ig h es t R is   s e lecte d   as th e  b aseli n e  m o d el.       3.   RE SU L T S AN D  AN AL Y SI S   T h is   s ec tio n   ex p lai n s   t h e  r esu lt  o f   b aselin e  e n er g y   m o d el  u s in g   t w o   m et h o d s ,   ANN - C V  an d   A N N - B SC V.   At  th e  en d   o f   t h is   s ec tio n ,   p er f o r m an ce   co m p ar is o n s   o f   b o th   m o d els  ar e  ev alu ate d .   T h e  m o d el  w it h   th e  h i g h est  v al u es o f   R   is   s ele cted   as th e  b est b aseli n e  en er g y   m o d el.       3 . 1 .   B a s eline  E nerg y   M o del R esu lt   As  p r ev io u s l y   m e n tio n ed ,   ANN - C V  m o d el  s tr u ct u r e  is   d ev elo p ed   u s i n g   R S C V  a n d   K F C V.   Si n c e   th er e  is   n o   p r in cip le  i n   c h o o s i n g   th e  p r o p er   A N N  ar ch itect u r e,   th e  n u m b er   o f   h id d en   n e u r o n s   is   d eter m i n ed   u s i n g   cr o s s - v alid atio n   tech n iq u e  to   o b tain   th e   b est  s tr u ct u r e .   T h e  h id d en   n eu r o n s   i n   s i n g l e  h id d en   la y er   ar e   v ar ied   an d   th e  n et w o r k   i s   tr ai n ed   f o r   ea ch   ad d itio n   o f   n e u r o n s .   T h e  to tal  th ir t y   s tr u ct u r es  ar e  tr ain ed   an d   ev alu a ted   f o r   b o th   A NN - C V   m o d el.   I n   th i s   A NN - C V  m eth o d ,   d ata  is   d iv id ed   in to   5   s u b s a m p le s   an d   r an d o m l y   r u n s   f o r   s e v er al  t i m es.  T h e  ab ilit y   o f   ANN  to   lea r n   is   also   s u p p o r ted   b y   t h e  ac cu r ac y   o f   tr ai n i n g ,   v alid atio n   a n d   test i n g   d ata.   T h e  av er a g e  v al u es  o f   tr ai n i n g ,   v alid atio n ,   test in g   as  w ell  a s   en tire   d ata  f o r   ea ch   n eu r o n   is   r ec o r d ed   an d   th e   ef f ec t  o f   h id d en   n e u r o n s   o n   o v er all  p er f o r m an ce   f o r   all  R s   ar e  s u m m ar ized   i n   Fig u r e  6   f o r   A NN - K FC V  an d   Fig u r e  7   f o r   A NN - R S C V.           Fig u r e  6 .   P er f o r m a n ce   co m p ar is o n   o f   C o ef f icie n t o f   C o r r elatio n   ( R _ tr ain ,   R _ v alid ,   R _ test   a n d   R _ all)   f o r   d if f er e n t n e u r o n s   u s in g   A NN - KFC V  m o d el           Fig u r e  7 .   P er f o r m a n ce   co m p ar is o n   o f   C o ef f icie n t o f   C o r r elatio n   ( R _ tr ain ,   R _ v alid ,   R _ test   a n d   R _ all)   f o r   d if f er e n t n e u r o n s   u s in g   A NN - R S C V  m o d el     Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin e  E n erg y  Us in g   A r ti ficia l Neu r a l Net w o r k  –   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   667   I n   Fi g u r e  6 ,   th e  lo w e s t  R _ tr ai n   i s   0 . 8 8 9 3 ,   R _ v alid   is   0 . 6 8 8 8 ,   R _ test   i s   0 . 8 2 0 0   an d   R _ all   is   0 . 8 4 4 9 ,   m ea n w h i le  th e  h ig h es t  R _ tr ai n   is   0 . 9 0 7 4 ,   R _ v alid   is   0 . 7 5 9 1 ,   R _ test   is   0 . 8 5 8 0   an d   R _ all  is   0 . 8 7 2 5 .   I n   Fig u r e  7 ,   th e  lo w e s t  R _ tr ai n   i s   0 . 8 5 7 0 ,   R _ v alid   is   0 . 4 3 0 1 ,   R _ test   is   0 . 7 5 0 6   an d   R _ all  is   0 . 8 3 9 1 ,   m ea n w h ile  th e   h ig h e s t  R _ tr ain   is   0 . 9 1 3 9 ,   R _ v alid   is   0 . 8 4 8 0 ,   R _ test   is   0 . 8 7 1 9   an d   R _ all  is   0 . 8 7 5 8 .   I n   b o th   f ig u r es,   th e   tr ain i n g   s et  g iv e s   th e  h ig h es t  p er f o r m a n ce   m ea n w h ile  th e  v alid atio n   s et  g i v es  t h e  lo w e s t  p er f o r m an ce .   T h er ef o r e,   it is   i m p o r tan t to   s e lect  th e  b est s tr u ct u r e  to   av o id   o v er f itti n g ,   esp ec iall y   in   v alid atio n   s et.   I n   g e n er al,   t h e  i n cr ea s i n g   o f   h i d d en   n e u r o n s   n o t  n ec es s ar il y   i n cr ea s e  t h e  p er f o r m an ce   o f   ANN.   Mo r e  h id d en   n e u r o n s   ar e  ad d ed   to   th e  n et w o r k ,   t h e  n et w o r k   b ec o m es  m o r e  co m p le x   an d   tak e s   lo n g er   ti m e  to   r u n .   I n   f ac t,  n et w o r k   w it h   6   a n d   9   o f   n e u r o n s   g iv e  h i g h er   p er f o r m an ce   in   ANN - KF C V  b u t  i n   A NN - R S C V,   t h e   n et w o r k   w it h   2 0   n eu r o n s   g iv e s   th e  b est  r esu lt s .   T h is   A NN - C V  s tr u c tu r e  w it h   6 , 9   an d   2 0   n u m b er   o f   n e u r o n s   in   h id d en   la y er   w h ich   g i v e  th e   b est p er f o r m a n ce   h a s   b ee n   s el ec ted   an d   u s ed   in   A N N - B S C V   m eth o d .   I n   A N N - B S C V  m eth o d s ,   b o o ts tr ap   r esa m p lin g   m e th o d   is   u s ed   to   g en er ate  d if f er en t  co m b i n atio n s   o f   th e  d ata  s ets  to   cr ea te  a  s et  o f   1 0 0   b o o ts tr ap   s am p le s   u s in g   r esa m p li n g   w it h   r ep lace m e n t.   T h is   m ea n s   t h at  a  to tal  o f   3   s tr u c tu r es   ar e  d ev e l o p ed   w it h   1 0 0   d if f er en t   s et   o f   b o o ts tr ap   s a m p le s   i n   ea c h   m o d el  ar e  ev al u ated .   T h e  p er f o r m a n ce   o f   a v er a g e   all  R s   f o r   6 ,   9   an d   2 0   n eu r o n s   i n   h id d en   la y er   ar e  s u m m ar ized   in   s e v er al   b o x p lo ts   as  in   Fig u r e  8   w h ic h   s h o w s   th e  m ed ian ,   m in i m u m   an d   m a x i m u m   v alu e s   an d   als o   u p p er   an d   lo w er   qu ar tiles   o f   t h e  r e s u l ts .   T h e  R s   v al u es   t h at  a w a y   f r o m   t h e   to p   o r   th e  b o tto m   o f   t h e  b o x   ar e  co n s id er ed   as   o u tlier s   an d   d en o ted   b y   t h e  d o t sig n s .         Fig u r e  8 .   B o x p lo ts   o f   C o ef f ici en t o f   C o r r elatio n   ( R _ tr ain ,   R _ v alid ,   R _ test   an d   R _ all )   f o r   d if f er en t  n eu r o n s   u s i n g   A NN - B SC V  m o d el       R _ all  v ar ies  b et w ee n   0 . 6 5 5 5   an d   0 . 9 2 7 0 ,   R _ tr ain   v ar ie s   b et w ee n   0 . 7 5 1 8   an d   1 ,   R _ v a lid   v ar ies  f r o m   0 . 5 0 6 1   an d   1 ,   an d   R _ test   v ar ies  f r o m   - 0 . 1 5 3 1   an d   0 . 9 7 9 6   w it h   6   n e u r o n s   in   h id d en   la y e r .   Me an w h ile,   R _ all   v ar ies  b et w ee n   0 . 7 4 6 5   an d   0 . 9 3 0 1 ,   R _ tr ain   v ar ies  b et w ee n   0 . 7 6 3 1   an d   1 ,   R _ v al id   v ar ies  f r o m   0 . 4 9 6 9   an d   1 ,   an d   R _ te s t  v ar ies   f r o m   0 . 0 1 5 8   an d   0 . 9 7 3 6   w it h   9   n e u r o n s   in   h id d en   la y er .   R _ all  v ar ies   b et w ee n   0 . 7 8 1 7   an d   0 . 9 2 3 2 ,   R _ tr ain   v ar ies  b et w e en   0 . 7 8 5 4   an d   1 ,   R _ v alid   v a r ies  f r o m   0 . 5 4 8 4   an d   1 ,   an d   R _ test   v ar ies  f r o m   0 . 1 1 7 6   an d   0 . 9 6 9 1   w i th   2 0   n e u r o n s   in   h id d en   la y er .   As ca n   b e  s ee n ,   all  t h e   th r ee   n e u r o n s   t en d   to   u n d er p r ed ict   R _ v alid   an d   R _ test ,   t h is   is   d u e  to   th e  A N N  p o o r   ab ilit y   t o   p r e d ict  th e  v alu es.  T h e  m e d ian   f o r   all  R s   f o r   6   n eu r o n s   i n   h id d en   la y er   is   h ig h er   t h a n   th e  o t h er   t w o   n e u r o n s .   B y   co m p ar is o n ,   all  t h r ee   s tr u ct u r es  h av e   ac ce p tab le  m ed ian   v al u es  an d   also   h av e  s m aller   r an g e  f o r   all  R _ all.   I n   th is   ca s e,   R _ all  a n d   R _ tr ain   ar e  less   s en s iti v e  to   th e  av a ilab le  d ata  s ets  w it h   les s   o u tlier s .       3 . 2 .   P er f o r m a nce  Co m pa riso n a nd   M o del Sele ct io n   T h e  r esu lts   o f   b o th   p r o p o s ed   m et h o d s   w i th   t h r ee   b est  s tr u c tu r es  f o r   ea ch   m et h o d   ar e  s elec ted   an d   s u m m ar ized   as  in   T ab le  2 .   T h e  r esu lts   o f   ANN  m e th o d   w i th o u t  an y   r e s a m p li n g   tech n iq u e s   ar e  also   p r esen ted   in   t h is   tab le  to   h ig h li g h t  t h e  s t r en g t h   o f   t h e  p r o p o s ed   m o d el.   I n   v ie w   o f   t h e  r esu l ts   o b tain e d ,   th e  co ef f icien t  o f         Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 5 0 2 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l .  1 2 ,   No .   2 ,  No v e m b er   201 8   :   6 6 2   –   6 6 9   668   co r r elatio n   f o r   b o th   p r o p o s ed   m et h o d s   ar e  ab o v e  0 . 9   w h ic h   ca n   b e  co n s id er ed   ac ce p tab le   an d   ad h er e  to   th e   s p ec if icatio n   o f   I P VM P   [ 2 ] .   I t  ca n   b e  s ee n   t h at  all   R _ v alid   f o r   A NN  w it h o u t  a n y   r esa m p l in g   tec h n iq u es   ar e  less   t h an   0 . 4   w h ich   t h is   s it u atio n   cr ea tes  o v er f it tin g   d u r i n g   A N N  tr ain i n g   p r o ce s s .   I n   s elec tin g   th e  b est   b aselin e  e n er g y   m o d el,   all  f o u r   R s   n ee d   to   b e  co n s id er ed   to   av o id   o v er f itti n g .   T h ese  r esu lt s   i n d icate   t h at  a ll  th e  p r o p o s ed   m o d els  h av e  a   h ig h   q u ali t y   o f   p r ed ictio n   a n d   ca p ab le  to   tr ain   t h e  n et w o r k .   T h e  ANN - B SC V  m et h o d   ev id en tl y   o u tp er f o r m s   A NN - C V  m et h o d .   Fu r th er   co m p ar is o n   o f   all  s tr u ct u r es i s   m ad e  a n d   clea r l y   s h o w s   t h at  t h e   m o d el  o f   ANN - B S C V  w i th   6   n eu r o n s   in   h id d en   la y er   h as   t h e   h ig h e s t  v al u e  o f   R _ all  an d   is   n o m i n ated   as  t h e  b est  p er f o r m an ce .   I t  is   b ased   o n   t h e  h ig h er   v alu es  o f   all  f o u r   Rs  w h ic h   ar e  clo s e  to   u n it y   an d   th er ef o r e  th e  m o s t a cc u r ate.         T ab le  2 .   R esu lt s u m m ar izat io n   M e t h o d   N u mb e r   o f   h i d d e n   n e u r o n s   R_ t r a i n   R_ v a l i d   R_ t e st   R_ a l l   A N N   6   0 . 9 1 9 1 5   0 . 3 4 4 1 4   0 . 8 8 5 0 0   0 . 8 9 8 4 9     9   0 . 9 2 2 4 2   0 . 2 5 2 2 7   0 . 9 1 2 3 6   0 . 8 8 1 8 2     20   0 . 9 1 1 4 8   0 . 1 7 8 0 4   0 . 8 8 1 7 9   0 . 8 6 9 3 5   A N N - CV   6   0 . 9 3 3 2 2   0 . 8 7 1 9 2   0 . 9 6 1 0 3   0 . 9 0 7 6 1     9   0 . 8 4 0 1 5   0 . 9 0 6 4 9   0 . 9 4 0 1 0   0 . 9 0 5 0 8     20   0 . 9 3 4 2 1   0 . 8 9 3 0 8   0 . 9 8 2 8 6   0 . 9 0 0 9 9   A N N - B S C V   6   0 . 9 5 6 6 8   0 . 9 7 5 5 2   0 . 8 5 7 2 6   0 . 9 4 0 7 9     9   0 . 9 4 5 0 6   0 . 9 7 4 7 8   0 . 8 8 6 8 4   0 . 9 3 8 5 8     20   0 . 9 8 5 7 3   0 . 9 3 3 1 7   0 . 8 3 5 3 2   0 . 9 3 9 2 8       4.   CO NCLU SI O N   T h e  m ain   o b j ec tiv e  o f   th is   p ap er   is   to   d ev elo p   b aseli n e  en er g y   m o d el  f o r   Op tio n   C   I P MV P   f o r   s m all   d ataset  av ailab le.   I n   t h is   p ap er ,   a  co m b i n atio n   o f   ANN  w it h   r esa m p li n g   tec h n iq u e s ,   B S a n d   C V  ar e  p r esen ted .   T w o   m et h o d s ,   A NN - C V   an d   A N N - B S C V  w i th   s e v er al  s tr u ctu r es  ar e  p r o p o s ed   in   t h is   p a p er .   I t  is   f o u n d   t h at   th e  p r o p o s ed   tech n iq u es  to   i n t eg r ate  A NN  w it h   r esa m p l in g   t ec h n iq u es  i m p r o v ed   th e  p r ed ictio n   p er f o r m an ce .   T h e  A NN   i n p u t  v ar iab les  co n s i s ted   o f   w o r k i n g   d a y s ,   cla s s   d a y s   a n d   C o o li n g   De g r ee   Da y s   a n d   tar g eted   o u tp u t  i s   m o n t h l y   elec tr icit y   co n s u m p tio n ,   k W h .   B ased   o n   R _ all,   R _ tr ain ,   R _ v alid   a n d   R _ test ,   a  s i g n i f ica n t   i m p r o v e m en t  i s   o b s er v ed   in   th e  co m p ar is o n   o f   t h e  r esu lts   o f   b o th   m o d els  an d   it  is   f o u n d   th at  th e  ANN - B S C V   m o d el   w it h   3 - 6 - 1   s tr u ct u r e  g av e   b etter   ac cu r ac y   b ased   o n   h i g h est   v al u e s   o f   a ll  f o u r   R s   t h a n   t h e  o t h er   s tr u ct u r es.  T h is   s tr u ct u r e  is   s el ec ted   as th e  b aseli n e  e n er g y   m o d el  to   p r e d ict  en er g y   co n s u m p tio n   f o r   Op tio n   C   I P MV P .   T h e  r esu lts   o b tain ed   f r o m   t h i s   p ap er   s h o w   t h at  t h e  C V  an d   B S  m et h o d   ca p ab le  to   tr ain   n e u r al   n et w o r k s ,   av o id   o v er f it tin g   a n d   cr ea te  m o d el  d iv er s it y   w it h   li m i ted   d ataset.   Fo r   f u t u r e  w o r k s ,   o p ti m izatio n   tech n iq u e  n ee d s   to   b e  em b ed d ed   w ith   r esa m p li n g   tech n iq u es  to   o b tain   b etter   A NN  p er f o r m an ce   ac c u r ac y   i n   d ev elo p in g   b asel in e  e n er g y   m o d el .       RE F E R E NC E S   [1 ] .   M in istry   Co o rd in a to r   o f   S trate g ic S e c to rs,  “ Na ti o n a l  En e rg y   Ba lan c e   2 0 1 4 , ”   2 0 1 4 .   [2 ] .   Eff icie n c y   V a lu a ti o n   Org a n iza ti o n ,   “ In tern a ti o n a l  P e rf o rm a n c e   M e a su re m e n t  a n d   V e rif ica ti o n   P r o to c o l  (IP M VP), ”   2 0 1 2 .   [3 ] .   O.  A k in so o to ,   D.  De   Ca n h a ,   a n d   J.  H.  C.   P re t o riu s,   “ En e rg y   sa v i n g s  re p o rti n g   a n d   u n c e rtain ty   in   M e a su re m e n t  &   V e rif ica ti o n , ”   in   Au str a la si a n   Un ive rs it ies   Po we r E n g in e e rin g   Co n fer e n c e ,   AUPE C  2 0 1 4 ,   Cu rtin   U n ive rs it y ,   Per th ,   Au stra li a ,   2 0 1 4 ,   n o .   Oc to b e r,   p p .   1 – 5.   [4 ] .   S .   M .   A ris,   N.  Y.  D a h lan ,   M .   N.  M .   Na w i,   T .   A .   Ni z a m ,   a n d   M .   Z .   T a h ir,   “ Qu a n ti fy in g   e n e rg y   sa v i n g s  f o r  r e tro f it   c e n tralize d   h v a c   s y ste m s at S e lan g o r  sta te se c re tar y   c o m p le x , ”   J .   T e k n o l. ,   v o l .   7 7 ,   n o .   5 ,   p p .   9 3 – 1 0 0 ,   2 0 1 5 .   [5 ] .   A .   P a sin i,   “ A rti f icia l  n e u ra l   n e tw o rk s f o r  s m a ll   d a tas e t  a n a l y sis,”   J .   T h o ra c .   Dis. ,   v o l.   7 ,   n o .   5 ,   p p .   9 5 3 – 9 6 0 ,   2 0 1 5 .   [6 ] .   K.  G ro li n g e r,   A .   L ’H e u re u x ,   M .   A .   M .   Ca p re tz,  a n d   L .   S e e w a ld ,   “ En e rg y   f o re c a stin g   f o r  e v e n t  v e n u e s:  Big   d a ta   a n d   p re d ictio n   a c c u ra c y , ”   En e rg y   Bu il d . ,   v o l .   1 1 2 ,   p p .   2 2 2 – 2 3 3 ,   2 0 1 6 .   [7 ] .   G .   S in g h ,   R.   K.  P a n d a ,   a n d   M .   L a m e rs,  “ M o d e li n g   o f   d a il y   ru n o f f   f ro m   a   s m a ll   a g ricu lt u ra l  w a t e rsh e d   u sin g   a rti f icia l  n e u ra l  n e tw o rk   w it h   re sa m p li n g   tec h n iq u e s,”  J .   Hy d r o in fo rm a ti c s ,   v o l.   1 7 ,   n o .   1 ,   p .   5 6 ,   2 0 1 5 .   [8 ] .   W .   N.  W .   M .   A d n a n ,   N.  Y.   Da h l a n ,   a n d   I.   M u siri n ,   “ M o d e li n g   b a se li n e   e lec tri c a l  e n e rg y   u se   o f   c h il ler  sy st e m   b y   a rti f icia l  n e u ra l  n e t w o rk , ”   in   PE CON  2 0 1 6   -   2 0 1 6   IE EE   6 t h   In t e rn a ti o n a l  C o n fer e n c e   o n   P o we r  a n d   E n e rg y ,   Co n fer e n c e   Pro c e e d in g ,   2 0 1 7 ,   p p .   5 0 0 – 5 0 5 .   [9 ] .   M .   Co sta   e t  a l. ,   “ Ne w   m u lt i - obj e c ti v e   a lg o rit h m s  f o r  n e u ra l  n e tw o rk   train in g   a p p li e d   to   g e n o m ic  c las si f ic a ti o n   d a ta,”  S tu d .   C o mp u t.   I n tell. ,   v o l.   2 0 1 ,   p p .   6 3 – 8 2 ,   2 0 0 9 .   [1 0 ] .   T .   S .   G u n a w a n ,   I.   Z.   Ya a c o b ,   a n d   M .   Ka rti w i,   “ A rti f icia l  Ne u ra l  N e tw o rk   Ba se d   F a st E d g e   De te c ti o n   A lg o rit h m   f o r  M RI  M e d ica l  Im a g e s,”  In d o n e s.  J .   El e c tr.   En g .   C o mp u t.   S c i. ,   v o l.   7 ,   n o .   1 ,   p p .   1 2 3 – 1 3 0 ,   2 0 1 7 .   [1 1 ] .   N.  T e h lah ,   P .   Ka e w p ra d it ,   a n d   I.   M .   M u jt a b a ,   “ A rti f icia l  n e u ra l  n e tw o rk   b a se d   m o d e li n g   a n d   o p ti m iza ti o n   o f   re f in e d   p a lm   o il   p ro c e ss , ”   Ne u ro c o mp u t in g ,   v o l .   2 1 6 ,   p p .   4 8 9 – 5 0 1 ,   De c .   2 0 1 6 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci     I SS N:  2502 - 4752       Mo d elin g   B a s elin e  E n erg y  Us in g   A r ti ficia l Neu r a l Net w o r k  –   A   S ma ll…  ( W a n   N a z i r a h   W a n   Md   A d n a n )   669   [1 2 ] .   V .   C.   Iv ă n e sc u ,   J.  W .   M .   Be rtra n d ,   J.  C.   F ra n so o ,   a n d   J.  P .   C.   K leijn e n ,   “ Bo o tstra p p i n g   to   so lv e   t h e   li m it e d   d a ta   p ro b lem   in   p ro d u c ti o n   c o n tro l:   a n   a p p li c a ti o n   in   b a tch   p r o c e ss   in d u stries , ”   J .   Op e r.  Res .   S o c . ,   v o l.   5 7 ,   n o .   1 ,   p p .   2 – 9 ,   2 0 0 6 .   [1 3 ] .   G .   S in g h ,   R.   K.  P a n d a ,   a n d   M .   L a m e rs,  “ Bo o tstrap - b a se d   a rti f icia l  n e u ra l  n e tw o rk   a n a l y sis  f o r  e sti m a ti o n   o f   d a il y   se d im e n t  y ield   f ro m   a   s m a ll   a g ric u lt u ra l  w a ters h e d , ”   In t .   J .   Hy d ro l.   S c i.   T e c h n o l . ,   v o l .   5 ,   n o .   4 ,   p .   5 6 ,   2 0 1 5 .   [1 4 ] .   E.   F e rra rio ,   N.  P e d r o n i ,   E.   Zi o ,   a n d   F .   L o p e z - Ca b a ll e ro ,   “ Bo o tstra p p e d   A rti f icia l  N e u ra l  Ne t w o rk s  f o r  th e   se is m ic   a n a ly sis o f   stru c tu ra l  sy ste m s,”  S tru c t.   S a f. ,   v o l.   6 7 ,   p p .   7 0 – 8 4 ,   2 0 1 7 .   [1 5 ] .   D.  Ka ra b o g a   a n d   B.   A k a y ,   “ A   c o m p a ra ti v e   stu d y   o f   A rti f ici a l  Be e   Co lo n y   a lg o rit h m , ”   Ap p l.   M a t h .   Co mp u t. ,   v o l.   2 1 4 ,   n o .   1 ,   p p .   1 0 8 – 1 3 2 ,   2 0 0 9 .   [1 6 ] .   J.  C.   Ba n sa l,   H.  S h a rm a ,   a n d   S .   S .   Ja d o n ,   “ A rti f ici a l  b e e   c o lo n y   a lg o rit h m :  a   su rv e y , ”   In t.   J .   Ad v .   In tell.   P a ra d ig . ,  v o l.   5 ,   n o .   1 /2 ,   p .   1 2 3 ,   2 0 1 3 .   [1 7 ] .   C.   Oz tu rk   a n d   D.  Ka ra b o g a ,   “ H y b rid   A rti f icia l  B e e   Co lo n y   a lg o rit h m   f o r  n e u ra l  n e tw o rk   train in g , ”   in   2 0 1 1   IEE E   Co n g re ss   o f  Evo l u ti o n a ry   Co mp u ta ti o n   ( CEC) ,   2 0 1 1 ,   p p .   8 4 – 8 8 .   [1 8 ] .   J.  M a ra is,   M .   Kle in g e ld ,   a n d   J.   V a n   Re n sb u rg ,   “ Ch a ll e n g e s  in   t h e   sc a li n g   o f   e n e rg y   sa v in g s  b a se li n e s  o n   m in e   c o m p re ss e d   a ir  s y ste m s,”  in   2 0 1 1   Pro c e e d in g s  o f  t h e   8 th   C o n fer e n c e   o n   th e   In d u stri a l  a n d   Co m me rc ia l  Us e   o f  En e rg y ,   2 0 1 1 ,   p p .   8 8 – 9 2 .     Evaluation Warning : The document was created with Spire.PDF for Python.