I nd o ne s ia n J o urna l o f   E lect rica l En g ineering   a nd   Co m p u t er   Science   Vo l.   9 ,   No .   1 J an u ar y   201 8 ,   p p .   60 ~ 63   I SS N:  2502 - 4752 DOI : 1 0 . 1 1 5 9 1 / i j ee cs . v 9 . i1 . p p 60 - 63     60       J o ur na l ho m ep a g e h ttp : //ia e s co r e. co m/jo u r n a ls /in d ex . p h p / ijeec s   An I m a g e  F usio M ethod Ba sed  O n F ra m ele Tra ns for m       P a t el  K a lpa na   Dha nji 1 Dr.   Sa ntho s h K u m a Si ng h 2   1 Re se a rc h   sc h o lar,  In f o rm a ti o n   Tec h n o l o g y ,   A M ET   Un iv e r sit y ,   Ch e n n a i   2 De p a rtme n o f   c o m p u ter sc ien c e ,   T a g o re   Co ll e g e   o f   S c ien c e   a n d   Co m m e r c e ,   M u m b a i       Art icle  I nfo     AB ST RAC T   A r ticle  his to r y:   R ec eiv ed   Au g   1 ,   2 0 1 7   R ev i s ed   No v   19 ,   2 0 1 7   A cc ep ted   Dec   1 1 ,   2 0 1 7       Im a g e   f u sio n   is  th e   p ro c e ss   o c o m b in in g   re lev a n in f o r m a ti o n   f r o m   t w o   o r   m o re   i m a g e in to   a   sin g le  ima g e .   T h e   re su lt in g   ima g e   c o n t a in m o re   in f o rm a ti o n   a c o m p a re d   to   in d iv id u a im a g e s.  In   th is  sy ste m ,   w e   a re   p ro p o sin g   a   n e w   i m a g e   f u sio n   m e th o d   b y   u sin g   a   tec h n iq u e   c a ll e d   f ra m e l e tran sf o r m .   T h is  m e th o d   c o n sists   o f   t w o   p h a se s;  F irst   is  th e   f ra m e   se p a ra ti o n   w h e re   th e   p re - p ro c e ss in g   a n d   S e l e c ti o n   o f   f ra m e f o b o th   t h e   im a g e o c c u rs   a n d   th e   se c o n d   p h a se   is  th e   F ra m e   f u sio n   th a is  d o n e   b y   in v e rs e   f ra m e let   tran sf o r m   m e th o d   is  d o n e   f ro m   w h ich   a   f u se d   o u tp u im a g e w il b e   f o rm e d   th a w il b e   c o n tain i n g   b o th   th e   i n f o rm a ti o n   o f   th e   in p u t   im a g e (CT   &   M RI   im a g e s).   K ey w o r d s :   CT   Fra m e   Gen etic  A l g o r ith m   I m ag F u s io n   MRI  I m a g es   Co p y rig h ©   2 0 1 8   In stit u te o A d v a n c e d   E n g i n e e rin g   a n d   S c ien c e   Al rig h ts re se rv e d .   C o r r e s p o nd ing   A uth o r :   P atel  Kalp an Dh an j i   R esear ch   s ch o lar ,   I n f o r m atio n   T ec h n o lo g y ,   A ME T   Un i v er s it y ,   C h en n ai .       1.   I NT RO D UCT I O N   I n   th f ield   o f   i m a g f u s io n   m ec h a n i s m   i n   m ed ical  i m a g e   p r o ce s s in g   f ield ,   m a n y   t y p o f   i m a g e   f u s io n   tec h n iq u e s   ar u s ed   in   t h p ast  y ea r s .   Am o n g   t h e m   f e w   m et h o d s   ar an al y ze d   an d   s t ated   h er e.       2.   B ACK G RO UND   An   i m a g f u s io n   s tr ate g y   b ase d   o n   d ec o m p o s itio n   o f   m u lti s ca le  g u id ed   f ilter   i s   d is c u s s ed   in   [ 1 ] .   I n   th is   m et h o d   th g u id ed   f ilter   p r o d u ce s   f ilter in g   o u tp u f r o m   t h co n te n ts   g u id an ce   i m ag a n d   it  ca n   b e   d er iv ed   f r o m   lo ca l lin ea r   m o d el.   Sh ea r let  tr a n s f o r m   a n d   s p ar s e   r ep r esen tatio n   b ased   i m ag f u s io n   tech n iq u is   d is c u s s ed   i n   [ 2 ] .   T h e   Sh ea r let  tr an s f o r m   d ec o m p o s es  t h i m a g s o u r ce   in to   lo w   a n d   h i g h   f r eq u e n c y   s u b b an d   co ef f icie n t s .   T h s p ar s r ep r esen tatio n   i s   u s ed   f o r   tr ain in g   t h co e f f icie n ts   an d   f o r   f u s in g   t h i m a g es   w it h   h ig h er   en er g ies.  T h e   f u s io n   o f   M R I   a n d   P E T   im a g es  i s   d is c u s s ed   i n   [ 3 ] .   T h p u r p o s o f   t h m eth o d   i s   to   f u s t h f u n ct io n al   in f o r m atio n   o f   P E T   im a g es  to   th s tr u ctu r al  i n f o r m atio n   o f   t h MRI  i m ag e s .   T h p r o ce s s   i s   d o n b y   u s i n g   th e   No n   Su b s a m p led   C o n to u r let  T r an s f o r m   ( NS C T )   alo n g   w i th   t h f u s io n   r u le s .     T h im a g f u s io n   m e th o d   d is cu s s ed   in   [ 4 ]   is   d o n b y   f u s i n g   th w a v elet  tr an s f o r m s   alo n g   w it h   th e   A d ap tiv e   an d   B u r t   f u s io n   al g o r ith m   o v er   m u lti - r eso lu t io n   i m a g e.   T h f u s io n   is   d o n b ased   o n   ad ap tiv e   th r es h o ld in g   o f   w a v elet  tr an s f o r m   to   ad ap tiv el y   f u s th e   s o u r ce   i m a g w it h   t h m atc h   d eg r ee   ca s e.   I m ag e   f u s io n   alg o r it h m   b ased   o n   n o n   s u b s a m p led   s h ea r let  tr a n s f o r m   a n d   co m p r ess i v s en s i n g   i s   d is c u s s ed   in   [ 5 ] .   T h NSST   is   u s ed   f o r   d ec o m p o s itio n   o f   i m ag e s   i n to   b an d   p ass   a n d   lo w   p ass   s u b b an d s .   An d   th co m p r ess iv e   s en s in g   is   u s ed   f o r   f u s i n g   t h lo w   p ass   s u b b an d   w it h   th e   i m p r o v ed   w ei g h ted   f u s io n   r u le.   A n   o u tco m o f   p er io d ized   s m all  s id g a m es  w it h   a n d   w ith o u m en tal  i m a g er y   o n   p la y i n g   ab ili t y   a m o n g   in ter co lleg iate  lev el   s o cc er   p lay er s   is   al s o   d escr ib es  th at  [ 6 ] .   I m ag S u p er   R eso lu tio n   Usi n g   W av e let  T r a n s f o r m atio n   B ased   Gen etic  A l g o r ith m   ex p lai n ed   in   [ 7 ] .   Fra m elet  tr an s f o r m s   ar u s ed   in   ap p licatio n   lik c lass i f icatio n   o f   th g lau co m in   d ig ital  f u n d u s   i m ag e s   as  in   [ 8 ] .   T h f u s io n   o f   u n i m o d al  m u lti - f ea t u r an d   o n e - d i m e n s io n al  Evaluation Warning : The document was created with Spire.PDF for Python.
    I SS N : 2502 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l.  9 ,   No .   1 J an u ar y   2 0 1 8   :   60 63   61   h id d en   m ar k o v   m o d els  f o r   lo w - r eso l u tio n   f ac e   r ec o g n itio n   as  i n   [ 9 ] .   Als o   it   is   u s ed   in   m a n y   ap p licatio n s   li k e   cr ed al  f u s io n   o f   clas s if icatio n s   f o r   n o is y   a n d   u n ce r tai n   d ata  an d   tex t u r f u s io n   f o r   b atik   m o tif   r etr iev al  s y s te m   as o n   [ 1 0 ] ,   [ 1 1 ] .       3.   T H E   P RO B L E M     T h er ar s o m p r o b lem s   th at  ar o cc u r r ed   in   th p r ev io u s   m eth o d s   lik n o is o cc u r r en ce   a n d   p ix el  lo s s es o r   o v er lap p i n g   o f   th p i x els  w h ile  f u s i n g   t h i m a g es.  So   in   o r d er   to   o v er co m th o s p r o b lem s   w ar i m p le m en t in g   n e w   i m a g f u s io n   s y s te m   a s   ex p lai n ed   b elo w .       4.   P RO P O SE SO L UT I O N   I n   th i s   s y s te m ,   an   i m ag f u s i o n   m et h o d   is   p r o p o s ed   s o lu ti o n   is   s tated   b y   u s in g   tech n i q u ca lled   f r a m ele tr a n s f o r m .   T h s y s t e m   i s   o f   t w o   p h ase s   n a m e l y ;   f r a m s ep ar atio n   a n d   f r a m e   f u s io n   i s   o cc u r r ed   w h er th f ir s p h a s is   o f   p r e - p r o ce s s i n g   a n d   s elec tio n   o f   f r a m p r o ce s s   o cc u r s   an d   th f r a m f u s io n   is   d o n e   b y   t h in v er s f r a m e let  tr an s f o r m .   T h f ir s p h a s is   d o n f o r   b o th   th in p u i m ag e s   an d   th s ec o n d   p h ase  i s   d o n f o r   t h co ef f icie n ts   o f   th b o th   th e   i m ag e s .   T h co m p l ete  f r a m e w o r k   o f   t h p r o p o s ed   s y s te m   is   as  s h o w n   in   f ig u r e   1.           Fig u r 1 .   B lo ck   d iag r a m   o f   Fr a m elet  B ased   I m a g F u s io n       4 . 1 .   F r a m Sepa ra t io n     I n   th e   p r o p o s ed   s y s te m   t h f i r s p h ase   is   t h f r a m s ep ar at io n   p r o ce s s .   I n   t h i s ,   f ir s b o th   th i n p u t   i m a g es  ar p r e - p r o ce s s ed   b y   d en o is i n g   an d   t h co lo r   co n v er s io n   m et h o d .   T h en   t h i m a g f r a m e s   ar s ep ar ated   as  lo w ,   h i g h   an d   b an d   p ass   f r eq u e n c y   co ef f icie n ts   b y   u s i n g   t h f r a m elet  tr a n s f o r m   to   th a o f   t h e   o r ig in al  i m a g es.  W ith   t h h e lp   o f   th f r a m elet  tr a n s f o r m   an y   o n o f   th f r eq u e n c y   c o - ef f icie n ca n   b s ep ar ated   an d   u s ed   f o r   f u s io n   p r o ce s s   th at  o cc u r s   i n   th n e x t   p h ase.     B ac k g r o u n d   I m ag   ( C T   I m ag e)     Fo r eg r o u n d   I m a g   ( MRI   I m ag e)   C T   I m a g e   P r e - P r o ce s s in g     MRI  I m a g   P r e - P r o ce s s in g     Fra m elet    T r an s f o r m     Fra m elet    T r an s f o r m     I n v er s Fra m elet    T r an s f o r m   Selectio n   o f   Fra m e s     W ith   M A Val u es      Fu s ed   Fo r m   o f   B ac k g r o u n d   &   Fo r eg r o u n d   ( C T   &   MRI)   I m a g es   Evaluation Warning : The document was created with Spire.PDF for Python.
I n d o n esia n   J   E lec  E n g   &   C o m p   Sci   I SS N:  2502 - 4752     A n   I ma g F u s io n   Meth o d   B a s ed   On   F r a mele t Tr a n s fo r m   ( P a tel  K a lp a n a   Dh a n ji )   62   4 . 2 .   F r a m F us io n     T h s ec o n d   p h as e   is   th e   f r a m s ep ar atio n   w h er t h f r eq u e n c y   co - e f f icien o f   an y   o f   s u b b an d s   ca n   b s elec ted   an d   u s ed   f o r   f u s i o n .   I n   th i s   m et h o d   w ar s el ec tin g   th s u b b an d   o f   h i g h er   f r eq u en c ies  f o r   th e   f u s io n   p r o ce s s .   T h is   f u s io n   o f   th s u b b an d s   ca n   b d o n b y   i n v er s f r a m ele tr an s f o r m   alg o r it h m .   T h i s   alg o r ith m   w ill   r ev er s e   th e   p r o ce s s   o f   t h f r a m elet   tr an s f o r m   b y   f u s i n g   t h t w o   d if f er e n s u b ab n d   o f   i m a g in to   s in g le  s u b b an d   co e f f ic i en i m a g e.   T h o u tp u t   w ill  b e   o b tain ed   as  t h f u s ed   f o r m   o f   s in g le  i m a g t h at   co n ta in s   b o th   th i n f o r m atio n   o f   th C T   an d   MRI  i m ag e s .       5.   RE SU L T   AND  DI SCUS SI O N   I n   th i s   s ec tio n   th r es u lt s   an d   in ter f er en ce   o f   th p r o p o s ed   s y s te m   is   d is c u s s ed .   Her th f u s io n   s y s te m   m ak e s   u s e   o f   t w o   in p u t i m a g e s   n a m e l y   MRI  a n d   C T   i m a g es.  Her e   th e   MRI  i m a g i s   co n s id er ed   as t h f o r eg r o u n d   i m a g an d   t h C T   i m a g is   co n s id er ed   as  th b ac k g r o u n d   i m ag e.   B o th   i n p u i m ag es  ar p r o ce s s ed   s ep ar atel y   an d   ar f u s ed   to g et h er   b y   u s in g   th f u s io n   alg o r it h m .   T h o u tp u i m a g o f   t h p r o p o s s y s te m   i s   as   s h o w n   f i g u r e   2.           Fig u r 2 .   R esu ltan t O u tp t I m a g es       T h o u tp u i m a g es  o f   t h p r o p o s ed   im a g s y s te m   is   s h o w n   ab o v an d   it  is   u n d er s to o d   th at  h o w   t h e   in p u t   i m a g e s   ( C T   an d   MRI)   a r f u s ed   to g et h er   to   f o r m   s i n g le   f u s ed   i m a g e.   A l s o   t h f u s ed   w ill  b h av i n g   b o th   th e   i n p u t   i m ag e   i n f o r m atio n   w i th o u a n y   d ata  lo s s .   T h p er f o r m a n ce   ev al u atio n   o f   t h o u tp u t   f u s ed   i m a g ca n   b d o n b y   ca lc u lati n g   th P ea k   Sig n al  to   No is R a tio   ( P SNR )   a n d   St r u ctu r al  S i m ilar it y   I n d ex   ( SS I M)   v al u es  f o r   th c o r r esp o n d in g   i m ag e.       6.   CO NCLU SI O N   T h p ap er   d ep icts   n e w   i m a g f u s io n   s y s te m   b y   u s in g   t h t ec h n iq u ca lled   t h f r a m elet  t r an s f o r m .   Un li k t h o th er   m et h o d s   th i s   alg o r it h m   ca n   b u s ed   f o r   f u s io n   p r o ce s s   b y   s elec ti n g   a n y   o f   t h f r eq u e n c y   co ef f icie n s u b b an d s   li k lo w,   h ig h   an d   m ed ian   s u b b an d s   w it h o u an y   d ata  lo s s   o f   b o th   th in p u i m ag e s .   E x p er i m e n ts   a n d   r elate d   o b j e ctiv m ea s u r e m en t s   s h o w   t h a th p r o p o s ed   m et h o d   ca n   o b tain   b etter   f u s io n   p er f o r m a n ce   w h en   co m p ar ed   t o   o th er   s tate - of - t h e - ar m et h o d s .         C T   I m a g e   MRI  I m a g e   Fu s ed   I m ag e   Evaluation Warning : The document was created with Spire.PDF for Python.
    I SS N : 2502 - 4752   I n d o n esia n   J   E lec  E n g   &   C o m p   Sci,   Vo l.  9 ,   No .   1 J an u ar y   2 0 1 8   :   60 63   63   RE F E R E NC E S   [1 ]   Ya n g   H,  W X T ,   HE   B G ,   Z HU ,   M .   Im a g e   f u sio n   b a se d   o n   m u lt isc a le  g u id e d   f il ters .   IE EE   J o u rn a o f   Op to e lec tro n ics .   L a se r,   2 0 1 5 ;   2 6 ( 1 ):7 0 -   1 7 6 .   [2 ]   Zh e n g   W ,   S u n   X ,   HA O D.  T h y ro id   im a g e   f u sio n   b a se d   o n   sh e a rlet  t ra n sf o r m   a n d   sp a rse   re p re se n tatio n IEE Op t o - El e c tro n ic E n g i n e e rin g .   2 0 1 5 4 2 (1 ):7 8 - 8 3 .   [3 ]   Na srin   A ,   F a te m iz a d e h   E.   M RI - P ET   i m a g e   f u sio n   b a se d   o n   NSCT   tran sf o r m   u sin g   lo c a e n e rg y   a n d   lo c a v a rian c e   F u sio n   r u les .   IEE E   J o u r n a o M e d ica E n g in e e rin g   T e c h n o l o g y .     2 0 1 3 3 8 (4 ) :2 1 1 - 2 1 9 .   [4 ]   T u rk a M ,   Am b a tk a NS.   W a v e let  b a se d   ima g e   e n h a n c e me n u si n g   a d a p ti v e   fu si o n   me t h o d o lo g y .   IEE In tern a ti o n a C o n f e re n c e   o n   El e c t rica P o w e a n d   En e rg y   S y ste m s,  2 0 1 6 58 - 6 1 .   [5 ]   Ya n g   J,  W a n g   Y,  X io n g   Y.  A   n o v e l   f u sio n   tec h n iq u e   f o CT   a n d   M RI  m e d ica i m a g e   b a se d   o n   NSS T .   IEE E   Co n tro l   a n d   De c isio n   C o n f e re n c e   ( CCDC ).   2 0 1 6 4 3 6 7 - 4 3 7 2 .   [6 ]   Ku m a A M .   A n   o u tco m e   o f   p e rio d ize d   sm a ll   sid e   g a m e w it h   a n d   w it h o u m e n tal  im a g e r y   o n   p lay in g   a b il it y   a m o n g   in terc o ll e g iate   lev e s o c c e p lay e rs .   In d ia n   J o u r n a l   o S c ien c e   a n d   T e c h n o lo g y .   2 0 1 5 8 (3 6 ).   [7 ]   P a n d a   S S ,   Je n a   G .   Ima g e   S u p e Res o l u ti o n   Us in g   W a v e let  T ra n sf o rm a ti o n   Ba se d   Ge n e ti c   Al g o rith m .   In   Co m p u tati o n a I n telli g e n c e   in   Da ta M in in g .   2 0 1 6 ;   2 :   3 5 5 - 3 6 1 .   [8 ]   G a n e sh b a b u   T R.   Co m p u ter  a id e d   d iag n o sis o f   g lau c o m a   d e tec ti o n   u sin g   d ig it a f u n d u s im a g e .   In ter n a ti o n a jo u rn a l   o a d v a n c e s in   sig n a a n d   ima g e   sc ien c e s.  2 0 1 5 1 (1 ):   1 - 11.   [9 ]   El   M e slo u h O,  El g a rra Z,   Ka rd o u c h M ,   A ll a li ,   H.  Un i m o d a M u lt i - F e a tu re   F u si o n   a n d   o n e - d im e n sio n a Hid d e n   M a rk o v   M o d e ls  f o L o w - Re so lu ti o n   F a c e   Re c o g n it io n .   I n ter n a ti o n a l   J o u rn a o El e c trica l   a n d   Co m p u ter   En g i n e e rin g   ( IJ ECE ).   2 0 1 7 7 (4 ):   1 9 1 5 - 1 9 2 2 .   [1 0 ]   Ka re m   F ,   Dh ib M ,   M a rti n   A ,   Bo u h lel  M S .   Cre d a F u si o n   o f   Clas sif ica ti o n f o No isy   a n d   Un c e rtain   Da ta.   In ter n a ti o n a J o u rn a o El e c trica a n d   C o mp u ter   En g in e e rin g   ( IJ ECE ).   2 0 1 7 ;   7 ( 2 ):  1 0 7 1 - 1 0 8 7 .   [1 1 ]   Nu rh a id a   I,   W e H,  Zen   RA ,   M a n u ru n g   R,   A r y m u rth y   AM.   T e x tu re   F u sio n   f o Ba ti k   M o ti f   Re tri e v a l   S y st e m .   In ter n a ti o n a l   J o u rn a o El e c trica a n d   C o mp u ter   En g in e e rin g .   2 0 1 6 ;   6 ( 6 ):  3 1 7 4 - 3 1 8 7 .   Evaluation Warning : The document was created with Spire.PDF for Python.