I n d on e s i an   Jo u r n al   o El e c t r i c al   En gi n e e r i n g   an d   C o m p u te r   S c i e n c e   V o l .   18 ,   N o .   3 J u n e   20 20 ,   pp .   1501 ~ 1509   IS S N :   2502 - 4752 ,   D O I :   10. 1 1591 / i j e e c s . v 1 8 .i 3 . pp 150 1 - 150 9             1501       Jo u r n al   h o m e pa ge ht t p: / / i j e e c s . i a e s c or e . c om   A u t o m a t i c   g r a y   i m a g e c o l o r i z a t i o n   b a sed   o n     l a b   c o l o r   sp a c e       N i d h al   K .   EL   A b b ad i 1 Em an   S al e e m 2   1 D e pa r t m e n t   o f   C o m put e r   S c i e nc e ,   E duc a t i o C o l l e g e ,   U n i v e r s i t y   of   K uf a ,   I r a q   2 D e pa r t m e n t   o f   C o m put e r   S c i e nc e ,   F a c u l t y   o f   C o m put e r   S c i e nc e   a n M a t he m a t i c s ,   U ni v e r s i t y   o f   K uf a ,   I r a q           1.   I N TR O D U C TI O N   Im a ge   c o l o r i z a t i o n   i s   t h e   o pe r a t i o o f   i n s e r t i n g   c o l o r s   t o   b l a c a n d   w h i t e   i m a ge s   w i t h o ut   p r i o r   kn o w l e dge   a bo ut   t h e   o r i g i n   c o l o r s   o f   o bj e c t s   i n   t h e   i m a ge .   T h e   m a i p r o b l e m   i s   n o   a c c ura t e   s o l ut i o c a n   a c hi e v e   f r o m   c o l o r i z i n g   g r a y   i m a ge ,   t hi s   i s   due   t o   t h e   po s s i b i l i t y   of   v a r i o us   c o l o r s   v a l ue s   c a n   b e   a s s i g n e t o   t h e   s a m e   l um i n a n c e   w i t d i f fe r e nt   hue   o s a t u ra t i o [ 1 ].   W e   s h o ul d   k n o w   t h a t   t h e   i m a ge   w e   r e l y   o n   i t h e   c o l o r   t r a n s f e r   p r o c e s s   i s   ri c i c o l o r s ,   s o   i t   s h o ul d   b e   a pp r o pri a t e   w i t h   g ra y   i m a ge   s c e n e s .   S uc h   p r o b l e m   s t i m u l a t e s   r e s e a r c h e r s   t o   c r e a t e   a   n o v e l   a l go r i t hm ,   w h i c de e m   t h e   di s t ri b ut i o n   o f   c o l o r s   i t h e   a i m   i m a ge   i n   a dd i t i o n   t t h e   t a r ge t   c o l o r   v a l ue   du ri n g   t h e   c o l o r i z a t i o p r o c e s s   [ 2 ].   In  m a n y   c a s e s ,   c o l o ur  m a n i pul a t i o m a y   a l s o   b e   n e c e s s a r y   t o   r e duc e   d i f fe r e n c e s   b e t w e e n   i m a ge s   f o r   f ur t h e r   p r o c e s s i n g.   W h e n   s t i t c hi n a   p a n o ra m a ,   f o r   i n s t a nc e   c o n s e c ut i v e   i m a ge s   m a y   h a v e   s l i g ht   c o l o ur   v a r i a t i o n s ,   hi n de r i n g   t h e   s t i t c hi n g   p r o c e s s .   S i m i l a rl y ,   di f f e r e n c e s   b e t w e e n   i n d i v i dua l   c a m e ra   s e n s o r s   m a y   l e a t o   s m a l l   c h a nge s   a c r o s s   a s t e r e o   pa i t ha t   c o ul a f f e c t   v i e w e r   c o m f o r t .   I n a n o t h e r   s c e n a ri o ,   w h e n   p r o c e s s i n g   v i de o   c o n t e nt ,   c o l o ur   e di t s   a p pl i e t o   o n e   f r a m e   o f t e n   n e e t o   b e   r e pl i c a t e t o   s ub s e que n t   f r a m e s   of   a   s e que n c e .   In  e a c h   o f   t h e s e   s c e n a ri o s ,   a s   w e l l   a s   i c r e a t i v e   a ppl i c a t i o n s ,   e di t i n t h e   c o l o ur   c o n t e nt   o f   i m a ge s   r e qui r e s ki l l e d   a n d   e xt e n s i v e   us e i nput ,   w h i l e   t h e   t o o l s   a v a i l a b l e   t o   n o n - e xpe rt   us e r s   t e nd  t o   n o t   o ff e r   a de qu a t e     c o n t r o l   [3 ].   T h e   m a i pu r po s e   i s   t o   m a ke   t h e   g ra y   i m a ge s   a t t ra c t i v e   by   t h e   v i e w e r   s o   t ha t   t h e   c o l o r s   a r e   a dde t o   b e   a ppr o pri a t e   t o   s c e n e s   t h e   pi c t u r e .   T h e   c o l o r i n g   p r o c e s s   w o r ks   t o   c o l o r i z e   e a c pi xe l   i t h e   g ra y   i m a ge   i a   c e r t a i c o l o r .   Co l o r i ng   m e t h o ds   c a b e   di v i de d   i nt o   t hr e e   t y e ps :   ha n d   c o l o r i n g ,   w h i s   i s   a   v e r y   e xt e n s i v e   h u m a e f f o r t   i s   r e qui r e d.   M o s t l y   i m a ge   e di t i n g   s o f t w a r e   l i ke   pa i nt   o a d o b e   P h o t o s h o a r e   us e d   f o r   c o n v e r t i n g   gra y   i m a ge   t o   c o l o r e i m a ge   b ut   t hi s   p r o c e s s   i s   v e r y   t i m e   c o n s um i ng  [4] .   T h e   s e c o n t y pe   i s   s c r i b b l e - b a s e d   c o l o r i z a t i o a n d   E xa m pl e - b a s e c o l o r i z a t i o n.   T h e   s c ri b b l e - ba s e m e t h o ds   us e i t hi s   t y pe   n e e a   h a rd   e ff o r t   by   t h e   us e r   t o   a dd  a   g r e a t   s c r i b b l e   t o   t h e   g ra y   i m a ge s .   E x a m pl e - b a s e c o l o r i z a t i o i t hi s   t y pe ,   t h e   us e i s   A r ti c l e   I n fo     A B S TR A C T     Ar t i c l e   h i s t or y :   R e c e i v e J a 10 ,   2 019   R e v i s e M a y   1,   201 9   A c c e pt e J ul   1 ,   2019       T he   c o l o r i z a t i o a i m s   t o   t r a ns f o r m   a   bl a c a nd  w hi t e   i m a g e   t o   a   c o l o r   i m a g e .   T hi s   i s   a   v e r y   ha r i s s ue   a nd  us ua l l y   r e qui r i ng   m a nua l   i nt e r v e nt i o by   t he   us e r   t o   pr o duc e   hi g h - qua l i t y   i m a g e s   f r e e   o f   a r t i f a c t .   T he   publ i c   pr o bl e m   o f   i ns e r t i n g   g r a di e nt s   c o l o r   t o   a   g r a y   i m a g e   ha s   no   a c c ur a t e   m e t ho d.   T he   pr o po s e m e t ho i s   f ul l y   a ut o m a t i c   m e t ho d.   W e   s ug g e s t e t o   us e   r e f e r e nc e   c o l o r   i m a g e   t o   he l t r a ns f e r   c o l o r s   f r o m   r e f e r e nc e   i m a g e   t o   g r a y   i m a g e .   T he   r e f e r e nc e   i m a g e   c o nv e r t e t o   L a c o l o r   s pa c e ,   w hi l e   t he   g r a y   s c a l e   i m a g e   no r m a l i z e a c c o r di ng  t o   t he   l i g ht ne s s   c ha nne l   L .   T he   g r a y   i m a g e   c o nc a t e na t e s   w i t bo t a ,     a nd  c ha nne l s   be f o r e   c o nv e r t i ng   t o   R G B   i m a g e .   T he   r e s ul t s   w e r e   pr o m i s e c o m pa r e w i t o t he r   m e t ho ds .     Ke y w or ds :   Co l o r i z a t i o n   G ra y   i m a ge   Im a ge   p r o c e s s i n g   L a b   c o l o r   s pa c e     C opy r i gh t   ©   2020   I n s t i t ut e   o f   A dv anc e E ng i ne e r i ng   and   S c i e nc e .     A l l   r i gh t s   r e s e r v e d .   Cor r e s pon di n g   Au t h or :   N i d h a l   K .   E l   A b b a di ,   D e pa rt m e n t   o f   Co m put e S c i e n c e   ,   U n i v e r s i t y   of   K uf a ,   I r a q .   E m a i l :   n i d ha l . e l a b b a di @ uo kuf a . e du. i q     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   18 ,   N o .   3 J u n e   20 2 :     1501   -   1 509   1502   r e qui r e t o   p r o v i de   a   s i m i l a r e f e r e n c e   i m a ge   s ui t a b l e   fo r   t h e   gra y   i m a ge   t a ke f r o m   t h e   s i m i l a ri t i e s   o f   i m a ge s ,   a n t h e   c o l o r   c o n v e r t   t e c hn o l o gi e s   [ 5].   S e c o n t y pe   t h e   c o l o r i n g   m e t h o de pe n ds   o pi xe l   de n s i t y   a n d   a dj a c e n t   pi xe l   s t a t s   t o   pi xe l s   t ha t   a r e   s i m i l a r   t o   t h e   s ugge s t   i m a ge   a n d   t h e n   t r a n s f o r m   t h e   c o l o r   o f   t h e   c o rr e s po n pi xe l   t o   t h e   g ra y   pi xe l ,   i t   i s   l a t e r   i m p r o v e i [6]  b y   r e l y i n o n   t h e   t e xt u r e   c ha r a c t e r i s t i c .   I o r de r   t o   h e l t h e   us e r   e a s i l y   ge t   t h e   i m a ge   t ha t   i s   s u i t a b l e   fo r   c o l o r i n g ,   t h e   w e b - s u ppl i e e x a m p l e (s ),   b y   us i n g   i m a ge s   a v a i l a b l e   o n   t h e   I n t e rn e t   [7].   R e l y i n o n   t h e   i m a ge s   a v a i l a b l e   o n   t h e   N e t   c a n   b e   pow e r f ul   f o r   t h e   l i g h t i n t e a m s   b e t w e e n   t h e   gra y   i m a ge   a nd  t h e   s ugge s t   i m a ge ,   b ut   r e qu i r e s   t ha t   t h e   i m a ge s   a v a i l a b l e   c o n t a i s i m i l a o bj e c t s   a n s c e n e s   f o r   a c c ur a t e   pe r - pi xe l   r e c o r di n g   b e t w e e n   t h e   s ugge s t   i m a ge s   a nd   t h e   t a rge t   i m a ge .   M o r e ov e r ,   i t   i s   a   g r e a t   i de a   t o   p a i nt   r e a l i s t i c   c o l o r s   w h e n e v e r   t h e   g ra y   i m a ge   c o n t a i n s   s i g n s   a n d   s c e n e s   m o r e   c o m m o n l y   t h e   c o l o r s   a r e   m o r e   a c c ur a t e l y   pa i n t e d.   F o r   e x a m p l e ,   t h e   s ky   i s   of t e n   b l ue   a n t h e   g ra s s   i s   of t e n   g r e e a nd  a l s o   h a s   m a n y   s i t ua t i o n s   s e t   t h e   g r a y   i m a ge   c a n   m a p   t o   m ul t i p l e   c o l o r e i m a ge s   [8] .   W h e r e   t h e   pr o b l e m   l i e s   i t h e   c r e a t i o n   o f   a   t hr e e - l a y e r   c o l o r   i m a ge   o f   a   g ra y   i m a ge   c o n s i s t i ng  o f   a   s i n g l e   l a y e r   w i t h o ut   pri o r   k n o w l e dge   of   t h e   o ri gi na l   c o l o r s   of   t h e   i m a ge   a n d   w i t ho ut   h u m a n   i nt e r v e n t i o n   a n t h a t   t h e   i m a ge   i s   f r e e   of   a rt i f a c t s   t ha t   a r e   c o n s i de r e a s   n o i s e .   T h e r e   a r e   a   n u m b e r   of   m e t h o ds   us e i n   t hi s   f i e l d,   s o m e   o f   w h i c w e   di s c us s   h e r e .   O k u r a   e t   a l .   [6]   T ra i ni n g   n e t w o r ks   o n   a   g r o up  of   i m a ge s   us e   t h e   m e t h o o f   c o l o r i n w h e r e   t h e y   a r e   f ul l y   t r a i n e w h e r e   di f f e r e n t   i m a ge s   i n c l ude   t h e   l a r ge s t   n um b e r   o f   s c e n e s   t h a t   c a n   b e   c o l o r e d,     T h e   i m a ge s   t ha t   a r e   t r a i n e a r e   t a ke i c l o s e o o ut do o r   pl a c e s ,   w h e t h e t h e y   a r e   d a y   o r   n i g h t ,   i n c l u di n g   pi c t u r e s   t ha t   c o n t a i l o c a l   f e a t u r e s   s uc a s   h u m a s ki n.   I r o n y   e t . a l   [7]  p r o v i de s   a a l go r i t hm   f o r   a ddi ng  c o l o r s   t o   a   pi c t u r e   b a s e o a   s t a nda rd   c o n v e r s i o m o de l   o f   c o l o r s   f r o m   a   r e f e r e n c e   pi c t u r e   t o   g r a y   pi c t u r e .     F o l l ow   t hi s   w a y   t h e   t e c hni que s   o f   l e a rn i ng  u n de r   s upe rv i s i o n   t o   c l a s s i fy   t h e   f e a t u r e   s pa c e .   T h e   m a i di s a dv a n t a ge   o f   t h i s   s c h e m e   i s   t ha t   i t   r e qui r e m a nua l   s e gm e nt a t i o n   o f   r e f e r e n c e   i m a ge ,   w hi c do e s   n o t   m a ke   i t   a ut o m a t i c .   T .   W e l s h   [ 8]  i nt r o duc e m e t h o b a s e o n   t h e   t r a n s f e r   o f   c o l o r s   f r o m   t h e   s ugge s t   i m a ge   t o   t h e   gra y s c a l e   i m a ge .   T h e   a l go ri t hm   us e t o   u n i fy   c o l o r   a n d   t e xt ur e   t r a n s f e r   a n d   t h e   a l go r i t hm   i s   s h o w n   by   t r a n s f e rr i ng  t i m e   c ha n ge s   b e t w e e n   i m a ge s ,   f o r   e xa m pl e ,   l e a v e s   w h e n   t r e e s   a r e   e m pt y .   T a i   e t   a l .   [ 9]  s ug ge s t e d   a   pub l i c   c o l o r   c o n v e r t e d   a l go ri t hm .   T h e y   us e   G a us s i a m i x t ur e   m o de l   f o p r o b a b i l i s t i c   s e gm e n t a t i o o f   bo t h   r e f e r e n c e   i m a ge   a n d   g ra y   i m a ge .   T h e   a u t h o r s   ut i l i z e   o n l y   l i ght n e s s   v a l ue   f o r   g ra y s c a l e   i m a ge   s e gm e nt a t i o n .   T h e   m a i c o n s t ra i nt   o f   t h e i a pp r o a c i s   t ha t   s o u r c e   i m a ge   n e e ds   t o   b e   s e l e c t e by   us e r .   H e t   a l .   [1 0]   p r e s e n t e d   a   m e t h o d   b a s e o s e e pi xe l   s e l e c t i o t o   s uppo rt   t h e   us e r s   i de c i di n g   w ha t   pi xe l s   a r e   hi g hl y   de s i r e d   t o   b e   c o l o r i z e f o r   a a l o f t   f i n e n e s s   c o l o r i z e i m a ge .   T h e y   b e gi n   by   di v i di n g   t h e   g ra y s c a l e   i m a ge   i nt   n o n - o ve r l a ppi ng  w i n do w s ,   a n d   t h e n,   f o r   e a c w i n do w ,   t w o   pi xe l s   t h a t   c o n v e r ge nt   t h e   a v e r a ge   l u m i na n c e   o w i n do w   a r e   c h o s e a s   t h e   s e e ds ,   T h e t h e   s e e i s   c o l o r e b y   t h e   us e r,   w h e r e   t h e y   us e o pt i m i z a t i o n   r e duc e s   t h e   v a r i a t i o n   b e t w e e n   t h e   s e e ds   a n t h e i n e i g h b o ur i n g   pi xe l s   t h a t   us e t o   de pl oy   t h e   c o l o r s   t o   t h e   o t h e r   p i xe l s .   L i   e t   a l .   [ 11]   p r o po s e m e t h o f o r   c o l o r i n g   g ra y   i m a ge s   by   us i ng  t h e   a ut o m a t i c   o ut c o m e - f i n di ng  f e a t u r e   w i t o ut c o m e s   c o m b i n e t hr o ug h   M a r ko v   R a n do m   F i e l (M R F m o de l   t o   ge t   b e t t e c o l o r i n g .   L oo ki n t h e m   s y m m e t ri c a l   o r   a s y m m e t ri c a l   i m a ge   w h e r e   v e c t o r s   a r e   us e a n t h e n   i s   de t e rm i n e   f o r   e a c l o c a l   a r e a   o f   t h e   g ra y   i m a ge   i s   s e l e c t e i o r de t o   d e s t i na t i o t h e   c o l o r i n g   r e s ul t s .   T h e r e fo r e ,   us e   a   de s c r i pt o de pe n d   o a   l um i n a n c e   de v i a t i o t o   de t e r m i n e   w h e t h e t h e   a r e a   m a y   b e   s y m m e t ri c a l   o r   a s y m m e t r i c a l .   Z ha n e t   a l .   [12]  I n s t e a o f   s e l e c t i n g   c o l o r s   i n d i v i dua l l y ,   a   c o l o r e m a i s   c r e a t e a n t h e n   a   c o l o r   p a l e t t e   i s   us e t o   c o l o r   t h e   t a rge t   i m a ge .   T h e s e   a r e   t h e   m o s t   c o m m o m e t h o ds   o f   c o l o r i n g   s i n c e   t h e   b e gi nn i n g   o f   t h e   p r o c e s s   of   c o l o r i ng  g ra y   i m a ge s ,   b ut   t h e   p r o g r e s s   o f   t h e   y e a r s   b e ga t o   de v e l o gra du a l l y ,   t h e y   ha v e   b e c o m e   t h e   us e   o f   n e u r a l   n e t w o r ks   t ha t   p r o duc e   e ff e c t i v e   r e s ul t s   b ut   n e e d   t i m e   w h e n e v e r   t h e   d a t a b a s e   t h a t   c o n t a i n s   l a r ge   da t a   a r e   b e t t e r   a n d   m o r e   t i m e ,   a n d   i s o m e   w a y s   w h i c us e   t h e   n e u r a l   n e t w o r ks   ha v e   a   s pe c i f i c   b a s e .   In  a d di t i o t o   t h e   i m a ge s   c o n t a i f e a t u r e s   s i m i l a t o   t h e   g r a y   i m a ge   h e r e   w e   t o uc h   o n   s o m e   o t h e m :   L i z uka   [13]   c o l o r i z a t i o t h e   g ra y s c a l e   i m a ge s   by   c r e a t i ng   a   r e p r e s e nt a t i o o f   t h e   t e xt u r e   d i m e n s i o n,   w h i c r e p r e s e nt s   t h e   c o l o r   i m a ge   t h a t   i s   us e d   a s   a   r e f e r e n c e   i m a ge   by   t r a i n i ng   a   s e t   o f   S V M s   o t h e   i n pu t   i m a ge   a n t h us   t ra n s f e rr i ng  t h e   c o l o r s .   C h e n g   e t   a l .   [ 1 4]  s ugge s t e a   c o m pl e t e l y   a ut o m a t i c   w a y   i n   w h i c h   m u l t i pl e   f e a t ur e s   a r e   t a ke n   t o   c o l o r i z e   v a r i o us   s po t   of   t h e   g ra y s c a l e   i m a ge   b a s e o n   a   t i n y   N N .   T h e   r e s ul t e i m a ge   i m p r o v e by   us i n g   J o i n t   b i l a t e r a l   f i l t e r .   A l   A z z e e t   a l .   [ 15]   D e e l e a rn i ng  i s   us e i c o l o r i n g,   w h e r e   a   m i l l i o n   i m a ge s   a r e   a s s o c i a t e w i t h   hi g h - l e v e l   i ndi c a t i o n s   w i t a   t a r g e t   i m a ge   t o   gui de   t h e   us e r   t o w a r ds   e f fe c t i ve   i nput   t o   pr o duc e   go o r e s ul t s .   R e c e n t l y ,   de e l e a rni n t e c hni que s   ha v e   a c h i e v e i m p r e s s i v e   r e s ul t s   i n   m o de l i n l a r ge - s c a l e   d a t a .   I m a ge   c o l o r i z a t i o n   i s   f o r m u l a t e a s   a   r e g r e s s i o n   p r o b l e m   a nd  de e n e ura l   n e t w o r ks   a r e   us e to   di r e c t l y   s o l v e   i t   [16 - 19] .   T h e s e   m e t h o ds   c a c o l o r i z e   a   n e w   ph o t o   f ul l y   a ut o m a t i c a l l y   w i t h o ut   r e qu i r i ng  a n y   s c r i b b l e s   o r   r e f e r e n c e .   U n f o r t u n a t e l y ,   n o n e   o f   t h e s e   m e t h o ds   a l l o w   m ul t i - m o da l   c o l o r i z a t i o n   [ 20].   T h e   r e s t   o f   t hi s   pa pe i n c l ude   de s c ri b i n t h e   m a t e r i a l   a n d   m e t h o ds   us e i t h e   s ugge s t e m e t h o i s e c t i o n   2.   W h i l e   S e c t i o n   di s pl a y   t h e   r e s ul t s   w h e n   i m p l e m e nt   t h e   s ugge s t e m e t h o d.   A n f i na l l y   i n   s e c t i o n   4   w e   c o n c l ude   a n d   di s c us s   t h e   r e s ul t s   a n d   t h e   c o n t r i b ut i o n   o f   t hi s   w o r k.         Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A ut om a t i c   gr ay   i m ag e s   c ol or i z at i on  bas e d   on   l ab   c ol or   s pac e   ( Ni dha l   K.   E L   A b badi )   1503   2.   M A TER I A A N D   M ETH O D S   2. 1 .       C o l o r   S p ac e   C I EX Y Z   T h e   f i r s t   t y pe s   t o   b e   us e a s   a   c hr o m a t i c   s pa c e   o f   s p e c i f i c   qua nt i t y   be t w e e n   t h e   w a v e l e n gt di s t r i b ut i o n s   o f   t h e   v i s i b l e   s pe c t r um   a n d   t h e   c o l o r s   pe r c e i v e i n   t h e   v i s i o n   o f   h u m a n   c o l o r .   T hi s   c o l o r   s pa c e   w a s   de r i v e by   c o l l e c t i n g   t h e   e xpe r i m e n t a l   r e s ul t s   o f   t h e   c o l o r   s p a c e   s pe c i f i c a t i o n s   CI E R G B ,   F i gu r e   1   s h o w s   CIE   X Y Z   c o l o r   s p a c e .           F i gu r e   1 .     CI E   X Y Z   c o l o r   m o de l         Co n v e r t i n R G B   t o   CIE X Y Z   i s   a ppl i e b y   f o r w a r t r a n s f o r m a t i o n   a s   de s c r i b e i n   t h e   f o l l o w i n [ 21 ]:       [ ] = 1 0 . 176 , 97 [ 0 . 4900           0 . 31000           0 . 20000 0 . 17697         0 . 81240           0 . 01063 0 . 00000         0 . 01000         0 . 99000 ] [ ]   (1)     W h e r e   R ,   G ,   B   a r e   t h e   r e d ,   g r e e n ,   a nd  b l ue   p i xe l s   o f   c o l o r   i m a ge .   T h e   i n v e r s   o f   t h e   CIE X Y Z :     [ ] = [ 0 . 41847               0 . 315866         0 . 082835 0 . 091169                         0 . 25243               0 . 015708 0 . 00092090       0 . 0025498         0 . 17860 ] [ ]   (2)     T h i s   c o l o r   s pa c e   c o n s i s t s   o f   a l l   t h e   c o l o r   s e n s a t i o n s   t h a t   c a n   b e   s e e n   b y   t h e   m i ddl e - s i gh t e pe o pl e ,   a n t h i s   i s   w h y   t h e   c o l o r s   a r e   r e pr e s e n t e c o n s i s t e n t l y   a s   t h e   b a s i c   c o l o r s   us e i n   r e a l   c o l o r s ,   i n   o t h e r   w o r ds   c a n n o t   b e   ge n e r a t e i n   a n y   l i gh t   s pe c t r um .     2. 1 .      C I E   L*a*b *   (C I ELA B)   A   de v e l o pe m o de l   o f   CIE X Y Z   c o l o r   s p a c e .   It   d i s pl a y s   a l l   t h e   v i s i b l e   c o l o r s   o f   t h e   hum a n   a n d   i s   b ui l di n g   t o   a c t   a s   a n   i n de pe nde nt   m o de l .   T h e   t hr e e   c o o r di na t e s   f o r   L a b   w e r e   L   r e p r e s e n t   l i g h t n e s s ,   w h e r e     (0 - r e pr e s e nt   c o l o r   b l a c k   a n d   100   r e p r e s e nt   c o l o r   w hi t e ),   t h e   ( a )   g r a di e n t   r e p r e s e nt s   a   g r e e a n d   m a ge nt a   c o l o r   (ra n ge   f r o m   - 128   t o   12 8),   w h e r e   n e ga t i v e   v a l ue s   r e p r e s e n t e d   gr e e n,   w h i l e   po s i t i v e   v a l ue s   r e p r e s e nt e m a ge n t a ,   t h e   (b g ra d i e nt   r e pr e s e nt s   b e t w e e n   b l ue   a nd  y e l l ow   (ra n g e   f r o m   - 128   t o   12 8),   w h e r e   t h e   n e g a t i v e   v a l ue s   r e p r e s e n t e t h e   b l ue   c o l o r   a n d   t h e   po s i t i v e   v a l ue s   w a s   y e l l ow   c o l o r ,   F i gu r e   s h o w s   CIE   L * a *b c o l o r   s pa c e   w i t di f f e r e n t   l i g h t n e s s   [2 2].   T h e   s i ngul a a i m   o f   t h e   L *a *b m o de l   i s   t o   e xi s t   de v i c e - a ut o n o m o us ’.   T h e   c o l o r s   m us t   n o t   b e   b a s e d   o n   t h e   de v i c e   t h e y   a r e   s h o w   o n .   It   i s   a   s i m p l y   n o t i o n a l   c o l o r   m o de l   t ha t   i s   ut i l i z e a t   t i m e s   a s   a n   a b s o l ut e   c r i t e ri o n   t o   c o m pa r e   a l l   o t h e c o l o r   m o de l s .   T h e r e   a r e   n o   s i m p l e   f o r m ul a s   t o   c o n v e r t   R G B   c o l o r   t o   L a b   c o l o r   m o de l ,   s o   w e   m us t   f i r s t   t ra n s f o r m   R G B   t o   a   de f i n i t e   c o l o r   m o de l   a s   CI E X Y Z   t h e t o   L a b   c o l o r   s pa c e .   A ppl y   t h e   CI E L a b :     = 116 ( ) 16     (3 )     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   18 ,   N o .   3 J u n e   20 2 :     1501   -   1 509   1504   = 500 ( ( 1 1 ) ( 1 1 ) )   (4 )     = 200 ( ( 1 1 ) ( 1 1 ) )   (5 )     ( ) =     { 3                                                > 3 3 2 + 4 29                                           (6 )     X1 = 1   1 ( + 16 116 + 500 )   (7 )     Y1 = 1   1 ( + 16 116 )   (8)     Z 1 = 1   1 ( + 16 116 + 200 )   (9)     ( ) = { 3                                                > 3 2   ( 4 29   )                                     (10)     W h e r e   = 6 29           F i gu r e   2 .    CI E   L *a *b c o l o r   m o de l   w h e n   l i g ht n e s s   i s   25 ,   50   a n 75       2. 2.       P r o p o s e d   M e th o d   Co l o r i z a t i o n   p r o c e s s   n e e ds   h u m a i nt e r v e n t i o n   i de t e r m i n i n g   t h e   c o l o r   i m a ge   ( r e f e r e n c e   i m a ge by   w h i c h   t h e   g ra y   i m a ge   i s   c o l o r e d,   w h e t h e r   s y m m e t r i c a l   o o t h e r w i s e .   T h e   p r o po s e a l go r i t h m   1 ,   T a b l e   1   s um m a r i z e t h e   s t e ps   f o r   c o l o r i z a t i o g r a y   i m a ge   r e l i e s   o n   C IE L A B   c o l o r   s pa c e .       T a b l e   1 .   T h e   P r o po s e A l go r i t hm     A l g o ri t h m   1 :   Co l o ri z a t i o n   o f   Im a g e   In p u t :   G ra y   i m a g e   a n d   RG i m a g e .   O u t p u t :   C o l o ri z a t i o n   o f   g ra y   i m a g e .   1.   S e l e c t   c o l o r   s o u r c e   i m a g e   t h a t   h a s   s i m i l a r   fe a t u re s   t o   t a rg e t   g ra y s c a l e   i m a g e .   2.   Co n v e rt   RG B   i m a g e   fro m   RG c o l o m o d e l   i n t o   CI E X Y Z   c o l o m o d e l .   3.   Co n v e rt   t h e   r e s u l t i n g   i m a g e   fro m   t h e   p r e v i o u s   s t e p   t o   t h e   CI E L a b   c o l o r   s p a c e .     4.   N o r m a l i z e   t h e   i n t e n s i t y   v a l u e s   f o r   g ra y   i m a g e   a c c o r d i n g   t o   L   c h a n n e l   o CI E L a b .   5.   Co n c a t e n a t e   n o r m a l i z e d   g ra y   i m a g e   w i t h   (a ,   b   c h a n n e l s )   o CI E L a b .   6.   T ra n s fo r m   i m a g e   f r o m   CI E L a b   c o l o r   m o d e l   t o   CIE X Y Z   c o l o r   m o d e l .   7.   Co n v e rt   r e s u l t   o f   s t e p   6   i n t o   RG c o l o m o d e l .   8.   Ch e c k   p e r fo r m a n c e       T h e   c o l o r   i m a ge   t h a t   i s   s e l e c t e b y   t h e   us e r   (r e f e r e n c e   i m a ge r e c o m m e n t o   h a v e   s i m i l a f e a t ur e s   t o   t h e   gr a y   i m a ge   t o   b e   c o l o r e d.   T h e   c o l o r   i m a ge   i s   c o n v e r t e i n t o   a   CIE X Y Z   c o l o r   s pa c e   t h a t   h a s   a   s pe c i f i c   r a ng e   o f   v i s i b l e   c o l o r s   a n t h e n   c o n v e r t s   t h e   r e s ul t i n i m a ge   f r o m   CIE X Y Z   c o l o r   m o de l   t o   CIE L a b   c o l o r   m o de l ,   F i g ur e   s h o w   t h e   f l o w   c h a r t   o f   pr o po s e a l go r i t h m .     Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A ut om a t i c   gr ay   i m ag e s   c ol or i z at i on  bas e d   on   l ab   c ol or   s pac e   ( Ni dha l   K.   E L   A b badi )   1505   S c i e n c e   t r ut 94%  o f   t h e   c e l l s   i n   o ur   e y e s   m a r b r i gh t n e s s .   T h a t   r e m a i ne 6%  o f   o ur   r e c e pt o r s   t r e pr e s e n t   a s   s e n s o r s   f o r   c o l o r s .   F o r   t h a t ,   w e   f o c us   i n   t h i s   pr o po s a l   o n   t h e   s i m i l a r i t y   o f   l i gh t n e s s   (L f r o m   CIE L a b   c o l o r   s pa c e   a n gr a y   i m a ge .   T h e   r a n ge   o f   t h e   gr a y   i m a ge   i n t e n s i t y   v a l ue s   n o r m a l i z e t o   b e   s i m i l a t o   t h e   r a ng e   o f   l i gh t n e s s   (L   c h a n n e l i n   t h e   CIE L a b ,   t h i s   c a n   b e   a c h i e v e b y   us i n f o r m ul a   11.      =     ( )                      (11)     W h e r e        i s   t h e   m a xi m um   v a l ue   o f     i n   L a b   c o l o r   s pa c e ,        i s   t h e   m a xi m um   v a l ue   i n   t h e   gr a y   i m a ge   ( )     i s   t h e   m i n i m u m   v a l ue   i n   gr a y   i m a ge   ( ) .   T h e   n o r m a l i z e gr a y   i m a ge   w i l l   b e   c o n c a t e n a t e   w i t h   b o t h     (a ,   b   c h a n ne l s   o f   CIE L a b   c o l o r   s pa c e ).   T h e   r e s ul t   i m a ge   c o n v e r t s   t o   CIE X Y Z   c o l o r   s pa c e ,   a n t h e n   c o n v e r t   t o   R G B   i m a ge ,   w h i c h   i s   t h e   c o l o r e i m a ge   o f   gr a y s c a l e   i m a ge .           F i gu r e   3 .   F l o w   c h a r t   f o r   p r o po s e a l go r i t h m       3.   R ES U LTS   A N D   D I S C U S S I O N   T h e   p r o po s e a l go ri t hm   i m pl e m e n t e d   w i t h   m a n y   gr a y   s c a l e   i m a ge   t o   t e s t   t h e   a l go r i t h m   pe r f o r m a n c e ,   t h e   pe r f o r m a n c e   m e a s u r e d   by   us i n g   P S N R   a n d   v i s ua l   e ff e c t .   F o a c c ura t e   m e a s u r i ng  o f   c o l o r i z a t i o pe r f o r m a n c e ,   w e   s ugge s t e t o   t e s t   g ra y   i m a ge   c o n v e r t e f r o m   k n o w n   c o l o r e i m a ge ,   t h e c o m pa r e   t h e   c o l o r i z e d   i m a ge   w i t g r o und  t r ut i m a ge   v i s ua l l y ,   a nd  by   de t e rm i ni n g   t h e   P S N R .   S e l e c t i n g   t h e   r e f e r e n c e   i m a ge   ha s   hi g h l y   i m p a c t   o n   t h e   c o l o r i z a t i o p r o c e s s .   T h e   (R G B c ol o r   hi s t o g r a m   o f   r e f e r e n c e   i m a ge   h a s   h i g h   e f f e c t   o n   t h e   c o l o r i z a t i o n   p r o c e s s ,   a n t h e   c o l o r   hi s t o gra m   f o r   t h e   c o l o r i z e i m a ge .   T h e   c o l o r   h i s t o gra m   ha s   di r e c t   e ffe c t   o t h e   r a nge   v a l ue s   o f   b o t h   (a ,   a nd   b w h i c c o n v e y   t h i s   e f fe c t   t o   t h e   c o l o r i z e i m a ge .   T h i s   s h o w e w h e n   c o l o r i z i n g   g ra y   i m a ge   a ppe a b e l ow   t h e   F i gu r e   w i t di f f e r e n t   r e f e r e n c e   i m a ge s   t h a t   h a s   di f f e r e n t     c o l o r   hi s t o g r a m   a ppe a b e l o w   t h e   F i gu r e   5.   I t   r e s ul t s   s h o w   t h e   e f fe c t   of   c o l o r s   i r e f e r e n c e   i m a ge s   o t h e   c o l o r i z e d   i m a ge s .     3. 1 .      M e as u r i n P S N R   1.   M e a S qu a r e   E rr o (M S E ) :   It   i s   r e p r e s e nt i n g   i m po r t a n t   pa ra m e t e t o   m e a s u r e   t h e   P S N R ,   a nd   t h e t h e   qua l i t y   of   t h e   c o l o r i z e i m a ge .   It s   r e p r e s e nt   b y :     = ( ( , ) ( , ) ) 2 = 1 = 1   (12)   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   18 ,   N o .   3 J u n e   20 2 :     1501   -   1 509   1506   W h e r e     i s   c o l o r i z e d   i m a ge ,     i s   g ra y   i m a ge ,   a n d   (   )   r e p r e s e n t   i m a ge   s i z e .   2.   P e a S i g na l - to - N o i s e   R a t i o   (P S N R ):   Is   a   m e a s u r e   us e t o   m e a s ur e   t h e   p r o po r t i o o f   t h e   s i m i l a r i t y   o r   e xt e nt   of   t h e   di f f e r e n c e   b e t w e e n   t w o   i m a ge s   o f   t h e   s a m e   s t r uc t u r e   a s   s h o w n   i n   T a b l e   1 .   It s   de t e rm i n e d   by :      =   10   10   (   2 /   )   (1 3 )     T h e   P S N R   i n di c a t e   h o w   t h e   c o l o r i z e d   i m a ge   s i m i l a t o   t h e   g r o u n d   t r ut i m a ge   a p pe a b e l ow   t h e     F i gu r e   6 .   W e   c o n c l ude   t h a t   t h e   b e s t   s ugge s t ed   i m a ge   i s   t h e   i m a ge   c o n s i s t   o f   l i ke   o b j e c t s   a s   t h e   t a r ge t   i m a ge   a s   s h o w s   i F i gu r e   6   i m a ge   4 .           F i gu r e   4 . G ro u n t r u t h   i m a ge   o t h e   l e f t   a nd  t h e   g ra y   i m a ge   o n   t h e   r i g ht           F i gu r e   5 .   E f fe c t   of   r e f e r e n c e   i m a ge   o n   c o l o r i z a t i o p r o c e s s       T h e   l a s t   t e s t   i s   c o l o r i z i ng  d i f fe r e nt   i m a ge s   w i t d i f fe r e nt   c a t e go r i e s   a s   a ppe a r   i n   t h e   F i g u r e   7,   w h i c s h o w   t h e   r o b us t   o f   s ugge s t e m e t h o f o c o l o r i z i ng   a n y   i m a ge .   F i gu r e   7   s h o w e t h a t   r e f e r e n c e   i m a ge s   w i t h   a l m o s t   s i m i l a o b j e c t s   w i t g ra y   i m a ge   gi v e s   b e t t e r e s ul t s   t ha o t h e r s .   A l s o   c l e a w h e t h e   c o l o h i s t o g r a m     (o r   c o l o r s   c o n t a i n s   i n   ge n e r a l i n   t h e   r e f e r e n c e   i m a ge   ha s   n o t i c e di f fe r e n t   w i t h   c o l o r s   i n   g ra y   i m a ge ,   t h e n   t h e   r e s ul t   w i l l   b e   w i t l e s s   qu a l i t y .     T h e   p r o po s e a l go r i t hm   c o m pa r e w i t o t h e a l go ri t hm   s ugge s t e by   C h e ng   e t   a l .   t h e   r e s ul t   of  a ppl y i n g   t hi s   a l go r i t h m   o s o m e   o f   i m a ge s   s h o w e i n   F i g ur e   8,   t h e   s a m e   i m a ge s   c o l o r i z e b y   pr o po s e d   a l go ri t hm   s h o w e i n   F i gu r e   7 .   I t   i s   c l e a t ha t   t h e   r e s ul t s   a r e   a l m o s t   t h e   s a m e .   A l s o   t h e   p r o po s e a l go r i t hm   i s   c o m pa r e w i t a l go ri t hm   s u gge s t e by   A t t e a   e t   a l .   a nd  t h e   r e s ul t s   s h o w e i F i gu r e   9.     Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A ut om a t i c   gr ay   i m ag e s   c ol or i z at i on  bas e d   on   l ab   c ol or   s pac e   ( Ni dha l   K.   E L   A b badi )   1507       F i gu r e   6 .   t h e   P S N R   f o r   di f f e r e n t   i m a ge   c o l o r i z e by   pr o po s e m e t h o d           F i gu r e   7 .   C o l o ri z i n g   i m a ge s   f r o m   di f f e r e n t   c a t e go ri e s             30dB   [14]   2 3dB   [14]   29dB   [14]     F i gu r e   8.   C o l o ri z i n g   i m a ge s   for   C h e n g   e t   a l   [14 ]   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i ,   V o l .   18 ,   N o .   3 J u n e   20 2 :     1501   -   1 509   1508           R e f .   i m a ge   G ra y   i m a ge   A t t e a   e t   a l .   [ 17]   O ur  m e t h o d     F i gu r e   9 .   Co m p a r i s o r e s ul t s   b e t w e e n   t h e   p r o po s e c o l o r i z a t i o n   a n d   A t t e a   e t   a l   [2 3]           F i gu r e   10 .   E x a m p l e   r e s ul t s   f o r   t h e   c o l o ur i z a t i o n   m e t h o ds       4.   C O N C LU S I O N S   W e   pr e s e nt e f ul l y   a ut o m a t i c   m e t h o f o c o l o r i z i ng   g r a y s c a l e   i m a ge s   de pe n d   o L a b   c o l o s pa c e ,   a nd  r e f e r e n c e   i m a ge .   T hi s   m e t h o n o rm a l i z e g r a y   i m a ge   v a l ue s   a c c o r di n g   t o   L i g h t n e s s   o f   L a b   m o de l   f o r   c o l o r   i m a ge .   T h e   p r o po s e m e t h o gi v e s   p r o m i s e r e s ul t s   (v i s ua l l y   a n d   by   de t e r m i n e   P S N R ),   a l s o   w e   ge t   go od   r e s ul t s   w h e c o m pa r e t o   t h e   o t h e r   w o r ks .   T h e   c o rn e r s t o n e   of   t hi s   m e t h o i s   t h e   n e e f o r   a   r e f e r e n c e   i m a ge   c o n t a i ni n g   t h e   s a m e   c o nt e nt   i t h e   g r a y   i m a ge   w i t h   s i m i l a c o l o r   h i s t o g r a m ,   i t   i s   c l e a t ha t   t h e   c o l o r i z a t i o n   o gra y   i m a ge   de pe n ds   o n   t h e   c o l o r s   i n   r e f e r e n c e   i m a ge   a s   i n   F i gur e   6 ,   a l s o   s e l e c t i n r e f e r e n c e   i m a ge   w i t s a m e   c a t e go r i e s   a s   i g r a y   i m a ge   gi v e s   e n ha n c e   t h e   c o l o r i z i ng  p r o c e s s   a s   i n   F i gu r e   7.   T h e   p r o po s e m e t h o i s   f a s t   t o   i m pl e m e n t   a n d   v e r y   s i m pl e .   W e   s ugge s t   f o r   f ut u r e   w or ks   t o   f i n d   a l go r i t hm   w hi c de t e r m i n e   s u i t a b l e   r e f e r e n c e   i m a ge   f r o m   m a n y   s ugge s t e i m a ge s .       R EF ER EN C ES   [ 1]   A bdul - W a ha S a m i   I br a hi m ,   a nd  H i nd  J um a a   S a r t e p,   G r a y s c a l e   i m a g e   c o l o r i ng   by   us i ng   Y C bC r   a nd  H S V   c o l o r   s pa c e s ,   I nt e r nat i onal   J our nal   of   M ode r T r e nds   i E ngi ne e r i ng  and  R e s e ar c h ,   V o l um e   04,   I s s ue   4,   pa g e s   130 - 136 ,   2017.   D O I : 10. 2 1884/ I J M T E R . 2017.   4130. X D 635.   [ 2]   S o u - Y o ung ,   J i H o - J i C ho i ,   Y u - W i ng   T a i ,   A   R a ndo m i z e A l g o r i t hm   f o r   N a t ur a l   O bj e c t   C o l o r i z a t i o n,   E ur ogr aphi c s ,   V o l um e   33  ( 2014) ,   N um be r   2,   2014.   D O I :   10. 1111/ c g f . 12294.   [ 3]   [ 3]   H .   S he i kh  F a r i dul 1,   T .   P o ul i ,   C .   C ha m a r e t ,   J .   S t a ud e r ,   E .   R e i nha r d,   D .   K uz o v ki n,   A .   T r e m e a u,   C o l o ur   M a ppi ng :   A   R e v i e w   o f   R e c e nt   M e t ho d s ,   E xt e ns i o ns   a nd  A ppl i c a t i o ns ,   C om put e r   G r aphi c s   F or um ,   V o l um e   35,   num be r   1,   pp .   59 88,   2016.   [ 4]   [ 4]   U pa s a na   B i s ht ,   T us ha r   P a t na i k,   O v e r v i e w   o f   A ut o m a t i c   I m a g e   C o l o r i z a t i o n   S c he m e s ,   I nt e r nat i onal   J our nal   o f   A dv anc e E ngi ne e r i ng  and  G l obal   T e c hnol ogy ,   V o l - 03,     I s s ue - 10,   pp.   1283  - 1287,   N o v e m be r   2015.   [5 ]   A .   H e r t z m a nn ,   C .   E .   J a c o bs ,   N .   O l i v e r ,   B .   C u r l e s s ,   a nd   D .   H .   S a l e s i n.   I m age   a nal og i e s ,   I P r o c e e di ng s   o f   t he   28t A nnua l   C o nf e r e nc e   o C o m put e r   G r a ph i c s   a nd   I nt e r a c t i v e   T e c hn i q ue s ,   S I G G R A P H   01,   pa g e s   32 7   340 ,   200 1.   Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752       A ut om a t i c   gr ay   i m ag e s   c ol or i z at i on  bas e d   on   l ab   c ol or   s pac e   ( Ni dha l   K.   E L   A b badi )   1509   [6 ]   O kur a ,   F um i o ,   e t   a l .   " U ni f y i ng   c o l o r   a nd  t e xt u r e   t r a ns f e r   f o r   pr e d i c t i v e   a ppe a r a nc e   m a n i pu l a t i o n,   C om pu t e r   G r aph i c s   F or um .   V o l .   3 4.   N o .   4.   20 15 .   [7 ]   R .   I r o n y ,   D .   C o he n - O r ,   a n D .   L i s c h i ns k i .   C o l o r i z a t i o by   e xa m p l e   I E ur o g r a ph i c s   S y m p   o R e nde r i ng ,   v o l um e   2.   C i t e s e e r ,   20 05 .   [8 ]   T .   W e l s h,   M .   A s h i khm i n,   a nd   K .   M u e l l e r ,   T r a ns f e r r i ng   c o l o r   t o   g r a y s c a l e   i m a g e ,   i n   A C M   T r ans ac t i o ns   on   G r aph i c s   ( T O G ) ,   v o l .   21 ,   no .   3 ,   pp .   277 - 280 .   A C M ,   200 2.   [9 ]   T a i ,   Y . ,   J i a ,   J . ,   T a ng ,   C . ,   L oc a l   C o l or   T r an s f e r   v i a   P r oba bi l i s t i c   Se gm e nt a t i on   by   E x pe c t at i on   M a x i m i z a t i on ,   C o m put e r   S o c i e t y   C o nf e r e nc e   o C o m put e r   V i s i o a nd   P a t t e r n   R e c o g ni t i o n,   I E E E ,   V o l   1   pp .   197 - 202 , 2 0 05 .   [ 10 ]   H u,   M i n ,   B o   O u,   a nd   Y i   X i a o ,   e f f i c i e nt   i m a g e   c o l o r i z a t i o n   b a s e d   o s e e pi x e l   s e l e c t i o n ,   M ul t i m e d i a   T oo l s   a nd  A ppl i c a t i ons ,   V o l .   76 ,   I s s ue   2 2,   pp .   235 67 - 2358 8,     201 7,   D O I :   10. 1 0 07/ s 11 042 - 016 - 41 12 - 9 .   [ 11]   L i ,   B o ,   L a i ,   Y .   &   P a u l   L .   R o s i n .   E x a m pl e - ba s e i m a g e   c o l o r i z a t i o v i a   a u t o m a t i c   f e a t ur e   s e l e c t i o n   a nd   f us i o n,   N e ur oc om pu t i ng   266:   687 - 698 ,   201 7   [ 12 ]   Z ha ng ,   R i c ha r d ,   e t   a l . ,   " R e a l - t i m e   u s e r - g ui d e d   i m a g e   c o l o r i z a t i o w i t h   l e a r ne d   d e e p   pr i o r s , "   ar X i v   p r e pr i nt   ar X i v : 1705. 02 999   ( 2017 ) .     [ 13 ]   I i z uka ,   S a t o s hi ,   E dg a r   S i m o - S e r r a ,   a nd   H i r o s h i   I s hi ka w a . ,   " L e t   t he r e   be   c o l o r   !   :   j o i n t   e nd - to - e nd   l e a r n i ng   o f   g l o ba l   a nd  l o c a l   i m a g e   p r i o r s   f o r   a ut o m a t i c   i m a g e   c o l o r i z a t i o w i t h   s i m ul t a ne o us   c l a s s i f i c a t i o n, "   A C M   T r an s ac t i on s   o G r aph i c s   ( T O G )   35 . 4   ( 2 016 ) :   110.     [ 14 ]   C he ng ,   Z e z ho u,   Q i ng xi o ng   Y a ng ,   a n d   B i S he ng . ,   " D e e c o l or i z at i on ,"   P r o c e e di ng s   o f   t he   I E E E   I nt e r n a t i o na l   C o nf e r e nc e   o C o m put e r   V i s i o n.   20 15 .   [ 15 ]   A l   A z z e h,   J a m i l ,   e t   a l . ,   " C r e a t i ng   a   C o l o r   M a p   t o   be   us e t o   C o nv e r t   a   G r a y   I m a g e   t o   C o l o r   I m a g e ,   I nt e r nat i on al   J our nal   o f   C om pu t e r   A p pl i c a t i on s   ( 097 5 88 87)   1 53   ( 2 016 ) .     [ 16]   D e s hp a nde ,   A . ,   R o c k,   J . ,   F o r s y t h,   D . ,   L e ar ni ng   l ar ge - s c a l e   au t om a t i c   i m age   c o l o r i z at i on ,”   I P r o c .   I C C V ,   567   575 ,   2015 .   [ 17]   L a r s s o n,   G . ,   M a i r e ,   M . ,   S h a kh na r o v i c h,   G . ,   L e a r ni ng   r e p r e s e nt a t i o ns   f o r   a ut o m a t i c   c o l o r i z a t i o n” ,   I P r o c .   E C C V ,   577 5 93,   2 016   [ 18]   Z ha ng ,   R . ,   I s o l a ,   P . ,   E f r o s ,   A .   A .   2 016 .   C o l or f u l   i m age   c ol or i z a t i o n,   I P r o c .   E C C V ,   6 49 6 66.     [ 19]   I s o l a ,   P . ,   Z hu,   J . - Y . ,   Z ho u,   T . ,   a nd   E f r o s ,   A .   A . ,   I m age - to - i m age   t r ans l at i on   w i t h   c ond i t i on al   a dv e r s ar i al   ne t w or k s ,   I P r o c .   C V P R ,   2 017 .   [ 20]   C ha r p i a t ,   G . ,   H o f m a nn,   M . ,   S c ho l ko pf ,   B . ,   A ut o m a t i c   i m a g e   c o l o r i z a t i o v i a   m ul t i m o da l   pr e di c t i o ns ,   1 26   139 ,   2008 .   [ 21 ]   S m i t h   T ho m a s ;   G u i l d,   J o hn,   " T he   C . I . E .   c o l o r i m e t r i c   s t a nd a r d s   a n t h e i r   us e , "   T r ans ac t i ons   of   t he   O pt i c a l   S oc i e t y V o l .   3 3,   N o .   3 ,   D O I :   10. 1088 / 1 475 - 487 8/ 3 3/ 3 / 3 01   ( 19 31 3 2) .   [ 22 ]   M a r g ul i s ,   D a n,   P ho t o s ho L a b   C o l o r :   T he   C a ny o C o nundr u m   a n O t h e r   A dv e nt ur e s   i n   t h e   M o s t   P o w e r f ul   C o l o r s pa c e m ,   B e r ke l e y ,   C a l i f . :   L o ndo n :   P e a c hpi t ;   P e a r s o E duc a t i o n.   20 06.   [ 23 ]   A t t e a ,   B a r a ' A .   A l i ,   S a r a b   M a j e e d   H a m e e d ,   a nd   A m i nna   D a hi m   A bo ud.   " C ont e n t - b as e G r ay s c a l e   I m age   C ol or i z at i on , "   P r o c .   C S I T ,   20 06 .     [ 24]   K uz ov ki D . ,   C h a m a r e t   C . ,   P o ul i   T . ,   D e s c r i p t or - ba s e i m a ge   c o l or i z a t i on   and   r e gu l ar i z a t i on .   I C om pu t at i o nal   C ol or   I m ag i ng ,   5 t I nt e r na t i o na l   W o r ks ho p,   C C I W   2015,   S a i n t   E t i e nne ,   F r a nc e ,   P r o c e e d i ng s ,   pp .   59   68 ,   201 5.   [ 25]   G upt a   R . K . ,   C h i a   A . Y . - S. ,   R a j a D . ,   N g   E . S . ,   Z h i y o ng   H . :   I m age   c o l or i z at i on   u s i n s i m i l a r   i m age s ,”   I P r o c e e di ng s   o f   t he   2 0t A C M   I nt e r na t i o na l   C o nf e r e nc e   o M u l t i m e di a ,   A C M ,   p p.   369 378 ,   201 2.   [ 26]   C ha r p i a t   G . ,   H o f m a nn  M . ,   S c O l ko pf   B . ,   A ut om at i c   i m age   c o l o r i z a t i on   v i a   m ul t i m oda l   pr e di c t i on s ,”   I P r o c e e di ng s   o f   t he   1 0t h   E ur o pe a n   C o nf e r e nc e   o C o m pu t e r   V i s i o n:   P a r t   I I I   ( E C C V   08)   ( B e r l i n ,   H e i de l b e r g ) ,   S pr i ng e r - V e r l a g ,   pp.   12 6 13 9,   20 08.   [ 27]   W e l s h t . ,   A s hi khm i nm . ,   M ue l l e r k . ,   T r a ns f e r r i ng   c o l o r   t o   g r e y   s c a l e   i m a g e s ,   A C M   T r a ns a c t i on s on   G r a ph i c s   21 ,   3,   pp.   27 7 28 0,   20 02.       Evaluation Warning : The document was created with Spire.PDF for Python.