T E L KO MNIK A , V ol . 1 7 No. 6 Dec e mb er   201 9 , p p. 3 04 4 ~ 30 49   IS S N: 1 69 3 - 6 93 0 accr ed ited   F irst  Gr ad e b y K em en r istekdikti,  Decr ee  No: 2 1/E/ K P T /20 18   DOI:   10.12928/TE LK OM N IK A .v 1 7 i 6 . 12292      30 44       Rec ei v ed   J an u ary  13 20 1 9 ; Rev i s ed   A pr i l   10 20 1 9 A c c ep ted   M ay  9 20 1 9   Modif i ed Ci teSc ore  me tric f or re du ci ng     th e e ff ec t o f self - cita tio ns       Hilar y I . O k agb u e * 1 , S h eil a A.  Bi sho p 2 , P elum E . O g u n t u n d e 3 , P atien c e I Ad amu 4 ,   Ab iod u n  A. O p anu g a 5 E l vir   M.  Akhm etsh in 6   1 ,2 ,3 ,4 ,5 De p a rt m e n o M a t h e m a ti c s Cov e n a n Uni v e r s i t y O ta ,  Ni g e ri a   6 Dep a rt m e n o E c o n o m i c s   a n d  M a n a g e m e n t Ka z a n   Fe d e ra l  Un i v e rs i ty ,  Ru s s i a   Fe d e ra ti o n   * Corre s p o n d i n g  a u th o r,   e - m a i l :  h i l a r y .o k a g b u e @ c o v e n a n tu n i v e rs i ty . e d u . n g       Ab strac t   El s e v i e B.V.   l a u n c h e d   a   s c h o l a rl y   m e tri c   c a l l e d   Cit e Sc o r e   (CS)  o n   Dec e m b e 8 2 0 1 6 .   Up  ti l l   th e n t h e   j o u rn a l   i m p a c fa c to r   (J IF o wne d   b y   Cla ri v a t e   An a l y ti c s   (Th o m s o n   Re u te r s was   th e   o n l y   tr u s te d   m e tri c   fo r   j o u rn a l   e v a l u a ti o n As   n o t e d   b y   T e i x e i ra   d a   S i l v a   M e m o n   (2 0 1 7 ),  CS  o ff e rs   s o m e   o b s e r v e d   a d v a n ta g e s   o v e J I F.   Th e   p o t e n ti a l s   o Cit e Sc o r e   a s   a   v i a b l e   m e tri c   a r e   s ti l l   e m e rg i n g T h e   p a p e b ri e f l y   i n tro d u c e s   a   v a ri a n o t h e   C i t e Sc o re   th a c a n   b e   u s e d   i n   q u a n ti fy i n g   th e   i m p a c o f   re s e a rc h e r s   a n d   th e i r   i n s t i tu t i o n s Th e   u l ti m a te  a i m   i s   to   r e d u c e   t h e   n u m e ri c a l   e ff e c o s e l f - c i ta t i o n s   (SC)  i n   a c a d e m i c   p u b l i s h i n g .   Th e   re d u c ti o n   i s   d e s i g n e d   t o   d i s c o u ra g e   SC  b u n o d i m i n i s h i n g   i t.   Th e   re a s o n s   f o th e   a d o p te d   m e th o d o l o g y   a re   d i s c u s s e d   e x te n s i v e l y Th e   p ro p o s e d   m o d i fi e d   Cit e S c o re   m e tr i c   i s   s i m p l e tr a n s p a re n t   a n d   c o n s tru c te d   to   e n s u re   i n te g ri ty   i n   a c a d e m i c   p u b l i c a t i o n Th e   re s u l s h o we d   th a th e   p r o p o s e d   m o d i f i e d   Cit e Sc o r e   i s   a   b e tt e r   o p t i o n   th a n   th e   tra d i t i o n a l   Ci te Sc o re   a n d   h e n c e ,   c a n   b e   a p p l i e d   i n   i m p a c t   de te rm i n a ti o n t h e   r a n k i n g   o f   a u th o r s   a n d   th e i i n s ti tu t i o n s ,   a n d   e v a l u a t i o n   o f   s c i e n ti s ts   fo a   g ra n t   a war d .   Th e   a p p ro a c h   u s e d   i n   th i s   p a p e i s   e n ti r e l y   n e w   i n   two   wa y s ;   fi r s t,   a   m e tri c   s i m i l a r   to   j o u rn a l   ra n k i n g   i s   p ro p o s e d   f o ra n k i n g   a u t h o rs   a n d   th e i i n s t i tu ti o n s   a n d   s e c o n d l y d i s p ro p o rti o n a t e   s c o re s   a re   a ward e d   t o   d i ff e r e n s o u r c e s   o f   c i ta ti o n s   t o   re d u c e   p e r c e i v e d   d i s h o n e s t y   i n   a c a d e m i c   p u b l i c a t i o n s I n   c o n c l u s i o n t h i s   re s e a r c h   i s   o n e   o f   v e r y   fe t o   re p o rt  t h e   e f fe c o SC  o n   Cit e Sc o re Hit h e r to t h e   e f fe c t   o SC  h a s   a l way s   b e e n   o n  t h e  j o u rn a l  i m p a c f a c to r (I F).       Key w ords Cit e S c o r e c l a ri v a t e  a n a l y t i c s i m p a c f a c t o r,  Sc o p u s s e l f - c i ta ti o n     Copy righ ©  2 0 1 9  Uni v e rsi t a s  Ahm a D a hl a n.  All  rig ht s  r e s e rve d .       1.   Int r o d u ctio n   Ci te S c ore   an d   j ou r n al   i m p ac fac tor  ( J IF)   i s   a   v i ab l e   me tr i c   th at  c a prov i de   tr us ted   ev al u ati on s T ei x e i r D S i l v [ 1]  l a me nt ed   tha t h J IF  d oe s   no t   tr ul y   r efl e c the   pres ti ge i mp ac t,  an r el ev a nc of  r e s ea r c he r s   an s c ho l arly   j ou r na l s T h au t ho r   no t ed   th at  th d eta i l ed   J IF  i s   s ub s c r i p ti o n - ba s e a nd   s o me   of   th an a l y s i s   i s   s hroude i n   s ec r ec y T he   weak ne s s es   of   the   J IF  wer al s ec ho ed   i [2]   as   i s s ue s   bo the r i ng   o r el i a bi l i ty   an ac c urac y   wer ad d ed   to   the  gro wi ng   l i s t o f d i s c on te nt  wi th  J IF a mo n g s c ho l ars   A   c aref ul   l o ok   at  t he   W e of  S c i en c e   s ho we t ha m os i n de x ed   j ou r na l s   w i th  i mp ac fac tors   are  fr o E urop a nd   Nor t A me r i c a.  E v en   t he   i ntrod uc ti o of   th E m ergi n S ou r c es   Ci tat i o Ind ex   ( E S C I)   ha s   no s tr uc k   the   ba l a nc be t ween   t he   e as an wes t.  H owev er,  S c o pu s   E l s ev i er  i s   a l m os r ep r es e n ted   i ev ery   pa r o th wo r l d.  C i te S c ore  ha s   s om u ni q ue   f ea t ures   s uc h a s  th fol l ow i n g:   -   3 - y ea r  pu b l i c a ti o n w i nd ow.   -   Cons i s te nt  n um era tor v ers us  de n om i na t or.   -   Doc um e nt  i nd ex ati on  n ot  l i mi te d t o  arti c l es  an d rev i ew s .   -   Data  s o urc es  no l i mi t ed  t j ou r na l s  o nl y .   -   La r ge r  c ov era ge  t ha n J IF.   -   T he  an al y s i s   i s  free (s ee   S c i V a l ) .   -   Upda t ed   mo n thl y .   -   Not i nfl ue nc e d b y  e di t oria l   po l i c i es   S ee   the   fol l o wi n g f or  de t ai l ed  ex p l an ati on s : [ 3 - 9].     A tay ero  et  al [1 0],   pres e n ted   da t tha c om pa r ed   th s i tua t i o of  op en   ac c es s   an s ub s c r i pti o n - ba s e j ou r na l s T he   pe r c e i v ed   i mp ac of  j ou r na l s   ha s   be en   c l as s i fi e d   i nto   qu art i l es   for  i mp ac an r e l i a bi l i ty   a na l y s i s   [11 ] T he   au tho r s   aff i r m ed   th at  CS   i s   v i a bl al ter na t i v to     Evaluation Warning : The document was created with Spire.PDF for Python.
T E L KO MNIK   IS S N: 1 69 3 - 6 93 0     Mo d i fi ed  C i te S c ore  me tr i c  f or r ed uc i ng  t he  e ffe c t o f s el f - c i tat i on s   ( Hi l ary  I.  O k ag bu e )   3045   the   J IF.  R ec en t l y O k ag b ue   et  a l [ 12 - 1 4]  i nv es ti ga te t he   e di t oria l   b oa r c om p os i t i on   an C S   of   Hi nd awi   an D ov j ou r na l s   i nd ex ed   i n   S c op us   an P ub Me d.  B es i de s t he   C S   m etri c   s ee ms   to   be   v ery   ef fi c i en i n   th i mp ac an al y s i s   of   j ou r n al s   w i t hi n   the   s am s ub j ec fi e l d   [ 15 ].  T he   i s s ue     of  w he th er  C S   i s   m ore  tr a ns pa r en t   or  be tt er  th an   al l   the   ex i s t i ng   m etri c s   w i l l   c on ti nu e   to   b   a s ou r c e o f s c ho l ar l y  de ba t e [ 8,  16 ].      T hi s   pa p er  propos es   mo d i fi ed   v ers i on   of  C S   tha i s   de s i gn ed   to  m ea s ure  th i m pa c of  r es ea r c he r s   ( au tho r s )   an d   the i r   i ns t i tut i o ns   ( ma i n l y   un i v ers i t i es ) T hi s   wi l l   s er v as   v i ab l al tern ati v t c i tat i on   c ou nt s h - i n de x ,   10   h - i nd ex E uc l i d ea n   i nd ex a nd   ot he r s T he   mo t i v ati on   be h i nd   th i s   pa p er  i s   to  fi nd   r o bu s an fl ex i bl CS   me tr i c   tha d i s c ou r ag es   mu l ti pl e     s el f - c i tat i o ns   a nd   to   r ed uc e   the   e ffe c ts   of  i nf l at ed   c i ta ti on s   fr o c o nfe r e nc pa p ers bo ok s an d   bo ok   c h ap ters T hi s   ap pro ac i s   en t i r el y   ne w   i t wo   way s f i r s t,  a   me tr i c   s i mi l ar  to   j ou r na l   r an k i ng   i s   pr op os e for   r a nk i ng   au t ho r s   a nd   t he i r   i n s ti tut i on s   an d   s ec on d l y d i s proporti on at s c ores   are  awarded   to  di ff erent  s ou r c es   of  c i tat i o ns   ba s ed   on   i mp ac t.  T hi s   i s   de pa r t ure  fr om   the  c urr en t  s i tu ati o n w he r the  C S  c an   be   ma n i p ul ate d  by  ta r ge t  s el f - c i t ati on s .       2.      Res ea r ch M eth o d   2.1 .   C it eS core   Ci te S c ore  i s   m ea s ure  of  the   me an   or  av erag c i tat i on s   r ec ei v e p er  do c um en pu b l i s he i s eri al .   It  i s   on of  t he   three   ma i n   i nd i c es   us ed   by   S c op us   to   r a nk   pu b l i c a ti o s ou r c es   of  i nd ex e s c ho l a r l y   ou tpu ts   or  ou t l ets In  t h i s   s ou r c r an k i ng   m eth o d,   hi gh er  v al ue s   i nd i c ate   hi gh   i mp ac t,  r el ev an c an pres t i ge T he   m eth o do l og y   for  c a l c ul ati ng   the   C i te S c ore  me tr i c s   i s   pres e nte i n   ( 1 )   an d   F i g ure  r es p ec ti v e l y Ci te S c ore  for  y e ar  N   ( Ci t e S c ore  N )   s um s   the   c i tat i o ns   r ec ei v e i n   y e ar  N   to   do c u me n ts   p ub l i s h ed   i n   y ea r s   N - 1,   N - 2 an d   N - 3 a nd   d i v i de s   thi s  by  t he  n um b er of  do c u me nts  p ub l i s h ed   i n t he  t hre e c on s ec ut i v e y ea r s   N - 1, N - 2,  an d  N - 3.           F i gu r 1.  C i te S c ore c o mp ut ati o n a s  p ub l i s he d b y   E l s ev i er,  B .V .  an d i mp l em en t ed   i   the   S c op us   d ata ba s e          =                ( 3 ) ( 1 )    2016 =             2016    2013 2015   ( 1)     A c c ordi n to  S c op us the   3 - y ea r   Ci teS c ore   t i m wi n do was   c ho s en   as   the   be s fi for   al l   s u bj ec areas Res e arc s ho ws   tha 3 - y ea r   pu bl i c ati on   wi nd ow  i s   l on e no ug to  c a ptu r e   the   c i ta ti o pe ak   of  the   m aj orit y   of  di s c i pl i ne s A c c ordi n to  S c o pu s 2 - y ea r   i s   too   s ho r a nd     5 - y ea r  i s  to o l on g.       2 .2 .   P r o p o se d  Mod if ied C it eS core   T he   s am e qu at i o of  Ci t e S c ore  i s   us ed H i the r t o,  al l   c i tat i o ns   for  the   do c u me nt s   are   awarde on e   ( 1)  po i nt.   T h a uth ors   prop os ed   s i x   ( 6)   di ffe r en s c en ario s   of  whi c the   v al ue s     of  c i t ati on s   ar to   b a l l o c ate an d   th at  i s   prov i de d   i n   T ab l e   1.   T he   ap pl i c ati on   i s   g i v en   i n     the  n ex t   s ec ti o n.       T ab l e  1.  T he   P r op os e P oi nts  fo r  th e S ou r c es  of  C i ta ti on s   A c r o n y m   S c e n a r io   P r o p o s e d   p o int   A   S e lf - c it a t ion   f r o jou r n a l   0 . 2 5   B   S e lf - c it a t ion   f r o b o o k s   o r   b o o k   c h a p t e r s   0 . 1 5   C   S e lf - c it a t ion   f r o c o n f e r e n c e   p a p e r s   0 . 2 0   D   C it a t ion   f r o m   jou r n a l   1 . 0 0   E   C it a t ion   f r o m   b o o k s   o r   b o o k   c h a p t e r s   0 . 3 0   F   C it a t ion   f r o m   c o n f e r e n c e   p a p e r s   0 . 5 0   Evaluation Warning : The document was created with Spire.PDF for Python.
                            IS S N: 16 93 - 6 93 0   T E L KO MNIK   V ol .   1 7 ,  No 6 D ec em b er   20 19 :   304 4 - 30 49   3046   2.3 .   A  Cas e fo r  t h P r o p o se d  Mod if ied  Cit e S cor e   T he   nu m be r   of  c i ta ti o ns   an   ac ad em i c   wor k   r ec ei v es   i s   oft en   us ed   as   me as ure  of  i ts   r el ev an c e pr es ti g e,  r e pu t a ti on i mp ac an d   l arge l y i t s   qu a l i ty Res e arc he r s   a nd   ac ad em i c i an s   are  v i ew ed   as   be i n s uc c e s s ful   wh en   t he y   are   v i s i b l i t he   ac ad e mi c   s oc i ety V i s i bi l i ty   i mp l i es   the  n um b er of  pe er - re v i ewe d i m pa c tfu l  p ub l i c at i o ns  an d c i tat i o ns  [1 7] .   W eb   of   S c i en c e   ( j ou r na l   i m pa c fac t or)   an S c op us   ( C i te S c ore)   are   th l ea di ng   m etri c s   for  q ua nt i fy i ng   the   ef fec of  c i t ati on   as   i t   r el ate s   t o   the   i mp ac t,  r e l ev a nc e,  a nd   pres ti g of    j ou r na l A   c i ta ti o c a be   s el f - c i tat i on   ( S C)   or  c i tat i on   fr o ot he r s S el f - c i t ati o i s   w he n     the   a uth or( s )   c i te(s )   the i r   p ee r - r ev i ewe art i c l es   i the i r   ma nu s c r i p s ub mi tt ed   for  ev al u ati on   an c on s eq ue ntl y   pu b l i c a ti o n.   I nte r es ti ng l y the r e   s ee ms   t be   m i s un de r s tan di n o the   i s s ue   of   s el f - c i tat i o [18 ],  wh i c h a ge n erate m an y   argu me nts   on   th ef fec of  s e l f - c i t ati o on   j ou r na l   i mp ac an a uth ors   pres t i ge T h v o i c of   th o pp o ne nts   of  S a pp e ars   to  b l ou d er  tha   the  pro po ne nts .     2.3.1 .   O p p o n ent  of  S elf - ci t atio n     Ma ny   c as es   of  ab us e   or  pe r c ei v e a be r r at i on   of  the   c i t ati on   pr ac ti c es   ha v e   be e r ep orted  i c al c u l at ed   a tte mp to  i nc r ea s t he   r el ev an c an i mp ac of  s om eo n e's   pa pe r   throug c oe r c i v c i t ati on   whi c h,  c a ma ni f es as   au th or  s el f - c i ta ti o ( A S C) ,   i nte r - c i t ati on i nd uc ed   c i tat i o n,  an d   c i t a ti on   c arte l s T he   pres s ure  of   c are er  pro gres s i on   an d   ac ad em i c   promot i o ns   c an   a l s b v i e wed  as   a   c on tr i bu t i n f ac to r Coerc i v e   s el f - c i tat i on s   c a b r e ga r de as   form  of  ac ad e mi c   d i s ho ne s ty   tha ge n ui ne l y   un de r mi ne s   the   proc es s   o e ffe c ti v j ou r na l   ev al u ati on   s uc as   the   us of  i mp ac fac tors   a nd   C i t eS c ore  [ 19 ].   T hi s   i s   v i ew e as   un eth i c al es pe c i a l l y   w he t he   S i s   ex c es s i v [20 a nd   t he   p er c ei v ed   i mp ac an pres ti ge   of  the   j ou r na l   ma y  no t  be   the   tr ue   pi c ture   of  th e j ou r na l , w hi c h c a n b e  te r me d ‘ de c ep t i v e’  [2 1 ].   P ub l i s h i n ou t l ets   are  no s pa r ed   of  the   a be r r at i o ns   as   s om j ou r na l s   i ns i s on     the   au th ors   c i t i ng   an y   r el ate d   arti c l es   o th j ou r n al   t i nc r ea s e   the   p erc ei v ed   i mp ac t   of    the   j ou r na l s T he   prac t i c i s   k no wn  as   j ou r na l   s e lf - c i tat i on   ( J S C)   [22 - 2 7].   T h ab us of  S C,   ac c ordi ng   t Co ntrer as   et   al [2 8],   i s   on o the   di f fi c ul t i es   oft en   e nc ou nte r e d   by   au tho r s   i s ub mi t ti n g p ap ers  fo r   po s s i bl pu b l i c a ti o   A c c ordi n t the   r es ea r c he r s th c o ns eq u en c e   i s   the   er os i on   o t he   i mp a c an r ep uta t i o of  t he   j ou r na l s .   J S an A S h av b e en   fo un to  b c orr el a te wi t j ou r na l     i mp ac fac t or  ( J IT)   for  ( R   =   0.3 00 ,   s i g.   =   0. 03 2 R   =   0. 39 7,   s i g.   =   0. 00 4 r es p ec ti v el y ) a l th ou g the   au th or,  G h an e   [2 9],   c on s i de r e o nl y   j o urna l s   i nd ex ed   i n   the   P ers i an   Ci tat i o In de x   In  the   s a me   v ei n,  S was   al s fo un by   T orabi an   e al [3 0]  to  be   s i g ni f i c an t l y   r el at ed   to  J IT  f or  op en   ac c es s   me d i c al   j ou r n al s   an t he   s a me   w as   ob s erv ed   for  ec ol o gy   j ou r na l s   [ 31 ].  A   p os i t i v c orr el ati on   b etwe en   S a nd   J IT  was   al s r ep orted  i th s tud y   of  Ur o l og y   a nd   Nep hrol og y   J ou r na l s  [ 32 ].  Rea de r s  are  al s o ref err ed  t o Ha r t l ey  [3 3] .     2.3.2 .   P r o p o n ent  of  S elf - ci t atio n   S om m oti v at i o ns   for  th e   us of  S h av b ee r ep orte [3 4].   T h pro mo t i on   of    the   au t ho r s   tho r o ug a nd   i ns pi r i ng   wor k   i s   th l ea di ng   r ea s on   w hi l e   S C   i s   pro mo t ed es pe c i al l y   the   l as au t ho r s   of  j ou r n al   arti c l es   [3 5]  a nd   a uth ors   fr om   d i ffe r e nt  c ul t ural   ba c k gro un ds   [3 6].   A l s o,  r ep ut ati on   bu i l d i n g h a s  be en  c i ted  as  on e o f  th e  r ea s on s  fo r   S as  c l ai me d b y  [3 7].   Hel l s ten   et  al [ 38 as s erte tha S h el ps   i th em e r ge nc an b i r th  of  n ew  r e s ea r c h   areas   as   au th ors   tha i ntro du c ne t op i c s   s ee to  us S m ore  oft e n T he y   al s s tat e tha t   S c an   b us ed   t tr ac k   an   ev ol v i ng   r es e arc tr e nd   ov er  ti me C on tr ary   to   the   po pu l ar  pe r c ep ti on   t ha t   S ha s   hi gh   i mp ac on   t he   Hi r s c i n d ex Hua ng   a nd   Li n   [39 ],  s h owed   tha t   tha was   no the   c as i the   f i el of  en v i r o nm e nta l   en g i n ee r i n g,  the r eb y   di s p uti ng   t he   i nc r ed i b i l i ty   att ac he t S C.   Cr ed i b i l i t y   an d   s tr en g the ni n the   au th or’s   k no wl e dg e   c l ai ms   wer e   th k ey   s ub mi s s i on s   fr o Hy l an [ 40 on   th c on ti n ua l   us o S C G á l v ez   [ 41 ]   wr ot t h at  S c a be   us ed   t dr i v k no wl ed g d i f fus i o n   i ac a de mi c   pu b l i s h i ng T he   k n owl ed g di ff us i o c an   c om e   i the   f orm  o th pr ov i s i o of  ba c k gro un d   i nfo r m ati on   whi c h   wi l l   he l p   r es ea r c he r s   un de r s tan   the   targe are of  the   r es ea r c [42 ].   S c a be   s e en   a s   w ay   of   pro mo t i ng   i nn ov ati v e   wor k   a nd   pa te nts   [43 ].  S urpr i s i n gl y i ha s   b ee r e po r te tha S do es   no aff ec th to tal   n um b er  of  c i tat i on s   f or  m arin an d   fr es hwat er   b i ol og y   j ou r na l   arti c l es   [44 ] T h i s   c an   b v i ewed   as   an   i s ol a ted   c as a nd   th r ea s on s   for  s uc c on c l us i on   ma y   be   th na t ure  of  th at  r es ea r c fi e l or  s om e u ne x p l ai ne d  v aria bl e s .     Evaluation Warning : The document was created with Spire.PDF for Python.
T E L KO MNIK   IS S N: 1 69 3 - 6 93 0     Mo d i fi ed  C i te S c ore  me tr i c  f or r ed uc i ng  t he  e ffe c t o f s el f - c i tat i on s   ( Hi l ary  I.  O k ag bu e )   3047   2.3.3 .   W ay  Fo r w ar d   T he   argu me nts   for  a nd   a ga i ns are  oft e r es tr i c ted   to  the   r eg i on c ou ntry j ou r na l ,   ex pe r i e nc of  the   au t ho r s   [ 45 or  s u bj ec area  an ge ne r al   s t ate me nt  c a nn ot  be   ma de   ba s e on   the   pa r ti c u l ar  na tur of   pe er - r ev i ew ed   i nf ormat i o n   ab o ut  S C.   Li s t en i ng   to   bo t s i d es   of    the   ar gu m en t,   i t   i s   i mp erati v to  pro po s thi s   me t ho d o l og y   as   c a l c ul a ted   att em pt  to   mo de r at the   i m pa c t   of   s el f - c i t ati o n.  T h i s   i s   d on e   by   al l o c ati ng   s ma l l er  v a l ue s   to   s el f - c i t ati on   i   the   c a l c ul ati on   of  C i te S c ore T hi s   i s   do ne   t ma i nta i t he   us e   as   c l a i m ed   by   th p r op on en ts   a nd   to  r ed uc i ts   ad v ers eff ec ts   as   c l a i m ed   by   t he   o pp on en ts   of  S C.   T he   r ea s on s   for  us i n   the   Ci t eS c ore  i ns tea of  t h e J IF  ha v e  be en  di s c us s ed   i the  i ntrod uc ti o n s ec t i on A l s o,  th eff ec of  S on   C i te S c ore  ha s   no t   be en   r ep orted  to  b the   b e s of  the   k no wl ed g of  the   au th ors It  ha s   al way s   be e S a nd   J IT.  F i na l l y [4 6 47 s ug ge s te d   s om l eg al   w ay s   to  i nc r ea s c i tat i on   to   di s c ou r ag s e l f - c i ta ti o n;   ex am p l es   are  op e ac c es s   pu b l i s h i ng ,   u ti l i z at i o of  s o c i al   ne twork s ac ad e m i c  l i nk a ge s , o pe a c c es s  r ep os i tori es an da t a s ha r i n g.       3.   Result a n d  An aly sis   T he   m od i fi e C S   i s   c o mp ute us i n ( 1 )   an T a bl e   s i mu l ta ne ou s l y T h ap p l i c at i on     i s   do n us i ng   an   ex a mp l e.  E x am p l e:   A   r es e arc he r   fr o an   i ns t i tut i on   wi t tot a l   pu b l i c at i o of   50   fr o 20 13   to  2 01 5 T he   pu b l i c at i on s   are  as   f ol l ows 30   j ou r n al   arti c l es 18   c o nfe r en c pa pe r s   an 2   bo ok   c ha pt ers   of  wh i c al l   are  i nd ex ed   i S c op u s T he   26 1   c i ta ti o ns   of  t he   50   pu bl i c at i on s   i 20 1 ar pres e nte i T ab l e   2   us i ng   t he   ac r on y ms   of  T ab l t r ep r es en the   s ou r c es   o   the   c i t ati on s T h m od i fi ed   CS   i s   the r eb y   c om pu te us i ng   ( 1 ) T ab l e s   1   an 2 ,   an pres en t ed     i n Ta bl e  3.       T ab l e  2.  T he  D i s tr i b uti on  o f  Ci ta ti o A c r os s     the  J ou r n al ,  B oo k  or  B oo k   Chap t ers     an d C on f erenc P a pe r s   S o u r c e   N u mbe r   A   B   C   D   E   F   Total   J o u r n a l   30   100   0   0   20   1   14   135   B o o k   o r   b o o k   c h a p t e r s   2   0   8   0   2   1   4   15   C o n f e r e n c e   papers   18   0   0   84   8   1   28   121   Total  ( s u m)   50   100   8   84   30   3   46   271     T ab l e  3 .   C om pu ta ti o n o f  th e Ci t ati on   us i ng   the   P r op os ed   Me t ho d ol o gy   S o u r c e   o f   C it a t ion   C o mpu t a t ion   S u p e r   C it a t ion   s o u r c e   A   1 0 0   x   0 . 2 5   2 5 . 0   B   8   x   0 . 1 5   1 . 2   C   8 4   x   0 . 2 0   1 6 . 8   D   3 0   x   1 . 0 0   3 0 . 0   E   3   x   0 . 3 0   0 . 9   F   4 6   x   0 . 5 0   2 3 . 0   Total     9 6 . 9         T he  m od i fi e d C S  fo r  t he  r es ea r c he r  i s  c o mp ut ed   us i ng   T ab l e  3  a nd   i s  g i v en  as :     M odif ie C ite S c or e   ( 2016 ) = 96 . 9 50 = 1 . 938     thi s   C S  c om pu te d u s i ng   ( 1 )   i s  gi v e n a s     C ite S c or e   ( 2016 ) = 271 50 = 5 . 42     the  m od i fi ed   C S   w as   ab l to  r e du c t he   e ffe c ts   of   s el f - c i tat i o ns wh i c wer e   no c ap tured     by  th e C S .       4.   Co n clusion   T he   r es e arc f i nd i n gs   c an   s um ma r i z as   fo l l o ws 1)   a   mo di f i e C i te S c ore   ( MCS )   me tr i c   ha s   be e propos ed 2)  t h MCS   c an   be   us ed   t r a nk   r es ea r c he r s   an the i r   i ns ti tut i o ns   an ev al u ati on   of  r es ea r c he r s   by   grant - aw ardi ng   bo d i es ;   3)  t he   MC S   prov i de s   an   al t ernat i v to   i mp ac fac t or,  h - i nd ex ,   an d   10   h - i n de x E uc l i d ea n   i nd ex   an d   s on 4)  t h MCS   i s   tr an s p arent,  ea s y   to  c om p ute   an i nt erp r et  an award  po i nts   to  c i ta ti on s   b as ed   o th ei r   s ou r c e s 5)  t he   MC S   c an   wi ths t an t he   u nd u ef fec ts   of  s el f - c i tat i o ns   fr om   j ou r na l s c on fere nc pa pe r s   an bo ok s   or  bo ok   c h ap ters .   F urther mo r e i i s   d i ff i c ul t   to   m an i pu l a te;   6)  t h MCS   c an   b i m pl e me nt ed   by   S c op us  a nd   up d ate d m on th l y  j us t l i k the   no r m al  C S   Evaluation Warning : The document was created with Spire.PDF for Python.
                            IS S N: 16 93 - 6 93 0   T E L KO MNIK   V ol .   1 7 ,  No 6 D ec em b er   20 19 :   304 4 - 30 49   3048   Ackno w ledg em ent   and  C o n f lic t  of  Int er es t   S t atem e n t   T he r i s  ab s e nc e o f c on f l i c t  of   i nt eres t a mo n g t he   au th ors . The  pa p er was  s p on s o r ed  by   Cov en a nt  Un i v ers i ty , O ta Ni ge r i a.        Ref er en ce s   [1 ]   Da   Si l v a   J A T Doe s  Ch i n a  n e e d  t o  re th i n k   i ts   m e tri c s -   a n d   c i t a ti o n - b a s e d  Re s e a r c h  re war d s  p o l i c i e s ? .   Sc i e n to m e tri c s .   2 0 1 7 1 1 2 (3 ):  1 8 5 3 - 1 8 5 7 .   [2 ]   Ran j a n   CK.   Bi b l i o m e tri c   i n d i c e s   o s c i e n ti fi c   j o u rn a l s :   Ti m e   to   o v e rc o m e   th e   o b s e s s i o n   a n d   th i n k   b e y o n d  t h e  i m p a c f a c t o r.  M e d J Arm e d   Fo rc e s  I n d i a 2 0 1 7 ;  7 3 (2 ):  1 7 5 - 177.   [3 ]   Az e SA,  H o l e n   A,  W i l s o n   I,   S k o k a u s k a s   N.  I m p a c fa c to o f   m e d i c a l   e d u c a ti o n   j o u rn a l s   a n d   re c e n t l y   d e v e l o p e d   i n d i c e s Ca n   a n y   o th e m   s u p p o rt  a c a d e m i c   p r o m o t i o n   c ri t e ri a ? .   J Po s tg r a d u a te   M e d 2016;   6 2 (1 ) 3 2 39.   [4 ]   Dav i s   P.  C i te Sc o re F l a wed   b u s t i l l   a   g a m e   c h a n g e r.  2 0 1 6 [ In te r n e t] [ c i t e d   J u n   2 4 2 0 1 8 ] .     h tt p s :/ s c h o l a r l y k i t c h e n .s s p n e t . o rg /2 0 1 6 / 1 2 /1 2 /c i te s c o r e - fl a w e d - but - s ti l l - a - g a m e - c h a n g e r/.   [5 ]   Ku l k a r n i   S.  El s e v i e a n n o u n c e s   th e   l a u n c h   o a   n e m e t ri c   Cit e Sc o r e 2 0 1 6 [I n te rn e t] [ c i t e d   J u n   2 4 ,   2 0 1 8 ].   h tt p :/ /www .e d i ta g e . c o m / i n s i g h ts / e l s e v i e r - a n n o u n c e s - th e - l a u n c h - of - a - new - m e tri c c i te s c o re ?   p l a c e m e n t= 5 - e x c e e d - re tu r n .   [6 ]   M i n n i c k   J Cit e S c o re n o n - ri v a l   fo th e   j o u r n a l   i m p a c fa c t o r.  2 0 1 6 [I n te r n e t]   [c i te d   J u n   2 4 2 0 1 6 ] .   h tt p :/ /www .i p s c i e n c e .t h o m s o n r e u te r s .c o m /b l o g /c i te s c o re - a - n o n - ri v a l - f o r - th e   j o u r n a l i m p a c t -   f a c to r/ .   [7 ]   Zi j l s tra   H,   M c Cul l o u g h   R.  Cit e Sc o re A   n e m e tr i c   t o   h e l p   y o u   tra c k   j o u r n a l   p e rf o rm a n c e   a n d   m a k e   d e c i s i o n s .   2 0 1 6 [ In te r n e t] .   [ c i te d   J u n   2 4 2 0 1 8 ].   h t tp s :/ /www .e l s e v i e r .c o m /e d i to r s - u p d a te /s to ry /   j o u rn a l - m e tri c s / c i t e s c o re - a - n e w - m e tri c - to   h e l p y o u - c h o o s e - th e - ri g h t - j o u r n a l .   [8 ]   Te i x e i ra   d a   Si l v a   J A,  M e m o n   AR.  Cit e Sc o re c i te   f o s o r e   e y e s o a   v a l u a b l e tr a n s p a re n m e tr i c ? .   Sc i e n to m e tri c s 2 0 1 7 1 1 1 (1 ):  5 5 3 - 5 5 6 .   [9 ]   Ki m  K,  Ch u n g  Y O v e r v i e o j o u rn a l  m e tri c s S c i e n c e  Ed i t i n g 2 0 1 8 5 ( 1 ):  1 6 - 20.   [1 0 ]   Ata y e r o   AA,  P o p o o l a   S I,   Eg e o n u   J O l u d a y o   O Cit a ti o n   a n a l y ti c s :   Dat a   e x p l o ra ti o n   a n d   c o m p a ra ti v e   a n a l y s e s   o f   Cit e S c o re s   o O p e n   A c c e s s   a n d   Su b s c ri p ti o n - Ba s e d   p u b l i c a t i o n s   i n d e x e d   i n   S c o p u s   (2 0 1 4 2 0 1 6 ).  Dat a  i n  Br i e f .  2 0 1 8 ;   1 9 1 9 8 - 2 1 3 .   [1 1 ]   Ya n   E,  L i   K.  W h i c h   d o m a i n s   d o   o p e n a c c e s s   j o u rn a l s   d o   b e s i n ? .   5 y e a r   l o n g i t u d i n a l   s tu d y .   J .   As s o c I n fo S c i Te c h n o l 2 0 1 8 6 9 (6 ):  8 4 4 - 8 5 6 .   [1 2 ]   O k a g b u e   HI,   Ata y e ro   AA,   A d a m u   M O ,   Bi s h o p   SA,   O g u n tu n d e   PE,   O p a n u g a   AA E x p l o ra ti o n   o f   e d i to r i a l  b o a rd  c o m p o s i t i o n Ci te s c o re   a n d   p e r c e n ti l e s   o Hi n d a wi  j o u rn a l s   i n d e x e d   i n   Sc o p u s Dat a  i n   Bri e f 2 0 1 8 ;  1 9 7 4 3 - 752.   [1 3 ]   O k a g b u e   HI,   Ata y e ro   AA A d a m u   M O ,   O g u n tu n d e   PE,  O p a n u g a   AA,  B i s h o p   SA.   D a ta s e a n d   a n a l y s i s   o e d i to r i a l   b o a r d   c o m p o s i ti o n   o 1 6 5   Hin d a wi  j o u r n a l s   i n d e x e d   a n d   a b s tr a c t e d   i n   Pu b M e d   b a s e d  o n  a ff i l i a ti o n s Da ta  i n  B ri e f 2 0 1 8 ;  1 9 5 2 0 - 525.   [1 4 ]   O k a g b u e   HI,   Ata y e ro   AA,   Ad a m u   M O O g u n tu n d e   PE,  O p a n u g a   AA,  A d a m u   PI An a l y s i s   o f   d a t a s e t   o n   e d i to r i a l   b o a r d   c o m p o s i ti o n   o f   Dov e   M e d i c a l   Pre s s   b y   c o n t i n e n t.   Dat a   i n   Bri e f .   2 0 1 8 2 0 :     1440 - 1 4 4 5 .   [1 5 ]   Col l e d g e   L J a m e s   C,  A z o u l a y   N,  M e e s te r   W,   Pl u m e   A.  Ci te Sc o r e   m e tri c s   a re   s u i ta b l e   t o   a d d re s s   d i ff e r e n s i tu a ti o n s a   c a s e  s t u d y Eu r o Sc i Ed i t 2 0 1 7 ;  4 3 ( 2 ) 2 7 - 3 1 .   [1 6 ]   Wa l te r s   WH.  Do   s u b j e c t i v e   j o u rn a l   ra ti n g s   re p re s e n t   who l e   j o u rn a l s   o t y p i c a l   a r ti c l e s ?   U n wei g h t e d   o r   wei g h te d  c i ta t i o n   i m p a c t? .   J o u rn a l  o In f o rm e tri c s 2 0 1 7 1 1 ( 3 ):  7 3 0 - 744.   [1 7 ]   J u y a l   D,  T h a wan i   V,  Th a l e d i   S.  Pl a g i a ri s m A n   e g r e g i o u s   f o rm   o m i s c o n d u c t.   N o rth   Am e r.  J M e d .   Sc i 2 0 1 5 ;   7 (2 ):  7 7 - 8 0 .   [1 8 ]   Fra n d s e n   TF J o u r n a l   s e l f - c i ta t i o n s - A n a l y s i n g   th e   J IF   m e c h a n i s m J o u rn a l   o I n fo rm e tri c s 2007;   1 (1 ) :   47 - 5 8     [1 9 ]   Yu  T Yu  G, W a n g   M Y.  Cla s s i f i c a t i o n   m e th o d  f o r d e te c ti n g  c o e rc i v e  s e l f - c i ta ti o n   i n  j o u rn a l s J o u rn a l  o f   In fo rm e tri c s 2 0 1 4 ;   8 ( 1 ):  1 2 3 - 1 3 5 .   [2 0 ]   Fo o   J YA.   Im p a c t   o E x c e s s i v e   J o u r n a l   Se l f - Cit a ti o n s :   Cas e   Stu d y   o n   th e   Fo l i a   Ph o n i a tr i c a   e t   L o g o p a e d i c a  J o u rn a l Sc i En g i n e Et h i c s 2 0 1 1 ;   1 7 ( 1 ):  6 5 - 7 3 .   [2 1 ]   Cha n g   CL,   M c A l e e r   M Q u a l i t y   we i g h t e d   c i t a ti o n s   v e rs u s   t o ta l   c i ta ti o n s   i n   t h e   s c i e n c e s   a n d   s o c i a l   s c i e n c e s ,  wi th   a n  a p p l i c a t i o n  t o  f i n a n c e  a n d  a c c o u n ti n g M a n a g e ri a l  F i n a n c e 2 0 1 6 4 2 (4 ):  3 2 4 - 3 3 7 .   [2 2 ]   Crews   J M M c L e o d   A,  Si m k i n   M G J o u rn a l   s e l f - c i ta ti o n   XI I:   Th e   e th i c s   o fo r c e d   j o u r n a l   c i t a ti o n s .   Com m u n As s o c I n fo S y s t 2 0 0 9 ;   2 5 (1 ):  9 7 - 1 1 0 .   [2 3 ]   Tra v i c a  B.   J o u rn a l  s e l f - c i ta ti o n  XVI II A t a l e  o k i n g s s e rf s a n d  l i b e ra t i o n Com m u n As s o c .  I n fo Sy s t 2009;   2 5 (1 ) 1 4 9 - 1 5 4 .   [2 4 ]   Rom a n o   J NC J o u rn a l   s e l f - c i ta ti o n   V:  Coe r c i v e   j o u rn a l   s e l f - c i ta t i o n - M a n i p u l a ti o n s   to   i n c r e a s e   i m p a c t   fa c to r s   m a y  d o   m o re  h a r m  t h a n  g o o d  i n  t h e   l o n g  ru n Com m u n As s o c In fo S y s t 2 0 0 9 ;   25 (1 ):  4 1 - 56.   [2 5 ]   Sa rk i s   J J o u rn a l   s e l f - c i ta ti o n   XVII Ed i t o ri a l   s e l f - c i t a ti o n   re q u e s t s - c o m m e n ta ry Com m u n As s o c .   In fo S y s t 2 0 0 9 ;   25 (1 ):  1 4 1 - 1 4 8 .   [2 6 ]   Wi l h i te  AW ,  F o n g  EA.  Co e r c i v e  c i t a ti o n  i n  a c a d e m i c  p u b l i s h i n g Sc i e n c e 2 0 1 2 ;   3 3 5 (6 0 6 8 ):  5 4 2 - 5 4 3 .   Evaluation Warning : The document was created with Spire.PDF for Python.
T E L KO MNIK   IS S N: 1 69 3 - 6 93 0     Mo d i fi ed  C i te S c ore  me tr i c  f or r ed uc i ng  t he  e ffe c t o f s el f - c i tat i on s   ( Hi l ary  I.  O k ag bu e )   3049   [2 7 ]   M a h i a n   O Wo n g wi s e s   S.  Is  i Eth i c a l   fo r J o u rn a l s   to   Req u e s Se l f - c i ta t i o n ?   Sc i En g i n e E t h i c s 2 0 1 4 ;   21 (2 ):  5 3 1 - 5 3 3 .   [2 8 ]   Con tre ra s   FG,   Bu z e ta   L P,   Pe d ra j a - R e j a s   L T h e   i m p o rt a n c e   o f   a c a d e m i c   p u b l i c a ti o n s S o m e   p ro b l e m s  a n d  re c o m m e n d a ti o n s  t o  k e e p  i n  m i n d .   Id e s i a 2 0 1 5 ;   33 (4 ):  1 1 1 - 1 2 0 .   [2 9 ]   G h a n e   M R.  Se l f - Cit a ti o n   i n   PJ CR ' s   En g i n e e r i n g   J o u rn a l s   a n d   th e i Si g n i f i c a n c e   i n   D e te rm i n i n g   Im p a c F a c to r d u r i n g   2 0 0 2 - 2 0 0 6 In t J .  I n f o Sc i .   M a g t 2 0 1 0 ;   8 (1 ):  2 1 - 3 7 .   [3 0 ]   To ra b i a n   R,  Hei d a ri   A,  Sh a h ri fa M K h o d a d i   E,  E s m a e i l e   Va rd a n j a n i   SA.  T h e   re l a ti o n   b e twe e n     s e l f - c i t a ti o n   a n d   i m p a c fa c to r i n   m e d i c a l   s c i e n c e   o p e n   a c c e s s   j o u r n a l s   i n   ISI   DO AJ   d a ta b a s e s L i f e   Sc i e n c e   J o u r n a l 2 0 1 2 ;   9 ( 4 ):  2 2 0 6 - 2 2 0 9 .   [3 1 ]   L e b l o n d   M Au t h o s e l f - c i ta ti o n s  i n   th e  f i e l d  o f  e c o l o g y S c i e n t o m e tri c s 2 0 1 2 ;   9 1 (3 ):  9 4 3 - 9 5 3 .   [3 2 ]   Se wel l   J M Ad e j o ro   O O Fl e c k   J R,  Wo l fs o n   J A,  Ko n e ty   BR.  Fa c to r s   a s s o c i a te d   wit h   th e   J o u rn a l   Im p a c Fa c to r   (J IF )   fo r   Urol o g y   a n d   Nep h r o l o g y   J o u rn a l s .   In te rn a t i o n a l   Br a z i l i a n   J o u r n a l   o Urol o g y 2015;   4 1 (6 ) 1 0 5 8 - 1 0 6 6 .   [3 3 ]   Hart l e y   J To   c i te   o n o to   c i te Au th o s e l f - c i t a ti o n s   a n d   th e   i m p a c fa c to r Sc i e n to m e tr i c s 2 0 1 2 ;   92 (2 ):  3 1 3 - 3 1 7 .   [3 4 ]   Bo n z i   S,  Sn y d e HW.  M o ti v a t i o n s   f o c i ta ti o n c o m p a ri s o n   o s e l f - c i t a ti o n   a n d   c i ta t i o n   to   o th e r s .   Sc i e n to m e tri c s 1 9 9 1 ;   21 (2 ):  2 4 5 - 2 5 4 .   [3 5 ]   L a rc o m b e   AN,  Vo s s   SC.  Se l f - c i ta ti o n Com p a ri s o n   b e twe e n   Rad i o l o g y E u ro p e a n   Ra d i o l o g y   a n d   Rad i o l o g y  f o 1 9 9 7 - 1 9 9 8 Sc i e n to m e tri c s 2 0 1 1 ;   8 7 ( 2 ):  3 4 7 - 3 5 6 .   [3 6 ]   Des c h a c h N,   M a e s   B.  Cro s s - c u l t u ra l   d i f fe re n c e s   i n   s e l f - p ro m o ti o n A   s tu d y   o f   s e l fc i ta ti o n s   i n   m a n a g e m e n j o u r n a l s J O c c u p a t.  Orga n Ps y c h 2 0 1 7 ;   90 (1 ):  7 7 - 9 4 .   [3 7 ]   Hy l a n d   K,  J i a n g   F.   Cha n g i n g   p a tt e rn s   o s e l f - c i ta ti o n Cum u l a ti v e   i n q u i r y   o s e l fp ro m o ti o n ? .   Te x a n d   Ta l k 2 0 1 8 ;   3 8 (3 ):  3 6 5 - 3 8 7 .   [3 8 ]   Hel l s t e n   I,   L a m b i o tt e   R,  Sc h a rn h o r s A,  Au s l o o s   M Se l f - c i ta t i o n s c o - a u t h o rs h i p s   a n d   k e y word s :     A n e w a p p ro a c h  t o  s c i e n ti s ts '  f i e l d   m o b i l i ty ? .   Sc i e n t o m e tri c s 200 7;   72 (3 ) 4 6 9 - 4 8 6 .   [3 9 ]   Hua n g   M H,   L i n WYC.   Pro b i n g   t h e   e ff e c t   o f   a u t h o s e l f - c i ta t i o n s   o n   h   i n d e x :   c a s e   s t u d y   o f   e n v i r o n m e n t a l  e n g i n e e ri n g J o u rn a l   o In fo rm a ti o n  Sc i e n c e 2 0 1 1 ;   3 7 (5 ):  4 5 3 - 461.   [4 0 ]   Hy l a n d   K.  Se l f - c i ta t i o n  a n d  s e l f - re fe re n c e :   Cred i b i l i ty  a n d  p ro m o ti o n   i n   a c a d e m i c   p u b l i c a t i o n J Am e r .   So c I n fo S c i Te c h n o l 2 0 0 3 ;   5 4 (3 ):  2 5 1 - 2 5 9 .   [4 1 ]   G á l v e z   RH A s s e s s i n g   a u t h o s e l f - c i ta t i o n   a s   a   m e c h a n i s m   o f   re l e v a n k n o w l e d g e   d i ff u s i o n .   Sc i e n to m e tri c s .   2 0 1 7 ;   1 1 1 (3 ):  1 8 0 1 - 1 8 1 2 .   [4 2 ]   Sa m m a rc o   PW.   J o u rn a l   v i s i b i l i ty s e l f - c i ta ti o n a n d   r e fe re n c e   l i m i t s In fl u e n c e s   o n   i m p a c t   fa c t o a n d   a u th o p e rf o rm a n c e  re v i e w.  Et h i c s  i n  Sc i En v i ro n Po l 2 0 0 8 ;   8 (2 ):  1 2 1 - 1 2 5 .   [4 3 ]   Wa n g   G G u a n   J M e a s u ri n g   s c i e n c e - te c h n o l o g y   i n t e ra c t i o n s   u s i n g   p a te n t   c i ta ti o n s   a n d     a u th o r - i n v e n to l i n k s An   e x p l o ra ti o n   a n a l y s i s   fr o m   Ch i n e s e   n a n o te c h n o l o g y J o u rn a l   o N a n o p a r ti c l e   Res e a r c h 2 0 1 1 ;   1 3 ( 1 2 ):  6 2 4 5 - 6262.   [4 4 ]   Nas h   J R,  Ar a ú j o   RJ Sh i d e l e G S.  Con tri b u t i n g   fa c t o rs   t o   l o n g - t e rm   c i ta ti o n   c o u n i n   m a ri n e   a n d   fre s h wa te r b i o l o g y   a rti c l e s L e a rn e d  P u b l i s h i n g 2 0 1 8 ;   3 1 (2 ):  1 3 1 - 1 3 9 .   [4 5 ]   Swan s o n   E W,   M i l l e DT,  Su s a rl a   SM L o p e z   J L o u g h   D M ,   M a y   J W,   Re d e tt   RJ Wh a e ff e c d o e s     s e l f - c i t a ti o n   h a v e   o n   b i b l i o m e t ri c   m e a s u r e s   i n   a c a d e m i c   p l a s ti c   s u rg e r y ?   An n a l s   o f   P l a s ti c   Su r g e ry 2016;   7 7 (3 ) 3 5 0 - 3 5 3 .   [4 6 ]   Rac z   A,  M a rk o v i ć   S.  Wo rt h (l e s s p a p e r s - Are   j o u rn a l   i m p a c t   fa c to a n d   n u m b e o c i ta t i o n s   s u i ta b l e   i n d i c a to r s  t o  e v a l u a te   q u a l i t y  o s c i e n t i s t s ? .   N o v a  Pri s u tn o s t 2018;   1 6 (2 ) 3 6 9 - 3 8 9 .   [4 7 ]   Uz u n   C.  In c re a s i n g   th e   i m p a c fa c to i n   t h e   e t h i c a l   wa y Ba l k a n   M e d i c a l   J o u rn a l 2 0 1 7 ;   3 4 (6 ) :     482 - 4 8 4 .   Evaluation Warning : The document was created with Spire.PDF for Python.