=Paper=
{{Paper
|id=Vol-1169/CLEF2003wn-ImageCLEF-CloughEt2003
|storemode=property
|title=The CLEF 2003 Cross Language Image Retrieval Task
|pdfUrl=https://ceur-ws.org/Vol-1169/CLEF2003wn-ImageCLEF-CloughEt2003.pdf
|volume=Vol-1169
|dblpUrl=https://dblp.org/rec/conf/clef/CloughS03b
}}
==The CLEF 2003 Cross Language Image Retrieval Task==
<pdf width="1500px">https://ceur-ws.org/Vol-1169/CLEF2003wn-ImageCLEF-CloughEt2003.pdf</pdf>
<pre>
    
                                 
                                           
                               
           
                                        Æ
                             
 
        Æ 


                                             

                       ! "##$     
          !% &   '      
         (          )      
      % &            
          *   +     ,    % &
                      !  
                        !
       %


      
-       (               
         % !       .     
      *%%   ,          
    +    .             
               (        
      %
    /  !            .      ,
          % & .            
           .         % 0  
                      ,
 !                  !   !
 % !                    
           (           
          (        %
    0                    ' *1+
    *"+          *-+% 
      
   (                       
         .       (  
       )   % 2          
    * %% 345+             
%%              )         
                    
            .      )  
      . )     6         %%
7    8   6 7  8 *  395  31#5+% :       
  .   '              %
    -                   
%%     ,    ,          
                         
                  %% .     
                 .    % ; 
345    &- ,               
 .         % /   )    
 !                (    
             %

               
&           !' *1+      *"+    
   % <                      
    % &        !          ( 
                   (      %
&           !           
         (               
  %
    &     !       '      
         )                
 % &       &-           
                    
  . *%% .         +% 
         
                  ,    
            % &         
               .       )
  % &     ,         7. ,,
8            .    !      
 .                 %
    0 .          !     (      
 !  = 0     !         %      
                        
         6         
    ,   ,           % 0  
       6               
 .                 6    % !
       .       6        
                % :       
                  .         
      .            
  .           %
     !                  
                   
       % /     !        
             -      %

            
&                    *-+   
    % &               
           (        % & 
        -   )       3>5     
  6 -       &-  3$5  ! 3?5  @&- 3A5%
                          ,
                .           
          )     .% B  3C5
       &- D       -   *
   D  +                 
                       ,
   %                   
       !   '
  1% 
         *%%   +%
  "%           %
  $%         6      %
    B   2  3$5             
                  % :     
              *%%       
    +          .      7   8
%          )   *%%         E0- 0 + 
  *%% 6  )         31#5+       
     *%% &- +%   !            
                      
                %


                       
       !       ,   % @   
 .   7 8             . 
 ,    % 0               
                  
        !   % :        
      % 0    
 % &            
              $#####      
 ,      3115% 0  ,    $####   
          ,   6      
       %
    &         !        
    .               
 % 0                  !% :
               )   
           &- ,  % &     ">1$$
 * $A>"$?      1"#9A  +   % & 6  *>"F+ 
       *          +      1>$"
 144" *   14"#+%              .
                        
  % !  1           %
    &                  ,    
          0 % &     > )      ,
       ,  %           )
                  % 0  >1F
       )           %     ,
            1C         @
   
  ½ 
       
                                        : &      0 %
                                        : &    %
                                      ! 
                                    
   
           
                                    6            G      
                                     H    %
                                    
 %14##
                                      I ! 
                                      
    
     
                                    
      
      
                                     ; ,!"#" J<:;' &   *1>"1,14#>+
                                    ;             
                                           0 H    
                                        :  H   K  &
                                        *1>C1,1>9C+%E &0'     %
            !  1' 0               ! 

        %% 6,6  % &        ,
  % 0                 %
&            %





        
 (                   
% E                      
          (     . (    
                    %
 &-  @&-   ! )                
            % &       , 
                     
        *%%             (  
    +  Æ       *%%         
)+% &    7          G     
       8 3" % 1#A45%
    & )        )            ,
      %%    ) 6          
                     
          % &      6    ,
 !   )      % 0          
     )      % 0            
       %
    &          ) *   6      
+     "94A   .  *  A9F     +%     
          /      315  )       
.     % 0         ) %% .  )
6   % 2        ,          
   )  % <    .    .       )     
 .   *%%     1C   .  A#F       +%
    0       6                
                    )    % !
  6   7)  8   7)      0  8
7 8  7     8  7      8  
7    8% &   )           % &
                      
.         *          +% &  
                        
     .  % & 1    C#    $%C  
                !%



         
;  )  6        D         
     % <     6       
         6             
         )                      ,   %
 !     ",$               
     % <            
                  
 )   % 
                   ,
           %
    ;        !            E
;   !             % /      
              % &       
                       
*%%  .        +% &             
  !   %


      
/         .            6  
                % &       
      ' *1+  .  6   6    *"+ 
    % & )             
          6 *%%      
    (                     +% &
                  ' *1+     6 
   *"+             6  %
    &            %       
    6               
    .      (  *     !  )   
.   6          +% &        
   &-   !  @&-%    .           
* +                      
   % &                  
   H .          L            
                %      
                     
  ?      ! *    ?C     +     
 ¾   
                
    
          !"
    
   # 
 
M   % 3A5    @&-            
       *   

                   +% & 
                 *    . 
 .         + ,  & 1%
     &          )       7 8   6 ,
  *       C#### +H            ,
   Æ 6  )         6      *  
          +% I            
/,        6        *      ,
             1##  +        
                 % &     
   6        H            
  6       .   % 0       6     
                          '
          % &           
                  % &    
    )      . % 
   6         
            %      6     
        %
     &                    D 6  
*%%                    ) 
        +              
6   *%%          +       *%% 
         +% /            
               6        
%%            .  6    *%%    
   +                   
 )     %
     0                  
     ?C       % <             
     *   +               
       )            
   % -            *. +   
                 % /  
              D   '
    1%         6           
                %
    "%         6           
                   %
    $%          6          
                 %
    ?%          6         
                     %

    &             ,       
           % &          
                    
         * & 1%          
                    %    
                D   '

 
                                                                  
                                                               
               
     

                                                       
      
      
                                                                
            
             ! "#               

     

           
           

      "                             
$
             
     

      

    

      % &                                  
            
$               
      "                              

                            $      

$      '         % & % ((           $$                             $      

      )                              
                    
      
      

      *                       
                                   $

     "      +&                         $              
            
      


        !   , ! "                          
                            $

     -  "  "#                         $       
                   
      

     %          &     !                         
      $      
      


     .   /  /                               

                               

     )   &                                
      

      
      

      


     +     0          1&                      
$     

      
$     



$     1  2                               $       
              

      
      


     & &                            $                   
      
    


     +&                                                                       
     3                                     
             
     
           



      &        /                
       
           
           

       '  1& 
     3 &  4&                             
                       


     /                                                                        
     0                                                 
      
      
      
$
     1 &!   5                              
             
      
            $
        ! 3   .                        
                                   
$     +&  &                        $       
                         
        !  &!         

             

      
      
      
     %                                   
              

      $           

     1&  !  
                                   
       
                  

     46       ! (  &               $$                          
      
     &                                           
                
    
      &                       

      
       $       
             

     0  7                                           
             
      
$
     )      . -                       $                                $
     +   &&                         
                        $     

$       &   8                    $                                   
     "   &                     
       
      
      
      

       )      
                                       
                                   $
             9&              

          
     $      
    
                       

       !                                      
             
            
      
     :   &                          $             

     
$      
    

     .  % &&                             $              
      
      
      

     % !&&  %&                           $
                    $            
     '                                                    
            
      
     %&  &                            

                           $      
$      &                                                 
      
      
      

      6                                $      $        
$      $            
                                         $       
$       $      

                                       
                 
          
$
                                                      
             $            

          & 1' &    !                       
    1%     1##       *?C    +   %
    "%                   %
    $% &     6               %
    ?% 0                    
            %
    C% !      *. +           %
    A% E                . %
    9%    (                 C#%


                     
&                         %
!        .             
             (    %      
          *    +        
        .       %% 7  8 
7  8% 0          6         
 % &                  
 (      % I     6          
       % &            
   %

      
     
!       ! "##$'        @  &   ,
 *@&+ E  * +       Æ         
            % @         
  ,             H       
          % Æ              
*      +   E   "C     (     ,
       E% @&            
?      ?          %
     @&                  .   
                '  E  ,    
E  D  E&  <E  ,     "%"    ,  % &
          ' *1+  ,      *"+     . 
   %                     
            %
     E      -   N        
                 % !   ,
     ,            ' ! &   %
 & %          -;0@ * ,,    +% !                  
/ @      .              
.          :-,   %
     Æ             < "C    
                     
       * ,    +% 0 )           
        < "C  %
                                                Æ      
 
            :@: * 0
+          #%#A"?               ,          #%CA1A     #%C91> *O +
          *P +        "9                 ,             1            1
          &                   #%#C$4               ,          #%?#?9   #%?#?$ *O& +
                                 $#                 ,             9            C
          E                    #%#C#$               ,          #%?">C   #%?#>$ *O& +
                                 "4                 ,             >            C
          @                   #%#">4               ,          #%$4#?           ,
                                 $"                 ,             9             ,
          !-                   #%#C"4               ,          #%?$>#   #%$91# *O& 1+
                                 $#                 ,             $            C
                              #%#$"#               ,          #%?#9A   #%?$"$ *O& +
                                 $"                 ,             $            C
          @                      ,       #%">>> *@&
+    #%">C#           ,
                                  ,                1"            1"             ,
& "' 2 0
                    1##  
     *     +


   &                      . 
  / @%         )        
       %

    
                   *. + 
                    % / 
            ( % & "       
  D            !  %       
              1##    H     
            1##         )  
                    % 
   (         Æ  E 
       '                
        %

       
&  !            % 0        ,
        % 0     @  - ,     
          % &         
 6       Æ      
- *   ' ;-J-CA99>J#1+%

        
!" 
 315 B      ' 0     .        %    

           
    
 
  
 
 1444%

    ¿ $     
 %&'' (    
 
                     1.0
                                                                                   Mono (daeenenQor)
                                                                                           Italian (sheff)
                                                                                         German (sheff)
                                                                                           Dutch (sheff)
                                                                                          French (sheff)
                     0.8                                                       Spanish (daespenQTdoc)
                                                                                  Chinese (NTUiaCoP)



                     0.6
         Precision




                     0.4




                     0.2




                     0.0
                           0.0   0.2         0.4         0.6   0.8       1.0
                                                Recall

!  "' 
  ,-            *       +

 3"5  ,    ' &   %      
 
 
     
 
    C"*1"+'1#A9Q1#9" "##1%


 3$5 :     "##1%    
   !!" # "##1%
 3?5      %   $  % $&"  '  

 

             
(  
           )* !! +,        -" )  #         
 -  

     .!/" -
 0   $4?Q?#? "##"%
 3C5 &         %                    $           % $&"     ' 
    

 
               
(  
         )* !! +,             -" )  #
    
 -  
                            $CCQ$9# "##"%
                                       .!/" -
 0


 3A5 
     ,   ' 0           )  
      % 
 
 B% C*1+'?1QC4 "##"%
 395 %2% 0   
%  % 0        %    

     
 B% "$*?+'">9Q"44 1449%


 3>5 %/%   %   1    
 2   
   ?9QC4%  ' M  ,
     I   
% / * + -       -    M  1449
     1449%
 345 0%0 ; %      ' 0        % 

     
 B% $*"+'A$QAA "###%


31#5 %   % & <%    M% @                     %    % 0   
          ,      ,     ,  %
     
 
 B% ?*$J?+'"9CQ"4? "##1%


3115 @%2% - % &              % 
  
 
     B% C'>$Q4# 1444%

</pre>