TAC 2011
Evaluation Results

This page provides evaluation results for all runs submitted to the following TAC 2011 tasks:

  • KBP Track (cross-lingual entity-linking task)
  • KBP Track (English entity-linking task)
  • KBP Track (English entity-linking task, no wiki text)
  • KBP Track (regular slot-filling task)
  • KBP Track (temporal slot-filling pilot)
  • RTE Track (main task)
  • RTE Track (novelty detection task)
  • RTE Track (KBP validation task)
  • RTE Track Ablation Tests (main task)
  • Summarization Track (guided task)
  • Summarization Track (AESOP task)

To see a team's results for a particular task, click on the X in the appropriate cell. For those teams that submitted a notebook paper, the team ID links to the paper in PDF format.

*Note: Results of the Summarization MultiLing Pilot can be found in the TAC2011 MultiLing Pilot Overview paper.

 
Team ID KBP
(cross-lingual entity-linking)
KBP
(English entity-linking)
KBP
(English entity-linking, no wikitext)
KBP
(regular slot-filling)
KBP
(temporal slot-filling)
RTE
(main)
RTE
(novelty detection)
RTE
(KBP validation)
RTE ablation tests
(main)
Summarization
(guided)
Summarization
(AESOP)
BIU           X X   X    
BLLIP                   X  
BUPTTeam           X          
catolicasc                     X
cea_lvic       X              
CELI           X X X      
CIST                   X X
CLASSY                   X X
CMCRC   X                  
cogcomp   X                  
C_S_IIITH                   X X
CUNY_BLENDER X X     TBA            
CUNY_UIUC_SRI X X                  
DAI   X                  
DemokritosGR                     X
DFKI           X X   X    
dmir_inescid   X                  
ECNU X X X X              
FBK_irst           X     X    
GOOGLE                   X  
HIT   X                  
HITS X                    
hltcoe X X X                
ICL           X          
ICL_KBP   X   X              
ICL_SUM                   X  
ICTCAS                   X  
IIRG     X X TBA            
IIScSum                   X  
IKOMA           X X   X    
ILPS       X              
JRC                   X  
JU_CSE_TAC           X X X X    
KBP2011PKUTM   X X                
lcc X X                  
LIF                      
lrlab2011                   X  
lsv X     X              
MS_MLI   X                  
MSRA   X                  
NLPR_TAC   X                  
NUS                   X  
NUSchime   X                  
NYU       X              
PKUTM                   X X
PolyCom                   X  
PolyUCOMP   X   X              
pris     X X           X  
Rali                   X  
REACTION   X                  
seme1                   X  
SIEL_IIITH X   X             X  
SINAI           X     X    
SJTU_CIT           X     X X  
Stanford1       X TBA            
Stanford2 X                    
Stanford_UBC X X X                
TALN_UPF                      
te_iitb           X          
thunlp X X                  
TJU_GSummary                   X  
txsumm                   X  
UAIC2011           X     X    
ualberta       X              
UBC       X              
UBSummarizer                   X  
UNED       X TBA            
UoEssex                      
UofL                   X  
uOttawa                   X X
USFD2011   X X X TBA            
u_tokyo           X     X    
UW_2011                   X  
wbsg   X                  
WHUSUM                   X  

BACK to Index of TAC 2011 Proceedings

Last updated:
Comments to: [email protected]