这不是时态的问题,这就是一个固定用法,主系表+不定式的用法,很常见.比如I'm afraid to go.这样的用法,根本没必要考虑时态啊.再者,很少见过把一个系表结构作为时间基准的.
如果这里用to have done,那意思就变了,变成之前在这里见过某人,后来再见到他,说,我很高兴曾经在这里见过你.
所以,你想多了