have gone to通常用于第三者,是去了还没有回来.
have been to是已经去过了,没有必要说什么时候去的,这个用得多,任何人称都可以用.