that在定语从句中充当关系代词,代替前面的先行词,在从句中作主语或者宾语.
而同位语从句中的that只是一个引导词,引导一个句子对前面的名词（通常是抽象名词）进行解释或者补充说明,不充当从句的句子成分.
你的问题刚好是判断一个句子是定语从句还是同位语从句的标准之一.