过去式,是表示他过去说过什么,所以是过去式,因为如果是I didn't know后面就要用had said