dare作为动词时确实是dare to do,但是you dare speak to me也对,因为dare在这里是作为情态动词用的,用法就跟can一样,直接加动词原形.
1、在否定句、疑问句或whether/if从句中,dare的现在时用法多与动词need一样.
2、主语为第三人称单数时,现在时形式为dares.
3、在否定句和疑问句中,dare后接动词原形,相当于助动词.