Shall we起始的话,其实是一种建议性的祈使句.我简直不敢想象有人会回答什么“I'm sorry...By your means...”,估计英国人的妈、美国人的爸都听不懂...
一般来说,如果你要肯定回答的话,"Why not?"或"OK"之类的比较多,也可以回答"I'd like"..."My pleasure"等等,这些用法要看具体的情况（对方是谁、一起干什么等等）来决定.
如果你要否定回答,记住,一定一定要委婉!你可以说"I'm afraid .even I really wanna ...",表示“虽然我很想和你XXXX,但恐怕我.”,或者“I'd like to ...but ...”,意思也是一样的.
说句笑话,你听美国人英国人说话,but前面的话,你大多可以省略（哈哈哈）...