A用食醋除去暖瓶内的水垢有新物质生成醋酸钙，属于化学变化，故A错误；
B．用四氯化碳擦去圆珠笔油渍没有新物质生成，属于物理变化，故B正确；
C．用糯米饭、酒曲等自制甜酒有新物质乙醇生成，属于化学变化，故C错误；
D．甲醛能使蛋白质变性，有新物质生成，属于化学变化，故D错误．
故选B．