A、酒精灯外焰温度是最高的，而不是灯芯，故A错误；
B、灯芯的温度低，会使玻璃受热不均而破裂，是正确的，故B正确；
C、酒精灯燃烧的条件是有氧气和达到着火点，这些条件都具备了，酒精灯时不会熄灭的，故C错误；
D、若酒精挥发，说明酒精灯是不合格产品，与玻璃仪器是否与灯芯接触无关，故D错误．
故选B．