A、冰水混合物是纯净物，不属于混合物，故不是溶液．
B、汽水是碳酸等溶于水形成的，是均一、稳定的混合物，属于溶液．
C、牛奶是不溶性的小液滴等分散到液体中形成的，不均一、不稳定，不属于溶液．
D、墨汁的主要成分是碳，碳不溶于水，不均一、不稳定，不属于溶液．
故选B．