A、噬菌体属于病毒，无细胞结构；A错误．
B、大肠杆菌属于细菌，有细胞结构，但无成形的细胞核，只有DNA的集中区，无叶绿体，有细胞壁；B正确．
C、衣藻属于单细胞藻类，细胞有细胞壁、叶绿体、细胞质、细胞膜等；C错误．
D、水绵也属于藻类植物，水绵细胞的最外面是细胞壁，紧贴细胞壁的是细胞膜，中央是细胞核，有叶绿体．D错误．
故选：B