a little old表达绝对的修饰,说明实际年龄真的有点老；
而a little older表示有比较的对象,比方小明15,小方14我们就可以说Ming is a little older than Fang.而不能说Fang is a little old.