∵点A对应的数是-2，
∴到点A的距离是3的数是：-5或1；
又∵数轴上的点A和点B所表示的数互为相反数，
∴点B表示的数是2，到点B的距离是3的数是-1或5；
∴所有满足条件的点P所表示的数的和是：-5+1-1+5=0．
故选A．