由赛制可知：A赛了4场，则B、C、D、E都与A赛了一场；
B赛了3场，则是与A、C、E各赛了一场（由于D只赛了一场已与A赛过）；
C赛了两场即是与A、B赛的，
所以此时E赛了两场，即是与A、B赛的．
故答案为：两．