设甲组x人，乙组（54-x）人，
    

1

4

x=（54-x）×

1

5

，
    

1

4

x=

54

5

-

1

5

x，

1

4

x+

1

5

x=

54

5

，
  

9

20

x=

54

5

，

9

20

x÷

9

20

=

54

5

÷

9

20

，
      x=24，
乙组：54-24=30（人）．
甲组比乙组少：30-24=6（人）．
答：甲组比乙组少6人．