解:设购买的$A$种图书的单价为$x$元,则购买的$B$种图书的单价为$(x-5)$元,
根据题意,得$ \frac {400}{x}=2×\frac {160}{x-5}$
解方程:
$ 400(x-5)=320x$
$ 400x-2000=320x$
$ 80x=2000$
$ $解得$x=25$
检验:当$x=25$时,$x(x-5)≠0$
∴$x=25$是原方程的解,且符合题意,则$x-5=20$
答:购买的$A$种图书的单价为$25$元,购买的$B$种图书的单价为$20$元。