中断为什么延迟了很久才响应？

用9054做的MPEG-2码流发送卡，当码流速率小于8Mbytes/s时播放正常，速率再高时FIFO出现了“空”的现象，用逻辑分析仪采集发现有时候硬件发出的中断延迟了很久才响应，导致没有及时发起DMA传输致使FIFO被读空了。FIFO大小为64KB,也就是说当码率高于8M时两次中断之间的间隔小于8ms,在这期间要发起一次DMA操作和一次读64KB文件的操作。
请教中断为什么大部分能正常响应，而有时侯又延迟了很久并且超出了可以容许的范围？操作系统内部是如何处理中断的？难道要中断处理要排队吗？

是不是你的驱动处理中断消耗太长时间了？
也许是你的硬件没有处理好

码率高的时候也并不是每次中断都延迟很长时间，而是随机的，这种情况会是驱动程序ISR处理消耗时间长吗？
还是硬件的中断级别太低？