imx8mini solo：rpmsgtty驱动和w5500驱动不能同时工作怎么处理？

安装rpmsgtty驱动后，安装w5500驱动时报传输队列超时错误。具体错误见error.txt，M4程序见pinmux.c。  
我的猜测是rpmsgtty和w5500驱动抢占了单核下的工作队列。奇怪的是，如果我一直在我的 M4 程序中读取 rpmsg，即使我没有特定数据。W5500也可以正常工作。基于此，我怀疑rpmsgtty驱动中有什么东西阻塞了，导致工作队列拥塞。我尝试查看rpmsgbus源代码，但是我的技术不够强，无法自己阅读或者花费了很多时间。     
我希望你能回答。谢谢。