LSTM加速器总结
judy 在 周五, 12/10/2021 - 10:05 提交![](https://cdn.eetrend.com/files/styles/picture400/public/2021-12/wen_zhang_/100556069-230260-shenjingwangluo2.jpg?itok=Nq0O11Ap)
LSTM是一种循环神经网络,它解决了以往RNN中存在的长期依赖问题(采用门控信号来避免梯度消失和爆炸,同时增强了对过去信息的记录能力),现在被广泛的应用于NLP领域。
LSTM是一种循环神经网络,它解决了以往RNN中存在的长期依赖问题(采用门控信号来避免梯度消失和爆炸,同时增强了对过去信息的记录能力),现在被广泛的应用于NLP领域。
本文介绍稀疏LSTM的硬件架构,一种是细粒度稀疏化,权重参数分布随机,另外一种是bank-balance稀疏化。