【摘 要】
:
深度学习的兴起使得对计算的需求进一步加剧,其中循环神经网络长短时记忆单元中的非线性激活函数是硬件加速的重点.传统的查找表法、泰勒级数展开法、分段线性拟合法的硬件资
【机 构】
:
浙江大学超大规模集成电路设计研究所,杭州310027;上海复控华龙微系统技术有限公司,上海200439;浙江大学超大规模集成电路设计研究所,杭州,310027
论文部分内容阅读
深度学习的兴起使得对计算的需求进一步加剧,其中循环神经网络长短时记忆单元中的非线性激活函数是硬件加速的重点.传统的查找表法、泰勒级数展开法、分段线性拟合法的硬件资源开销相对较大.本文在表驱动线性拟合的硬件加速基础上,进行了分析与数学推导,提出了非均衡参数化表驱动线性拟合S型激活函数的硬件加速.通过移动直线中心,降低了单边误差.对函数中误差较大与较小的区间进行差异划分,提高了误差分布较大区间的直线区间数量,进一步减小误差.FPGA高层综合的实验结果表明,非均衡表驱动线性拟合法在不增加硬件资源开销和不降低性能的前提下,能够实现较小误差的优化.参数化进一步提高了硬件的复用性与应用选择的灵活性.
其他文献
提出一种皮瓦级、超低功耗的新型基准电压源.该电路利用工作在亚阈值区的不同类型MOS管的栅源电压差,获得在不同工艺角下均有良好温度特性的基准电压.同时,加入校准电路来减
地下水位异常是目前公认的最重要的地震前兆信息之一。因此,地下水位数据的监测,对地震预报具有非常重要的实际意义。我国地下水位观测网是世界上规模最大的前兆台网,拥有近1000
提出了一种基于多态忆阻器的神经网络电路硬件实现方法.采用28 bit的惠普忆阻模型来构建存储权重的双忆阻稳定结构,结合了低功耗轨到轨运放技术以及寄存器技术,设计了模值与
小水线面双体船(Small Water-Plane-Area Twin Hull,缩写SWATH)与常规单体船相比具有优良的耐波性。它还具有中高速阻力小,甲板面积宽敞,可以完成多种使命以及满足各种航海要求
提出了一种适用于无线供电的温度传感器.采用基于压控振荡器的反馈环路,优化信号精度.利用压控振荡器和电流源反馈方法,设计了温度传感环路,无需内部稳压器就可达到较好的电
针对现有高速串行接口协议复杂、数据效率低的问题,基于ESIstream协议,提出一种应用于12~14位ADC/DAC新型收发接口的设计方案.采用14B/16B编解码算法,降低了数字电路的设计复