面向ReRAM非线性和保持误差的模型微调方法

Ching-Yi Lin, Shamik Kundu, Arnab Raha, Sahil Shah

摘要

本文提出一种基于微调的硬件感知训练算法，通过范围收缩的sinh变换和正则化损失，解决ReRAM交叉阵列的I-V非线性和保持误差问题。实验表明该方法在ImageNet和SQuAD v2等任务上仅造成轻微精度损失。

ReRAMfinetuninghardware-aware trainingnon-idealityDNN

LEARNING

📊 8,465 引用

D. O. Hebb

2005

LEARNING

📊 7,678 引用

Benoît B. Mandelbrot, John W. Van Ness

1968

LEARNING

开放获取📊 7,484 引用

Laith Alzubaidi, Jinglan Zhang, Amjad J. Humaidi 等 10 位作者

2021

LEARNING

📊 4,608 引用

Andre Esteva, Alexandre Robicquet, Bharath Ramsundar 等 10 位作者

2018