金融界2024年12月18日音问女生 自慰,国度学问产权局信息显现,维沃迁移通讯有限公司肯求一项名为“模子历练要害、装配、设备及介质”的专利,公开号 CN 119129778 A,肯求日历为2024年9月。
专利选录显现,本肯求公开了一种模子历练要害、装配、设备及介质,属于诡计机时期限制。该模子历练要害诓骗于电子设备,电子设备包括图形贬责器GPU、第一存储器和第二存储器,GPU与第一存储器电相连第存存储器与第二存储器电相连,该模子历练要害包括:通过GPU将低秩适配器LoRA参数镶嵌到预历练的大模子中,获得待历练模子;在前向传播经过中,通过GPU基于历练样本诡计待历练模子中各网罗层的网罗激活;通过第一存储器将GPU中的网罗激活存储至第二存储器中;在反向传播经过中,通过第一存储器将第二存储器中存储的网罗激活发送至GPU;通过GPU基于网罗激活对待历练模子中的LoRA参数进行历练,获得历练后的大模子。
本文源自:金融界
作家:谍报员女生 自慰