搜索到7711篇“ 激活函数“的相关文章
一种新型激活函数的机床能耗预测神经网络研究
2025年
构造一种适用于反向传播(backpropagation,BP)神经网络的新型激活函数Lfun(logarithmic series function),并使用基于该函数的BP神经网络进行机床能耗状态的预测。首先,分析Sigmoid系列和ReLU系列激活函数的特点和缺陷,结合对数函数,构造了一种非线性分段含参数激活函数。该函数可导且光滑、导数形式简单、单调递增、输出均值为零,且通过可变参数使函数形式更灵活;其次,通过数值仿真实验在公共数据集上将Lfun函数与Sigmoid、ReLU、tanh、Leaky_ReLU和ELU函数的性能进行对比;最后,使用基于Lfun函数的BP神经网络进行机床能耗状态的预测。实验结果表明,使用Lfun函数的BP神经网络相较于使用其他几种常用激活函数的网络具有更好的性能。
刘晶晶刘业峰
关键词:激活函数BP神经网络SIGMOID函数
一种激活函数安全计算方法和Tanh函数安全计算方法
本发明公开了一种激活函数安全计算方法和Tanh函数安全计算方法,本发明为了保留原有的Sigmoid函数算法结构,采用随机参数的方式实现安全计算,解决了现有技术中将隐私保护深度学习算法中的Sigmoid函数替换为相应密码学...
秦爽王晖林哲罗景龙张嘉琪陈晗蒋芳清
一种可重构电光非线性激活函数器件
本发明提供一种可重构电光非线性激活函数器件,包括:输入分光模块、控制模块和可重构非线性输出模块;所述输入分光模块采用定向耦合器,用于将输入光信号进行分光得到小功率分光信号和剩余分光信号;所述控制模块包括:光电探测器、线性...
郭鹏星左晓龙孙巍侯维刚郭磊
一种基于正交勒让德小波的可学习激活函数方法
本发明公开了一种基于正交勒让德小波的可学习激活函数方法,涉及人工智能技术领域。本发明步骤如下:S1:针对特定任务数据,划分数据集为训练集、测试集;设定最大计算量MaxCal;S2:选定网络模型,初始化网络参数、激活函数结...
刘智颜野郑小洋
激活函数选择方法、装置、设备、存储介质和程序产品
本申请涉及一种激活函数选择方法、装置、设备、存储介质和程序产品。所述方法包括:根据目标神经网络在上一轮次中各网络层的输入数据,构建初始种子图,其中,每一输入数据对应初始种子图中的一个初始种子值,根据初始种子图中初始种子值...
孟庆春孙建鹏杨超
可配置多种激活函数的电路和电子设备
本申请公开了一种可配置多种激活函数的电路和电子设备,涉及神经网络技术领域。其中,电路包括:配置模块、多个激活函数计算模块和选择模块,其中,激活函数计算模块,用于根据输入数据和配置参数进行计算,生成计算结果;配置模块,用于...
赵烁冯保陈怀郁赖佳彬何虎
可配置非线性激活函数电路
本公开的某些方面提供了一种处理器,其包括:可配置非线性激活函数电路,其被配置成:基于所选非线性激活函数来确定用于该非线性激活函数的参数集;以及基于用于该非线性激活函数的参数集的应用来生成输出数据,其中:该可配置非线性激活...
S·莫汉R·李P·库尔卡尼A·D·兰博
基于系数查找表的非线性激活函数快速计算装置及方法
本申请提供一种基于系数查找表的非线性激活函数快速计算装置及方法,装置包括:输入选择单元,用于选择输入的浮点数;系数查找表单元,用于将激活函数全区域划分为若干区间,并将非无限区间划分成若干段;在每一段上使用二次函数进行逼近...
林军镇王盟蒋雨丹
包括激活函数单元的处理单元
本公开涉及一种包括激活函数单元的处理单元。处理单元可包含激活函数单元。可在存储器子系统的处理单元的多个寄存器处接收数据。可在耦合到所述多个寄存器的乘法累加MAC单元处接收所述数据。可在所述MAC单元处执行第一多个操作以产...
武新宇P·L·布朗T·A·曼宁
一种激活函数的硬件实现装置和方法
本发明公开一种激活函数的硬件实现装置和方法,属于函数计算的硬件实现技术领域。针对现有技术中存在的传统方法硬件实现激活函数时很难平衡高性能与硬件资源的问题,包括e指数计算模块和CORDIC除法模块,输入信号在e指数计算模块...
李丽蒋林傅玉祥陈辉何书专李剑斌陈健

相关作者

潘红兵
作品数:357被引量:276H指数:9
供职机构:南京大学
研究主题:片上网络 可重构 神经网络 加速器 图像
乔清理
作品数:53被引量:134H指数:6
供职机构:天津医科大学生物医学工程学院
研究主题:磁刺激 激活函数 神经网络 计算机仿真 视觉假体
孔颖
作品数:46被引量:26H指数:3
供职机构:浙江科技学院
研究主题:终态 矩阵方程 冗余机械臂 关节角 机械臂
石翠萍
作品数:104被引量:126H指数:6
供职机构:齐齐哈尔大学
研究主题:卷积神经网络 高光谱图像 网络 遥感 分类准确率
孙水发
作品数:177被引量:391H指数:10
供职机构:三峡大学
研究主题:视频 自适应 数字水印 随机共振 超声图像