https://blog.qife122.com/tags/relu%E6%BF%80%E6%B4%BB%E5%87%BD%E6%95%B0/ Recent content in ReLU激活函数 on 办公AI智能小助手 Hugo zh-cn qife Mon, 29 Sep 2025 10:01:46 +0800 https://blog.qife122.com/p/%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C%E5%AE%9E%E9%AA%8C%E8%A7%A3%E6%9E%90%E4%BB%8E%E6%95%B0%E5%AD%A6%E8%A1%A8%E7%A4%BA%E5%88%B0%E8%AE%AD%E7%BB%83%E5%8A%A8%E6%80%81%E5%8F%AF%E8%A7%86%E5%8C%96/ Mon, 29 Sep 2025 10:01:46 +0800 https://blog.qife122.com/p/%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9C%E5%AE%9E%E9%AA%8C%E8%A7%A3%E6%9E%90%E4%BB%8E%E6%95%B0%E5%AD%A6%E8%A1%A8%E7%A4%BA%E5%88%B0%E8%AE%AD%E7%BB%83%E5%8A%A8%E6%80%81%E5%8F%AF%E8%A7%86%E5%8C%96/ <h1 id="add--xor--rol">ADD / XOR / ROL</h1> <h2 id="帮助我更好理解神经网络的实验第2篇">帮助我更好理解神经网络的实验（第2篇）</h2> <p>在这篇文章中，我将解释目前对神经网络的思考。在之前的文章中，我解释了&quot;神经网络的折纸视角&quot;（在某些圈子里也称为&quot;多面体透镜&quot;）的直观理解。本文将深入探讨其数学细节。</p> https://blog.qife122.com/p/%E9%80%9A%E8%BF%87%E6%8A%98%E7%BA%B8%E8%A7%86%E8%A7%92%E7%90%86%E8%A7%A3%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9Crelu%E7%BD%91%E7%BB%9C%E7%9A%84%E5%87%A0%E4%BD%95%E7%9B%B4%E8%A7%89/ Sat, 27 Sep 2025 21:09:47 +0800 https://blog.qife122.com/p/%E9%80%9A%E8%BF%87%E6%8A%98%E7%BA%B8%E8%A7%86%E8%A7%92%E7%90%86%E8%A7%A3%E7%A5%9E%E7%BB%8F%E7%BD%91%E7%BB%9Crelu%E7%BD%91%E7%BB%9C%E7%9A%84%E5%87%A0%E4%BD%95%E7%9B%B4%E8%A7%89/ <h1 id="add--xor--rol帮助我更好理解神经网络的实验第1篇">ADD / XOR / ROL：帮助我更好理解神经网络的实验（第1篇）</h1> <p>虽然我一直对在对抗性安全场景中使用机器学习和人工智能持怀疑态度，但也很高兴AI/ML变得重要——这至少让我觉得数学硕士（和夭折的数学博士）学业没有白费。我是&quot;自底向上&quot;数学方法的拥护者：通过大量实例实验形成猜想，再后续验证。我习惯通过实验建立直觉，部分原因是纯形式化推理时存在严重短板，部分因为我的数学思维偏重&quot;几何直觉&quot;——例如依赖几何直观来理解问题。</p>