RAM
TU Munich博士生Andreas Bergmeister提出的扩散模型强化学习后训练方法,通过Reinforce Adjoint Matching实现后训练提速50倍,基于第一性原理推导出可扩展的训练目标
时间轴 (近 90 天)
空气隔离(Air-Gap)的计算机可通过软件操控RAM产生的无线电信号泄露数据,无需物理硬件植入或网络连接。
过去已有研究利用CPU、GPU甚至USB接口的电磁辐射进行空气隔离泄密,但利用RAM进行信号发射的案例相对较少。
该RAM电磁泄漏攻击方法目前仍处于实验室阶段,距离实际武器化还有距离。
RAM产生的无线电信号非常微弱,有效接收距离通常在几米以内,且需要高灵敏度设备和抗干扰调制方式。
攻击者可以通过反复读写特定内存地址产生规律的电磁脉冲,并调制这些脉冲以编码二进制数据。
Polina 给出的经验法则是:ANR 伴随低可用 RAM,就是内存泄漏或膨胀的铁证。
Counterpoint将PC出货量下滑归因于RAM价格飙升,PC厂商被迫将成本转嫁给消费者。
当RAM ≥ 专家权重的70%时,MoE模型运行速度几乎与全内存运行无异;RAM在40%-70%之间时,速度随提示词波动;RAM < 40%时通常不值得运行。
MoE模型的专家FFN权重占据大部分体积,但每次只读取一小部分,这部分应放RAM,RAM不够时由操作系统从SSD分页加载。
模型运行时需要把权重加载进RAM(系统内存)或VRAM(显存),硬盘容量大并不代表模型能跑起来
还有 2 条时间轴事件
全部知识事实 (13)
显存带宽与系统内存带宽之间相差大约10倍
85%待验证过去已有研究利用CPU、GPU甚至USB接口的电磁辐射进行空气隔离泄密,但利用RAM进行信号发射的案例相对较少。
50%待验证空气隔离(Air-Gap)的计算机可通过软件操控RAM产生的无线电信号泄露数据,无需物理硬件植入或网络连接。
50%待验证攻击者可以通过反复读写特定内存地址产生规律的电磁脉冲,并调制这些脉冲以编码二进制数据。
50%待验证RAM产生的无线电信号非常微弱,有效接收距离通常在几米以内,且需要高灵敏度设备和抗干扰调制方式。
50%待验证该RAM电磁泄漏攻击方法目前仍处于实验室阶段,距离实际武器化还有距离。
50%待验证Polina 给出的经验法则是:ANR 伴随低可用 RAM,就是内存泄漏或膨胀的铁证。
50%待验证Counterpoint将PC出货量下滑归因于RAM价格飙升,PC厂商被迫将成本转嫁给消费者。
50%待验证MoE模型的专家FFN权重占据大部分体积,但每次只读取一小部分,这部分应放RAM,RAM不够时由操作系统从SSD分页加载。
50%待验证当RAM ≥ 专家权重的70%时,MoE模型运行速度几乎与全内存运行无异;RAM在40%-70%之间时,速度随提示词波动;RAM < 40%时通常不值得运行。
50%待验证模型运行时需要把权重加载进RAM(系统内存)或VRAM(显存),硬盘容量大并不代表模型能跑起来
50%待验证端侧运行AI模型需要更大的RAM,这推高了整个行业对内存芯片的需求
50%待验证机器学习笔记本内存建议至少16GB,系统内存与显存是完全独立且不能互相替代的两个资源
50%