通过可并行采样器与高效温度估计释放玻尔兹曼机的潜力
玻尔兹曼机(BMs)是基于能量的强大生成模型,但其高昂的训练成本使得实际应用主要局限于采用对比散度高效学习方法的受限玻尔兹曼机(RBMs)。更精确的学习通常需要马尔可夫链蒙特卡洛(MCMC)玻尔兹曼采样,但由于更具表现力的模型难以并行化,这一过程十分耗时。为解决这一局限,该团队首先提出了一种受量子启发的组合优化方法——模拟分岔(SB)所启发的全新玻尔兹曼采样器。这种称为朗之万模拟分岔(LSB)的方法,在保持与MCMC相当的精度同时实现了并行化采样,且不仅适用于RBMs,还可用于具有通用耦合的BMs。然而,LSB无法控制输出玻尔兹曼分布的逆温度参数,这会阻碍学习过程并降低性能。为此,研究人员还开发了一种在学习过程中高效估计逆温度的方法——条件期望匹配(CEM)。通过结合LSB与CEM,该工作为比RBMs更具表现力的BMs建立了一个高效学习框架,称为采样器自适应学习(SAL)。SAL为超越RBMs的基于能量生成模型开辟了新途径。
量科快讯
1 天前
1 天前
【 美国弗吉尼亚州首个量子科学硕士课程在乔治梅森大学落地】美国乔治梅森大学日前宣布推出新的量子科学与工程理学硕士课程,这是弗吉尼亚州首个此类学位项目,在全美亦属少数。课程聚焦三大核心方向:量子计算与…
1 天前
2 天前
2 天前

