摘要:
对 "Zeroth-order Optimization with Weak Dimension Denpendency" 的note。 阅读全文
摘要:
Recursion in optimiaztion. 阅读全文
摘要:
A brief introduction of Frank-Wolfe 阅读全文
摘要:
文章证明在deterministic下强突的线性收敛,以及stochastic下强突的次线性收敛。同时,也用证明了采用TopK压缩之后的收敛情况。文中,作者还讨论了infrequence communication的作用。 阅读全文
摘要:
胡思乱想又称胡乱BB,XJB讲,扯到哪算哪,并持一种不论对错、言论自由的理念乱扯一通。 阅读全文
摘要:
很推荐大家看原文,Bilevel Problems很常见,能写成对偶形式的问题都属于这种。这篇blog会讲这篇文章大概在做什么,收敛性的证明。 阅读全文
摘要:
不要对这篇blog有什么期待,因为不论是paper还是code我都看不懂,尤其是代码。就当翻译记录吧,看看作者干了啥事,有无实现设定的目标 阅读全文
摘要:
只能说很像计算机那批人做的,就当看code和想法吧 阅读全文
摘要:
将stateless的Tensorflow Federated改写为stateful。其实有点怀疑这样stateless的clients,每次model用完就扔,重新创建model可能要占时间,以及存储。 阅读全文
摘要:
介绍如何写IterativeProcess,来定制自己的FL algorithm。之后关于custom Aggregator class和advanced tutorials就不再追加更新了。 阅读全文