Parameter Server 后续思考
1.参数服务器有哪些容错措施？
冗余机制前面说到，每个参数会在PS集群中有三个副本，存储在不同的节点上来实现冗余。其中一个节点会被选为primary，来提供针对某个参数的服务。当这个节点失效时，另外两个副本中会被挑选出一个作为新的primary，来继续此参数的服务。 这是容灾的第一步
恢复机制前面说到，冗余机制是容灾第一步。长久之计是将目前状态恢复到失效之前（目前该参数只有两个副本，需要恢复到3个），这就需要PSC的控制，将失效节点上的参数拆分到其他active的节点上备份（如此就恢复成了三个副本）当然，如果有新节点的加入，也需要在PSC注册登记，之后PSC可以分配部分参数过去并修改路由。
2.PS 和redis和memecache这种KV存储有什么差别？
首先 ，先看redis和memcache的区别，详情见文章介绍.
其次关于PS和两者的区别。
自己的思考是：PS是一种架构。在该架构中，server group可以使用Redis或者Memcache这种KV来实现。也可以自己实现。（不知道是不是）
Parameter Server 后续思考 1.参数服务器有哪些容错措施？ 冗余机制前面说到，每个参数会在PS集群...
一、主流框架：1、SparkMLlib2、Parameter Server3、All-Reduce框架（Tenso...
2021-07-08Herring: Rethinking the Parameter Server at Sca...
2021-07-11Herring: Rethinking the Parameter Server at Sca...
参考https://github.com/jenkinsci/agent-server-parameter-plu...
首先调用Start(int customer_id, const char* argv0 =nullptr)。这个...
文章也同时在个人博客 http://kimihe.com/更新 引言 Parameter Server (PS) ...
文章也同时在个人博客 http://kimihe.com/更新 引言 Parameter Server (PS) ...
[vbird@www ~]$ command [-options] parameter1 parameter2 ....
Parameter Server简介 是一个以参数为中心的机器学习系统。 Observations 某些learn...
本文标题：Parameter Server 2
本文链接：https://www.haomeiwen.com/subject/cjcucftx.html
网友评论