使用Docker Swarm搭建分布式爬虫集群
此文已由作者谢乾坤授权网易云社区发布。 欢迎访问网易云社区，了解更多网易技术产品运营经验。 在爬虫开发过程中，你肯定遇到过需要把爬虫部署在多个服务器上面的情况。此时你是怎么操作的呢？逐一SSH登录每个服务器，使用git拉下代码，然后运行？代码修改了，于是又要一个服务器一个服务器登录上去依次更新？ 有时候爬虫只需要在一个服务器上面运行，有时候需要在200个服务器上面运行。你是怎么快速切换的呢？一个服
来自： 社区博客测试环境docker化（二）—容器集群编排实践
本文来自网易云社区 作者：孙婷婷 背景 在前文《 测试环境docker化—基于ndp部署模式的docker基础镜像制作》中已经详述了docker镜像制作及模块部署的过程，按照上述做法已可以搭建测试环境。但是在实践过程中发现存在很多问题： 在一台云主机上搭建多个模块，容易出现资源不足的情况（我们在实验过程中有台云主机好几次宕机，经常要删掉不用的镜像容器）； 部分模块之间需要相互调用，为方便部署多套
来自： 社区博客Docker中搭建zookeeper集群
1.获取官方镜像 从dockerhub获取官方的zookeeper镜像： docker pull zookeeper 2.了解镜像内容 拉取完镜像后，通过 docker inspect zookeeper 我们可以查看到关于该镜像的一些基本信息： ...... "Env": [ "PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin
来自： 社区博客容器服务_服务管理_集群编排服务_容器集群管理方案_网易蜂巢-网易数帆
容器服务,容器集群管理方案,网易蜂巢 容器服务基于Kubernetes和Docker的集群编排服务提供高性能的容器集群管理方案，支持弹性伸缩、垂直扩容、灰度升级、服务发现、服务编排、错误恢复及性能监测等功能-网易蜂巢容器服务 容器服务是网易数帆提供的无服务器容器服务，让企业能够快速部署业务，轻松运维服务。容器服务支持弹性伸缩、垂直扩容、灰度升级、服务发现、服务编排、错误恢复及性能监测等功能。 获
来自： 产品在Docker中安装和部署MongoDB集群
此文已由作者袁欢授权网易云社区发布。 欢迎访问网易云社区，了解更多网易技术产品运营经验。 在Docker中安装mongodb 采用的mongodb镜像：https://registry.hub.docker.com/u/tutum/mongodb/ 以该镜像启动一个容器（注意此时mongodb是standalone模式）： docker run -d --name=mongodb -p
来自： 社区博客细说Mammut大数据系统测试环境Docker迁移之路
前言 最近几个月花了比较多精力在项目的测试环境Docker迁移上，从最初的docker“门外汉”到现在组里的同学（大部分测试及少数的开发）都可以熟练地使用docker环境开展测试工作，中间也积累了一些经验和踩过不少坑，借此2017复盘的机会，总结一下整个环境的搭建过程，希望可以给其他有志于向docker迁移的项目提供些许参考，同时也想跟其他docker的老司机们一起探讨改进方式。 Docker迁
来自： 社区博客分布式集群管理与监控利器 - Minos
Minos简介 minos是小米内部实现并使用的一套分布式部署与监控系统，现在已经开源（https://github.com/XiaoMi/minos.git），主要用来管理并监控Hadoop、HBase以及Zookeeper集群等。在最新的版本，也可以很容易地扩展到支持YARN、Impala等集群。 Minos架构 [图片] 如上述架构图所示，minos由多个组件组成，分别为Tank
来自： 社区博客如何部署一个酷酷的 Docker 在线实验室
;Play With Docker ( Docker 在线实验室) 是一个运行在浏览器中的 Docker Playground，无需安装任何环境，就可以在线体验 Docker。 今年 3 月，我基
来自： 社区博客基于zookeeper的Swarm集群搭建
简介 Swarm：docker原生的集群管理工具，将一组docker主机作为一个虚拟的docker主机来管理。 对客户端而言，Swarm集群就像是另一台普通的docker主机。 Swarm集群中的每台主机都运行着一个swarm节点代理，每个代理将该主机上的相关Docker守护进程注册到集群中。和节点代理相对应的是Swarm管理者，用于对集群进行管理。 运行Swarm的所有Docker节点必须运
来自： 社区博客编排管理成容器云关键，Kubernetes和Swarm该选谁
不论是公有云还是私有云环境，Docker 在新一代技术架构中的重要地位已经毋庸多言，甚至已经有企业在探索完全 Docker 化。在此背景下，如何选择容器技术栈就成为了企业实践的关键。回答这个问题，首先需要厘清技术体系更新的逻辑，再看可选技术是否符合需求。本文认为，容器的管理和编排将是容器云的关键，而 Kubernetes 是最为成熟的编排技术。 [图片] 容器管理和编
来自： 社区博客
