十年•杭研技术秀 | 企业级监控系统实践(上)
2016年对于网易杭州研究院(以下简称“杭研”)而言是重要的 – 成立十周年之际,杭研正式推出了网易云。“十年•杭研技术秀”系列文章,由杭研研发团队倾情奉献,为您展示杭研那些有用、有趣的技术实践经验,涵盖云计算、大前端、信息安全、运维、QA、大数据、人工智能等领域,涉及前沿的分布式、容器、深度学习等技术。正是这些宝贵的实践经验,造就了今天高品质的网易云产品。本文的分享来自杭研运维团队,结合网易杭研
来自: 社区博客「云计算」什么是不可变的基础设施?
[图片] 介绍 在传统的可变服务器基础架构中,服务器会不断更新和修改。使用此类基础架构的工程师和管理员可以通过SSH连接到他们的服务器,手动升级或降级软件包,逐个服务器地调整配置文件,以及将新代码直接部署到现有服务器上。换句话说,这些服务器是可变的;它们可以在创建后进行更改。由可变服务器组成的基础设施本身可称为可变,传统或(贬低)手工艺。 不可变基础架构是另一种基础架构范例,其中服务器在部署后永
来自: 社区博客深入学习Redis的高可用特性“持久化”
述 Redis 持久化概述 RDB 持久化 AOF 持久化 方案选择与常见问题 总结 在介绍 Redis 高可用之前,先说明一下在 Redis 的语境中高可用的含义。在Web 服务器中,高可用是指服务器可以正
来自: 社区博客智能交通大数据及云应用平台解决方案
[图片] 什么是交通大数据 交通概念很大,所涉及的范围很广,如城市道路交通指数、地铁运行数据、一卡通乘客刷卡数据、港口集装箱数据、机场航班数据、轨道交通运营数据、远洋及内河航道船舶数据、物流车辆及货物数据、公交车实时数据、出租车行车数据、空气质量状况、气象数据、道路事故数据、高架匝道运行数据、以及衍生的相关拥堵、事故、违法信息等都属于交通数据。 我们通常所提的城市公安交通管理大数据是指在城市智
来自: 社区博客热点数据缓存技术
约为硬盘的1000倍,这与我们的常识一致。那紧接着的问题是,在我们线上产品部署时,为何不直接使用数据库的块缓存来存储数据,而是要使用专门的数据缓存产品来存储热门数据呢。假设每条记录50bytes,数据库
来自: 社区博客通俗易懂!前端Web程序员的的后端入门
用服务器 Web应用程序服务器是运行自定义代码的地方,用于处理客户端的请求(对HTML页面或API调用的请求)。你的自定义代码将调用其他组件来发送或获取数据(例如下面列出的那些),然后将响应发送回客户端。
来自: 社区博客FastDCS 分布式计算系统介绍(上)
1 背景简介 FastDCS是一个使用 C++ 开发的轻量级的分布式计算系统,使用它可以解决海量数据的计算和需要分布式服务方面的问题。2013年FastDCS进行了代码重构,大幅度提升了系统的性能和可靠性,并将代码和相关设计文档全部开源。[源码下载地址] 2 系统特性 FastDCS 是一个轻量级的分布式计算系统,开发者使用它可以快速的完成开发和部署工作,如同系统的名称Fast
来自: 社区博客中小电商立住脚,这篇文章不可少
足,首先要了解电商企业的业务运作模式:基本分为前台系统(即客户端,包含页面展示、产品列表等)和后台系统(即服务端,包含商品管理、订单管理、库存、物流数据等)。前台系统主要作用是提供一个让用户从浏览、挑选商
来自: 社区博客Couchbase简单介绍
couchbase是一个较新的、发展迅速的nosql数据库技术。2014年,viber宣布使用couchbase替换mongodb,以适应10亿级的用户量,目前,couchbase已大量运用于生产环境,国内使用的公司主要有新浪,腾讯等。由于中文资料较少,阅读了官方文档中的部分介绍后,将资料翻译和汇总如下。 概述
来自: 社区博客Snowflake & Delta Lake两大新型数仓对比分析
Snowflake & Delta Lake 代表了当前业内最先进的两种数仓形态,并且都得到了市场上用户的高度认可。 ——1—— 概述 数据分析从上世纪 80 年代兴起以来,大体经历了企业数仓(EDW)、数据湖(Data Lake)、以及现在的云原生数仓、湖仓一体等过程。企业数仓是数据仓库最原始的版本,从当前的视角来看,存在着只能处理结构化数据、集中式的存储和计算、以及成本昂贵等缺点。数据
来自: 社区博客