一个叫大姚的工程师的博客_架构设计

实践总结：【用户画像运营分析系统】的工程实践

一、背景【用户画像运营分析系统】是利用用户的“一切”线上行为可追溯、可分析的特点，完成对用户多维度数据的完备收集和挖掘研究，让用户的特点和行为在企业面前都做到“可视化”，形成“用户画像”。从而达成以下商业目标：为企业的经营分析服务；针对用户进行精细化运营服务；针对用户进行个性化推荐、精准营销、个性化客服等多样化服务，深入挖掘潜在的商业价值；一些应用场景!image.png(https://s2.5

用户画像

数据仓库

原创推荐 2023-02-12 11:03:45 1867 阅读 1点赞 2收藏

云原生技术系列：微服务 | DDD（领域驱动设计）| 微服务技术框架

导言：记得自己最早接触类似‘微服务’的理念和实践是在2013年写一个工业级IM系统，当时向往和学习的对象就是腾讯系。特别是腾讯大讲堂中一期《微信之道－至简》对自己的架构理念影响很深，比如下图（1）中体现的就是微服务的设计思想。我也是仿照此架构，设计了我们的IM系统架构。!image.png(https://s2.51cto.com/images/20220707/1657203021985196.

微服务

原创精选 2022-07-07 22:54:23 1738 阅读 1点赞

实践总结：《‘高并发&高性能&高可用服务程序’编写及运维》指南

导言：记得在远2012年时，因为向往着能写高并发程序，自己选择了跳槽。开始时是写支撑数万设备并发的程序（我们物联网设备业务需要保持长连接），随着企业的发展，逐渐增长到十万、数十万设备，当时还讲究挖掘单机性能，所以紧着各种线程模型、I/O模型……不断地挖掘潜能，实在挖不动了就开始着手用分布式方案的解决。比如当时开源的一个高性能服务模型：<https://github.com/yaocoder/HPN

高并发

高可用

高性能

高扩展

原创推荐 2022-06-23 22:15:46 1713 阅读 yyds干货盘点

《微服务设计》读书笔记

导读：《微服务设计》是一本非常出彩的技术书籍，从可读性、实战技术干货方面都非常优秀，甚至让我想起了曾经读《深入理解计算机系统》《UNIX编程艺术》这类经典好书时的感觉。以下是我做的一些概括性的读书笔记，非常希望大家能阅读全书，挖掘更多知识。

微服务

读书笔记

原创精选 2018-04-28 08:39:21 7435 阅读 3点赞

分布式系统实战

导言：记得在自己大学毕业的2006年到之后近五年的工作里，源于工作经历和有限的视野，几乎对“分布式系统”没有任何概念。当然，彼时的互联网/移动互联网还未对我们的生活呈覆盖颠覆之势，很多网络应用采用传统的集中式服务便可应对。但是随着互联网大潮的风起云涌，出现了越来越多的细分大流量网站及应用，网民体量也如滚落雪球一般越来越大，这种情况下分布式的概念几乎在技术圈“家喻户晓”，也成了我们追逐的另一颗时代“

分布式

原创推荐 2017-12-03 22:06:06 9111 阅读 8点赞 3收藏

我的“技术架构”之旅

导语：很久没写过涉及技术的文章了，因为进行职业转型后对技术有种很纠结的心态。热爱——每每看到五颜六色的代码窗口就会心里发酸，想起曾经那是生活中的一份灿烂心情；不自信——这么久离开技术会不会已经落后生疏（虽然一直没有脱离技术的学习与参与，但是失去了一线写代码的实践）。今天恰好去参加AWS（亚马逊云服务）的一个区域讨论会，一位亚马逊的架构师在为大家讲解AWS云服务及一些案例的架构设计，很多熟悉的概念，

架构设计

原创推荐 2017-11-16 22:48:50 10000+阅读 13点赞 6收藏

IM系统架构设计之浅见

背景：除去大名鼎鼎的QQ这款即时聊天工具，还有许多细分行业的IM，比如淘宝阿里旺旺、网易泡泡、YY语音......。恰巧公司产品也要开发一款基于我们自己行业的类IM系统，很有幸我担当了这个产品的架构师，核心代码编写、实现者。下面我近年来从技术上我对IM系统（即时消息的传输，不包括语音，视频，文件的传输）的理解和设计分享出来，浅薄之见，望大家别见笑，欢迎给出批评意见。一.网络传输协议的选择目前我知晓

IM

架构

原创推荐 2014-05-15 19:16:50 10000+阅读 12点赞 15评论

服务端架构中的“网关服务器”

这么一个场景：一个要承载高并发、具有高性能的后台服务，往往会有多个不同的应用服务。问题来了，你会怎样设计架构呢？如下图所示，为了共用一个稳定高效的网络处理功能，把所有服务写在一个进程里。接下来悲剧一幕幕就要上演了，如果各个模块是多人协作开发，网络库的作者得想办法设计个插件机制供各个应用挂载，开发时无论是人员或者代码都耦合非常严重，大大影响协作、开发效率，后期要增减一个应用也得大动手脚。好吧，这还可

架构

nginx

高性能

网关服务器

原创推荐 2014-03-12 20:06:25 10000+阅读 5点赞 3收藏 3评论

Web推送技术研究

背景：我们研发的平台已经完成了支持PC端和移动端的针对大量用户的实时消息推送体系，采用原生的socket建立长连接的技术来实现。当前阶段要开发相应支持web端的实时消息推送体系，如何实现摆在了我的面前，以下是我考察和论证的结果，和大家一起分享下，也欢迎大家指正我其中的错误或考虑不周之处。有哪些可以实现web消息推送的技术：我们了解到传统的web服务都是客户端发出请求，服务端给出响应。但是现在直观的

Comet

web推送

长轮询

原创 2014-01-24 14:23:51 6131 阅读 3点赞 5评论

构建高性能服务的考量

做一款互联网产品，人们往往立马就想到了海量用户、海量数据、高并发、高性能。所以起初做架构设计时就把性能提到了一个不得不做的地位。我个人是很反对这种“未雨绸缪”的方式的，因为对于一个新应用来说获取一个互联网用户的成本并不小，而且“海量”不是短期内就会面临的。所以请建议您最好先在基于投入产出比的考量下对快速实现 OR 性能重要程度做出权衡后再做考虑，最好先实现应用再做优化，过早优化是万恶之源这句话不是

服务器

带宽

高性能

原创 2014-01-14 19:13:26 7230 阅读 1点赞 1收藏

三读《UNIX编程艺术》——UNIX哲学

如果在我目前的职业生涯中要选出一本对我影响最大的书籍，我一定会选择ESR的《UNIX编程艺术》。第一次读此书时资历尚浅，更多的是当做一本课外读物来看，但是随着职业中接触了更多不同的操作系统，完成了更多项目产品的设计、架构、实现，对书中所讲内容产生了更大的共鸣。在第三次读此书之际，把书中很多有价值的思想提取出来给自己一个总结，希望也能给大家带来一次分享。本书关注的重点：不止于方法，更重乎理念。知识（

UNIX

艺术

哲学

原创推荐 2014-01-09 22:22:23 10000+阅读 5点赞 6评论

可伸缩系统的设计模式（译）

Ricky Ho在他的博客中分享了该文章，该文章是一个简单的概括分享，详细的可以参见他博客的其它详细文章。下面主要是意译。1、Load Balancer：负载均衡 – 由分发者来决定哪个工作者处理下一个请求，这种决定可以基于不同的策略。“In this model, there is a dispatcher that determines which worker instance will h

分布式

可扩展

可伸缩

转载精选 2013-06-26 12:59:36 928 阅读

多线程服务器的适用场合

http://www.cnblogs.com/Solstice/archive/2010/02/28/why_multithreading.html 陈硕 (giantchen_AT_gmail)Blog.csdn.net/Solstice2010 Feb 28 这篇文章原本是前一篇博客《多线程服务器的常用编程模型》（以下简称《常用模型》）计划中的一节，今天终于写完了。 “服务器开发”包罗万象，

服务器

博客

模型

文章

多线程

转载精选 2012-04-24 16:26:27 1829 阅读

谈谈UML使用

如果有不了解UML的，请先看一下IBM developerworks这篇讲解UML的简短但是高质量的文章http://www.ibm.com/developerworks/cn/rational/r-uml/ 在之前的工作中，我了解UML，会简单使用UML，但是有一种观点，UML只是一个建模方法，目的主要是为了向人们阐述清楚工程的设计目的，工程的基本流程......，应用的场合也只在面向对象

职场

uml

休闲

状态图

原创 2012-04-07 10:02:21 1721 阅读 1评论

浅谈几种序列化协议

工作中用过几种知名的序列化协议，说说自己的感受吧，先独立讲各自的概念，然后比较下他们的优缺点。JSON（Javascript Object Notation）官方网站是这样叙述的：一种轻量级的资料交换语言。易于人阅读和编写。同时也易于机器解析和生成。json有两种结构：1.名称/值，例如：{ "name" &n

职场

xml

休闲

json

protobuf

原创 2012-03-04 12:44:27 10000+阅读 1点赞

怎样去平衡C++项目的设计？

前些日子，再看了看一个自己曾经编写过的项目的源码。此前，由于处理核心的增加，实践中发现的问题不断地参入代码，某些模块的代码已经相对混杂，一直想找时间重构但是苦于没有时间。于是，由另一个同事重构后交至我手中。从大局上看代码，确实做到了高度的解耦，也引入了设计模式的一些概念，代码结构比较清晰。可是仔细跟踪分析后才发现，和我重构的思路不太一样，至少要比我想到的要多两层，而且其

c++

设计模式

原创推荐 2012-02-29 22:13:41 3405 阅读 3点赞 1评论

jspf插件框架

简介： jspf (Java Simple Plugin Framework) 是一个插件框架，用于减少小型项目的的开发时间，增加代码的可维护性。他完全隐藏了组件的详细实现，只用到他们的接口。加载组件所需要的代码也很少，便于编写。 jspf框架完全基于java注释实现 @PluginImplementation,@Inje

职场

休闲

jspf

插件框架

原创推荐 2011-05-10 22:43:57 7631 阅读 1点赞 2评论

snort源码的详细分析

前段时间由于工作关系，对snort入侵检测系统进行了仔细的研究，起初基本都是通过网上找的资料，对于snort系统的应用，原理，架构，配置，源码机构网上都可以找到比较详细的资料，我自己用vs2010编译了snort的源码，并且进行了调试跟踪，现在把代码更详细的介绍与大家分享，如果其中有什么错误欢迎大家指正！图1紧接图1的SnortMain(argc, argv)继续做介绍图2

原创推荐 2011-01-22 15:13:25 10000+阅读 4点赞 3评论

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

永远的朋友