size=6][size=7][size=5]
最近一两年,大部分系统的数据流由基于日志的离线处理方式转变成实时的流式处理方式,并逐渐形成几种通用的使用方式,以下介绍微博的消息队列体系。
功能模块 当前的主要消息队列分成如图3部分: 1、feed信息流主流程处理,图中中间的流程,通过相关MQ worker将数据写入cache、Redis及MySQL,以便用户浏览信息流。传统的队列使用主要是
转载
2023-12-12 22:19:18
74阅读
广告投放时选择博主的关键,并不只是博主本身,粉丝往往也起着决定作用。受众与博主共同决定了这个账号是否适合投广告?适合投放什么广告。所以,不分析粉丝画像的广告投放就是粗投,甚至盲投。正因为如此,我们在不断优化粉丝画像功能,希望给广告主提供更多粉丝相关的场景数据,以便广告选号时提供决策支持。1 粉丝画像功能优化1.去水粉丝数粉丝数据在原有的活跃粉丝数、铁粉数的基础上,新增了博主的去水粉丝数,去水粉丝数
转载
2023-08-01 17:11:33
408阅读
导读:我们每一天都能感受到互联网金融的成长和进步,在 6 月 19 日,微博商业产品部联合天弘基金(余额宝),小米支付、还有创业公司付钱拉等金融技术团队策划了首届互联网金融系统沙龙,围绕在互联网金融过程中碰到核心技术架构、系统安全、数据一致性、业务开发模式等与业界进行分享及交流。本文是陈杰在本次沙龙的演讲,授权高可用架构首发。陈杰,新浪微博资深系统架构师,毕业于清华大学化学系,从 2004 年开始
转载
2023-08-10 01:12:42
113阅读
摘要:本文介绍以小米Note发布的微博评论数据为对象,利用八爪鱼和微图工具从零散的微博数据中采集、分析生成一个清晰地用户画像吧。想设计一款新的产品,你了解未来的用户是什么样吗?想提升服务质量,用户调研应该怎么做?想评估新功能上线效果,用户情感偏好你了解吗?有了用户画像,这些问题的答案就变得逐渐清晰起来。 那么关键问题来了,用户数据要从哪里获取呢?你可以从CRM系统中寻找,也可以去各种网站
新浪微博产品分析报告一.产品概述1.1体验环境产品名称:微博 产品版本:IOS V9.1.1 体验机型:iPhoneXR 系统版本:IOS 12.0.11.2产品简介微博,一个信息流社交媒体平台,是当下几大主流社交软件之一,slogan“随时随地发现新鲜事”,用户可以将看到的,听到的, &n
转载
2023-11-10 09:15:17
118阅读
以下为演讲实录:大家下午好,在座的大部分都是技术开发者,技术开发者往往对微博这个产品非常关心。最晚的一次,是12点多收到一个邮件说想了解一下微博底层是怎么构架的。很多技术人员对微博的构架非常感兴趣,就是一个明星他有300万粉丝,这个技术怎么来实现?今天在这里跟大家分享一下微博的底层机构,让大家对微博的底层技术有更好的了解。另外不管是做客户端、1.0、2.0、论坛、博客都要考虑架构的问题,架构实际上
转载
2023-07-14 15:59:11
370阅读
转载:http://mp.weixin.qq.com/s?__biz=MzA5MTE0MDUxMA==&mid=201835019&idx=1&sn=9c9e5565790b8380bc535ea1f618c192&scene=5#rd最近一两年,大部分系统的数据流由基于日志的离线处理方式转变成实时的流式处理方式,并逐渐形成几种通用的使用方式,以下介绍微博的消息队列
转载
精选
2015-05-11 13:15:14
454阅读
中国首届微博开发者大会在北京举行,这是国内微博行业的首场技术盛宴。作为国内微博市场的绝对领军者,新浪微博将在此次大会上公布一系列针对开发者的扶持政策,以期与第三方开发者联手推动微博行业的整体发展。图为微博平台首席架构师杨卫华演讲。
以下为演讲实录:
大家下午好,在座的大部分都是技术开发者,技术开发者往往对微博这个产品非常关心。最晚的一次,是12点多收到一个邮件说想了解一下微
转载
精选
2011-02-28 19:37:55
1115阅读
点赞
下列为从网络截取过来的内容 新浪微博第一版解决发布规模问题,第二版是解决数据规模的问题,第三版是解决服务化的问题。 第一个版本采用多服务器进行负载,解决多用户的问题 第二个版本采用模块化、异步处理,解决数据规模问题。 第三个版本采用 平台服务和应用服务是分开的,这样实现了模块隔离 基础服务DB冷热分离多维度拆分 存储还做了一个去中心化 ---------------
转载
精选
2011-09-05 16:58:54
452阅读
最近一两年,大部分系统的数据流由基于日志的离线处理方式转变成实时的流式处理方式,并逐渐形成几种通用的使用方式,以下介绍微博的消息队列体系。
转载
精选
2015-01-26 16:00:32
528阅读
随着互联网的发展,人们在新浪微博、Twitter、Facebook、等社交媒体的网络社交活动也越来越活跃。就新浪微博而言,2023年春晚期间活跃用户3亿左右。由于我国网民群体庞大、网络社交活动不受地域限制、话题自由开放等特点,使得微博签到数据能够很好地反映社会热点问题、社会现象及社会舆论。 通过微博签到数据可以表征城市的网络活力。结合网络活力、人口密度、城市人均GDP等数据,进行聚类分析可以得出不
转载
2023-11-11 22:22:59
113阅读
sina微博,未认证的用户的微博是不公开的,所以你要看未认证用户的微博就必须登录。<sian登录界面>和sina采取相同策略的还有163和腾讯,而搜狐微博和twitter保持一致。从体验来讲,twitter方式明显要优于sina方式。<twitter登录界面>sina们采用的是模式窗口登录,twitter采用dropdown,搜狐也是,还是学到了twitter的思想的。&n
转载
2023-07-31 14:08:33
116阅读
1、总体架构设计原则去中心化异步化模块无状态化拆分(数据拆分、服务拆分、部署拆分...)容量规划、监控与工具自动化服务化针对具体业务做特殊优化...2、遇到的一些问题单点故障微博发表慢微博数据量太大大V用户发微博,推送给粉丝的时间延迟(指某些粉丝看到大V发表的微博的时间延迟)无法忍受如何快速定位用户发表的某一页的微博?(微博数据假设已按月拆分)复杂的关注关系(我的粉丝、我关注的、互粉、我关注的人
转载
2023-07-10 23:53:11
280阅读
1. 准备加密条件用户在新浪微博登陆的时候,密码其实被经过了三次sha1加密,所使用的到信息包括了用户的密码,服务端的时间发送过来的servertime和一个叫做nonce的字段,后面两个是在登陆的时候从服务端get过来的,例,下边是我在测试的时候截取的消息:图示1这个阶段发生在你点击登陆的时候,这样客户端就可以利用这个字段进行密码的加密。2. 使用js文件的加密算法进行加密其实在js文件中的加密
转载
2023-09-01 23:26:22
44阅读
新浪科技讯 11月16日下午消息,由新浪微博主办的中国首届微博开发者大会在北京举行,这是国内微博行业的首场技术盛宴。作为国内微博市场的绝对领军者,新浪微博将在此次大会上公布一系列针对开发者的扶持政策,以期与第三方开发者联手推动微博行业的整体发展。 以下为演讲实录: 大家下午好,在座的大部分都是技术开发者,技术开发者往往对微博这个产品非常关心。最晚的一次,是12点多收到一个邮件说想了解一下微
转载
2023-07-14 15:36:05
121阅读
微博绝对是现在使用用户数很大的了,在现在生活中基本处处都可以看到有人在看微博。随着应用规模的不断增长,原始的微博架构已经不能满足现在的功能需求了,于是这一篇博客,就“新浪微博平台架构的演变”来探讨架构的性质。第一代架构为LAMP架构,数据库使用的是MyIsam,后台用的是php,缓存为Memcache。第二代架构对业务功能进行了模块化、服务化和组件化,后台系统从php替换为Java,逐渐形成SOA
转载
2023-07-11 16:10:51
370阅读
(课堂作业,仅作参考)微博微博,是基于用户关系的社交媒体平台,用户可以通过PC、手机等多种移动终端接入,以文字、图片、视频等多媒体形式,实现信息的即时分享、传播互动。微博基于公开平台架构,提供简单、前所未有的方式使用户能够公开实时发表内容,通过裂变式传播,让用户与他人互动并与世界紧密相连。LAMP架构(2009年-2010年)。LAMP为微博的第一代平台架构,也就是平台为Linux,服务器为Apa
转载
2023-07-14 19:03:48
136阅读
架构:新浪架构师谈微博架构文章分类:综合技术图文:微博平台首席架构师杨卫华演讲新浪科技讯11月16日下午消息,由新浪微博(http://t.sina.com.cn)主办的中国首届微博开发者大会在北京举行,这是国内微博行业的首场技术盛宴。作为国内微博市场的绝对领军者,新浪微博将在此次大会上公布一系列针对开发者的扶持政策,以期与第三方开发者联手推动微博行业的整体发展。视频:中国首届微博开发者大会杨卫华
转载
2023-07-21 20:27:29
132阅读
微博平台第一代架构为LAMP架构,数据库使用的是MyIsam,后台用的是php,缓存为Memcache。 随着应用规模的增长,衍生出的第二代架构对业务功能进行了模块化、服务化和组件化,后台系统从php替换为Java,逐渐形成SOA架构,在很长一段时间支撑了微博平台的业务发展。在此基础上又经过长时间的重构、线上运行、思索与沉淀,平台形成了第三代架构体系。微博平台的第三代技术体
转载
2023-08-16 22:02:39
258阅读
最近这段时间工作上的变动有点大,五月份也闲了下来一直在思考自己接下来的方向,并对这一年来的学习进行总结.对于架构上的深入是这一年多来最主要的沉淀,从小公司到大公司,从小流量的站点的架构设计到大流量乃至超大流量的架构设计,记录下来,分享出来。在分享自己的那点料之前,先来分享下大神Tim Yang的关于微博的架构设计:这里主要从 存储和接口角度来讲对于大流量系统的架构设计,对于写入方面是特别需要注意的
转载
2023-08-15 15:10:17
169阅读