从这里看到新浪微博的一道面试题:给定sina微博的全部用户(1亿以上)和标签(uniq的标签30万左右)的关系, 系统找出共有2个或以上标签的用户对,并给出这些标签是哪些。
从这里看到新浪微博的一道面试题:给定sina微博的全部用户(1亿以上)和标签(uniq的标签30万左右)的关系, 系统找出共有2个或以上标签的用户对,并给出这些标签是哪些。看起来是一
转载
2023-07-21 17:51:31
59阅读
在“博微新技术”公司面试中,我们常常会遇到与Java开发相关的技术问题。为了帮助大家更好地备战这些面试,我将详细阐述解决“博微新技术Java面试内容”问题的过程,涵盖背景定位、演进历程、架构设计、性能攻坚、故障复盘和复盘总结六大部分。
### 背景定位
在博微新技术的工作中,Java应用承担着数据处理、业务流程控制以及与其他系统的交互。通过对目前业务场景的分析,我们发现整个系统的架构需具备高可
前言:微博开放平台提供了微博数据的api接口,不仅可以直接通过api调用微博服务发布微博查询微博,更重要的是,可以在自己的网站上获得新浪微博api的授权,调用微博的某些内容,就好像我们再网站中看到好文章要分享到微博或者其他社交网站中一样,非常方便。下面就来探秘一番。1.注册开发者并获取app key 和 app secret 百度很容易找到微博开放平台的入口,登录自己的微博账号,点击账
转载
2023-07-20 20:38:01
744阅读
1评论
你好,我是新浪微博的技术专家。我于2013年加入新浪微博,作为核心技术人员参与了微博服务化、混合云等多个重点项目,是微博开源的RPC框架Motan的技术负责人,同时也负责微博的Service Mesh方案的研发与推广,专注于高可用架构及服务中间件开发方向。 我负责的Motan框架每天承载着万亿级别的请求调用,是微博平台服务化的基石,每次的突发热点事件、每次的春晚流量高峰,都离
转载
2023-12-01 19:43:51
31阅读
先上图演示下: 看完图就直接上代码吧,其中有几处写死的地方,我有提示,你们自己改下就是了。//@显示用户列表
(function($) {//判断是否为子元素
function isParent(obj,pobj){
while (obj != undefined && obj != null && obj
转载
2023-12-03 09:21:42
22阅读
毕设题目要使用到新浪微博数据,所以要爬取新浪微博的数据。一般而言,新浪微博的爬虫有两种模式:新浪官方API和模拟登录新浪微博。两种方法的异同点和适用情况就无须赘述了。前辈的文章已经非常多了。写这篇文章主要记录自己的探究过程。背景知识:Http协议,HttpClient开源包。1,微博登陆流程使用Firefox下的HttpFox或者Chrome下的[工具]->[开发者工具](F12快捷键启动)
转载
2023-10-31 21:49:58
45阅读
使用微博提供的API接口发送微博创建微博应用微博对微博应用开放API接口,不对个人账号开放,我们要先注册一个微博应用,将自己电脑作为应用服务器。如果用户想通过API接口发微博,那么用户要先向微博应用授权,微博应再帮这个用户发微博。一个微博应用可以提供给很多用户使用。获取用户授权的过程这个过程需要三方共同参与:用户,微博服务器,应用服务器。创建微博应用后,我们会拿到一对 App Key 和 App
转载
2024-01-05 11:14:50
398阅读
我的个人微博早前有大量跟好友的页面聊天数据,随着时间增多,发的微博近乎上万条,可是微博本身没有提供数据备份功能,查看了一下API文档,从官方提供的接口取得的数据也只是有限条,无法满足需要,因此萌发了写个爬虫用模拟登录的方式将所有发过的微博抓取下来。一 、先分析一下微博网页版的结构和流程:首先是登录,需要用户名、密码、验证码,登录成功后进入个人微博主页,在主页右边有一个年份侧边栏,从这里可以按时间查
转载
2023-08-28 09:51:57
176阅读
新浪微博时间的返回格式 Thu Aug 13 18:03:49 +0800 2015,Thu和+0800我也不晓得是什么,就没管这两个。我将微博的发表时间先统一格式化为20150813180349的格式,然后获取系统时间也格式化为这个形式,得到两个时间的毫秒差值,根据差值来确定时间的显示格式。虽然下面的代码是针对新浪微博的进行编写的,不过我觉得以后可能还会在其他地方用得着,索性就记录下来
转载
2024-07-01 18:29:58
37阅读
java模拟登录新浪微博(通过cookie)这几天一直在研究新浪微博的爬虫,发现爬取微博的数据首先要登录。本来打算是通过账号和密码模拟浏览器登录。但是现在微博的登录机制比较复杂。通过账号密码还没有登录成功QAQ。所以就先记录下,通过cookie直接访问自己的微博主页。微博登录的认证过程微博登录的细节在其他的博客里已经有了详细的介绍。大概就是用户输入账号和密码后与服务器产生几次会话。若认证成功后,微
转载
2024-05-29 23:22:05
52阅读
在正题之前,先了解一下java下抓取网页上特定内容的方法,也就是所谓的网络爬虫,在本文中只会涉及简单的文字信息与链接爬取。java中访问http的方式不外乎两种,一种是使用原生态的httpconnection,还有一种是使用封装好的插件或框架,如httpclient,okHttp等。在测试爬取网页信息的过程中,本人是使用的jsoup工具,因为该工具不仅仅封装了http访问,还有强大的html解析功
转载
2023-12-23 16:13:37
50阅读
背景最近用实现了一个简单的发微博的功能。新浪微博的SDK已经经历了多次更新,而网上的资料、教程大多还是基于旧版本的,很多细节上有了一些变化。本文将基于最新的新浪微博SDK介绍发微博的过程。简介首先,需要在新浪微博开放平台创建自己的应用,获取App Key与App Secret两个字符串。然后,下载新浪微博SDK。在配置文件中填入上一步获得点的AppKey与App Secret,以及回调地址。运行例
转载
2023-07-21 13:27:57
109阅读
### Java调用微博API发送微博
#### 引言
随着社交媒体的普及,微博已经成为了人们分享生活、表达观点的重要平台之一。微博提供了一套开放的API,使得开发者可以通过编程的方式来与微博进行交互。本文将介绍如何使用Java语言调用微博API来发送微博。
#### 运行环境配置
在开始编写代码之前,我们需要做一些运行环境的配置。
1. 首先,我们需要创建一个新的Java项目。可以使用
原创
2024-01-13 06:17:47
383阅读
前言前几天刚刚接触了Java这边的关于HTTP的一个工具包—HttpClient , 那么就想借此机会练练手, 用这个工具进行对微博的模拟登录, 简单的获取一下微博的数据 , 但是大家可以不必执着于这个框架的学习 , 还可以选择其他的 , 就在写博客的时候发现了更多的网络框架 , 比如okHttp , Retrofit , OpenFeign , WebMagic , 可以着重考虑使用上面的框架来
转载
2023-08-11 14:30:24
225阅读
上次也写了一个微博登陆页面,不过功能还不够完善。今天重新完善了一些功能,分享出来给大家。基本功能如下:(1)具有类似新浪微博的用户注册图形界面.(2)使用用户名或手机号注册,注册时需要提供新密码和确认密码。(3)注册时,用户名重复和手机号重复时能提供提示。(4)注册时,手机号明显错误时能提供提示,手机号长位,并且以(5)程序以应用程序形式实现,不用(6)用户数据存储以1 package com.b
转载
2023-06-06 21:39:38
159阅读
我的目录微博三个接口的获取1.用户搜索接口(8)用户搜索接口格式2.用户信息、用户微博接口(3)用户信息接口格式(4)用户微博接口格式 不知不觉2021年了,先祝大家元旦快乐!这段时间有些忙,在学习tk,特地买了一本书来学(《Python GUI设计 tkinter菜鸟编程》),根据书中所学和网上资料,开发微博图片采集工具GUI版本。 本篇文章会详细讲解weibo三个接口的获取。 微博三个接
转载
2023-11-09 22:39:18
164阅读
环境: ubuntu 18.10 python 3.6 pip install sinaweibopy3说下:m.weibo.cnweibo.cnweibo.com我们只使用第一个,用来获取代码中需要的idopen.weibo.com自己完成认证以后, 打开自己新建的应用找到下面两个东西: App Key:502108417 App Secret:794019e15ae228d4295f2509b
转载
2023-06-12 14:43:09
171阅读
前言:本文主要内容是介绍如何用最简单的办法去采集新浪微博的数据,主要是采集指定微博用户发布的微博以及微博收到的回复等内容,可以通过配置项来调整爬取的微博用户列表以及其他属性。既然说是最简单的办法,那么我们就得先分析微博爬虫可能选择的几个目标网址,首先肯定是最常见的web网站了还有就是m站,也就是移动端网页以及一个无法旧版本的访问入口了,首先可以排除web站了,这个是最麻烦的,它的请求是被js加密过
1.微博三方登录流程 1.1 前端获取认证code 1.在Vue页面加载时 动态发送请求获取微博授权url 2.django收到请求的url后,通过微博 应用ID(client_id)和回调地址(redirect_uri) 动态 生成授 权url返回给Vue 3.当用户点击上面的url进行扫码,授
作者 | 李水青智东西1月22日报道,大年三十,2023年央视春晚照例引起了全民热议,其中的“元宇宙”元素也亮了。在一开场的《花开种花家》开场歌舞中,科技萌兔吉祥物“兔圆圆”登场,为本届春晚的三维“元宇宙“风格定调。往年大发红包的科技公司,如今风头被白酒品牌等春晚互动伙伴抢走,但晚会制作的科技味儿似乎并没有淡。比如,视觉画师通过VR(虚拟现实)三维绘制的过程被搬上晚
转载
2023-09-06 09:36:19
62阅读