博主几天前发布的文章,几天后又有了新的解决思路:完整的代码放在文章最后  用手机端抓取 首先请求到这个页面我们的目标抓取景点名 详情链接  评分  景区等级 门票价格等数据如果我们选择在主页面(上面这个页面)抓取 景点名和详情链接都可以捕获到,但是有的景区没有评分和等级-----------所以造成的困惑是后期用zip方法处理数据没有办法一一对应,因此我抓到
今年动作不断,继5月份收购艺龙后,前不久又宣布了与去哪儿合并,成为国内在线旅游领域当之无愧的霸主。在多年的发展中不断进行架构优化,逐步采用分布式架构,解耦业务和架构,提高可扩展性,现在已逐步进化到大量采用开源技术的Java+.Net (.Net主要是为了兼容历史业务)混合技术栈。从2013年开始使用OpenStack将基础设施标准化,实现快速部署,帮助减少运维成本。曾在QCon上分
转载 2024-02-04 22:08:48
206阅读
最近一个项目中要使用酒店查询和飞机票预定,我这一通折腾,好在皇天不负有心人,最后终于一一搞定。选择了,为什么呢?目前国内有几家规模比较大的,例如:去哪儿,艺龙旅行,和。了解了一圈,最后发现,的api免费的。所以我就选择了。如果你对api有什么疑虑,或者不清楚,不知道怎么使用的,请留言,我会尽快回复你的。目前网上的资料(ios用的)比较少,所以我就写了这篇博客让大家尽量少走些弯路
今天读了杜小芳老师写的《中国技术力量:的技术演进之路》,感受很多。        首先谈到的是他的基础架构在多年的发展中不断进行架构优化,逐步采用分布式架构,解耦业务和架构,提高可扩展性,现在已逐步进化到大量采用开源技术的Java+.Net (.Net主要是为了兼容历史业务)混合技术栈。从2013年开始使用OpenStack将基础设施标准化,实
作者简介一十,资深后端开发工程师;振青,高级后端开发专家。一、前言酒店查询服务是酒店BU后端的核心服务,主要负责提供所有酒店动态数据计算的统一接口。在处理请求的过程中,需要使用到酒店基础属性信息、价格信息等多维度的数据信息。为了保证服务的响应性能,酒店查询服务对所有在请求过程中需要使用到的相关数据进行了缓存。随着酒店业务的发展,查询服务目前在保证数据最终一致性以及增量秒级更新延迟的
作者简介秋石,数据仓库专家,关注大数据、数据仓库、数据治理等领域;九号,数据技术专家,关注数据仓库架构、数据湖、数据治理;魁伟,资深数据工程师,关注实时&离线大数据产品及技术。一、实时数仓当前,企业对于数据实时性的需求越来越迫切,因此需要实时数仓来满足这些需求。传统的离线数仓的数据时效性通常为 T+1,并且调度频率以天为单位,无法支持实时场景的数据需求。即使将调度频率设置为每小
作者简介灿荣,软件技术专家,目前关注互联网中台以及中间件领域。一、背景介绍       为解决系统重复建设、能力复用性低的问题,启动了中台化建设步伐。旅游行业的中台建设,并非从零开始,前期已经积累了行业中多个场景的业务和技术的中台能力。因系统建设的复杂,亟需一个中台大脑站在全局视角进行公司中台能力的梳理和建设。Tripyun-云是中台团队打造
第6 章 数据库 6.1 上传发布 数据库的上传发布,简而言之,就是DDL操作的过程,主要包括表的创建,表结构的调整,索引的调整等。 6.1.1 表结构设计规范 1.创建表的存储引擎必须是InnoDB:不能选择其他引擎 2.每张表必须有主键且不能使用联合主键:每行数据都能被唯一区分 3.默认使用utf8mb4字符集:uft8mb4字符集支持emoji表情符 4.每张表
转载 2024-07-28 10:36:23
535阅读
1评论
在多年的发展中不断进行架构优化,逐步采用分布式架构,解耦业务和架构,提高可扩展性,现在已逐步进化到大量采用开源技术的Java+.Net (.Net主要是为了兼容历史业务)混合技术栈。从2013年开始使用OpenStack将基础设施标准化,实现快速部署,帮助减少运维成本。曾在QCon上分享过使用OpenStack打造私有云的经验,基于OpenStack进行二次开发,综合了KVM,VM
转载 2023-08-10 00:19:06
328阅读
前言酒店业务部门是旅行的几大业务之一,其业务逻辑复杂,业务需求变动快,经过多年的研发,已经是一个代码规模庞大的工程,如何规范代码,将代码按照其功能进行分类,将代码写到合适的地方对项目的迭代起着重要的作用。MVP模式是目前客户端比较流行的框架模式,在很早之前就开始探索使用该模式进行相关的业务功能开发,以提升代码的规范性和可维护性,积累了一定的经验。本文将探讨一下该模式在实际工程中的优点和缺陷
转载 2023-09-24 07:50:54
544阅读
旅行网的实现 实验1  完成头部内容制作步骤1:创建main.html页面,写结构代码(html)如下:步骤2:写样式代码(css)1、创建common.css样式文件和main.css样式文件,将该文件链接到main.html页面中,代码如下:   2、在main.css样式文件中编写如下样式代码:实验2  完成头部下方内容制作(3
转载 2023-07-30 15:00:03
72阅读
导读 作为全球领先的一站式旅行平台,旗下拥有旅行网、去哪儿网、Skyscanner 等品牌。旅行网向超过 9000 万会员提供酒店预订、酒店点评及特价酒店查询、机票预订、飞机票查询、时刻表、票价查询、航班查询等服务。 随着业务量迅速增长,需要更敏捷的技术架构来满足不断激增的并发与数据量,一个稳定、可靠,可以随业务增长不断扩展的数据库对于来说显得尤其重要
转载 2023-07-12 18:50:55
981阅读
源起 日志,看似简单简单的文本,在网站运维人员眼里却似一座蕴含丰富的宝藏。通常以下运维任务都或多或少需要运维人员和日志打交道: 系统健康状况监控 查找故障根源 系统瓶颈诊断和调优 追踪安全相关问题 技能熟练的Linux SA们能够很快的组合诸如grep, awk这样的命令,奇幻般的从日志中挖掘出有用的信息;亦或是研发人员往往会基于MySQL,MongoDB,HBase开发自己的日志存储和分析
分析商旅架构分析作用 在当今快节奏的商业环境中,企业在商旅管理方面面临越来越多的挑战。作为一家领先的在线旅游服务平台,其商旅管理系统架构的有效性和灵活性显得尤为重要。本篇博文将借助于对商旅架构分析,来探讨其在技术实现、性能优化与实际应用中的作用,帮助读者更好地理解这一复杂系统。 首先,让我们回顾一下商旅的发展背景: 1. **2000年:成立**,开始提供基础的旅游服务
原创 8月前
92阅读
作者简介:胡健,框架高级研发经理,目前负责多媒体服务的构建和研发工作。近些年业务突飞猛进,用户遍及世界各地。公司对用户体验也越来越重视,每一个小的功能改动、页面改版的背后,都有大量的A/B实验提供保障。与此同时,与用户体验息息相关的媒体文件的应用质量也被放到重要位置,如图片加载延时、成功率、清晰度等数据。本文将分享图片服务架构,包括 服务架构的演变过程,以及在生产上实际遇到的一些问题,
转载 2024-02-10 07:29:38
528阅读
作者简介Alex,资深软件工程师,关注微服务架构及分布式缓存技术。一、前言的微服务框架产品从2013年发展至今,已经历了7年多的打造。其中所使用的服务注册中心也从最开始人工数据维护架构演进到了现在全自动、百万容量级的架构。本文将逐一回顾服务注册中心所经历的三轮迭代过程,并重点介绍最新的第三版架构的设计与实现。 二、服务注册中心是什么?图2-1 微服务架构微服务架构中所要解决的
CTO 是企业内技术最高负责人,对企业的发展起到至关重要的作用。但随着公司的不断发展,CTO 的工作重心也会不断变化。只有在正确的阶段做正确的事,才能更好地为公司做出贡献。本文作者:陈睿 优知学院创始人,10年+产品技术经验,前百度研发经理,定制旅游CTO,曾先后就职于淘宝、百度、,负责产品&技术团队。创业公司成长的四个阶段首先,需要非常清晰的认知一家创业公司的发展周期,一般每一
作者 | 蒋一新 为了应对日益严重的支付欺诈,在线风控系统2011年正式上线。现在,在线风控系统支撑了每日1亿+的风险事件实时处理和100亿+的准实时数据预处理;系统中运行的总规则数和总模型数分别达到了1万+和20+;风控的范围从单纯的支付风控扩展到了各种类型的业务风控(例如:恶意抢占资源、黄牛抢购、商家)。下图是当前在线风控系统的
转载 2023-07-14 16:25:53
13阅读
中小型研发团队很多,而社区在中小型研发团队架构实践方面的探讨却很少。中小型研发团队特别是 50 至 200 人的研发团队,在早期的业务探索阶段,更多关注业务逻辑,快速迭代以验证商业模式,很少去关注技术架构。这时如果继续按照原有的架构及研发模式,会出现大量的问题,再也无法玩下去了。能不能有一套可直接落地、基于开源、成本低,可快速搭建的中间件及架构升级方案呢?我是一个有十多年经验的 IT 老兵,曾主导
本文来自技术中心基础业务研发部的《应用架构涅槃》系列分享。据基础业务研发部负责人李小林介绍,互联网二次革命的移动互联网时代,如何吸引用户、留住用户并深入挖掘用户价值,在激烈的竞争中脱颖而出,是各大电商的重要课题。通过各类大数据对用户进行研究,以数据驱动产品是解决这个课题的主要手段,的大数据团队也由此应运而生;经过几年的努力,大数据的相关技术为业务带来了惊人的提升与帮助。以基础大数据的用户意
  • 1
  • 2
  • 3
  • 4
  • 5