目录一.前言二.hive的启动与连接2.1 启动hadoop2.2 启动hive2.3 一些注意事项一.前言 太久没用hive了，今天想重新熟悉一下，结果发现自己甚至忘记了怎么启动。。于是特此记录篇笔记，便于以后忘记时查阅，不会写的太细。 &nbs
转载
2023-09-01 08:40:37
183阅读
Hadoop平台的搭建流程之单机/伪分布配置所需工具：VMware Workstation / Virtual Box 虚拟机; Hadoop安装文件；实验环境：Ubuntu 32位或64位系统 / CentOS系统；ps:该实验教程采用Ubuntu 64位系统进行讲解。 Ubuntu安装系统：请参考http://dblab.xmu.edu.cn/blog/337-2/ 如果使用CentO
转载
2024-02-05 15:03:47
55阅读
前期准备事项一、注册阿里云账号（腾讯云也可以）二、申请域名,例如:live.com(假设申请这个域名)，备案审核通过三、开通阿里云直播服务1.添加域名 2.点击播流域名域（player.live.com）名配置，将播流域名关联推流域) 3点击转码模板配置，设置播放清晰度（如果不转码，需要使用原始流观看） 4.点击地址生成器（生成器的AppName和转码模板
转载
2023-11-01 13:26:41
157阅读
本文包括原理篇/思路篇/实践篇/方案篇/前端篇/总结直播难：个人认为要想把直播从零开始做出来，绝对是牛逼中的牛逼，大牛中的大牛，因为直播中运用到的技术难点非常之多，视频/音频处理，图形处理，视频/音频压缩，CDN分发，即时通讯等技术，每一个技术都够你学几年的。直播易：已经有各个领域的大牛，封装好了许多牛逼的框架，我们只需要用别人写好的框架，就能快速的搭建一个直播app，也就是传说中的站在大牛肩膀上
转载
2023-07-10 15:30:08
427阅读
网络视频直播存在已有很长一段时间，随着移动上下行带宽提升及资费的下调，视频直播被赋予了更多娱乐和社交的属性，人们享受随时随地进行直播和观看，主播不满足于单向的直播，观众则更渴望互动，直播的打开时间和延迟变成了影响产品功能发展重要指标。那么，问题来了： 如何实现低延迟、秒开的直播？先来看看视频直播的5个关键的流程：录制->编码->网络传输->解码->播放，每个环节对
转载
2024-02-01 19:30:32
94阅读
Hive介绍Hadoop开发存在的问题只能用java语言开发，如果是c语言或其他语言的程序员用Hadoop，存 在语言门槛。 需要对Hadoop底层原理，api比较了解才能做开发。Hive概述Hive是基于Hadoop的一个数据仓库工具。可以将结构化的数据文件映射为 一张表，并提供完整的sql查询功能，可以将 sql语句转换为 MapReduce任 务进行运行。其优点是学习成本低，可以通过类 SQ
转载
2023-07-13 16:35:38
114阅读
# 如何使用Python实现一个简单的直播平台
创建一个直播平台听起来很复杂，但如果分步骤进行，实则很简单。本文将为你提供一个清晰的指导，帮助你在Python中实现一个基本的直播平台。我们将遵循以下步骤：
## 实现步骤
| 步骤 | 描述 |
| -------- | ------------------------------
直播平台源代码快速搭建直播服务大体架构srs+ffmpeg+第三方(阿里云,腾讯云等),因为不是专门做直播平台，所以借助第三方平台（服务器,带宽,cdn可以省不少心）。
转载
2021-07-09 16:35:56
699阅读
一、登录账号提交方式POST参数说明:使用的验证是极验验证，参数还是很直观的。提交成功后返回
1. {
2. "code": 0,
3. "message": "登录æˆåŠŸ",
4. "data": {
5. "uid": xxxxxx,
6. "nickname": "xxxxx",
7. "avatar"
简单来说就是采集音视频后，通过RTMP流媒体协议推送到流媒体服务器上。直播产品的种类：泛娱乐化的直播 花椒 映客 ，还有斗鱼等游戏直播实时互动直播 使用RTP推流，底层使用的是UDP。包括音视频会议，教育直播等。 使用的主流技术是WebRtc常见的泛娱乐化直播的协议rtmphlshttp-flv下面是泛娱乐化直播的架构信令服务器：在娱乐化直播中包括了创建房间，聊天，送礼物等流媒体云：大量的流媒体服
转载
2023-05-31 10:00:13
290阅读
随着直播平台的普及，直播平台开发行业也在发生着翻天覆地的变革。在“每个人都能发光三分钟”的互联网时代，直播正在成为展示网民本身特质的一条重要渠道。而现在的直播平台也层出不穷，比如常见的快手、虎牙、熊猫TV、今日头条、抖音等。直播所涉及的行业随着互联网的普及也越来越多样化，常见的有教育培训、电商直播、社交互动、专家分享等。而一些很有想法的商家也找链环科技沟通想要自主开发直播平台的想法，但对平台开发的
转载
2023-11-22 09:44:24
98阅读
视频云服务器一般还是用成熟的公有云服务器1,群组创建，借助:腾讯云通讯2,腾讯直播云:https://cloud.tencent.com/document/product/267/327363,用了直播云的话 推流 可以用工具OBS Studio然后就是播放:https://cloud.tencent.com/document/product/454/7503，https://cloud.tenc
原创
2023-04-05 11:37:55
141阅读
点赞
平台源代码快速搭建服务大体架构srs+ffmpeg+第三方(阿里云,腾讯云等),因为不是专门做平台，所以借助第三方平台（服务器,带宽,cdn可以省不少心）。当然如果你想自建一个视频平台也是可以的~~srs用来接收从手机客户端推来的rtmp流,ffmpeg用来对视频进行处理,比如增加logo或滤镜等,在各种技术尝试中,
转载
2022-01-29 14:21:54
370阅读
现在越来越多的人或公司都想开发出自己的直播网站或者直播APP，但是在技术这一块又不知道怎么下手，那么我就给大家讲一下在视频直播系统开发中要了解那些知识和技术：在开发上需要用的技术有：摄像头采集 音视频编解码 流媒体协议 音视频流推送到流媒体服务器 流媒体网络分发 用户播放器 音视频同步 网络延迟自适应 需要录制，多种视频文件的格式和封装 语言：C、C++、html、php、mysql......
转载
2023-11-01 10:36:18
88阅读
1.关于pycharm好还是jupyter note好的问题：分情况，脚本程序开发做爬虫用pycharm并且pyharm的debug能力强支持打断点不过话说回来 jupyter note本身就可以分段。但做块调试的话应该还是打断点方便些？这个后期真遇到问题了再补充具体实例。jupyter notebook 做数据分析和可视化好用，分段运行还是香的。2.关于pip和anaconda的问题：虽然pip
转载
2023-10-19 21:20:06
86阅读
用了selenium，才深刻的体会到它的好处，更加的方便更加的快捷，更容易的获取网页的信息。这里用selenium爬取某鱼直播下面的前五页的直播间信息，例如直播房间名，主播名，直播热度，以及直播的类别。即图片红色下横线的东西。首先进入斗鱼的页面，选择直播，接着复制url备用，然后就按F12去分析做爬虫的步骤还是那样，先去原网页的地址找到数据的位置，接着提取出需要的数据，在整理起来，保存起来。这里我
转载
2023-09-29 10:00:14
74阅读
Hadoop是一个开发和运行处理大规模数据的平台，实现在多台计算机组成的集群中对海量数据进行分布式计算。hadoop框架最核心的部分是hdfs和mapreduce。hdfs提供了海量数据的存储，mapreduce提供了对数据的计算。hadoop处理海量数据，需要hbase做数据库，hbase是面向列的分布式数据库，使用集群环境的内存做处理，但是不支持sql语句，所以操作和计算数据非常不方便，于是整
转载
2023-05-23 10:18:18
70阅读
前言文本已收录至我的GitHub仓库，欢迎Star：https://github.com/bin392328206/six-finger种一棵树最好的时间是十年前，其次是现在叨絮hadoop 完成之后，就是hive了。。今天我们就来看看hive小六六学大数据之 Hadoop(一)小六六学大数据之 Hadoop(二)什么是 HiveHive：由 Facebook 开源用于解决海量结构化日志的数据统计
转载
2023-09-08 19:09:54
68阅读
文章目录1 Apache Hive概述1.1 为什么使用Hive：1.2 Hive和hadoop的关系2 如何实现Hive功能3 Apache Hive架构、组件4 Apache Hive数据模型4.1 Data Model4.2 Databases 数据库4.3 Tables 表4.4 Partitions 分区4.5 Buckets 分桶4.6 Hive和Mysql比较5 Hive安装部署5
转载
2024-06-04 08:52:03
49阅读
Hadoop集群搭建之Hive安装1. 准备工作准备好已经安装了Hadoop的集群服务器之后，需要在其中一台中安装MySQL数据库，安装可以参考CentOS7安装MySQL5.7这篇文章。下载Hive的安装包并上传至其中一台服务器中，下载地址2. Hive本地安装1. 安装目录规划统一安装路径：/opt/modules
统一软件存放路径：/opt/software2. 上传压缩包1. 将压缩包上传
转载
2023-09-08 20:32:19
34阅读
