51CTO博客>热门标签>网易数帆

网易数帆

全部文章近期文章热门文章标签简介

【网易数帆】内容共 240 条

原创网易数帆基于DPDK的高性能四层负载均衡实践

1为什么选择 DPVS目前高性能负载均衡研发的一个流行方案是使用 DPDK（Data Plane Development Kit），这是一个用于包数据处理加速的软件库，使用了网卡用户态驱动、零拷贝、内存 Hugepage 和 Polling 模式等技术。业...

java

阅读 221 评论 0 点赞 0

mob604757027d04 412 天前
转载网易数帆 Ceph EC 纠删码在线存储性能优化实践

写在前面术语说明EC 的全称是Erasure Code——纠删码，是一种编码理论，EC 介绍链接如下是和本文档相关的一些术语：EC 策略：一般就是我们常说的(K+M)，K 个数据块，M 个校验块条带（stripe）：和磁盘阵列中的条带类...

kafka

ceph

在线存储

性能优化

阅读 2166 评论 2 点赞 0

mb5ffbc7cecbf87 539 天前
转载基于 Kubernetes Operator 的网易数帆生产级云原生中间件实践

在近日的 ArchSummit 全球架构师峰会 2021 上海站上，继网易副总裁、杭研院执行院长、互联网技术委员会主席、网易数帆总经理汪源发表主题演讲《打造开放的云原生操作系统和系统软件架构》之后，网易技术委员会委...

Kubernetes

阅读 63 评论 2 点赞 0

mb607022e25a607 392 天前
转载网易数帆存储负责人亲述：我眼中的 Curve 与 Ceph

关于作者我是王盼，网易数帆存储团队负责人，资深系统开发工程师，具有10年云计算行业从业经验，做过几年Libvirt、OpenStack开发，也做过一年多Ceph（主要是H版本）的维护调优，对计算虚拟化、云计算平台、分布...

postgresql

github

bps

qemu

prometheus

阅读 64 评论 2 点赞 0

mob604756ff4913 604 天前
转载网易数帆开源Kyuubi：基于Spark的高性能JDBC和SQL执行引擎

Kyuubi是网易数帆旗下易数大数据团队开源的一个高性能的通用JDBC和SQL执行引擎，建立在Apache Spark之上。通过Kyuubi，用户能够像处理普通数据一样处理大数据。本文将详细解读Kyuubi的架构设计。引言开源大数据项目...

Kyuubi

Spark

JDBC

SQL

阅读 648 评论 2 点赞 0

mb601cf79d3f881 488 天前
转载网易数帆加入欧拉开源社区，共同推动数字化基础设施生态完善

2022年1月10日，网易数帆正式签署 CLA（Contributor License Agreement 贡献者许可协议），加入欧拉开源社区。操作系统是数字化转型基础软件生态不可或缺的一环。网易数帆依托网易二十余年技术积累，基于“架构开...

openeuler

开源社区

基础软件

微信公众号

阅读 146 评论 0 点赞 0

开源野生协会 124 天前
转载网易云音乐数仓建设之路.pptx

大家好，我是一哥，本周六网易举办了现场的技术分享，其中有网易云音乐的数仓建设之路，这次技术分享现场是这样的，人头攒动~下面分享下讲解的干货内容，文末有完整版PPT下载方法！公众号回复：网易数仓，即可下载完...

数据

公众号

网易云音乐

阅读 0 评论 0 点赞 0

数据峰哥 29 天前
转载网易传媒离线数仓建设实践

大家好，我是一哥，今天分享一下网易传媒的离线数仓是怎么建设的。主要分为以下四个方面介绍：传媒业务介绍数仓建设演进数据管治体系数仓建设展望01传媒业务介绍传媒主要是内容生产者在平台中进行创作，然后平台推送...

数据

数据管理

sql

阅读 0 评论 0 点赞 0

数据峰哥 30 天前
原创小帆远行

小帆远行 “她有一个梦想，有一天能够自由地呼吸与行走，穿上漂亮的旱冰鞋，自由地起舞。” 晚上当我打开救助小怡帆的网站（http://www.help-yifan.org/index.html），看到一段让我难过文字：我们无法相信，怡...

命运

怡帆

父亲

阅读 81 评论 0 点赞 0

iamxjb 343 天前
转载帆软报表

图表跳转链接，设置对话框显示，默认是分页显示了，只需要在.cpt文件名后加上&op=write即可

文件名

分页显示

阅读 51 评论 2 点赞 0

mb5fdcae83766b7 254 天前
转载网易云音乐数仓建模案例—声波APP

数仓是商业智能的基础，它为OLAP、数据挖掘提供分析和决策支持。本文以在声波业务中的实践经历，总结了如何开始构建一个数仓模型、如何配置数据任务流调度、以及如何在自助取数上抽象模型配置cube！声波app是网易云...

数据

数据仓库

大数据

阅读 0 评论 0 点赞 0

数据峰哥 27 天前
转载网易云音乐数仓建模实践-声波APP

导读：数仓是商业智能的基础，它为OLAP、数据挖掘提供分析和决策支持。本文以在声波业务中的实践经历，总结了如何开始构建一个数仓模型、如何配置数据任务流调度、以及如何在自助取数上抽象模型配置cube！声波app是...

经验分享

阅读 177 评论 0 点赞 0

浪尖聊大数据 383 天前
转载网易云音乐抓取成功，按评论数排序

可以生成外链播放器 <iframe frameborder="no" border="0" marginwidth="0" marginheight="0" width=298 height=52 src="//music.163.com/outchain/player?type=2&id=151646&auto=0&height=32">...

html

json

d3

5e

随机字符串

阅读 46 评论 2 点赞 0

mob6047570191d0 1685 天前
原创帆软查询条件

1.当查询条件为空时，查询所有数据；当查询条件不为空时，根据条件查询。语句1：select * from mainInfo where 1=1 ${if(len(mainInfoId) == 0,"","and mainInfoId = '" + mainInfoId + "'")}&nbs...

帆软查询条件判断

条件查询

数据

sql

阅读 0 评论 0 点赞 0

wx62907126db9d0 40 天前
转载帆软笔试凉了

因为是莫名其妙收到的笔试通知，所以本来也没抱有太大期望，不过拿到题目发现，其实真的没那么难，框架、CSS、网络都没考，cookie和token也分别只考了一题，JS考的也很基础，智力题有点搞，不过也还没到完全没法做...

i++

输入输出

数组去重

ide

css

阅读 172 评论 2 点赞 0

mb5fd86a050ef28 354 天前
转载网易云音乐数仓维度建模实践-模型设计篇

数仓模型架构搭建、模型设计是整个数仓建设的核心部分。数仓建模的价值体现在：数据质量、健壮水平、资源消耗、服务响应速度。写在前面：我们为什么要建模这里想先说下，这些年我在数仓摸爬滚打的一些经历：刚毕业那...

数据

建模

云音乐

阅读 0 评论 0 点赞 0

数据峰哥 26 天前
转载网易云音乐数仓维度建模实践-模型设计篇

数仓模型架构搭建、模型设计是整个数仓建设的核心部分。数仓建模的价值体现在：数据质量、健壮水平、资源消耗、服务响应速度。写在前面：我们为什么要建模这里想先说下，这些年我在数仓摸爬滚打的一些经历...

经验分享

阅读 200 评论 0 点赞 0

浪尖聊大数据 383 天前
转载网易严选如何打造数仓规范和评价体系

数据为王的时代，数据量从最初的几十 G，慢慢沉淀到几十 T，甚至几十 PB 的量。数据工程师，也从最初的 ETL 工程师慢慢成长为数据全栈工程师：采集、同步、模型、离线、实时、规范、平台、工具、产品、交互、保障、...

数据

数据仓库

基线

离线

数据安全

阅读 62 评论 2 点赞 0

mob604756e5abbc 568 天前
原创获取帆软BI数据

1、获取token 地址：http://ip:port/webroot/decision/login方式：POST请求参数：{"origin":"","password":"password","username":"joker","encrypted":false,"macAddress":"E4-54-E8-BB-60-8...

http

请求参数

4s

lua

表数据

阅读 244 评论 0 点赞 0

wx60dd44933d0df 260 天前