MaxCompute Studio 是MaxCompute 平台提供的安装在开发者客户端的大数据集成开发环境工具,是一套基于流行的集成开发平台 IntelliJ IDEA 的开发插件,可以帮助您方便地进行数据开发。下面我们一起来看一看Studio的简单用法。 用户登录 Studio提供用户登录功能。
转载 2018-05-24 14:21:00
187阅读
2评论
1.大数据计算服务(Maxcompute,原名ODPS) MaxCompute is a big data processing platform developed by Alibaba Cloud independently. It is a fast and cloud-based big d
转载 2020-01-09 10:31:00
153阅读
12点赞
1评论
原文链接:http://click.aliyun.com/m/13964/从ODPS到MaxCompute-阿里大数据的进化之路是一个商用大数据系统发展史,一个商业大数据系统要解决的问题有可靠性,高性能,安全性等等六个方面。内部产品名ODPS的MaxCompute,是阿里巴巴内部发展的一个高效能、低成本,完全托管的“EB级”大数据计算服务。从2009年9月阿里云成立,愿景就是做运算/分享数据第一平
转载 2017-03-15 10:13:47
486阅读
分区表是指在创建表时指定分区空间,即指定表内的某几个字段作为分区列。分区表
原创 2021-11-30 11:03:10
962阅读
转自haixiaElasticsearch on MaxCompute(原ODPS) Elasticsearch 是目前最流行的开源分布式搜索系统之一,它有着优秀的近实时搜索性能和丰富的周边配套工具。以 Elasticsearch 为核心的 Elastic Stack (Elasticsearch + Logstash + Kibana + Beats) 正逐渐成为企业和个人进行数据收集
转载 2017-03-14 18:40:21
859阅读
原文链接:http://click.aliyun.com/m/13848/ 免费开通大数据服务:https://www.aliyun.com/product/odps    乍一看标题会以为是不是作者写错了,怎么会有从MaxComputeMaxCompute迁移数据的场景呢?在实际使用中已经有客户遇到了这种场景,比如:两个网络互通的专有云环境之间数据迁移、公共云数加
转载 2017-03-16 19:11:27
751阅读
原文链接:http://click.aliyun.com/m/13963/对MaxCompute未来的展望,致力于建立一个兼容、开放、统一的计算平台。基于当初建立它的研发思路,下一代MaxCompute会更加理解运算,更加理解数据,更加理解用户。做到这三个层次的实例展现了更智能、更高效的优越性。我们为什么要自己做MaxCompute,统一计算平台有什么必要性和重要性,解答在此ppt中。
转载 2017-03-15 10:14:49
382阅读
1.maxcompute python 执行时报错 ValueError: level must be >= 0 原因:maxcompute只支持python2.7 好像目前不支持3.X以上 说明 PyODPS节点底层的Python版本为2.7。 PyODPS节点主要针对MaxCompute的Pyt
转载 2020-01-09 17:39:00
143阅读
2评论
# 实现"maxcompute hadoop"流程及代码解析 ## 1. 流程步骤表格 | 步骤 | 描述 | | --- | --- | | 1 | 准备MaxCompute和Hadoop环境 | | 2 | 将数据从MaxCompute导出到Hadoop | | 3 | 在Hadoop上进行数据处理 | | 4 | 将处理后的数据导入MaxCompute | | 5 | 清理中间数据 |
原创 2024-03-04 03:28:03
53阅读
精彩视频回顾请点击:MaxCompute管家详解以下是直播内容精华整理,主要包括以下四个方面:1.背景速览;2.功能介绍;3.案例讲解;4.新功能预告。 一、能提供快速、完全托管的PB级数据仓库解决方案,使用户可以经济并高效的分析处
转载 2020-04-15 17:08:00
109阅读
2评论
一、​​基础语法结构​​ [WITH cte] SELECT [ALL | DISTINCT] 列表达式 FROM 表名 [WHERE 条件] [GROUP BY 分组列] [HAVING 过滤条件] [ORDER BY 排序条件] [DISTRIBUTE BY 分布列 [SORT BY 排序列]] [LIMIT 行数]; ​​执行顺序​​:FROM → WHERE → GROUP BY → HA
原创 4月前
103阅读
本文简单记录一次实践使用过程,涉及presto-mysql,presto-elasticsearch,及关联查询1 下载安装 presto-0.228<2>安装:1> 解压tar -zxvf presto-server-0.228.tar.gz 2>创建配置目录 etc  etc/catalogcd presto-server-0.228/mk dir
转载 2月前
373阅读
1. 官方文档地址 https://help.aliyun.com/document_detail/50889.html 2. Show Table Detail 中文乱码 原因是Intellij Appearance中使用的字符集不支持中文,需要在Appearance & Behavior ->
转载 2018-05-31 17:24:00
216阅读
2评论
MaxCompte SDK, MaxCompute JDBC 集成在Springboot项目
原创 2022-08-08 21:25:21
574阅读
3图
概况介绍大数据
转载 2022-11-16 16:40:30
190阅读
原文链接:http://click.aliyun.com/m/13992/概况介绍:MaxCompute 2.0 生态开放之路及最新发展10年老兵带你看尽MaxCompute大数据运算挑战与实践一分钟了解阿里云产品:大数据计算服务MaxCompute概述数加平台如何通过Serverless 架构实现普惠大数据淘宝大数据之路应用案例:日志分析:云数据,大计算—海量日志数据分析与应用《海量日志数据分析
转载 2017-03-15 09:42:58
527阅读
原文链接:http://click.aliyun.com/m/14006/和传统的计算平台类似,MaxCompute使用多租户隔离租户间的数据。租户内利用访问控制保护用户数据。但是作为一个云计算、大数据平台,MaxCompute在实现时做了一系列的创新。这些创新主要体现在三个方面:1、访问可追溯;2、更细粒度的访问控制;3、跨租户访问控制。访问可追溯      传统的
转载 2017-03-14 18:41:29
733阅读
原文链接:http://click.aliyun.com/m/13974/ 好多同学在使用MaxCompute时,对产品的应用限制并不了解。这里,我们将给出MaxCompute产品的详细应用限制列表。如有遗漏,还请大家补充:命名规范:原则上,项目(Project),表(Table),函数(Function),资源(Resource),分区(Partition),列的名称都不能有特殊字符,只能用英文
转载 2017-03-15 10:06:46
1391阅读
原文链接;http://click.aliyun.com/m/13923/MapReduce/Graph当业务逻辑实在是复杂的时候,用SQL配合UDF(包括UDAF和UDTF)也无法实现的时候,可以使用MapReduce或Graph来实现。作业MapReduceMapReduce文档里的十多个示例程序每个都很重要,务必每个都看懂每行代码的作用。参考链接文档。使用Eclipse /&nbs
转载 2017-03-15 10:59:58
2160阅读
原文链接:http://click.aliyun.com/m/13922/长尾问题是分布式计算里最常见的问题之一,也是典型的疑难杂症。究其原因,是因为数据分布不均,导致各个节点的工作量不同,整个任务就需要等最慢的节点完成才能完成。处理这类问题的思路就是把工作分给多个Worker去执行,而不是一个Worker单独抗下最重的那份工作。本文希望就平时工作中遇到的一些典型的长尾问题的场景及其解法做一些分享
转载 2017-03-15 11:00:32
1112阅读
  • 1
  • 2
  • 3
  • 4
  • 5