Logo

  • 刺激乐天派

    发布于:6 天前

    0

    centOS7下Spark安装配置
    环境说明:操作系统:centos764位3台centos7-1192.168.190.130mastercentos7-2192.168.190.129slave1centos7-3192.168.190.131slave2安装spark需要同时安装如下内容:jdkscale1.安装jdk,配置jdk环境变量这里不讲如何安装配置jdk,自行百度。2.安装scala下载scala安装包,https:
    阅读 127 评论 0 收藏 0
  • hffzkl

    发布于:8 天前

    2

    sparkSQL中cache的若干问题
    sparkSQL在使用cache缓存的时候,有时候缓存可能不起作用,可能会发出缓存是假的吧的感慨。现在我们就把这个问题说道说道。
    阅读 210 评论 2 收藏 0
  • 卫莨

    发布于:10 天前

    0

    Spark入门指南
    Spark的安装过程以及一些Spark的入门教程
    阅读 148 评论 0 收藏 0
  • miiju

    发布于:11 天前

    0

    Python3.x+pyqtgraph实皇冠现体育网站开发数据可视化
    1、pyqtgraph库数据皇冠体育网站开发haozbbs.comQ1446595067可视化效果还不错,特别是窗体程序中图像交互性较好;安装也很方便,用pip安装。2、在Python中新建一个.py文件,然后写入如下代码并执行可以得到官方提供的很多案例(含代码),出现如下界面图像:importpyqtgraph.examplespyqtgraph.examples.run()图1图2图34、程序
    阅读 101 评论 0 收藏 0
  • jacker02

    发布于:13 天前

    0

    Linux中用Nginx和FTP搭建WS幸运飞艇平台搭建图片服务器
    一、需要的组件WS幸运飞艇平台搭建论坛:haozbbs.comQ1446595067图片服务器两个服务:Nginx(图片访问):1、http服务:可以使用nginx做静态资源服务器。也可以使用apache。推荐使用nginx,效率更高。2、反向代理实现负载均衡ftp服务(图片上传):使用linux做服务器,在linux中有个ftp组件vsftpd。二、Nginx服务器搭建1.安装Nginx要求安装
    阅读 131 评论 0 收藏 0
  • dcx1010100

    发布于:14 天前

    0

    Akka学习 实现workcount
    Akka学习 实现workcount
    阅读 168 评论 0 收藏 0
  • 鲸落大叔

    发布于:16 天前

    0

    spark-一些参数优化
    Spark程序优化所需要关注的几个关键点——最主要的是数据序列化和内存优化
    阅读 157 评论 0 收藏 0
  • 巴利奇

    发布于:20 天前

    0

    PySpark 创建搜索推荐
    1、PythonSpark创建搜索引擎1.1、常见推荐算法常见推荐算法算法说明基于关系型规则的推荐(AssociationRule)消费者购买产品A,那么他有多大机会购买产品B;<br>购物车分析(啤酒和尿布)基于内容的推荐(Context-based)分析网页内容自动分类,在将用户自动分类;<br>将新进分类的网页推荐给对该群感兴趣的用户人口统计式的推荐(Demograp
    阅读 203 评论 0 收藏 0
  • zbzbzb022

    发布于:21 天前

    0

    向spark集群提交消费kafka应用时kafka鉴权配置问题
    提交消费kafka应用里面包含sasl.jaas.config,通常需要配置文件。但是打成jar包后的应用,通过classload读不到jar包中配置文件。需要初始化kafka时增加properties属性。kafkaParams.put("sasl.jaas.config", "xxxx required\n"+   
    阅读 182 评论 0 收藏 0
  • meteor_hy

    发布于:23 天前

    0

    Spark cluster 部署
    下载spark、scala的包如下操作:[hadoop@oversea-stable~]$wgethttp://mirrors.hust.edu.cn/apache/spark/spark-2.3.0/spark-2.3.0-bin-hadoop2.7.tgz--2018-06-2710:07:25--http://mirrors.hust.edu.cn/apache/spark/spark-2.
    阅读 194 评论 0 收藏 0
写文章