title: Spark弹性式数据集RDDsdate: 2021-05-08 16:24:20tags: Spark RDD 全称为 Resilient Distributed Datasets，是 Spark 最基本的数据抽象，它是只读的、分区记录的集合，支持并行操作，可以由外部数据集或其他 RDD 转换而来. 一、RDD简介 RDD 全称为 Resilient Distributed Data
title: SparkSQL操作Hivedate: 2020-05-12 16:12:55tags: Spark Apache Hive 是 Hadoop 上的 SQL 引擎，Spark SQL 编译时可以包含 Hive 支持，也可以不包含。包含 Hive 支持的 Spark SQL 可以支持 Hive 表访问、UDF (用户自定义函数)以及 Hive 查询语言(HiveQL/HQL)等。需要强
title: （七）GeoSpark与PostgreSQLdate: 2021-05-12 16:38:23tags: GeoSpark PostGreSQL以及Mysql均有空间引擎扩展，且GeoSpark是针对大数据的空间分析，而SHP、GeoJson等只是小数据集的，PostGIS就能胜任其分析任务。所以对于大数据集的，我们还是要用空间关系数据库存储，利用Spark SQL从数据库中加载数据
title: （十一）Shapefile编码（下）date: 2021-05-12 17:24:46tags: GeoSpark GIS shp文件编码转换 方法1：利用FME转换 首先打开FME Workbench，新建一个空白工程 添加一个Reader，格式选择Esri Shapefile，然后点击 Parameters 按钮，在 Character Encoding 一栏选择对应的
package com.zxl; import javax.swing.*; import java.awt.*; import javax.swing.event.ChangeEvent; import javax.swing.event.ChangeListener; import java.awt.event.ActionEvent; import java.awt.event.Acti
package com.zxl; import java.awt.Container; import java.awt.FlowLayout; import javax.swing.JButton; import javax.swing.JFrame; import javax.swing.JLabel; public class SwingDemo2 { private static
上传tiff文件至hdfs pom <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schema
package com.zxl; import javax.swing.*; import javax.swing.tree.DefaultMutableTreeNode; /** * @Description: //TODO 树形菜单 * @Author: zhangxueliang * @Create: 2021-05-17 17:05 * @Version: 1.0 **/
详解yarn的resource manager组件
spark on yarn 内存分配详解
详解Scala与Java的互动
详解Scala函数也是对象的特性
standalone模式 bin/spark-submit \ --class org.apache.spark.examples.SparkPi \ --master spark://harbor-n0:7077 \ ./examples/jars/spark-examples_2.11-2.4.4.jar \ 10 yarn client模式 bin/spark-submit \ --cl
最终效果 sample.fxml <?xml version="1.0" encoding="UTF-8"?> <?import javafx.scene.control.*?> <?import java.lang.*?> <?import javafx.scene.layout.*?> <?import javafx.scene.la
FlowPane是一个容器。它在一行上排列连续的子组件，并且如果当前行填满了以后，则自动将子组件向下推到下一行。 package FlowPane; import javafx.application.Application; import javafx.fxml.FXMLLoader; import javafx.geometry.Insets; import javafx.scene.
下载hibernate documentation目录:存放hibernate的相关文件与API lib目录:存放hibernate编译和运行所依赖的jar包，其中required子目录下包含了运行hibernate项目必须的jar包 project目录:存放hibernate各种相关的源代码与资源. 在lib/required目录中，包含的jar包 创建...
hibernate工作原理 1、通过Configuration().configure();读取并解析hibernate.cfg.xml配置文件。 2、由hibernate.cfg.xml中的< mappingresource=”com/xx/User.hbm.xml”/>读取解析映射信息。 3、通过config.buildSessionFactory();//得到...
Hibernate的核心类和接口一共有6个，分别为:Session、SessionFactory、 Transaction、Query、Criteria和Configuration。这6个核心类和接口在任何开发中都会用到Configuration 它主要是用于加载hibernate配置. Configuration config=new Configuration(...
Hibernate中我们使用时主要有两种配置文件核心配置文件 hibernate.cfg.xml 对于hibernate的核心配置文件它有两种方式: 1. hibernate.cfg.xml 2. hibernate.properties 我们在开发中使用比较多的是hibernate.cfg.xml这种方式，原因它的配置能力更强，易于修改 我们...
Hibernate持久化类 什么是持久化类? Persistent Object （PO） PO=POJO+hbm映射配置 对于hibernate中的PO编写规则: 1. 必须提供一个无参数的public构造方法 2. 所有属性要private ,对外提供public 的get/set方法 3. 在PO类必须提供一个标识属性，让它与数据库中的...
持久化类类三种状态介绍 瞬时态：也叫做临时态或自由态，它一般指我们new出来的对象，它不存在OID,与hibernate session无关联，在数据库中也无记录。它使用完成后，会被jvm直接回收掉，它只是用于信息携带。 简单说：无OID 与数据库中的信息无关联，不在session管理范围内。 持久态：在hibernate session管理范围内，它具有持久化标识OID ...
solr添加文档/删除文档/简单查询/多条件查询
solr实现京东搜索功能
解决【IDEA新建项目时没有Spring Initializr选项】的问题 创建一个新项目(Create New Project) 选择 Spring Initializr。然而我发现我的IDEA上面没有Spring Initializr这个选项。解决办法如下： 在settings -> Plugins 里面搜索spring boot，勾选上，然后再重启下i...
使用.post和" role="presentation" style="position: relative;">.post和.post和.post和.get向服务器发送请求 HTMLInsert title here //页面加载完成后 $(function() { //添加失焦事件 $("#usernam
1.Highcharts JS去除Highcharts.com链接的方法 在js文件中找到Credits，然后把enable的属性从!0改为0。 也可以更改为自己需要的： enabled：设置是否显示链接 text：设置链接显示的名称 href：设置链接的url2.去掉图片右上角的打印及导出按钮 在js中设置以下代码：exporting:{ ena...
静态资源的添加 打开资料，找到【项目资料】-【静态资源】，有css,js,jsp,fonts目录，添加到eclipse的WebContent目录下。 将【jsp】目录整个复制到WEB-INF目录下。分页标签的添加 将【tld】目录复制到WEB-INF目录下。 将Page和NavigationTag两个类添加到utils包下。...
安装了1.8后，它自动的在path的值最前面添加了一行些内容：“C:\ProgramData\Oracle\Java\javapath;”，这个是1.8自己添加的，这样，后面配置的“%JAVA_HOME%/bin;%JAVA_HOME%/jre/bin;”eclipse就不用了，但是因为eclipse要求的是1.7，它现在又看path里设置的是1.8，所以就提示这样的错误。 解...
Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号
