leWriter;import java.io.IOException;import java.util.List;import java.util.Map;import ...
原创
2023-03-28 14:51:39
146阅读
SpringBoot + Spring-Security背景： 上篇文章在源码读取的基础上，根据自身代码习惯及需求，总结了一个自定义简单落地版本。后来在看到松哥写的博文（不太爱看官网），发现还有新的变种模式，虽然整体架构没有改变，但完全突破以往在拦截器和过滤器做安全验证的固有印象，故单独列出。Spring-Security全局导读：1、Security核心类设计2、HttpSecurity结构和执
转载
2024-09-12 20:16:06
5阅读
前言properties格式简介YML格式简介如何使用总结如何从配置文件取值？@ConfigurationProperties@Value如何从自定义配置文件中取值？前言自从用了Spring Boot，个人最喜欢的就是Spring Boot的配置文件了，和Spring比起，Spring Boot更加灵活，修改的某些配置也是更加得心应手。Spring Boot 官方提供了两种常用的配置文件格式，分别
转载
2024-09-30 22:34:36
15阅读
一、 新建springboot项目 1、项目结构如下： 引用jar包<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-st
转载
2023-12-30 21:48:45
79阅读
lucene特点及效果文章里就不说了，网上有的是。我就简单说下自己号码大全了解， 正常 sql 查询时：name like '%继中%' 想必咱们一定理解这样不会走索引关键词挖掘的，然后就在多行数据等级查询相应时刻会很慢，对吧，由于数据库在一行行扫呢。所以咱们自然会想到怎样能让它走索引？ 解决方案之一：lucene出来了。 本来它即
原创
2014-08-10 10:31:39
1811阅读
lucene特点及作用文章里就不说了，网上有的是。我就简单说下个人理解， 正常 sql 查询时：name like '%继中%' 想必大家一定明白这样不会走索引的，然后就在多行数据级别查询相应时间会很慢，对吧，因为数据库在一行行扫呢。所以我们自然会想到怎样能让它走索引？ 解决方案之一：lucene出来了。 其实它就是帮你把文章拆分成若干个关键词，这样以便按关键词查询时能通过关键词直接查询来锁定哪些
转载
2012-06-07 15:33:00
80阅读
个人学习SpringBoot系列 Lucene篇Lucene介绍Lucene是什么Lucene 是 apache 下的一个开放源代码的全文检索引擎工具包,提供了完整的查询引擎和索引引擎,部分文本分析引擎倒排索引也常被称为反向索引、置入档案或反向档案，是一种索引方法，被用来存储在全文搜索下某个单词在一个文档或者一组文档中的存储位置的映射。它是文档检索系统中最常用的数据结构。通过倒排索引，可以根据单词
转载
2023-08-28 17:00:09
70阅读
序 上次分享了基于
spring的starter集成
hbase的，说过要分享直接对接的。 一、pom引包<dependency>
<groupId>org.apache.hadoop</groupId>
<artifactId>hadoop-client</artifactId>
<version>3.0
转载
2023-08-30 10:07:12
76阅读
public interface AuthenticationManager {
Authentication authenticate(Authentication var1) throws AuthenticationException;
}(3)该接口的主要实现类为ProviderManager，调用的就是该类的authenticate方法。该类有二个用于认证的成员变量：private Li
Spring整合HBaseSpring HBase SHDP§ 系统环境§ 配置HBase运行环境§ 配置Hadoop§ 配置HBase§ 启动Hadoop和HBase§ 创建Maven项目§ 系统环境Ubuntu
Hadoop 2.7.3HBase 1.2.3JDK 1.8Windows
IDEA 16Spring 4.3.2.RELEASESpring Data Hadoop 2.4.0.RE
转载
2023-07-11 18:16:02
56阅读
Apache HBase 是 Java 语言编写的一款 Apache 开源的 NoSQL 型数据库，不支持 SQL，不支持事务，不支持 Join 操作，没有表关系。Apache HBase 构建在 Apache Hadoop 和 Apache Zookeeper 之上。Apache HBase: https://hbase.apache.org/HBase 的安装配置，请参考 “Spr
转载
2023-06-28 12:30:46
92阅读
Java Client API OverviewHBase是用Java写的，支持用编程语言来动态操作管理数据库，能用命令行做的都能够用API来做。主要的使用步骤例如以下：1.创建一个 Configuration 对象
–从 HDFS 对象中调用 Configuration
–加入 HBase 属性Configuration conf = HbaseConfiguration.creat
转载
2023-07-05 20:22:56
42阅读
上一篇Blog提到了
HBase在regionserver挂掉以后，master会处理，其中很重要的一步是就是splitlog，把.logs目录下的该rs的文件夹里的HLog文件，按照region进行分配。splitlog的代码如下所示：private List<Path> splitLog(final FileStatus[] logfiles) throws IOException
转载
2023-07-17 11:02:20
77阅读
因为项目的需要，需要自建搜索引擎，抓取外网或者内网的网页和文件。网上搜了很多教程，要么很旧，要么写得不完整。我把这几天的心得总结一下，分享给大家。 nutch目前有两个版本，1.6稳定版和2.1测试版，2.1更加先进，用上了apache gora。
转载
2023-04-25 21:29:04
204阅读
SpringMVC的匹配规则 首先需要明确几容易混淆的规则：servlet容器中的匹配规则既不是简单的通配，也不是正则表达式，而是特定的规则。所以不要用通配符或者正则表达式的匹配规则来看待servlet的url-pattern。Servlet 2.5开始，一个servlet可以使用多个url-pattern规则，标签声明了与该servlet相应的匹配规则，每个标签代表1个匹配规则；当servlet
感谢这篇文章，让我一下就看懂了，牛皮： 搜索引擎技术系列教材 （一）- lucene - Lucene7 入门;Lucene,概念,Lucene,这个开源项目，使得,Java开发人员可以很方便地得到像搜索引擎google,baidu那样的搜索效果。;先运行，看到效果，再学习,老规矩，先下载右上角的可运行项目，配置运行起来，确认可用之后，再学习做了哪些步骤以达到这样的效果。,运行TestL
转载
2024-06-08 18:22:17
52阅读
# Spring整合HBase实现步骤
## 1. 确定开发环境和所需依赖
在开始整合之前，首先需要确保开发环境满足以下要求：
- JDK版本：建议使用JDK 1.8及以上版本
- Maven：用于管理项目依赖
- HBase：需要在本地或远程安装并配置HBase数据库
在Maven的`pom.xml`文件中添加HBase的依赖，示例如下：
```xml
org.apache.hba
原创
2023-10-27 04:22:16
232阅读
在本文中，我们将探讨如何在Spring Boot应用程序中集成HBase数据库。Spring Boot是一个用于构建独立的、生产级别的Spring应用程序的框架，而HBase是一个分布式、面向列的NoSQL数据库。将它们结合起来可以为应用程序提供高性能、可伸缩性和可靠性。
整个实现“spring boot hbase”的过程可以分为以下步骤：
| 步骤 | 描述 |
| ------ | --
原创
2024-05-22 10:36:27
52阅读
最近项目要用Hadoop来做数据分析，所以让我先熟悉一下相关的知识，第一次接触，公司也没有人有这方面的经验，只好自己摸着石头过河，理论知识只能在之后的使用过程中慢慢积累和深入学习，现在只能先想办法把项目跑起来。环境的搭建是运维给搞好的，Hadoop是2.6.0版本，这里需要注意的是，相关端口需要运维提前给好相关权限，我用了半天时间找一个问题，最后发现是一个端口没有权限造成的，白白浪费了时间。配置p
转载
2024-04-07 18:55:50
60阅读
Lucene与搜索引擎的区别全文检索系统是按照全文检索理论建立起来的用于提供全文检索服务的软件系统。全文检索系统是一个可以运行的系统，包括建立索引、处理查询返回结果集、增加索引、优化索引结构等功能。例如：百度搜索、eclipse帮助搜索、淘宝网商品搜索。搜索引擎是全文检索技术最主要的一个应用，例如百度。搜索引擎起源于传统的信息全文检索理论，即计算机程序通过扫描每一篇文章中的每一个词，建立以词为单位...
原创
2021-11-12 17:19:03
287阅读
