从最近一段时间pgspider 迭代速度似乎是很快 新版本支持的特性 数据迁移 支持本地表,外表等的迁移 路由添加 并行存储函数 支持批量insert 的表修改 不少开发的fdw 的更新 说明 pgspider 最近的迭代速度的确是快了不少,一些新功能也是值得试用的 参考资料 https://git
原创
2023-11-22 10:54:36
63阅读
perl 也算是一个小语言,但是功能很强大,以下是pgspider 集成perl的试用 以及docker基础镜像的制作,方便后期应用扩展使用 构建说明 基于源码构建,需要的配置参数./configure --with-perl docker base 镜像 FROM debian:stretch-s
原创
2021-07-18 21:28:13
76阅读
Citus 是一个很强大且成功的pg 扩展,以下是pgspider 集成Citus 的使用 docker镜像 FROM dalongrong/pgspider:base as build WORKDIR /app RUN apt-get update && apt-get install -y cm
原创
2021-07-18 21:34:09
183阅读
pgspider 官方提供了griddb 的fdw,以下是docker 构建说明 Dockerfile 说明,都是基于base 镜像构建的 FROM dalongrong/pgspider:base as build WORKDIR /app RUN apt-get update && apt-ge
原创
2021-07-19 09:51:01
103阅读
前边已经构建好了,关于sqlite,mysql,以及默认的pg 的扩展,以下是一个简单的学习试用 环境准备 为了简单目前只测试关于pg的,后边会学习关于mysql的 docker-compose 文件 version: "3" services: pg-core: image: dalongrong
原创
2021-07-19 09:51:07
197阅读
今天在使用docker构建pgspider 的时候发现了一个bug,已经提交官方,同时官方团队还是不错的,已经修改了 以下是docker 镜像构建的内容 Dockerfile 说明,基本都来自postgres 官方的,只是进行了一些关于pgspider的修改 FROM debian:stretch-
原创
2021-07-19 09:56:56
285阅读
前边有构建一个简单的pgspider griddb fdw 的docker 镜像,以下是一个简单的试用 一些说明 关于pgspider griddb fdw 的构建目前4.3 有bug,使用的是4.2版本的,同时对于java 链接使用member ip,不是广播地址ip 环境准备 griddb 自己
原创
2021-07-19 09:51:03
145阅读
以前有简单说明过pgspider 集成Citus的使用说明,但是使用上还是不太方便,所以进行了一些调整 原理说明 因为pgspider Citus docker 镜像参考自postgrres 的所以可以直接使用/docker-entrypoint-initdb.d 使用 docker-compose
原创
2021-07-16 16:03:54
253阅读
fetchq 是一个队列系统,以下是一个pgspider 扩展的构建 pgspider base 镜像 添加了uuid 扩展 FROM debian:stretch-slim RUN apt-get update && apt-get install -y build-essential git l
原创
2021-07-18 18:42:14
148阅读
昨天有构建过一个clickhouse 的fdw docker 镜像,今天测试下 环境使用docker-compose 运行,clickhouse 同样也是 环境准备 docker-compose 环境 version: "3" services: server: image: yandex/clic
原创
2021-07-19 09:43:26
252阅读
对于pg 有一个oracle_fdw的扩展,很不错,可以集成oracle 的数据访问,以下是docker 镜像的制作 dockerfile FROM dalongrong/pgspider:base as build WORKDIR /app RUN apt-get update && apt-ge
原创
2021-07-19 09:50:59
189阅读
pgsql-http 是一个很不错的 处理http 请求的扩展,我们可以用来方便的处理http 请求 以下是一个简单的试用(包括
原创
2021-07-18 21:56:25
255阅读
zombodb 是一个强大的pg 扩展,我们可以像操作数据库一样操作es,以下是pgspider 与zombodb 的构建 说明,使用最新版本v5.6.16-1.0.20 构建失败,使用了v.40 dockerfile 老样子基于已经构建好的pgspider base 镜像 FROM dalongr
原创
2021-07-19 09:50:48
150阅读
目前redis 的fdw有好几个,github 上有一个start 比较高的,但是对于新版本pg 支持不好,目前使用了 https://github.com/nahanni/rw_redis_fdw,以下是docker 镜像的构建以及试用 dockerfile 老样子基于base 镜像构建 FROM
原创
2021-07-19 09:50:55
362阅读
在测试Citus关于安全配置的时候,没太多注意官方文档的说明,当时自己也认为通过.pgpass 可以解决worker 账户密码的问题的 但是测试的时候没太多注意权限的问题,发现测试没通,所以就认为不行,今天仔细查看了官方文档,发现是可以的 .pgpass配置说明 hostname:port:data
原创
2021-07-18 21:31:04
393阅读
cstore_fdw 是citus 团队开源的pg 列式存储扩展,可以加速我们的数据分析,关于列式存储以及行式存储的比较 可以参考下边连接的动图(来自clickhouse 官方网站) https://clickhouse.tech/docs/en/ 以下是关于cstore fdw 的简单使用 环境准
原创
2021-07-19 09:40:54
166阅读
timescale 是我比较喜欢的一个pg 扩展,对于时序数据的处理很强大,以下是docker 镜像的制作 老样子基于基础镜像制作 dockerfile FROM dalongrong/pgspider:base as build WORKDIR /app RUN apt-get update &&
原创
2021-07-18 21:27:37
210阅读
前边有简单说过关于mongodb fdw 容器构建的,一些是一些使用上的简单说明 环境准备 docker-compose 文件 version: "3" services: pg-mongo: image: dalongrong/pgspider:mongo ports: - "5432:5432"
原创
2021-07-19 09:48:23
241阅读
kafka fdw的镜像还是比较好制作的,已经提供好了,相关的包,只需要构建就可以了。 还是老样子,基于base 镜像 dockerfile FROM dalongrong/pgspider:base as build WORKDIR /app RUN apt-get update && apt-g
原创
2021-07-19 09:42:51
170阅读
老样子集成base 镜像构建,以下是clickhouse dockerfile Dockerfile FROM dalongrong/pgspider:base as build WORKDIR /app RUN apt-get update && apt-get install -y openss
原创
2021-07-19 09:44:18
66阅读