你不知道的PostgreSQL数据库安装及实现跨库查询PG和Oracle
bigegpt 2025-02-03 11:28 5 浏览
PG作为近几年最火热的关系型数据,已经被很多开发者所使用,尤其是5G网络普及完毕后,IOT和AI的应用场景下,数据的读写速度要求非常高,MYSQL已经开始不能满足高强度的数据吞吐(这里有争议,这里只是说单台服务的情况,使用负载的不在此讨论范围),ORACLE数据由于其不是开源项目,导致很多开发者在进行技术选型的时候,不会优先选择ORACLE作为第一选择,这时候PG作为一款可以媲美ORACLE的开源关系型数据库的优势就很明显了。下面我来介绍一下在CentOS下安装PG和使用PG进行跨库查询PG和ORACLE。
环境准备
一台CentOS7的Lunix服务器。
PostgreSQL 10.10, 64-bit,官网 https://www.postgresql.org/进行下载(window或者lunix都可以直接下载,我们这里使用yum进行镜像下载)
PG安装步骤如下:
1.安装rpm文件
yum install https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm
2.安装PG客户端
yum install postgresql10
3.安装服务端
yum install postgresql10-server
4.初始化PG
/usr/pgsql-10/bin/postgresql-10-setup initdb
5、设置自动启动并且启动postgresql服务
systemctl enable postgresql-10
systemctl start postgresql-10
下面进行PG数据库初始化,创建用户和数据库,步骤如下:
1.切换用户到postgres(PG安装成功后会自动创建postgres,初始化没有密码)
su - postgres
2.登陆postgresql数据库
3.创建用户和数据库
create user admin with password 'admin'; // 创建用户
create database iot_admin owner admin; // 创建数据库
grant all privileges on database iot_admin to admin; // 授权
4、退出psql
\q
PG在安装之后,默认不开启远程访问的,需要手动开启远程访问,步骤如下
1、修改/var/lib/pgsql/10/data/postgresql.conf文件,取消 listen_addresses 的注释,将参数值改为“*”
2、修改/var/lib/pgsql/10/data/pg_hba.conf文件,增加下图红框部分内容
3.切换root用户后,重启PG服
su - root
systemctl restart postgresql-10.service
4.使用Navicat连接PG
到这里PG已经正常安装到CentOS上,并且已经正常连接了。
下面我们来介绍PG最为强大的fdw功能
什么是fdw,我们来说下业务场景,比如我想做获取其他服务器上的的数据,一般情况我们的获取方式都是使用webservice或者rest-api接口的方式进行获取,有了fdw之后,我们可以直接将服务器上数据库的表映射(可以理解为一种特殊的外部数据接口),这样我们就可以直接读取我们自己库上映射的表进行数据构建,这里可能会有人认为接口也可以实现这种功能,我想说的是,接口总时有一定的延迟性的,而且映射过来的表我们是可以使用join来进行数据关联的,这也极大的方便了我们的开发和应用。
下面我来介绍使用Postgreslq_fdw来实现跨库查询Postgresql和使用Oracle_fdw来查询Oracle
使用Postgresql_fdw实现跨库查询Postgreql库(使用Navicat进行操作)
根据上文,我们已经创建了一个数据库iot_admin
1.我们新建一个数据库iot_all
2.这里我们在iot_admin中新建一张表base_user,
然后将base_user的数据同步到iot_all中。
iot_admin的建表SQL语句如下:
CREATE TABLE "public"."base_user" (
"id" varchar(64) COLLATE "pg_catalog"."default" NOT NULL,
"username" varchar(255) COLLATE "pg_catalog"."default",
"password" varchar(255) COLLATE "pg_catalog"."default",
"name" varchar(255) COLLATE "pg_catalog"."default",
"birthday" varchar(255) COLLATE "pg_catalog"."default",
"address" varchar(255) COLLATE "pg_catalog"."default",
"mobile_phone" varchar(255) COLLATE "pg_catalog"."default",
"tel_phone" varchar(255) COLLATE "pg_catalog"."default",
"email" varchar(255) COLLATE "pg_catalog"."default",
"sex" varchar(1) COLLATE "pg_catalog"."default",
"status" varchar(1) COLLATE "pg_catalog"."default",
"description" varchar(255) COLLATE "pg_catalog"."default",
"crt_time" timestamp(6),
"crt_user" varchar(255) COLLATE "pg_catalog"."default",
"crt_name" varchar(255) COLLATE "pg_catalog"."default",
"crt_host" varchar(255) COLLATE "pg_catalog"."default",
"upd_time" timestamp(6),
"upd_user" varchar(255) COLLATE "pg_catalog"."default",
"upd_name" varchar(255) COLLATE "pg_catalog"."default",
"upd_host" varchar(255) COLLATE "pg_catalog"."default",
"attr1" varchar(255) COLLATE "pg_catalog"."default",
"attr2" varchar(255) COLLATE "pg_catalog"."default",
"attr3" varchar(255) COLLATE "pg_catalog"."default",
"attr4" varchar(255) COLLATE "pg_catalog"."default",
"attr5" varchar(255) COLLATE "pg_catalog"."default",
"attr6" varchar(255) COLLATE "pg_catalog"."default",
"attr7" varchar(255) COLLATE "pg_catalog"."default",
"attr8" varchar(255) COLLATE "pg_catalog"."default",
"delete_flag" int2 NOT NULL DEFAULT 0,
"user_type" int2 NOT NULL DEFAULT 0,
"office_id" varchar(64) COLLATE "pg_catalog"."default",
"company_id" varchar(64) COLLATE "pg_catalog"."default",
"is_frist_login" varchar(10) COLLATE "pg_catalog"."default"
)
;
ALTER TABLE "public"."base_user" ADD CONSTRAINT "pk_base_user" PRIMARY KEY ("id");
3.在iot_all中安装FDW插件
SQL如下:
CREATE EXTENSION postgres_fdw;
4.在iot_all中创建iot_admin的远程服务
CREATE SERVER admin_server
FOREIGN DATA WRAPPER postgres_fdw
OPTIONS (host '10.100.2.156', port '5432', dbname 'iot_admin');
数据库ip 端口 数据库名称
5.验证服务创建成功
SELECT * from pg_foreign_server;
6.创建user mapping 相当于用户数据映射,将服务的权限给用户,没有给权限的用户无法使用相应的服务,这里使用初始化用户posgres
CREATE USER MAPPING FOR postgres
SERVER admin_server
OPTIONS (user 'postgres', password 'xgit_123');
用户名 密码
7.在iot_all中创建外部表,映射iot_admin中的base_user;
CREATE FOREIGN TABLE "public"."base_user" (
"id" varchar(64) COLLATE "pg_catalog"."default" NOT NULL,
"username" varchar(255) COLLATE "pg_catalog"."default",
"password" varchar(255) COLLATE "pg_catalog"."default",
"name" varchar(255) COLLATE "pg_catalog"."default",
"birthday" varchar(255) COLLATE "pg_catalog"."default",
"address" varchar(255) COLLATE "pg_catalog"."default",
"mobile_phone" varchar(255) COLLATE "pg_catalog"."default",
"tel_phone" varchar(255) COLLATE "pg_catalog"."default",
"email" varchar(255) COLLATE "pg_catalog"."default",
"sex" varchar(1) COLLATE "pg_catalog"."default",
"status" varchar(1) COLLATE "pg_catalog"."default",
"description" varchar(255) COLLATE "pg_catalog"."default",
"crt_time" timestamp(6),
"crt_user" varchar(255) COLLATE "pg_catalog"."default",
"crt_name" varchar(255) COLLATE "pg_catalog"."default",
"crt_host" varchar(255) COLLATE "pg_catalog"."default",
"upd_time" timestamp(6),
"upd_user" varchar(255) COLLATE "pg_catalog"."default",
"upd_name" varchar(255) COLLATE "pg_catalog"."default",
"upd_host" varchar(255) COLLATE "pg_catalog"."default",
"attr1" varchar(255) COLLATE "pg_catalog"."default",
"attr2" varchar(255) COLLATE "pg_catalog"."default",
"attr3" varchar(255) COLLATE "pg_catalog"."default",
"attr4" varchar(255) COLLATE "pg_catalog"."default",
"attr5" varchar(255) COLLATE "pg_catalog"."default",
"attr6" varchar(255) COLLATE "pg_catalog"."default",
"attr7" varchar(255) COLLATE "pg_catalog"."default",
"attr8" varchar(255) COLLATE "pg_catalog"."default",
"delete_flag" int2 NOT NULL DEFAULT 0,
"user_type" int2 NOT NULL DEFAULT 0,
"office_id" varchar(64) COLLATE "pg_catalog"."default",
"company_id" varchar(64) COLLATE "pg_catalog"."default",
"is_frist_login" varchar(10) COLLATE "pg_catalog"."default"
) Server admin_server options (table_name 'base_user');
服务名 映射的表名称
6.验证同步
查看iot_admin中base_user的数据
查看iot_all中的base_user的数据
这里需要重点说明的一个问题是,外部表映射仅仅可以对表的增删改查进行操作,也就是对表数据进行操作,但是不能对表结构进行操作,也就是all里面字段的改变不影响admin的改变,同时ALL中的字段是可以少于admin中,但是不能多于admin中,或者存在admin中不存在的字段
使用Oracle_fdw实现跨库查询Oracle库
1.安装Oracle_fdw
官方地址:http://pgxn.org/dist/oracle_fdw/ ,选择一个版本下载。
2.安装Oracle Instant Client
从oralce官网下载 'Basic' and 'SDK',假如下载后文件所在位置在/opt/oracle中。
cd /opt/oracle
unzip instantclient-basic-linux.x64-12.2.0.1.0.zip
unzip instantclient-sdk-linux.x64-12.2.0.1.0.zip
mv instantclient_12_2 instantclient
cd instantclient
ln -s libclntsh.so.12.1 libclntsh.so
vi /etc/profile
export ORACLE_HOME=/opt/oracle/instantclient
export OCI_LIB_DIR=$ORACLE_HOME
export OCI_INC_DIR=$ORACLE_HOME/sdk/include
source /etc/profile
3.启动用户变量
source /home/postgres/.bashrc
4.安装oracle_fdw
unzip oracle_fdw-1.5.0.zip
cd oracle_fdw-1.5.0
make
make install
下面是创建FDW的扩展
同样是iot_all数据库
1.安装oracle_fdw扩展
create extension oracle_fdw;
2.创建server
create server oradb_test foreign data wrapper oracle_fdw options(dbserver '192.168.0.215:1521/ora_db');
这里和PG互相跨库查询略有不同
4.服务授权
grant usage on foreign server oradb_test to postgres;
5.创建服务映射给用户
create user mapping for postgres server oradb_test options(user 'MG_APP',password 'QWERasdf');
下面进行表的创建和做映射,可以参照PG实现跨库,步骤相同。
结语
PG作为一款关系型数据库,可以实现如此多的功能扩展,可以是一款全栈型数据库也不为过。
相关推荐
- 得物可观测平台架构升级:基于GreptimeDB的全新监控体系实践
-
一、摘要在前端可观测分析场景中,需要实时观测并处理多地、多环境的运行情况,以保障Web应用和移动端的可用性与性能。传统方案往往依赖代理Agent→消息队列→流计算引擎→OLAP存储...
- warm-flow新春版:网关直连和流程图重构
-
本期主要解决了网关直连和流程图重构,可以自此之后可支持各种复杂的网关混合、多网关直连使用。-新增Ruoyi-Vue-Plus优秀开源集成案例更新日志[feat]导入、导出和保存等新增json格式支持...
- 扣子空间体验报告
-
在数字化时代,智能工具的应用正不断拓展到我们工作和生活的各个角落。从任务规划到项目执行,再到任务管理,作者深入探讨了这款工具在不同场景下的表现和潜力。通过具体的应用实例,文章展示了扣子空间如何帮助用户...
- spider-flow:开源的可视化方式定义爬虫方案
-
spider-flow简介spider-flow是一个爬虫平台,以可视化推拽方式定义爬取流程,无需代码即可实现一个爬虫服务。spider-flow特性支持css选择器、正则提取支持JSON/XML格式...
- solon-flow 你好世界!
-
solon-flow是一个基础级的流处理引擎(可用于业务规则、决策处理、计算编排、流程审批等......)。提供有“开放式”驱动定制支持,像jdbc有mysql或pgsql等驱动,可...
- 新一代开源爬虫平台:SpiderFlow
-
SpiderFlow:新一代爬虫平台,以图形化方式定义爬虫流程,不写代码即可完成爬虫。-精选真开源,释放新价值。概览Spider-Flow是一个开源的、面向所有用户的Web端爬虫构建平台,它使用Ja...
- 通过 SQL 训练机器学习模型的引擎
-
关注薪资待遇的同学应该知道,机器学习相关的岗位工资普遍偏高啊。同时随着各种通用机器学习框架的出现,机器学习的门槛也在逐渐降低,训练一个简单的机器学习模型变得不那么难。但是不得不承认对于一些数据相关的工...
- 鼠须管输入法rime for Mac
-
鼠须管输入法forMac是一款十分新颖的跨平台输入法软件,全名是中州韵输入法引擎,鼠须管输入法mac版不仅仅是一个输入法,而是一个输入法算法框架。Rime的基础架构十分精良,一套算法支持了拼音、...
- Go语言 1.20 版本正式发布:新版详细介绍
-
Go1.20简介最新的Go版本1.20在Go1.19发布六个月后发布。它的大部分更改都在工具链、运行时和库的实现中。一如既往,该版本保持了Go1的兼容性承诺。我们期望几乎所...
- iOS 10平台SpriteKit新特性之Tile Maps(上)
-
简介苹果公司在WWDC2016大会上向人们展示了一大批新的好东西。其中之一就是SpriteKitTileEditor。这款工具易于上手,而且看起来速度特别快。在本教程中,你将了解关于TileE...
- 程序员简历例句—范例Java、Python、C++模板
-
个人简介通用简介:有良好的代码风格,通过添加注释提高代码可读性,注重代码质量,研读过XXX,XXX等多个开源项目源码从而学习增强代码的健壮性与扩展性。具备良好的代码编程习惯及文档编写能力,参与多个高...
- Telerik UI for iOS Q3 2015正式发布
-
近日,TelerikUIforiOS正式发布了Q32015。新版本新增对XCode7、Swift2.0和iOS9的支持,同时还新增了对数轴、不连续的日期时间轴等;改进TKDataPoin...
- ios使用ijkplayer+nginx进行视频直播
-
上两节,我们讲到使用nginx和ngixn的rtmp模块搭建直播的服务器,接着我们讲解了在Android使用ijkplayer来作为我们的视频直播播放器,整个过程中,需要注意的就是ijlplayer编...
- IOS技术分享|iOS快速生成开发文档(一)
-
前言对于开发人员而言,文档的作用不言而喻。文档不仅可以提高软件开发效率,还能便于以后的软件开发、使用和维护。本文主要讲述Objective-C快速生成开发文档工具appledoc。简介apple...
- macOS下配置VS Code C++开发环境
-
本文介绍在苹果macOS操作系统下,配置VisualStudioCode的C/C++开发环境的过程,本环境使用Clang/LLVM编译器和调试器。一、前置条件本文默认前置条件是,您的开发设备已...
- 一周热门
- 最近发表
- 标签列表
-
- mybatiscollection (79)
- mqtt服务器 (88)
- keyerror (78)
- c#map (65)
- resize函数 (64)
- xftp6 (83)
- bt搜索 (75)
- c#var (76)
- mybatis大于等于 (64)
- xcode-select (66)
- httperror403.14-forbidden (63)
- logstashinput (65)
- hadoop端口 (65)
- dockernetworkconnect (63)
- esxi7 (63)
- vue阻止冒泡 (67)
- c#for循环 (63)
- oracle时间戳转换日期 (64)
- jquery跨域 (68)
- php写入文件 (73)
- java大写转小写 (63)
- kafkatools (66)
- mysql导出数据库 (66)
- jquery鼠标移入移出 (71)
- 取小数点后两位的函数 (73)