前言:随着应用复杂度的增加,数据库不断细化切分,导致应用程序中数据库应用就得复杂,凌乱。绝大部分程序人员可能都遇到这种情况,应用程序中需要连接多台数据库服务器,进行相应的操作。随着时间积累,太多的数据库服务器的连接逻辑出现在程序之中,这给程序的维护扩展,数据库维护工作带来极大的工作量。

而本文所描述的 federated属于 MySQL的一种特殊引擎,利用它可将本地数据表映射至远程 MySQL 数据表,从而就可以解决应用程序中繁多的跨机器连接数据库问题,拓扑图如下:

如此就可以构造出一个统一的数据访问入口,就大大提高了整个数据库系统的可维护性。

Federated引擎是基于表级别的,只能将本地数据表定义为 Federated 引擎并映射至远程实体表,无法实现基于库级别的整体映射。

在本文中,我们将启用Federated 引擎的数据库访问入口服务器称为本地数据库,而将本地数据表对应的远程数据表,称之为实体表。

本地数据库需要启用Federated 引擎支持,而远程数据表无须 Federated 引擎支持。 Federated 引擎表使用标准的 MySQL 客户端协议与远程数据库建立 TCP 连接。

开启federated存储引擎

先查看federated存储引擎存储引擎是否启用

SHOW ENGINES ;

默认mysql是没有开启federated存储引擎,我这里因为已经配置了。

开启federated存储引擎只需要在my.cnf文件中增加‘federated’就可以。

创建Federated 表的过程:

方法一、直接创建本地表

1、 以root 登录远程 MySQL ,上创建合适的访问账号

grant all on DB1.* to 'federated'@'%' identified by 'federated';

flush privileges;

2、 在远程MySQL 找到对应实体表的创建命令(如果是新表,请先建立好数据表,再执行此命令)

假设在远程mysql 上有库名 DB1, 表名 tag, 执行以下命令找到远程表的结构:

show create table DB1.tag

输出:

CREATE TABLE `tag` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT, `name` varchar(128) NOT NULL, `frequency` int(10) unsigned NOT NULL DEFAULT '1', PRIMARY KEY (`id`) ) ENGINE=MyISAM AUTO_INCREMENT=6 DEFAULT CHARSET=utf8

3、假设我们要将远程的DB1.tag 映射至本地 DB.TableA 表上。那么我们应该保持本地虚拟表与远程实体表结构一致(结构可以有所差异,但会造成使用,管理上的麻烦)。根据远程实体表的创建命令,创建本地虚拟表 ( 结构部分完全一样,创建表选项有所差异 ) :

4、登录本地Mysql 服务器,创建相应的数据库及表:

create database DB;

use DB;

CREATE TABLE `TableA` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT, `name` varchar(128) NOT NULL, `frequency` int(10) unsigned NOT NULL DEFAULT '1', PRIMARY KEY (`id`) ) ENGINE=federated connection="mysql://federated:federated@127.0.0.1:3306/DB1/tag";

这时,即建立好了federated 虚拟表,实际上本地 MySQL 只创建了表定义文件 , 而没有数据文件。我们对本地虚拟表的数据修改,均会发送到远程机器上执行。

注意:本地创建的表名必须在远程服务器存在,创建的字段也必须是远程表中的字段,可以比远程表的字段少,但是不能多,本地存储引擎选择:ENGINE =FEDERATED,本地虚拟表名与远程表名,可不相同。

CONNECTION选项中的连接字符串的一般形式如下:

scheme://user_name[:password]@host_name[:port_num]/db_name/tbl_name

还有一些连接字符串的例子:

CONNECTION='mysql://username:password@hostname:port/database/tablename'

CONNECTION='mysql://username@hostname/database/tablename'

CONNECTION='mysql://username:password@hostname/database/tablename'

注意:配置密码作为纯文本的话会存在安全问题,运行show create table,show table status是可以见的

方法二:create server方法创建本地表

还可以通过create server方法创建基于远程服务器的链接,但是这种链接也是用于federated存储引擎,不能通过该链接来查询远程服务器的表。

语法:

CREATE SERVER server_name FOREIGN DATA WRAPPER wrapper_name OPTIONS (option [, option] ...) option: { HOST character-literal | DATABASE character-literal | USER character-literal | PASSWORD character-literal | SOCKET character-literal | OWNER character-literal | PORT numeric-literal }

注意:wrapper_name只能是mysql,使用其它名称无法支持

1.创建server

CREATE SERVER server_10 FOREIGN DATA WRAPPER mysql OPTIONS (HOST '192.168.137.10',USER 'root',PASSWORD 'root' ,PORT 3306,DATABASE 'study');

2.创建表

CREATE TABLE y (name varchar(10)) ENGINE=FEDERATED CONNECTION='server_10';

同样创建的表名必须和远程服务器的表名一样,字段也必须是远程表中的字段,可以比远程表的字段要少但是不能多。

现在查询本地创建的表也就是查询远程表,同时对本地表的操作也会应用到远程服务器表中。

经过测试,这个引擎的一些额外特点:

1. 本地虚拟表与远程实体表之间是 TCP 长连接,并且是多个客户端利用的。所以不用担心因频繁建立连接带来的网络开销。

2. 本虚拟表表与远程实体表之间的网络连接断开后,当对虚拟表发起查询时,它会尝试重新连接远程实体表,所以我们不用担心网络连接断开造成的永久中断问题。

3. 如果无时间未对本地虚拟表作任何操作,虚拟表与实体表之间的连接将在远程主机的 wait_timeout 秒后自动断开,当对虚拟表发起查询时,连接又会重新建立。

一些注意事项:

1. 对本地虚拟表的结构修改,并不会修改远程表的结构

2.  truncate 命令,会清除远程表数据

3. drop命令只会删除虚拟表,并不会删除远程表

4. 不支持 alter table 命令

目前使用federated 最大的缺点:

1. select count(), select from limit M, N 等语句执行效率非常低,数据量较大时存在很严重的问题,但是按主键或索引列查询,则很快,如以下查询就非常慢(假设 id 为主索引)

select id from db.tablea where id >100 limit 10 ;

而以下查询就很快:

select id from db.tablea where id >100 and id<150

2. 如果虚拟虚拟表中字段未建立索引,而实体表中为此字段建立了索引,此种情况下,性能也相当差。但是当给虚拟表建立索引后,性能恢复正常。

3. 类似 where name like “str%” limit 1 的查询,即使在 name 列上创建了索引,也会导致查询过慢,是因为

federated引擎会将所有满足条件的记录读取到本,再进行 limit 处理。

这几个问题已经严重影响了federated 在实际环境中的应用。

mysql federated_MySQL FEDERATED引擎相关推荐

  1. MySQL开启federated引擎实现数据库表映射

    1.查看federated引擎是否开启 点击进入Navicat并点击键盘上F6,出现命令行界面 ,输入指令:show engines; 2.开启federated引擎 Windows系统 : 在my. ...

  2. Linux mysql federated_MySQL FEDERATED 提示

    在mysql的日志文件中有以下提示信息,该信息与federated引擎有关,就是在编译的时候加入了该选项,但是并没有在配置文件中加以启用,关于federated引擎,请参考mysql的官方参考文档. ...

  3. Linux mysql federated_MySQL的FEDERATED引擎实现类Oracle的DBlink

    随着业务的复杂度不断的增加.数据库不断的切分,在分布式系统中往往一台或几台数据库并不能满足我们的需求,所以常常需要多台同时时用,而在平时需要通过其它服务器的数据库获取信息最为方便的就是数据链接,而比较 ...

  4. mysql 5.6 federated_Mysql 开启Federated引擎以及使用

    FEDERATED是其中一个专门针对远程数据库的实现.但通过FEDERATED引擎创建的表只是在本地有表定义文件,数据文件则存在于远程数据库中 通过这个引擎可以实现类似Oracle 下DBLINK的远 ...

  5. mysql ef 分布式事务_分布式事务系列--分布式跨库查询解决方案 mysql federated引擎的使用...

    背景 在服务高度拆分,数据库不断细化切分的情况下,我们经常有连接多台数据库查询的需求,如果不断的把数据库连接的逻辑添加在代码中,那么这种耦合会越来越严重,这会给程序的拓展和维护带来很大的麻烦. mys ...

  6. mysql跨服务器查询语句_MySQL 跨服务器访问之-FEDERATED引擎

    在工作中会遇到mysql要跨服务器访问,下面就介绍mysql的FEDERATED引擎如何建立跨服务器访问 进入mysql命令行,没有看到Federated,说明没有安装 mysql>show e ...

  7. mysql 跨服务器 etl_mysql数据库跨服务器查询【需要确定mysql支持FEDERATED ,可以参照文章内容自己配置】...

    现有两台MySQL数据库 一台是192.168.1.1 端口3306 上有数据库DB1 有表TABLE1 一台是192.168.1.2 端口3307 上有数据库DB2 有表TABLE2 192.168 ...

  8. mysql federated_Mysql 开启Federated引擎的方法

    FEDERATED是其中一个专门针对远程数据库的实现.一般情况下在本地数据库中建表会在数据库目录中生成相应的表定义文件,并同时生成相应的数据文件 MySQL中针对不同的功能需求提供了不同的存储引擎.所 ...

  9. mysql federated_mysql添加Federated引擎问题

    现在我有这么一个需求, 就是有两个项目, 一个叫项目A,一个项目B, 由于A的用户表和B的用户表是要实现一样的. 例如: 我在A项目中注册了,要实现在B项目中也能登录, 当用到B的时候, 由于B数据库 ...

最新文章

  1. WACV 2020 | 基于2D卷积处理成本签名的快速立体匹配
  2. 解决kubectl get pods时 No resources found.问题
  3. Winform中使用FastReport实现自定义PDF打印预览
  4. 字节、编码、字符、字符集 专题
  5. springboot thymeleaf 引入jquery_超详细实战:SpringBoot高级之autoconfigure自动化配置
  6. C++ 之父讨厌比特币
  7. 如何使用python计算2个毫秒级字符串的计算
  8. 深度linux任务栏,Deepin系统的dde-dock任务栏出不来的有效解决方法
  9. Python 里 and、or 的计算规则
  10. java反射对实体类取值和赋值,可以写成通过实体类获取其他元素的数据,很方便哦~~~...
  11. SQL BETWEEN
  12. layui官网地址(备份),layui文档地址(新)
  13. 参数化三维管网建模系统MagicPipe3D
  14. 海康、大华视频流地址格式
  15. PHP域名whois查询代码(数据源万网、新网)
  16. 两个龙的linux,Linux办公一条龙之组件间的调用
  17. 人工智能最全学习路线
  18. 如何给计算机硬盘解除密码忘了,如何解除电脑硬盘密码
  19. HTML5开发系列(4) 之 样式表的三种类型
  20. 如何把Kotlin代码转成Java代码、把Java代码转成Kotlin代码

热门文章

  1. 解决ORACLE.EXE (J000)导致的JOB卡死无法执行
  2. java从map取值_java map中怎么通过键取出值?
  3. TopN算法实战 排序算法RangePartitioner解密
  4. 鸿蒙系统与苹果xitong,华为的鸿蒙系统和苹果的iOS系统有什么区别?
  5. 苹果手机如何微信分身
  6. Oracle设置10046事件
  7. mysql中的mvcc机制
  8. System.NullReferenceException HResult=0x80004003 Message=未将对象引用设置到对象的实例。
  9. Rides5.0.4版本集群设置
  10. 瓶盖扫码回收APP系统 废旧物品创造价值收益