mysql文件系统先睹为快
时间:2006-07-15 来源:softiger
mysql文件系统先睹为快(目录)
这是一款正在开发中的linux 文件系统,能把linux 上的mysql 数据库作为文件系统来处理。开发小组希望能得到更多的建议,下面的文章翻译自:
http://no.spam.ee/~tonu/mysqlfs.html -------------------------------- 实际上,这不是通常意义上的文件系统,他没有磁盘空间,而是使用mysql 守护程序来存储数据。可以把sql 表和一些函数通过文件系统来实现。 mysql文件系统先睹为快(1) 一、怎样实现? 既然是可以把sql 表和一些函数通过文件系统来实现,那么如何实现呢?让我们以实例来向大家说明。 二、为什么要这样做呢? 在一些情形下,这样做能让工作更加轻松。mysql 和文件系统都能叫做数据库,但是有着绝然不同的概念和优缺点。在文件系统里,对象能很快而且很容易找到,即使改变名字也能很快找到。 三、性能如何? 在发表这篇文章的时候,这个文件系统还处于原型开发阶段,因此,速度还不是很理想。如果到了正式发布的时候,一些数据库功能会比使用 sql 要快。 当然,很多还是没法和sql 相比,无论是性能上还是功能上,很多复杂的查询依然需要通过sql 语句来完成。但是,这样节省了很多开发和培训的时间,所以在效率上来说也是一种节省。 四、支持的表类型 这个文件系统在一定程度上来说存在其它可用之处,它支持的表类型有:myisam,dbd,heap,isam。 mysql文件系统先睹为快(2) 五、其他的特色 在第一步开发中实现的还只是只读,很快会有能读写的版本出来。目前的计划是把数据库对象映射成文件和目录对象。 mysql文件系统先睹为快(3) 六、写权限? 任何一个文件系统只能含有写权限才能算是一个有价值的文件系统。 七、权限管理 有了写的权限,必然会在安全方向带来问题,这也是设计者必须考虑的问题。那么,采用何种管理方式好呢?
mysql文件系统先睹为快(1)
实际上,这不是通常意义上的文件系统,他没有磁盘空间,而是使用mysql 守护程序来存储数据。可以把sql 表和一些函数通过文件系统来实现。
一、怎样实现?
让我们来看使用实例:
[root@localhost /root]# mount -t corbafs -o `cat /tmp/mysqlcorbafs.ior` none /mnt/mysql/
[root@localhost /root]# mount /dev/hda3 on / type ext2 (rw) none on /proc type proc (rw) none on /dev/pts type devpts (rw,gid=5,mode=620) /dev/hda1 on /mnt/win type vfat (rw,mode=777) /dev/hda4 on /mnt/linux type vfat (rw,noexec,nosuid,nodev,mode=777) none on /mnt/mysql type corbafs (rw,ior:01e50d401b00000049444c3a436f72626146532f46696c6553797374656d3a
312e300000010000000000000030000000010100000a0000003132372e302e302e
3100080418000000000000009224bc335663462a01000000ef7ae13c0943c59f)
[root@localhost /root]# ls -la /mnt/mysql/
total 0
-r-xr-xr-x 1 root root 4096 dets 29 22:21 .uptime dr-xr-xr-x 1 root root 4096 dets 29 22:21 test dr-xr-xr-x 1 root root 4096 dets 29 22:21 mysql
[root@localhost /root]# cat /mnt/mysql/.uptime
1994
[root@localhost /root]# cat /mnt/mysql/mysql/user/host
cpq.spam.ee cpq.spam.ee localhost localhost localhost localhost localhost localhost
[root@localhost /root]# cat /mnt/mysql/mysql/user/insert_priv n n n n n n y y
[root@localhost /root]# umount /mnt/mysql/
二、为什么要这样做呢?
在一些情形下,这样做能让工作更加轻松。mysql 和文件系统都能叫做数据库,但是有着绝然不同的概念和优缺点。在文件系统里,对象能很快而且很容易找到,即使改变名字也能很快找到。每一个初学者大概都应该学会move/copy/rename/delete这样的操作。但是sql 不一样,他通过应用程序来操纵存储在文件系统上的数据。而mysql 文件系统把sql 做到了用户级。用户能用他们知道的方式来操作数据库。
-任何一个新产品需要通过网络存取数据的话,必须支持一些协议以及可能的其他办法通过网络存取文件系统。mysql 表就可以通过这样的方式来存取,即使mysql 没有移植到对应的平台。
-备份和版本控制,普通的文件系统通过任何备份软件就可以实现。数据可以通过diff 来比较并且用cvs 来控制版本。
-更短的编程时间,有时候人们需要保存简单的数据,像当前日期或者站点名字,这些数据很少改变,普通的方法需要使用: 连接服务器-> 选择数据库 -> 执行命令-> 存储结果
而使用 mysql 文件系统后,只需要一句话:(php实现)
include(¨/mountpoint/database/table/field¨);
或者,换一种方式表达:
include(¨/mnt/mysql/sitedata/topic/todaytopic¨); 这样就很容易理解,也占用了较少的空间。还可以通过samba 来共享 /mnt/mysql,达到直接修改sql 数据库的目的。能直接写文本到数据库,或者使用拷贝/粘贴功能把图片放入数据库,这要比用perl 或者php 写几百行程序省力多了。
三、性能如何?
在发表这篇文章的时候,这个文件系统还处于原型开发阶段,因此,速度还不是很理想。如果到了正式发布的时候,一些数据库功能会比使用 sql 要快。 当然,很多还是没法和sql 相比,无论是性能上还是功能上,很多复杂的查询依然需要通过sql 语句来完成。但是,这样节省了很多开发和培训的时间,所以在效率上来说也是一种节省。 四、支持的表类型: 目前这个文件系统支持所有的表类型:myisam,dbd,heap,isam。
mysql文件系统先睹为快(2)
五、其他的特色:
在第一步开发中实现的还只是只读,很快会有能读写的版本出来。 目前的计划是把数据库对象映射成文件和目录对象。让我们来看看 例子: --8<----------------------------- #建立表
create table invoice ( invoice_id int(10) unsigned not null auto_increment, invoice_no int(10) unsigned default ’0’ not null, payee char(40) default ’’ not null, primary key (invoice_id), key payee (payee) );
# 插入数据
insert into invoice values (1,100,’company ab’); insert into invoice values (2,101,’company cd’); insert into invoice values (3,102,’company ef’);
--8<-----------------------------
因为 mysql 没有办法使用记录号,所以我们必须建立主键。 就有了以下的目录结构:
/mountpoint/database/table/primary_key/field
这样,每个列出现在不同的文件行之中,文件树的结构如下:
/mnt/mysql/mydata/invoice/1/invoice_id /mnt/mysql/mydata/invoice/1/invoice_no /mnt/mysql/mydata/invoice/1/payee /mnt/mysql/mydata/invoice/2/invoice_id /mnt/mysql/mydata/invoice/2/invoice_no /mnt/mysql/mydata/invoice/2/payee /mnt/mysql/mydata/invoice/3/invoice_id /mnt/mysql/mydata/invoice/3/invoice_no /mnt/mysql/mydata/invoice/3/payee 另外,还有第二个办法可以使用:
/mountpoint/database/table/.table 和 /mountpoint/database/table/primary_key/.record /mnt/mysql/mydata/invoice/.table /mnt/mysql/mydata/invoice/1/.record /mnt/mysql/mydata/invoice/1/invoice_id /mnt/mysql/mydata/invoice/1/invoice_no /mnt/mysql/mydata/invoice/1/payee /mnt/mysql/mydata/invoice/2/.record /mnt/mysql/mydata/invoice/2/invoice_id /mnt/mysql/mydata/invoice/2/invoice_no /mnt/mysql/mydata/invoice/2/payee /mnt/mysql/mydata/invoice/3/.record /mnt/mysql/mydata/invoice/3/invoice_id /mnt/mysql/mydata/invoice/3/invoice_no /mnt/mysql/mydata/invoice/3/payee 这些文件是隐含的,以防重复,主要用来方便地通过文本文件 浏览器来查看。
现在,在那些需要使用sql 语句搜索最小,最大,最后等数据, 可以通过符号连接来实现了:
/mountpoint/database/table/primary_key/.max 或者 /mnt/mysql/mydata/invoice/invoice_id/.max 或者指向 /mountpoint/database/table/field 和 /mnt/mysql/mydata/invoice/3
同样的就可以返回一行的 min/max/sum/avg 等数值。 这能很快并且很容易地实现。
/mnt/mysql/mydata/.keys/ /mnt/mysql/mydata/.keys/invoice_id/ /mnt/mysql/mydata/.keys/payee/
符号连接到主键: /mnt/mysql/mydata/.keys/.primary_key/ 实际上指向 /mnt/mysql/mydata/.keys/invoice_id/
还有一些隐藏文件提供键类型: /mnt/mysql/mydata/.keys/invoice_id/.type /mnt/mysql/mydata/.keys/payee/.type
第一个文内容为:¨primary key¨ 第二个为 ¨key¨ 。
另外还可以用索引来排序记录,如果读取下面的目录:
/mnt/mysql/mydata/.keys/payee/asc/
php 的readdir() 函数就以升序返回数据的符号连接。
另外还有一些全局函数:
/mountpoint/.version /mountpoint/.last_insert_id /mountpoint/.uptime /mountpoint/database/.raid (0/1) /mountpoint/database/.type (isam/myisam/heap/dbd) /mountpoint/database/.tables /mountpoint/database/table/.created /mountpoint/database/table/.last_updated /mountpoint/database/table/.last_checked /mountpoint/database/table/.count
mysql文件系统先睹为快(3)
六、写权限?
在开发的第二阶段,会有措施执行sql 语句。现在的思路是:
采用目录: /mountpoint/database/.command/
然后执行命令,把sql 语句作为目录建立。 或者建立目录把sql 语句作为文件放入这个目录。
两个方案都有优点,第一个方案可以重新使用sql 语句,但是这样的目录名实在不敢令人苟同。第二个方案采用信号量文件,语句执行完毕就删除这个文件,没有任务使用时,目录也被删除。对于那些慢速的查询响应,可以选择timeout 的时间。
七、权限管理 在权限管理方面,可以使用unix 的权限管理方式,这样的方案看来是最好的。
这是一款正在开发中的linux 文件系统,能把linux 上的mysql 数据库作为文件系统来处理。开发小组希望能得到更多的建议,下面的文章翻译自:
http://no.spam.ee/~tonu/mysqlfs.html -------------------------------- 实际上,这不是通常意义上的文件系统,他没有磁盘空间,而是使用mysql 守护程序来存储数据。可以把sql 表和一些函数通过文件系统来实现。 mysql文件系统先睹为快(1) 一、怎样实现? 既然是可以把sql 表和一些函数通过文件系统来实现,那么如何实现呢?让我们以实例来向大家说明。 二、为什么要这样做呢? 在一些情形下,这样做能让工作更加轻松。mysql 和文件系统都能叫做数据库,但是有着绝然不同的概念和优缺点。在文件系统里,对象能很快而且很容易找到,即使改变名字也能很快找到。 三、性能如何? 在发表这篇文章的时候,这个文件系统还处于原型开发阶段,因此,速度还不是很理想。如果到了正式发布的时候,一些数据库功能会比使用 sql 要快。 当然,很多还是没法和sql 相比,无论是性能上还是功能上,很多复杂的查询依然需要通过sql 语句来完成。但是,这样节省了很多开发和培训的时间,所以在效率上来说也是一种节省。 四、支持的表类型 这个文件系统在一定程度上来说存在其它可用之处,它支持的表类型有:myisam,dbd,heap,isam。 mysql文件系统先睹为快(2) 五、其他的特色 在第一步开发中实现的还只是只读,很快会有能读写的版本出来。目前的计划是把数据库对象映射成文件和目录对象。 mysql文件系统先睹为快(3) 六、写权限? 任何一个文件系统只能含有写权限才能算是一个有价值的文件系统。 七、权限管理 有了写的权限,必然会在安全方向带来问题,这也是设计者必须考虑的问题。那么,采用何种管理方式好呢?
mysql文件系统先睹为快(1)
实际上,这不是通常意义上的文件系统,他没有磁盘空间,而是使用mysql 守护程序来存储数据。可以把sql 表和一些函数通过文件系统来实现。
一、怎样实现?
让我们来看使用实例:
[root@localhost /root]# mount -t corbafs -o `cat /tmp/mysqlcorbafs.ior` none /mnt/mysql/
[root@localhost /root]# mount /dev/hda3 on / type ext2 (rw) none on /proc type proc (rw) none on /dev/pts type devpts (rw,gid=5,mode=620) /dev/hda1 on /mnt/win type vfat (rw,mode=777) /dev/hda4 on /mnt/linux type vfat (rw,noexec,nosuid,nodev,mode=777) none on /mnt/mysql type corbafs (rw,ior:01e50d401b00000049444c3a436f72626146532f46696c6553797374656d3a
312e300000010000000000000030000000010100000a0000003132372e302e302e
3100080418000000000000009224bc335663462a01000000ef7ae13c0943c59f)
[root@localhost /root]# ls -la /mnt/mysql/
total 0
-r-xr-xr-x 1 root root 4096 dets 29 22:21 .uptime dr-xr-xr-x 1 root root 4096 dets 29 22:21 test dr-xr-xr-x 1 root root 4096 dets 29 22:21 mysql
[root@localhost /root]# cat /mnt/mysql/.uptime
1994
[root@localhost /root]# cat /mnt/mysql/mysql/user/host
cpq.spam.ee cpq.spam.ee localhost localhost localhost localhost localhost localhost
[root@localhost /root]# cat /mnt/mysql/mysql/user/insert_priv n n n n n n y y
[root@localhost /root]# umount /mnt/mysql/
二、为什么要这样做呢?
在一些情形下,这样做能让工作更加轻松。mysql 和文件系统都能叫做数据库,但是有着绝然不同的概念和优缺点。在文件系统里,对象能很快而且很容易找到,即使改变名字也能很快找到。每一个初学者大概都应该学会move/copy/rename/delete这样的操作。但是sql 不一样,他通过应用程序来操纵存储在文件系统上的数据。而mysql 文件系统把sql 做到了用户级。用户能用他们知道的方式来操作数据库。
-任何一个新产品需要通过网络存取数据的话,必须支持一些协议以及可能的其他办法通过网络存取文件系统。mysql 表就可以通过这样的方式来存取,即使mysql 没有移植到对应的平台。
-备份和版本控制,普通的文件系统通过任何备份软件就可以实现。数据可以通过diff 来比较并且用cvs 来控制版本。
-更短的编程时间,有时候人们需要保存简单的数据,像当前日期或者站点名字,这些数据很少改变,普通的方法需要使用: 连接服务器-> 选择数据库 -> 执行命令-> 存储结果
而使用 mysql 文件系统后,只需要一句话:(php实现)
include(¨/mountpoint/database/table/field¨);
或者,换一种方式表达:
include(¨/mnt/mysql/sitedata/topic/todaytopic¨); 这样就很容易理解,也占用了较少的空间。还可以通过samba 来共享 /mnt/mysql,达到直接修改sql 数据库的目的。能直接写文本到数据库,或者使用拷贝/粘贴功能把图片放入数据库,这要比用perl 或者php 写几百行程序省力多了。
三、性能如何?
在发表这篇文章的时候,这个文件系统还处于原型开发阶段,因此,速度还不是很理想。如果到了正式发布的时候,一些数据库功能会比使用 sql 要快。 当然,很多还是没法和sql 相比,无论是性能上还是功能上,很多复杂的查询依然需要通过sql 语句来完成。但是,这样节省了很多开发和培训的时间,所以在效率上来说也是一种节省。 四、支持的表类型: 目前这个文件系统支持所有的表类型:myisam,dbd,heap,isam。
mysql文件系统先睹为快(2)
五、其他的特色:
在第一步开发中实现的还只是只读,很快会有能读写的版本出来。 目前的计划是把数据库对象映射成文件和目录对象。让我们来看看 例子: --8<----------------------------- #建立表
create table invoice ( invoice_id int(10) unsigned not null auto_increment, invoice_no int(10) unsigned default ’0’ not null, payee char(40) default ’’ not null, primary key (invoice_id), key payee (payee) );
# 插入数据
insert into invoice values (1,100,’company ab’); insert into invoice values (2,101,’company cd’); insert into invoice values (3,102,’company ef’);
--8<-----------------------------
因为 mysql 没有办法使用记录号,所以我们必须建立主键。 就有了以下的目录结构:
/mountpoint/database/table/primary_key/field
这样,每个列出现在不同的文件行之中,文件树的结构如下:
/mnt/mysql/mydata/invoice/1/invoice_id /mnt/mysql/mydata/invoice/1/invoice_no /mnt/mysql/mydata/invoice/1/payee /mnt/mysql/mydata/invoice/2/invoice_id /mnt/mysql/mydata/invoice/2/invoice_no /mnt/mysql/mydata/invoice/2/payee /mnt/mysql/mydata/invoice/3/invoice_id /mnt/mysql/mydata/invoice/3/invoice_no /mnt/mysql/mydata/invoice/3/payee 另外,还有第二个办法可以使用:
/mountpoint/database/table/.table 和 /mountpoint/database/table/primary_key/.record /mnt/mysql/mydata/invoice/.table /mnt/mysql/mydata/invoice/1/.record /mnt/mysql/mydata/invoice/1/invoice_id /mnt/mysql/mydata/invoice/1/invoice_no /mnt/mysql/mydata/invoice/1/payee /mnt/mysql/mydata/invoice/2/.record /mnt/mysql/mydata/invoice/2/invoice_id /mnt/mysql/mydata/invoice/2/invoice_no /mnt/mysql/mydata/invoice/2/payee /mnt/mysql/mydata/invoice/3/.record /mnt/mysql/mydata/invoice/3/invoice_id /mnt/mysql/mydata/invoice/3/invoice_no /mnt/mysql/mydata/invoice/3/payee 这些文件是隐含的,以防重复,主要用来方便地通过文本文件 浏览器来查看。
现在,在那些需要使用sql 语句搜索最小,最大,最后等数据, 可以通过符号连接来实现了:
/mountpoint/database/table/primary_key/.max 或者 /mnt/mysql/mydata/invoice/invoice_id/.max 或者指向 /mountpoint/database/table/field 和 /mnt/mysql/mydata/invoice/3
同样的就可以返回一行的 min/max/sum/avg 等数值。 这能很快并且很容易地实现。
/mnt/mysql/mydata/.keys/ /mnt/mysql/mydata/.keys/invoice_id/ /mnt/mysql/mydata/.keys/payee/
符号连接到主键: /mnt/mysql/mydata/.keys/.primary_key/ 实际上指向 /mnt/mysql/mydata/.keys/invoice_id/
还有一些隐藏文件提供键类型: /mnt/mysql/mydata/.keys/invoice_id/.type /mnt/mysql/mydata/.keys/payee/.type
第一个文内容为:¨primary key¨ 第二个为 ¨key¨ 。
另外还可以用索引来排序记录,如果读取下面的目录:
/mnt/mysql/mydata/.keys/payee/asc/
php 的readdir() 函数就以升序返回数据的符号连接。
另外还有一些全局函数:
/mountpoint/.version /mountpoint/.last_insert_id /mountpoint/.uptime /mountpoint/database/.raid (0/1) /mountpoint/database/.type (isam/myisam/heap/dbd) /mountpoint/database/.tables /mountpoint/database/table/.created /mountpoint/database/table/.last_updated /mountpoint/database/table/.last_checked /mountpoint/database/table/.count
mysql文件系统先睹为快(3)
六、写权限?
在开发的第二阶段,会有措施执行sql 语句。现在的思路是:
采用目录: /mountpoint/database/.command/
然后执行命令,把sql 语句作为目录建立。 或者建立目录把sql 语句作为文件放入这个目录。
两个方案都有优点,第一个方案可以重新使用sql 语句,但是这样的目录名实在不敢令人苟同。第二个方案采用信号量文件,语句执行完毕就删除这个文件,没有任务使用时,目录也被删除。对于那些慢速的查询响应,可以选择timeout 的时间。
七、权限管理 在权限管理方面,可以使用unix 的权限管理方式,这样的方案看来是最好的。
相关阅读 更多 +