JR 精品文章 - 谈谈如何保证数据库操作与文件系统操作一致性
AD: jr (at) javaresearch.org


首页 | 动态 | 文章 | FAQ  | 新闻 | 下载 | 代码 | 工作 | 调查 | 术语 | 站点 | 图书 | 论坛 | 帮助 | 全部  

TOP | 交流 | 软件 | 专栏 | 开源 | 译/著 | 源码 | API  | 推荐 | FTP  | 积分 | 统计 | 搜索 | Blog | 我们  
首页 » 研究文集 » 开发框架 搜索标题相关文章 搜索标题相关文章    评论此文章 发表评论     开始监控此文章 开始监控   加入收藏夹  加入收藏夹
谈谈如何保证数据库操作与文件系统操作一致性
javamonkey 原创   更新:2008-09-13 01:25:26  版本: 1.0   

   企业应用里,事务支持是很关键的一个特点。如数据库比Flat file存储数据跟合适的原因呢之一就是支持事务。通常来讲,支持事务的资源一般称为Resource Manager,如数据库,完成了事物相关操作和数据恢复,我们使用JDBC来编写数据库访问程序,并可以通国调用commit,rollback来提交或者回滚事务,也可以通过接口来设置隔离级别(http://epub.itpub.net/3/4.htm)。如果需求是将数据存储到数据中,那程序员是不需要担心事务问题的。但如,如果数据非得存储在文件系统中,或者联合数据使用,那么,数据的一致和隔离如何保证呢?

  用一个最常碰到的需求作为开始,用户注册后,数据保存在数据库里,然后用户上传的个人肖像图片保存到文件系统中(稍后会解释为甚还要把数据存储到文件系统里),显然俩个操作都必须同时成功或者失败,为了保证这一点,程序应该怎么写呢?

  如果不关注一致性,程序可能代码如下:

  public void register(User user,byte[] images) throws Exception{

             UserDao dao = new UserDao();

    dao,addUser(user);

            FileSystem fs = FileSystemFactory.getFileSystem();

            //保存图片到指定路径,有可能抛出异常  
    fs.saveFile(user.getImagePath(),images) 

      }

     上述代码的潜在问题就是如果文件系统存储失败,那么,数据就会不一致,页面显示用户信息的时候,图片确没有找到。后果稍微严重的列子还有些,譬如上传密钥文件失败但相关数据确已经存储到数据库。

 如何解决这个问题呢?有俩种思路,一种我称着“工程思路”,因为这是比我还老的一程序提出的办法,他通常很实际。另外一个称为"纯技术思路",因为这是比他还老的一个更老的程序员提出的来办法,而他很擅长技术语言框架,但不太擅长实施工程。

 所谓工程思路,其实就是对操作纪录日志,然后有后台系统监控错误并提供管理模块供事后纠正这些错误,这就是所谓的“冲正”,比如上面一个例子,可以写成下面的代码

  public void register(User user,byte[] images) throws Exception{

            Logger log = LoggerFactrory,getLogger();

           log.addTaskDescription("insert user "+user).addTaskDescription("save file"+user.getImagePath())

    UserDao dao = new UserDao();

           dao,addUser(user);

            log.taskStatus("inser user is completed");

            FileSystem fs = FileSystemFactory.getFileSystem();

            //保存图片到指定路径,有可能抛出异常  
    fs.saveFile(user.getImagePath(),images) 

            log.taskStatus("save file is completed");

      }

  Logger将日志保存到数据库中,这样管理人员可以查看这些日志从而知道存在哪些不一致的地方。

  还有一种就是纯技术思路,既提供类似数据库这样的ResourceManager,支持文件系统操作的事务和隔离,并且,能加入到分布式事务中,从而能保证跟数据库操作的一致性。如下面接口(可以想象类似JBDC的Connection)

   Public interface FileSystemConnection{

         public void addFile(String path,byte[] bs);

        public void removeFile(String path);

        public byte[] getFileContent(String path);

        public String[] listFile(String root);

        public void commit();

        public void rollback();

} 

实现方式我想类似于数据库的实现方式,但又要与数据库有所不同,这是因为之所以用文件系统存文件而不是数据库是因为

1:速度更好。数据库要转化为自己特定格式存,当然慢些

2:有些应用只能读取文件系统,而不能跟数据库打交道,如图片纯在文件系统里,然后配置apache可以直接读取这些图片

3:由于很可能外部系统也要操作文件,所以文件系统ResourceManager必须考虑到这个情况

  这是个理论上的想法,并没有实现,然而,我打算尝试去实现一个这样的ResourceManager(再次申明,我觉得这不是很实际,完全可以用冲正的办法来解决),如果有兴趣,可以访问一下http://code.google.com/p/fileengine/ 我打算把代码和想法放在那上面,如果你有什么好想法,也可以提出来,一起完成 

ps:支持一下个人博客http://space.baidu.com/joelli,另外,http://code.google.com/p/fileengine/wiki/UserCase 包含了但用户的所有测试代码

版权声明   给作者写信
本篇文章对您是否有帮助?  投票:         投票结果:     7       2
作者其它文章: 作者全部文章     查看作者的Blog

这个文章共有 0 条评论
主题: Spring AOP 用annotation 来实现 上一篇文章
返回文章列表 返回〔开发框架〕
下一篇文章 主题: 15天学会jQuery


文字广告链接
        自主、快速定制基于JAVA的B/S业务系统          重量级企业在线自定义WEB报表平台
        Excel制表、零代码发布、打印、图表结合——快逸报表,免费、稳定、功能强大的java工具
        技术圈: 关于Java、dotNet、PHP、Ruby、奇客、Web2.0等更多资讯博客精选文章

关于 JR  |  版权声明  |  联系我们 

©2002-2006 JR 版权所有 沪ICP备05019622号