最近在做一个数据存储优化。我们之前的模式是插入一定量的数据通过批处理进行存储,两个条件进行批处理,一个是超过批处理设定的最大个数,一个是超过批处理延迟时间,否则有新的数据就放入缓存中。
为了保证数据的完整性,现在要改成,不将数据加入缓存里,而改为存放在本地的.data文件中。
在优化的过程中,遇到了一个问题就是:如何确保一个文件只能由一个线程或程序打开?
在网上查找了一些解决办法,最常用的就是使用FileChannel获得FileLock。但是这种情况只适合使用write流进行锁定,当我读取的时候,我也要保证只有我这一个线程进行打开,所以锁定.data文件就不适合了。
最终的解决办法是,创建两个文件,一个是.data文件,一个是.lock文件,当线程对.data文件进行读写的时候,要新对.lock文件进行锁定。如果锁定失败,说明有别的程序在使用.data文件;如果锁定成功,则对.data文件进行操作,操作结束后,释放.lock文件。
为了保证数据的完整性,现在要改成,不将数据加入缓存里,而改为存放在本地的.data文件中。
在优化的过程中,遇到了一个问题就是:如何确保一个文件只能由一个线程或程序打开?
在网上查找了一些解决办法,最常用的就是使用FileChannel获得FileLock。但是这种情况只适合使用write流进行锁定,当我读取的时候,我也要保证只有我这一个线程进行打开,所以锁定.data文件就不适合了。
最终的解决办法是,创建两个文件,一个是.data文件,一个是.lock文件,当线程对.data文件进行读写的时候,要新对.lock文件进行锁定。如果锁定失败,说明有别的程序在使用.data文件;如果锁定成功,则对.data文件进行操作,操作结束后,释放.lock文件。