小。速度很快。可靠。
选择任意三个选项。

SQLite中的内部BLOB与外部BLOB

如果你有一个包含大型BLOB的数据库,你的读取性能会更好吗当您存储完整BLOB内容直接存储在数据库中,还是存储每个BLOB更快在一个单独的文件中,并将相应的文件名存储在数据库中?

为了回答这个问题,我们运行了49个不同BLOB大小的测试用例Linux工作站上的SQLite页面大小(Ubuntu大约2011年快速SATA磁盘上的Ext4文件系统)。对于每个测试用例,都会创建一个包含100MB BLOB的数据库内容。BLOB的大小从10KB到1MB不等。数字的BLOB有所不同,以便将BLOB的总内容保持在100MB左右。(因此,1MB大小为100 BLOB,10K大小为10000 BLOB以此类推。)数据库版本3.7.8使用(2011-09-19)。

更新:SQLite 3.19.0版的新测量(2017-05-22)表明SQLite速度提高35%的直接磁盘I/O读取和写入10KB blob。

下面的矩阵显示了读取存储在单独文件中的BLOB所需的时间除以读取完全存储在数据库中的BLOB所需的时间。因此,对于大于1.0的数字,直接存储BLOB会更快在数据库中。对于小于1.0的数字,存储BLOB更快在单独的文件中。

在每种情况下,都会调整寻呼机缓存大小以保持缓存容量约为2MB。例如,一个2000页缓存用于1024字节的页面31页缓存用于65536字节的页面。BLOB值按随机顺序读取。

数据库页面大小BLOB大小
10公里2万5万10万20万50万100万
10241.5351.0200.6080.4560.3300.2470.233
20482.0041.4370.8700.6360.4830.3720.340
40962.2611.8861.1730.8900.7010.5260.487
81922.2401.8661.3341.0350.8300.6250.720
163842.4391.7571.2921.0230.8290.8200.598
327681.8781.8431.2960.9810.9760.6750.613
655361.2561.2551.3390.9830.7690.6870.609

我们从上面的矩阵推导出以下经验法则:

当然,根据硬件、文件系统、,和操作系统。在目标硬件上双击这些数字在进行特定设计之前。