存储大文件用hadoop里的HDFS,存小文件,可以参考阿里巴巴淘宝图片的实现原理。在数据增长如此快的时代,hadoop更有潜力,但处理小文件是有问题的,谁让hadoop生来就是处理大规模日志数据的呢! 磁盘IO性能本来就不高,无论用什么工具都很难明显提升其性能,除非参考磁阵模式,做多磁盘同步读写。
解决方案 »
- 有关JTextArea的监听器问题和多线程问题
- 新人碰到老问题,for循环问题。。。。。望热心的大大帮忙讲解下
- 用变量命名
- eclipse如何把一个工程下的文件编译到另一个工程的classes下?(真心求教)
- java程序编译出错!
- 请问java聊天室,发送带有自定义颜色的字体,怎么在其他客户端显示字颜色??
- 请教各位大虾.有谁知道基于jabber的开源的通讯的客户端吗?
- java能判断文件是否存在吗?
- 大家练练手,征集下面这个小程序的算法!!!(很有趣的阿!!)
- 求大神解答关于getUserObject()的具体用法最好带实例谢谢
- 请教一个可以做java预编译的功能或者eclipse插件?
- 第一次发帖,求助帖
一个文件系统用 Java 做的比较少,一般都是在 C 或 C++ 实现的。有很多开源的文件系统可供选择,比如:淘宝的 TFS