大量文件(图片)存储解决方案(单机或分布式) | 马犇-技术博客

大量文件(图片)存储解决方案(单机或分布式)

来源:本站原创 微信技术群总结 超过2,698 views围观 0条评论
【今日话题】大量文件(图片)存储解决方案(单机或分布式) — 黑夜路人

1. fastdfs 用的挺多的~听说很多网盘在用 — 零度西瓜

2. 小文件合成大文件作为一个block,大文件里维护一些偏移和长度标识每个小文件,一个总的索引标识小文件所在的block和block中的位置。 — lalala

3. 我们现在用的gfidfs. 我们量少,主要是容量和可用性 — Lphy

4. 不用CDN非常吃带宽 — 朝沐金风

5. 图片存储解决方案,国内不是有一个zimg吗? — 光阴的故事

6. 问: zimg有什么特色呢?
答: zimg分层结构,Httpd层处理前端情求,图片层使用imagemagick库处理图片,存储层使用memcached缓存加速读写,高并发,大流量,海量存储 — 光阴的故事

7. 可以用又拍,自建存储和CDN,不过API有些不敢恭维,七牛CDN部分是用的网宿,API不错,老大比较牛. 两者做图片存储的话都可以在服务端对图片进行预处理 — 贾朝藤

8. 文件系统  磁盘io 动态缩放  缓存层  重复图片处理 图片索引   要关注的点太多了. 等有十几个t碎图片你就知道有多high了 — 王春光

9. 我们现在的比较简单,文件ftp上传到种子服务器,前端nginx提供访问并从种子机拿文件缓存到本地,缺点是首次访问因为要同步有时加载比较慢 — vento

10. 我们使用淘宝tfs 使用开源zimg二次开发做图片服务器 — 张浩

11. 以前的实现方式是算出唯一I’d存到文档数据库,动态带尺寸请求,生成缓存到CDN — 夜丶有雪