图片存储服务器如何高效的构建一个大型的图片服务器

2020-12-02 16:50:57 科技数码

性能与资金

随着互联网的发展，许多大中型的网站都保存了大量的图片资源，用户在访问这些图片资源异常丰富的网站（如淘宝、京东等电子商务网站）时，网页中的图片信息占据了页面数据流量的很大部分，那么问题也来了：

（1）由于受客户端浏览器限制，无法从一台服务器上同时下载页面中所有图片信息；

（2）由于图片保存在物理服务器上，访问图片需要频繁进行I/O操作：因此当并发用户数越来越多时，I/O操作就会成为整个系统的性能瓶颈；

（3）由于受操作系统的限制,一个目录中能存放的图片文件数量也是有限的：随着图片资源不断增加，如何有效管理和维护图片也是一个难题；

对于少数大型网站系统，由于自身具有雄厚的资金和人力资源，可采用NFS、CDN、Lighttpd、反向代理、负载均衡等技术提高用户访问速度；但是，这些技术需要庞大的资金来支持。对于多数中小型网站系统，有木有一种方案适用于中等规模商务网站的海量图片数据分布式动态存储及负载均衡的解决方案？该方案可否只需增加很少的硬件成本，即可提升网站的访问速度，并且可以根据需要动态调整图片服务器的数量及图片的存储目录，确保系统具有可扩展性和伸缩性。

架构设计：构建图片服务器集群

对于小型网站，由于数据规模小，可以把网站所有页面和图片统一存放在一个主目录下，这样的网站对系统架构、性能要求都很简单。但大中型网站都保存有海量级的图片文件，所采用的技术更是涉及广泛，从硬件到软件、编程语言、数据库、Web服务器、防火墙等各个领域都有较高要求。因此，有必要设立单独的图片服务器来专门存放图片，把图片数据的流量从Web服务器上分离开，这样的架构可以有效缓解Web服务器的I/O性能瓶颈，提升用户的访问速度。

1 系统设计目标　

基于以上的考虑，我们希望的设计目标是：

（1）图片能进行分布式存储；　

（2）图片服务器能实现负载均衡；

（3）能根据用户访问量及网站图片数据量的增加能动态添加图片服务器节点；

（4）图片服务器节点的动态调整对网站用户而言是透明的，并且不会中断系统的正常运行；

其中，（1）和（2）是针对系统的高可用和伸缩性，而（3）和（4）则是针对系统的高可用和可扩展而言的。

2 系统架构设计

系统整体架构如上图所示：包括客户端、Web服务器、数据库服务器、图片服务器集群4个部分。

（1）Web服务器部署网站的Web页面，用于响应客户端用户的请求。当用户浏览网页时，Web服务器响应请求并访问数据库服务器，获得网页中所有图片的URL路径，然后生成页面并返回给客户端；

（2）客户端接收该页面并根据页面中的图片URL路径自动从不同的图片服务器下载并显示相应图片。

（3）数据库服务器用于记录所有图片的编号以及图片的存放位置等信息，同时需要记录所有图片服务器的配置及当前状态信息。