十分钟搞定多图片/文件服务器

发布时间 - 2026-01-10 22:18:28    点击率:

写在前面

图片/文件服务器,顾名思义就是存文件呗,有的人用阿里云的现有服务,有的把文件Post到文件服务器,在文件服务器一端用一个应用程序来接收并保存,方法各不相同。老司机们各种服务器已经玩烂了。在使用图片/文件多服务器的几个问题就在于:

1.web上传的文件如何post到文件服务器上及其速度如何,占用带宽和耗时如何。

2.如何使文件均衡的分布在各台图片服务器上。

3.如何拓展新的图片服务器,并保障对已分配的内容影响降到最小。

本篇分享一方面希望有经验的司机给点意见,另一方面分享给新司机和记录自己的历程。

第一分钟确定最终目标

1.各文件服务器不仅提供存储功能,还要有对外服务能力,以降低各个Web服务器的带宽占用和磁盘IO消耗。

2.提供简便和容易的可横向拓展能力

3.Async异步IO保证线程非阻塞。

4.文件快速到达图片服务器

第三分钟否定自己

1.否认采取Http Post图片到图片服务器的方式

2.否认采取Hash取模算法

3.否认使用一致性哈希,避免服务器横向拓展后文件移动,即使是少量的

第五分钟确定实现方式

1.把文件服务器磁盘共享出一个文件夹,作为特定用户间“网络磁盘”,就是说该共享文件夹,只有web服务器有权限访问,你可以参照局域网内如何共享文件夹或者阿里云共享文件夹。

2.通过IIS虚拟目录,将其物理路径指向网络磁盘。你知道共享文件夹间使用Tcp/Ip协议和Netbios协议通信。

3.配置WebConfig访问网络磁盘身份(用户名和密码)—必须配置哦

4.第一步所共享的文件,在文件服务器部署在IIS下WebApp中的一个文件下,以便暴露URL路径。因为你知道IIS除了使用文件读取的方式,是不可以获取父级文件夹中的任何内容的。

4.确定根据文件名均匀分配图片位置的方式—文件后缀名方式,后缀名采用"文件名-01"(一号服务器),后缀名采用"文件名-02"(二号服务器),随机数使用Random来取,随机数是几,我们就存在几号服务器。经过多次测试100万次随机,1,2,3分别得到33W次左右,保障了均衡。在将来拓展的时候,Random随机数多开启几位就行了,不需要文件的移动,也没有reshash。并且在横向拓展服务器数量后,希望保证已有三台服务器不继续存储文件,Random范围可调。在数据库或者缓存中我们已经存下了文件名称,并且其有后缀名,在为前台返回图片URL的时候,只需要根据后缀名称,来拼出文件服务器IP或域名。

第七分钟按照步骤动手操作

1.部署FileServerApp,其功能是对图片暴露URL,其实很简单啦,建立一个Asp.Net空项目,建立出存储图片的文件夹。并将该文件夹共享给Web服务器,细节看最后一节的部署图。

2.假定你已经实现文件夹共享

3.在IIS站点下新建虚拟目录,注意物理路径指向的是网络共享文件夹的网络路径

4.在Webconfig下  <system.web>增加 <identity impersonate="true" userName="ben" password="yourpwd" /> ,IIS对该虚拟目录设置身份验证为 应用程序池标识。

5.使用Server.MapPath可以获取FileServer2的网络路径,并使用你的读写文件方式对目录中的文件进行读写。

6.写入文件建议使用Async的方式,异步IO会在你将IO请求包发给网络驱动或者磁盘驱动后,返回去处理其他事情,在将来的某个时刻,文件写入成功,状态机恢复你的上下文并以同步的方式继续向下执行,能大大提高你Web服务器的吞吐能力。

写在最后的重点

如果还有模糊的地方,看这里就全明白啦

以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,同时也希望多多支持! 


# 图片  # 文件  # 服务器  # 远程图片自动按文件夹上传到服务器-默飞出品  # Java如何从服务器中下载图片  # Nginx服务器上搭建图片缓存服务的基本配置解析  # Android使用post方式上传图片到服务器的方法  # Android异步上传图片到PHP服务器  # jquery控制显示服务器生成的图片流  # java实现将文件上传到ftp服务器的方法  # 在windows上用nodejs搭建静态文件服务器的简单方法  # NodeJS与HTML5相结合实现拖拽多个文件上传到服务器的实现方法  # golang实现http服务器处理静态文件示例  # 文件服务器  # 随机数  # 共享文件夹  # 你知道  # 应用程序  # 自己的  # 可调  # 的是  # 将来  # 你可以  # 不需要  # 已有  # 要有  # 不可以  # 会在  # 下了  # 将其  # 即使是  # 几位  # 只需要 


相关栏目: 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251813 】 【 AI营销90571


相关推荐: jquery插件bootstrapValidator表单验证详解  ,在苏州找工作,上哪个网站比较好?  深圳网站制作公司好吗,在深圳找工作哪个网站最好啊?  宙斯浏览器文件分类查看教程 快速筛选视频文档与图片方法  Windows家庭版如何开启组策略(gpedit.msc)?(安装方法)  北京网站制作费用多少,建立一个公司网站的费用.有哪些部分,分别要多少钱?  如何用PHP快速搭建高效网站?分步指南  如何快速生成ASP一键建站模板并优化安全性?  PHP 500报错的快速解决方法  简单实现Android文件上传  如何快速搭建FTP站点实现文件共享?  如何基于云服务器快速搭建个人网站?  Laravel数据库迁移怎么用_Laravel Migration管理数据库结构的正确姿势  网站制作大概要多少钱一个,做一个平台网站大概多少钱?  如何在Windows虚拟主机上快速搭建网站?  nginx修改上传文件大小限制的方法  Laravel队列任务超时怎么办_Laravel Queue Timeout设置详解  MySQL查询结果复制到新表的方法(更新、插入)  android nfc常用标签读取总结  Laravel怎么实现前端Toast弹窗提示_Laravel Session闪存数据Flash传递给前端【方法】  Edge浏览器如何截图和滚动截图_微软Edge网页捕获功能使用教程【技巧】  Laravel如何安装使用Debugbar工具栏_Laravel性能调试与SQL监控插件【步骤】  晋江文学城电脑版官网 晋江文学城网页版直接进入  新三国志曹操传主线渭水交兵攻略  如何在Tomcat中配置并部署网站项目?  如何快速搭建虚拟主机网站?新手必看指南  Laravel如何使用Gate和Policy进行授权?(权限控制)  Edge浏览器怎么启用睡眠标签页_节省电脑内存占用优化技巧  非常酷的网站设计制作软件,酷培ai教育官方网站?  Laravel如何与Vue.js集成_Laravel + Vue前后端分离项目搭建指南  Laravel如何实现密码重置功能_Laravel密码找回与重置流程  Laravel如何升级到最新版本?(升级指南和步骤)  如何在万网开始建站?分步指南解析  Swift开发中switch语句值绑定模式  Claude怎样写约束型提示词_Claude约束提示词写法【教程】  深圳网站制作的公司有哪些,dido官方网站?  Laravel如何使用Gate和Policy进行权限控制_Laravel权限判定与策略规则配置  详解Nginx + Tomcat 反向代理 负载均衡 集群 部署指南  Laravel如何连接多个数据库_Laravel多数据库连接配置与切换教程  Laravel如何处理跨站请求伪造(CSRF)保护_Laravel表单安全机制与令牌校验  Swift中swift中的switch 语句  ,网页ppt怎么弄成自己的ppt?  Windows10电脑怎么设置虚拟光驱_Win10右键装载ISO镜像文件  如何用美橙互联一键搭建多站合一网站?  用v-html解决Vue.js渲染中html标签不被解析的问题  弹幕视频网站制作教程下载,弹幕视频网站是什么意思?  教你用AI润色文章,让你的文字表达更专业  宙斯浏览器怎么屏蔽图片浏览 节省手机流量使用设置方法  如何快速使用云服务器搭建个人网站?  三星、SK海力士获美批准:可向中国出口芯片制造设备