8 张图读懂大型网站技术架构（59）

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录一、前后端分离架构介绍二、技术选型三、注意事项3.1 数据库1对多的关系时，在1那一方可建立list集合编写sql语句3.2 Service层根据需求文档，接口文档决定返回类型3.3 Servlet层3.4 文件上传3.5 代码的维护性简单来说就是每个功能实现独立的作用if-else，反射优化总结 一、前后端分离架构介绍 前后端分离已成为互联网项目开发的业界标准使用方式，将前端和后端的开发进行解耦。并且前后端分离会为以后的大型分布

这个世界没有哪个网站从诞生起就是大型网站;也没有哪个网站第一次发布就拥有庞大的用户,高并发的访问,海量的数据;大型网站都是从小型网站发展而来。

通过上述技术手段，大型网站能够构建起一个既能应对高并发请求，又能保障数据安全和业务连续性的稳固技术基础。随着技术的进步，还会有更多先进的架构理念和技术栈融入其中，例如Serverless架构、Service Mesh、云原生架构等。大型网站技术架构是为了应对高并发、大流量、高可用性、海量数据存储、用户分布广泛、网络安全风险以及快速变化的需求等一系列挑战而设计的一整套系统解决方案。：将单体应用拆分为一系列小型、独立的服务，每个服务专注于特定业务功能，通过API相互协作，各自独立部署和扩展。

大型网站软件系统的特点 高并发,大流量 高可用 海量数据 用户分布广泛,网络情况复杂 安全环境恶劣 需求快速变更,发布频繁 渐进式发展 1,大型网站架构的演化 1,初始阶段的网站架构 一台服务器 应用程序,数据库,文件服务放到一台服务器上(php/java/mysql) 2,应用服务和数据服务分离 三台服务器 更高的应用服务器一台,更快的硬盘和更大的内存的数据库服务器一台,更大的磁盘 文件服务器一台 3,使用缓存改善网站性能 ...

面临高并发访问、海量数据处理、高可靠运行等挑战，总结出许多解决方案和可重复的模式，以实现高性能、高可用、易伸缩、可扩展、安全等各种技术架构目标。目标： 分层和分割后的模块拥有更小的粒度，目的是分布式部署，便于使用更多资源(CPU、内存、存储等)，提供更多服务。举例： OSI 7层协议，计算机架构(硬件、OS、应用软件)，网站系统(应用层、服务层、数据层)， MVC。举例：网站业务拆分(购物、论坛、搜索、广告等)，购物业务拆分(酒店业务、3C业务、小商品业务等)缓存服务器： 改进缓存路由算法。

2011年4月12日，亚马逊云计算服务 EC2 ( Elastic Computer Cloud） 发生故障，其ESB ( Elastic Block Storage）服务不可用，故障持续了数天，最终还是有部分数据未能恢复。这一故障导致美国许多使用亚马逊云服务的知名网站（如：Foursquare， Quora）受到影响，并引发了人们对使用云计算安全性、可靠性的大规模讨论。 2010年1月12日，百度被黑客攻击，其 DNS 域名被劫持，导致百度全站长达数小时不可访问。该事件一时成为新闻焦点，各种媒体争相报道。

大型网站技术架构 --核心原理与案例分析

编程语言学习常面临理论与应用脱节的困境，尤其是对于Python这类应用广泛的语言。其核心在于理解如何将基础语法、数据获取与数据处理三大模块有效串联。通过项目驱动的学习路径，学习者可以快速掌握变量、循环、函数等核心概念，并立即应用于网络数据抓取（爬虫）实践，例如使用requests库获取网页信息。获取的原始数据进一步通过pandas库进行清洗、整理与分析，形成从数据采集到洞察的完整闭环。这种“最小可行知识”与“螺旋式融合”的方法，尤其适合希望快速将Python应用于数据科学、自动化脚本或Web开发等场景的初学

OpenAI 的某发言人表示：「为了提高清晰度和安全性，我们增加了一个额外的后处理步骤，其中模型会审查原始的思维链，删除任何不安全的内容，然后简化某些复杂的思维。可以看到，虽然 ChatGPT 确实完成了任务并展示了总结版的思维链，但似乎并未如 OpenAI 发言人说的那样给出与提示词语言同样语言的总结版。北大-灵初联合实验室表示，Align-DS-V的多模态强推理能力是VLA模型大脑端的核心，接下来的研究训练计划，是利用多模态推理模型的跨模态穿透能力，实现action穿透，最终实现真正高效的VLA模型。

为了解决这一问题，在稠密化过程中，我们对容易引起退化和梯度集中的具有极端延展率的高斯面片进行了筛选，并对其增殖过程进行了限制，从而在不牺牲性能的情况下有效稳定了训练过程，保障了优化过程的顺利进行。大规模场景的重建往往还意味着显著的训练开销，要重建 1.97 平方千米的区域会产生接近两千万的高斯点，这意味着 4.6G 的存储以及 31.5G 的显存开销，以及超过三小时的训练时长。站在 AI 研究者的角度，得到了《苦涩的教训》，意味着在总结教训的过程中明确了什么是「更好」的。第二类则瞄准了相对复杂的问题。

……

总体架构图                                                1 加速网站响应   反向代理(Reverse Proxy)和CDN(Content Delivery Network内容分发网络),         CDN的基本原理是广泛采用各种缓存服务器，将这些缓存服务器分布到用户访问相对集中的地区或网络中，在用户访问网站时，利用全局负载技术将用户的访问...

慢慢地演化成一个大型网站。在这个漫长的技术演化过程中，不需要放弃什么，不需要推翻什么，不需要剧烈的革命，就那么润物细无声地把一个只有一台服务器，几百个用户的小网站演化成一个几十万台服务器，数十亿用户的大网站。由于大公司巨大成功的光环效应，再加上从大公司挖来的技术高手的影响，网站在讨论架构决策时，最有说服力的一句话就成了“淘宝就是这么搞的”或者 “Facebook 就是这么搞的”。大公司的经验和成功模式固然重要，值得学习借鉴，但如果因此而变得盲从，就失去了坚持自我的勇气，在架构演化的道路上迟早会迷路。

一、大型网站的软件系统的特点 高并发，大流量 高可用 海量数据 用户分布广泛，网络情况复杂 安全环境恶劣 需求快速变更，发布频繁 渐进式发展 二、大型网站的架构演化发展历程 1、初始阶段的网站架构 最开始网站的应用程序、数据库、文件等所有的资源都在一台服务器上。最典型的就是LAMP技术了：服务器操...

分布式缓存服务器集群中不同服务器中缓存的数据各不相同，缓存访问请求不可以在缓存服务器集群中的任意一台处理，必须先找到缓存有需要数据的服务器，然后才能访问（注：和部署相同应用的应用服务器集群不同，有状态-数据，数据量很大，如果缓存机器数据一样，一则失去了缓存集群的意义_就因为数据量很大才使用集群，二则集群间同步数据及其复杂）大型网站应用中，数据规模总是快速扩张，因为可伸缩性即分区耐受性必不可少，规模变大，机器数量也会变得庞大，这时网络和服务器故障会频繁出现，要想保证可用就必须保证分布式处理系统的高可用性。

分层分层是企业应用中最常见的一种架构模式，将系统在横向维度上切分为几个部分，每个部分负责一部分相对比较单一的职责，然后通过上层对下层的依赖和调用组成一个完整的系统。在大型网站架构中也采用分层结构，将网站软件系统分为：应用层、服务层、数据层；·应用层：负责具体的业务和视图展示，如网站首页及搜索输入和结果展示；·服务层：为应用层提供服务支持，如用户管理服务，购物车服务；·...