saas技术架构资源隔离(saas 架构设计)

saas 架构设计

云主机不属于saas。

所谓sass实际上是指将软件研发的平台作为一种服务，并提供给用户。用户或者企业基于sass平台可以快速开发自己所需要的应用和产品。

同时sass平台开发的应用能更好地搭建基于soa架构的企业应用。sass作为一个完整的开发服务，提供了从开发工具、中间件，到数据库软件等开发者构建应用程序所需的所有开发平台的功能。

saas架构是什么意思

SaaS的收入模型至少可以分为以下四种。

1.纯自动化的订阅收入模型

所谓纯自动化的订阅收入模式，即SaaS交付之后的运行不再需要人工介入，而是由软件自动化提供，即“SaaS收入=软件产生的收入”。这是一种理想的收入模式，由于CTS大大降低，所以这种收入模式的盈利能力强，不受服务水平的影响。

如果有可能，SaaS业务设计应尽量支持这种收入模式。订阅模式的优势是有更好的收入可预测性，就是说未来ARR是可预测的。但是这也有一个重要的前提，为了使订阅模式成立，需要保证订阅用户持续付费，也就是尽可能保证客户不流失。

如果SaaS业务依赖纯粹的订阅模式，客户一旦断约，将导致无法预测收入，还会造成续费损失。

2.自动化+人工服务的订阅收入模式

这种收入模式仍然属于订阅模式，只是收入的结构中由两部分组成，即“SaaS收入=软件产生的收入+人工服务产生的收入”。显然，与纯自动化的订阅模式相比，这种模式的一部分收入受到人工服务能力的限制。除了增加CTS外，效率也会受到人工因素的影响。

关键问题是，这种SaaS模式的复制能力较差，这是因为需要合格的人工服务资源，比如一个SaaS数据分析业务，多数情况下需要数据和算法工程师的配合，才能为客户提供数据服务。

如果收入结构中的人工服务收入占比过高，所产生的效率问题会使复制能力受到限制，导致盈利能力的降低。

3.混合收入模式

与完全订阅模式不同，在混合收入模式下：SaaS收入=订阅收入+其他收入。比如电商SaaS除了固定的店铺服务费（订阅）之外，还包括流量费、交易费、交易提成等非订阅收入。

如果订阅收入占比太小，收入的可预测性就会变差。这种混合收入模式在国内很流行，因为订阅收入占比小，所以更抗客户流失，这就可以不受订阅模式回款周期的限制，集中力量把其他收入做大，国内SaaS概念的上市公司大多是这种模式。

但这并不能说明混合收入模式一定是健康的。实际上，这种模式的风险比较大，因为其他收入不可控。特别是当其他收入占比较大时，如果业务模式不能形成稳定的其他收入，整个营收随时可能滑坡，使收益变得不稳定。

4.类SaaS收入模式

所谓类SaaS收入模式，是指除了服务平台架构是SaaS技术模式外，订阅收入的占比为0。也就是说，所有收入都是“其他收入”。类SaaS收入模式的形式很像订阅收入模式，商业模式是通过业务拓展（Bussiness Development，BD）开发客户，之后依靠客户持续复购取得收入。

虽然达不到订阅收入那么准确的预测，但收入曲线与订阅模式相似；虽然没有CTS，但为了维持客户的复购，BD的服务也是有成本的。

saas平台数据隔离

在程序员或者特别是运维圈中，“删库跑路”往往是圈内人相互调侃的一个段子，而这也正是因为删库这一错误实在太低级，在高学历和高技术能力的程序员中才能成为一个梗，毕更何况这一行为更是直接违反了我国《刑法》的第286条，也就是破坏计算机信息系统罪。所以真的敢在数据库中键入“rm -rf / ”这个明明，等待你的可能就只有一曲《铁窗泪》了。

微盟遭遇删库跑路

然而在2月23日，国内知名的智能商业服务提供商微盟系统出现故障，大面积服务集群无法响应，生产环境及数据遭受严重破坏。跟据官方发布的通告称，“犯罪嫌疑人乃微盟研发中心运维部核心运维人员贺某，贺某于2月23日晚18点56分通过个人VPN登入公司内网跳板机，因个人精神、生活等原因对微盟线上生产环境进行了恶意的破坏。”

受删库事件影响，微盟股价在24日出现下跌，市值一日之内蒸发约12.5亿港元。“rm -rf / ”这简单的几个字符，为何会产生如此大的破坏力呢？事实上，rm是linux系统中删除文件的命令。-r代表删除这个下面的一切，f则表示不需要用户确认直接执行。通常这个命令是用来删除指定文件夹， 例如“rm -rf /Temp/”就是删除/Temp/这个文件夹中的所有内容，但如果后面的文件夹路径没有加，“rm -rf /”在生产环境中被直接使用，就代表着清空所有数据。

事实上就像我们前文中提到的一样，删库操作属于非常低级的错误，但操作者毕竟是人不是机器，因此难免会有犯错误的时候，因此基本上所有的数据服务提供商都会准备备份服务器，或者容灾系统。当一处服务器因意外停止工作时，整个系统可以切换到另一处，使得系统功能可以继续正常工作。

没错，在2月23日晚间显然有不少微盟的用户也这么想的。据不少商家的回忆，起初大家只以为是简单的服务器宕机，毕竟这种情况并不罕见，强如Facebook的服务器都曾经崩溃过，而微盟方面最初公开的解释，则是腾讯云的硬件问题。

删库一时爽，客户全完蛋

正常情况下，微盟作为一家上市企业，即便与BAT等巨头还有一定的差距，但显然是会配备异地容灾系统，因此通过备份恢复数据也并不会太困难。然而就像微盟在公告中谈及的那样，这件事属于“我们之中出了一个内鬼”。“核心运营”就代表其在内部的权限不低，亲自动手实施这种报复性意味浓厚的行为，以他的经验来说大概率是把事做绝，因此很可能将备份也一并进行了删除，导致了后续微盟想要恢复所有数据，需要从此前浩如烟海的日志中找到相应数据。

虽说是内鬼动手这种防不胜防的事件，但海恩法则有云，“每一起严重事故的背后，必然有29次轻微事故和300起未遂先兆，以及1000起事故隐患”，因此这一事件显然也暴露了微盟内部流程管控上的缺陷。多副本保存、异地保存，乃至线上线下保存等容灾措施，虽然可能因为内鬼的行为导致功能失效，但是他是怎么完成针对不同数据库实现删库的操作呢？

这就意味着微盟在数据库管理员的管理方面有着一定的漏洞，例如文件加密权限隔离、双人复核机制、针对运维的高危操作没有审批机制，以及关键应用业务的删库监控管控等，这些监管机制在此次事件中并没有看到起作用的影子。试想一下，如果针对删库这一的关键操作，需要有另一人来复核的话，显然这场悲剧极有可能就不会发生。

城门失火，殃及池鱼

而这一事件除了让微盟自己遭殃之外，显然还殃及了池鱼。其一，就是目前大火的远程办公，由于疫情的原因，很多互联网企业都选择让员工在家进行远程办公，但这有一个缺陷，就是对于一些需要内网的操作，只能让员工通过VPN的方式来登陆，这其中的安全隐患不言而喻。但这个问题不解决，远程办公想要真正媲美线下显然并不太可能。

其二，就是微盟代表的SaaS（软件即服务）业务又一次走到了风口浪尖。事实上，SaaS提供了一套成熟化可供复制可以通用的软件，能够广泛应用在协作、OA、企业沟通、财务、人事等场景，并且由于上云，数据的处理速度、流程的流转速度都比之前上了一大台阶，从而又降低了人力和时间等方面的成本。

尽管微盟事件对于SaaS业内的其他企业也或多或少有所影响，但其自己受到的损失可能并没有想象中那么大。君不见，随着生产环境和数据的修复，在2月25日港股收盘时，微盟股价还上涨4.22%至6.18港币。业内有观点认为，这或许是因为微盟作为一家老牌厂商，其所沉淀的客户数据是海量的，因此对于客户来说想要离开可能也并不那么容易。

而SaaS，就是服务商为商家既提供设施又提供人手来解决相应需求，其关键的指标就是续约率，而为了让客户续约，SaaS服务商可谓是八仙过海各显神通，但微盟这一事件显然会对用户的信心造成一定的影响。与此同时，阿里的钉钉和腾讯的企业微信其实也在蚕食着SaaS的市场，并且阿里和腾讯不收钱只要流量的打法，无疑更切合国人钟爱免费的特点，因此在这样的双重打击之下，SaaS行业在国内的前景也蒙上了一层阴影。

归根结底，微盟这次马失前蹄的关键，可能正如有行业人士所言，是企业文化建设出现了问题。马云曾有云，员工辞职的原因无外乎“钱给少了，心里委屈了”，而这次微盟的核心运维不惜以违法犯罪为代价，也要让其付出损失，其中必有故事。如果微盟乃至其他提供数据库服务的企业不能引以为戒，要么提升员工的归属感，要么严格规章制度，或许这种删库跑路的案例还会接着重演。

saas技术架构图

排名前20的网络爬虫工具，Mark!

网络爬虫在许多领域都有广泛的应用，它的目标是从网站获取新的数据，并加以存储以方便访问。 网络爬虫工具越来越为人们所熟知，因为它能简化并自动化整个爬虫过程，使每个人都可以轻松访问网络数据资源。

1. Octoparse

Octoparse是一个免费且功能强大的网站爬虫工具，用于从网站上提取需要的各种类型的数据。它有两种学习模式 - 向导模式和高级模式，所以非程序员也可以使用。可以下载几乎所有的网站内容，并保存为EXCEL，TXT，HTML或数据库等结构化格式。具有Scheduled Cloud Extraction功能，可以获取网站的最新信息。提供IP代理服务器，所以不用担心被侵略性网站检测到。

总之，Octoparse应该能够满足用户最基本或高端的抓取需求，而无需任何编码技能。

2. Cyotek WebCopy

WebCopy是一款免费的网站爬虫工具，允许将部分或完整网站内容本地复制到硬盘以供离线阅读。它会在将网站内容下载到硬盘之前扫描指定的网站，并自动重新映射网站中图像和其他网页资源的链接，以匹配其本地路径。还有其他功能，例如下载包含在副本中的URL，但不能对其进行爬虫。还可以配置域名，用户代理字符串，默认文档等。

但是，WebCopy不包含虚拟DOM或JavaScript解析。

3. HTTrack

作为网站爬虫免费软件，HTTrack提供的功能非常适合从互联网下载整个网站到你的PC。 它提供了适用于Windows，Linux，Sun Solaris和其他Unix系统的版本。 它可以镜像一个或多个站点（共享链接）。在“设置选项”下下载网页时决定要同时打开的连接数。 可以从整个目录中获取照片，文件，HTML代码，更新当前镜像的网站并恢复中断的下载。

另外，HTTTrack提供代理支持以最大限度地提高速度，并提供可选的身份验证。

4. Getleft

Getleft是一款免费且易于使用的网站抓取工具。 启动Getleft后输入URL并选择应下载的文件，然后开始下载网站此外，它提供多语言支持，目前Getleft支持14种语言。但是，它只提供有限的Ftp支持，它可以下载文件但不递归。

总体而言，Getleft应该满足用户的基本爬虫需求而不需要更复杂的技能。

5. Scraper

Scraper是一款Chrome扩展工具，数据提取功能有限，但对于在线研究和导出数据到Google Spreadsheets非常有用。适用于初学者和专家，可以轻松地将数据复制到剪贴板或使用OAuth存储到电子表格。不提供全包式抓取服务，但对于新手也算友好。

6. OutWit Hub

OutWit Hub是一款Firefox插件，具有数十种数据提取功能，可简化网页搜索。浏览页面后会以适合的格式存储提取的信息。还能创建自动代理来提取数据并根据设置对其进行格式化。

它是最简单的网络爬虫工具之一，可以自由使用，提供方便的提取网页数据而无需编写代码。

7. ParseHub

Parsehub是一款出色的爬虫工具，支持使用AJAX技术，JavaScript，cookies等获取网页数据。它的机器学习技术可以读取、分析网页文档然后转换为相关数据。Parsehub的桌面应用程序支持Windows，Mac OS X和Linux等系统，或者你可以使用浏览器内置的Web应用程序。

8.Visual Scraper

VisualScraper是另一个伟大的免费和非编码爬虫工具，只需简单的点击界面就可从网络上收集数据。 可以从多个网页获取实时数据，并将提取的数据导出为CSV，XML，JSON或SQL文件。 除了SaaS之外，VisualScraper还提供网络抓取服务，如数据传输服务和创建软件提取服务。

Visual Scraper使用户能够在特定时间运行他们的项目，还可以用它来获取新闻。

9. Scrapinghub

Scrapinghub是一款基于云计算的数据提取工具，可帮助数千名开发人员获取有价值的数据。 它的开源可视化抓取工具允许用户在没有任何编程知识的情况下抓取网站。

Scrapinghub使用Crawlera，这是一种智能代理旋转器，支持绕过bot机制，轻松地抓取大量受bot保护的网站。 它使用户能够通过简单的HTTP API从多个IP和位置进行爬网，而无需进行代理管理。

10. Dexi.io

作为基于浏览器的爬虫工具，http://Dexi.io允许用户从任何网站抓取数据，并提供三种类型的机器人来创建抓取任务 - 提取器，爬行器和管道。 该免费软件提供匿名Web代理服务器，所提取的数据会在存档之前的两周内储存在http://Dexi.io的服务器上，或者直接将提取的数据导出为JSON或CSV文件。它提供付费服务以满足实时获取数据的需求。

11. Webhose.io

http://Webhose.io使用户能够将来自世界各地的线上来源的实时数据转换为各种干净的格式。你可以使用覆盖各种来源的多个过滤器来抓取数据，并进一步提取不同语言的关键字。

抓取的数据可以保存为XML，JSON和RSS格式，还能从其存档访问历史数据。 此外，http://webhose.io支持最多80种语言及其爬行数据结果。用户可以轻松索引和搜索http://Webhose.io抓取的结构化数据。

12.Import. io

用户只需从特定网页导入数据并将数据导出到CSV即可形成自己的数据集。

你可以在几分钟内轻松抓取数千个网页，而无需编写任何代码，并根据您的要求构建1000多个API。 公共API提供了强大而灵活的功能来以编程方式控制http://Import.io并获得对数据的自动访问，http://Import.io通过将Web数据集成到你自己的应用程序或网站中，只需点击几下就可以轻松实现爬虫。

为了更好地满足用户的抓取需求，它还为Windows，Mac OS X和Linux提供免费的应用程序，以构建数据提取器和抓取工具，下载数据并与在线帐户同步。另外，用户可以每周/每天/每小时安排爬虫任务。

13.80legs

80legs是一款功能强大的网页抓取工具，可以根据客户要求进行配置。80legs提供高性能的Web爬虫，可以快速工作并在几秒钟内获取所需的数据。

14. Spinn3r

Spinn3r允许你从博客、新闻和社交媒体网站以及RSS和ATOM中获取所有数据。Spinn3r发布了防火墙API，管理95％的索引工作。它提供了先进的垃圾邮件防护功能，可消除垃圾邮件和不适当的语言，从而提高数据安全性。

Spinn3r索引类似于Google的内容，并将提取的数据保存在JSON文件中。

15. Content Grabber

Content Graber是一款针对企业的爬虫软件。它可以让你创建一个独立的网页爬虫代理。

它更适合具有高级编程技能的人，因为它为有需要的人提供了许多强大的脚本编辑和调试界面。允许用户使用C＃或http://VB.NET调试或编写脚本来编程控制爬网过程。 例如，Content Grabber可以与Visual Studio 2013集成，以便根据用户的特定需求提供功能最强大的脚本编辑、调试和单元测试。

16. Helium Scraper

Helium Scraper是一款可视化网络数据爬行软件，当元素之间的关联很小时效果会更好。它非编码、非配置。用户可以根据各种爬行需求访问在线模板。

它基本上可以满足用户在初级阶段的爬行需求。

17. UiPath

UiPath是一个免费自动化爬虫软件。它可以自动将Web和桌面数据从第三方应用程序中抓取出来。Uipath能够跨多个网页提取表格数据。

Uipath提供了用于进一步爬取的内置工具。 处理复杂的UI时，此方法非常有效。Screen Scraping Tool 可以处理单独的文本元素、文本组和文本块。

18. Scrape. it

Scrape.it是一个基于云的Web数据提取工具。它专为具有高级编程技能的人设计，因为它提供了公共和私有包，以便与全球数百万开发人员一起发现、使用、更新和共享代码。其强大的集成可以帮助用户根据自己的需求构建自定义爬虫。

19. WebHarvy

WebHarvy是为非程序员设计的。它可以自动从网站上爬取文本、图像、URL和电子邮件，并以各种格式保存爬取的内容。它还提供了内置的调度程序和代理支持，可以匿名爬取并防止被Web服务器阻止，可以选择通过代理服务器或VPN访问目标网站。

WebHarvy Web Scraper的当前版本允许用户将抓取的数据导出为XML，CSV，JSON或TSV文件，也可以导出到SQL数据库。

20. Connotate

Connotate是一款自动化Web爬虫软件，专为企业级Web爬虫设计，需要企业级解决方案。业务用户可以在几分钟内轻松创建提取代理而无需任何编程。

它能够自动提取超过95％的网站，包括基于JavaScript的动态网站技术，如Ajax。

另外，Connotate还提供整合网页和数据库内容的功能，包括来自SQL数据库和MongoDB数据库提取的内容。

saas平台技术架构图

B/S(Browser/Server)：浏览器/服务器架构，如果你所用的软件是通过浏览器来操作的，那这个软件就是B/S架构，最典型的就是网上银行。那么，B/S是不是一定要上网才能使用？当然不是，B/S架构的软件可以安装在局域网或个人电脑上，通过在IIS中建立站点来使用。所以，抛开种种表面现象，B/S最基本的特征就是通过浏览器来使用。

SaaS(Soft as a Service)：软件即服务，SaaS不是一种软件架构，而是一种软件销售方式。SaaS的软件是采用B/S架构，但通过对每个使用者收取年租费或月租费来销售。网易163收费邮箱就可以看作是典型的SaaS模式：通过浏览器来访问，大家使用同一个登录页面和登录地址，每个人有自己的登录用户名和密码，每年要缴费，邮件数据统一放在网易的服务器上，你不能把网易邮箱搬到自己公司服务器上，如果某一天你不想续费了，对不起，你的邮件就拿不回来了。如果某一天网易要维护服务器，那所有用户这一天都不能登录系统收发邮件。