網站制作資源抽象層

2022-05-05    分類: 網站制作

資源抽象層主要是將下層的物理硬件資源統一進行抽象,抽象成和單個物理硬件無關的資源集合,上層無須關心物理機器的型號,只需專注于具體的資源即可。
資源抽象層需要重點做好以下三件事。第一,收集和管理具體物理資源;
第二,重新封裝抽象的硬件資源屬性,使之成為上層可以使用的一個實體,既可以是容器也可以是虛擬機或者資源集合;
第三,數據存儲問題。做業務少不了要在本機存儲數據,這樣機器就成為“有狀態”的,不利于全局調度資源。為了能夠全局調度,需要解決三個場景下的問題:是數據不需要永久本地存儲但是會實時寫到本地的,如應用的日志;二是需要永久存儲的如DB數據;三是分布式存儲場景中,要做到存儲與計算分離。

資源的收集和管理
資源的收集就是收集物理機的資源,例如當前型號的機器有多少可用的CPU、內存、磁盤等信息,它可以分為四個方面的內容。
第一,資源的信息管理。有多少,用了多少,還有多少;
第二,大量物理機器的集群管理。除了通常幾十萬臺的機器管理功能外,還有一部分的任務管理,如負責接收 Master創建容器的任務等。
第三,資源的合理分配策略和算法。上層的資源請求最終會在每臺物理機上進行分配,那么如何能?這里有根合理的分配策略和算法支撐。
第四,資源的信息管理就是要實現一個CMDB,能管理物理機和 vhost I的關聯關系,必須能管理上萬臺甚至十幾萬臺規模的機器集群。這樣的機器集群管理框架目前可選的比較少,我們選擇的是 Mesos,主要基于以下兩方面的考慮。一是 Mesos目前相對比較成熟,主流的大公司使用較多,在實際場景中的使用規模已達5萬臺左右;二是 Mesos擴展性比較好,本身是輕量級的,可以靈活定制各種 Framework滿足業務需要。
我們分析一下為什么Msos能管理這么大的集群,它的資源分配策略以及它是如何靈活創建各種容器和配置網絡的。 Mesos的集群架構。
Mesos的模塊化設計使得它的集群管理本身可做的事情并不多: Master僅僅把從Save收集的資源數據匯報給 Framework; Master和 Slave通過消息交互消息,不需要一直保持長連接。隨著 Slave規模的擴大, Master的壓力并不會顯著增長。 Master本身的高可用是通過ZK( Zookeeper)來保證的,整個集群的架構設計非常清晰。
當集群規模很大時,資源的管理和分配策略就會非常重要。分配策略對于大化充分利用物理資源非常關鍵,所以要自己定制 Framework以便更精細化地分配資源。目前我們設計了4個分配策略。
(1)大內存剩余優先分配策略。即集群中內存剩余最多的優先分配,目的是充
(2)大CPU剩余優先分配策略。類似于內存分配,根據剩余的CPU數優先分配給對CPU資源需求大的任務;
3)大最小資源公平分配策略。這種分配是根據當前任務申請的資源,要查看當前集群中的每臺機器、每種資源的使用量是否飽和,優先把任務分配給當前最空閑的機器;
(4)根據資源分配指定分配策略。這種方式比較靈活,就是可以根據用戶的需要把任務分配到指定的機器上執行,例如可以給一些機器打上標簽,讓某類任務在這些帶有標簽的機器上執行。
從上面的介紹可以知道網站制作Framework的修改需要比較靈活的支持,而當前 Mesos的 Framework的更新還比較麻煩。如果要更新 Framework的代碼,就需要重啟每個Slave的 execute,進而可能要停止 Slave上的任務,這在生產環境中是很難接受的。有鑒于此,我們對 Framework進行了無狀態設計,在代碼實現上,改用動態語言如Groovy來編寫需要經常修改的邏輯,這樣Govy實現的代碼就可以動態加載而不需重啟任務,對 Framework的功能進行調整就非常方便了。

網頁題目:網站制作資源抽象層
網頁URL:http://m.kartarina.com/news7/150307.html

網站建設、網絡推廣公司-創新互聯,是專注品牌與效果的網站制作,網絡營銷seo公司;服務項目有網站制作

廣告

聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯

手機網站建設
主站蜘蛛池模板: 无码粉嫩小泬无套在线观看| 久久亚洲精品中文字幕无码| 无码少妇丰满熟妇一区二区| 无码日韩精品一区二区免费| 亚洲中文字幕无码爆乳av中文| 久久久久久AV无码免费网站| 亚洲欧洲无码AV不卡在线| 国产精品无码无卡无需播放器| 精品无码AV一区二区三区不卡| 国产做无码视频在线观看| 97久久精品亚洲中文字幕无码| 国产亚洲精品无码拍拍拍色欲 | 亚洲最大天堂无码精品区| 免费无码一区二区| 黄色成人网站免费无码av| 少妇人妻偷人精品无码视频 | 亚洲中文字幕久久精品无码APP| 亚洲AV综合永久无码精品天堂| 无码精品国产VA在线观看| 韩国免费a级作爱片无码| 国产精品爆乳奶水无码视频| 亚洲AV永久无码精品网站在线观看 | 国产成年无码AV片在线韩国| 国产精品爆乳奶水无码视频| 亚洲成a人无码亚洲成www牛牛 | 亚洲最大av无码网址| 日日摸日日碰人妻无码| 国产成年无码久久久久下载| 免费无码又爽又刺激聊天APP| 久久人妻无码中文字幕| 无码人妻精品中文字幕免费东京热| 久久精品无码精品免费专区| 国产AV无码专区亚洲AV男同 | 亚洲AⅤ无码一区二区三区在线 | aⅴ一区二区三区无卡无码| 国产成人无码免费视频97| 亚洲AV无码不卡在线观看下载| 国产日产欧洲无码视频| 东京热加勒比无码视频| 亚洲级αV无码毛片久久精品| 久久精品亚洲中文字幕无码网站|