天天看點

使用Docker、CoreOS、Mesos部署可擴充的Web應用

本文講的是<b>使用Docker、CoreOS、Mesos部署可擴充的Web應用</b>,【編者的話】本文作者重點介紹了如何使用Docker、CoreOS、Mesos、Vulcand、對象存儲來部署一個可擴充的Web應用,他首先介紹了為什麼要選擇這些工具以及與其它工具相比這些工具的優勢。緊接着,他通過實際案例示範了整個部署過程,圖文并茂,推薦閱讀。

讓我們先來讨論一下為什麼我決定使用這些軟體來展示如何建立一個可擴充的Web基礎架構。

那問題來了,為啥要選擇Linux容器?因為相比于虛拟機,Linux容器擁有更低的計算和存儲開銷。

以一個單元的形式自動更新整個系統,而不是一個包接着一個包的更新(如果你的基礎設施沒有SPOF,甚至要重新開機系統)

包含用于發現服務的etcd,也使用Vulcand(甚至設定中需要mesos)

包含了systemd和fleet,一個可以以一個init系統呈現你整個叢集的工具。在這個設定中我不使用fleet,但是在其它方面我有使用它,比如幾秒内啟動elastic search叢集。

我看到有關如何部署容器或虛拟機的很多教程,但我總是驚訝地看到,他們很少涉及基礎設施的負載均衡部分。

在我看來,負載均衡是一個可擴充的Web應用架構的重要組成部分。如果使用者不能正常通路你的應用,那還搞什麼自動化?

有三種不同的方式來自動化部署Docker容器,具體如下:

Kubernetes:這可能是最佳的選擇之一,但現在Kuernetes還太年輕。

Mesos:Mesos目前已經支援Docker,它已經是一個相對穩定的平台,并且可以用來部署其它軟體,例如Hadoop。

我們可以通過上面介紹的軟體來部署可擴充和高可用的應用。但是,資料怎麼處理?

結構化的内容可能會被存儲到分布式資料庫中,例如MongoDB。非結構化的内容一般會存儲在一個本地檔案系統、NAS或者對象存儲。

本地檔案系統并不适合現在的場景,因為容器可能會被部署到叢集的任何一個節點上。

然而,對象存儲卻可以在任何容器的任何應用中使用,并且是高可用的,因為我們使用了負載均衡器,它不需要任何配置,這也可以加快應用程式的開發周期。為什麼了?因為開發者不需要考慮資料的存儲方式、目錄結構管理等。

我已經開發了一個Web應用程式,它展示了一個應用程式如何不通過資料路徑處理上傳和下載下傳,我會在下面運作這個應用程式。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

上圖展示了幾個不同的元件,以及我如何設定3個節點的CoreOS叢集。

我使用Keepalived來確定公共 IP 10.64.231.84是可用的,不管對應在coreos1還是coreos3節點上。

Vulcand會運作再每個節點上,以均衡使用者和Web應用程式之間的負載,同僚也可以平衡應用程式和不同的VIPR節點。

私有的Docker Registry在coreos1節點上運作,并使用Amazon S3 API在VIPR上存儲鏡像。

Mesos主節點(Master)和Marathon運作在coreos2節點上。

這裡是我用來建構Docker鏡像的Dockerfile:

建構鏡像時我使用了<code>--no-cache</code>參數,以確定最新的源代碼是從GitHub上克隆的。

最後,我推送鏡像到Docker registry。

我已經指定了一個tag(2.0),以確定叢集中的每個節點都會從Docker Registry擷取最新版本。

現在,讓我們使用Docker鏡像部署一個Mesos應用:

當Mesos應用程式啟動後,Mesos Marathon UI就會顯示應用程式的狀态。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

幾秒鐘之後,應用部署成功,Docker主機和端口顯示在UI中。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

使用在Marathon UI顯示的資訊,我可以通路URL為<code>http://coreos1.ad.forest:31000</code>的Web應用程式。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

當應用程式運作時頁面左上角會顯示容器名稱,用于上載和下載下傳的圖檔的Amazon S3終端(endpoint)會顯示在左下角,并表明ViPR用于存儲資料。

我們現在可以上傳圖檔了。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

下面是由Web應用程式發送到浏覽器的代碼,以讓浏覽器直接上傳圖檔到對象存儲平台。

圖檔直接上傳到對象存儲平台的事實意味着該Web應用程式中并沒有資料路徑。也就是說無需部署數百個執行個體應用程式就可以擴充。

這個Web應用程式,也可用于顯示所有存儲在相應的Amazon S3的圖檔。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

圖檔下方顯示的URL表明圖檔可以直接從對象存儲平台下載下傳,而這又意味着Web應用程式不是從資料路徑直接下載下傳。

對象存儲是事實上的标準網絡規模應用。

現在,讓我們看看如何能夠從外界通路該Web應用程式。

我使用Golang開發了一個小工具,同時使用Marathon API和etcd API:

找到那些運作的Mesos應用程式但卻沒有相對應的在etcd中的vulcand規則,然後建立缺失的規則。

找到那些存在與etdc的vulcand規則中的不再運作的Mesos應用,然後删除。

使用Docker、CoreOS、Mesos部署可擴充的Web應用
使用Docker、CoreOS、Mesos部署可擴充的Web應用

其中Mesos之美在于它能夠輕松地擴充目前正在運作的應用程式的執行個體數目。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

幾秒鐘後,20個執行個體正在運作。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

我需要再次運作我的工具來更新vulcand規則。

使用Docker、CoreOS、Mesos部署可擴充的Web應用

現在,如果我重新整理我的網頁浏覽器,可以看到,在左上角顯示的容器名稱是基于服務的應用程式執行個體發生變化。

使用Docker、CoreOS、Mesos部署可擴充的Web應用
使用Docker、CoreOS、Mesos部署可擴充的Web應用

使用Marathon UI或API時,它也可以按比例縮小的執行個體數并再次運作工具來更新vulcand規則。

原文釋出時間為:2015-01-26

本文作者:zyx_today

本文來自雲栖社群合作夥伴DockerOne,了解相關資訊可以關注DockerOne。

原文标題:使用Docker、CoreOS、Mesos部署可擴充的Web應用