中文字幕日韩精品一区二区免费_精品一区二区三区国产精品无卡在_国精品无码专区一区二区三区_国产αv三级中文在线

ClouderaManager和CDH升級流程-創(chuàng)新互聯(lián)

1.Cloudera升級概述

為石屏等地區(qū)用戶提供了全套網(wǎng)頁設(shè)計制作服務(wù),及石屏網(wǎng)站建設(shè)行業(yè)解決方案。主營業(yè)務(wù)為網(wǎng)站設(shè)計制作、網(wǎng)站設(shè)計、石屏網(wǎng)站設(shè)計,以傳統(tǒng)方式定制建設(shè)網(wǎng)站,并提供域名空間備案等一條龍服務(wù),秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務(wù)。我們深信只要達(dá)到每一位用戶的要求,就會得到認(rèn)可,從而選擇與我們長期合作。這樣,我們也可以走得更遠(yuǎn)!

升級包括兩個主要的步驟,升級Cloudera Manager和升級CDH群集

升級CM:
Cloudera Manager和CDH升級流程

*升級CM時 可以使用rpm命令; Cloudera Manager升級時,Cloudera Navigator也會升級。

升級CDH:
Cloudera Manager和CDH升級流程

*CM和CDH不需要同時升級,但CM和CDH的版本必須兼容。Cloudera Manager 6.0可以管理運行CDH 5.7到CDH 5.14的集群,只要Cloudera Manager的主+次版本 等于或高于 CDH的主+次版本。

例如:

支持:

· Cloudera Manager 6.0.0 and CDH 5.14.0

· Cloudera Manager 5.14.0 and CDH 5.13.0

· Cloudera Manager 5.13.1 and CDH 5.13.3

不支持:

· Cloudera Manager 5.14.0 and CDH 6.0.0

· Cloudera Manager 5.12 and CDH 5.13

· Cloudera Manager 6.0.0 and CDH 5.6

2.評估升級的影響

計劃一個足夠長的維護(hù)窗口(停機時間)來執(zhí)行升級。根據(jù)需要升級的組件, 集群中的主機數(shù)量和硬件類型情況,你可能需要一整天的時間。

在開始升級之前,你需要收集一些信息 并做好提前準(zhǔn)備

請參考Cloudera Manager的:

https://www.cloudera.com/documentation/enterprise/release-notes/topics/rg_release_notes.html

了解API的更改 過時的功能 新功能以及不兼容性的變更。

而且要檢查

https://www.cloudera.com/documentation/enterprise/upgrade/topics/rg_requirements_supported_versions.html#c6_requirements

以確保使用的是受支持的操作系統(tǒng) JDK 數(shù)據(jù)庫和其他組件

有三種類型的升級:major, minor, and maintenance

Major升級

升級通常具有以下特征:

Hadoop的功能性發(fā)生了很大變化,有很多的更新內(nèi)容

不兼容的數(shù)據(jù)格式

Cloudera Manager 界面發(fā)生重大改變

Cloudera Manager 數(shù)據(jù)庫中Schema變更
需要大量的停機時間來升級集群

重新部署客戶端配置

Minor 升級

Minor升級是指基于同樣的major將minor版本進(jìn)行升級,比如從5.7.x升級到5.8.x,通常包括以下內(nèi)容:

  新功能   

  Bug 修復(fù)

 Cloudera Manager自動處理的潛在數(shù)據(jù)庫Schema更改

在minor 升級中通常不會導(dǎo)致 不兼容的變更和數(shù)據(jù)格式的更改

Maintenance 升級

Maintenance升級 可以修復(fù)嚴(yán)重的bug或 解決安全問題 不會有兼容性修改和新功能

3.Cloudera Manager升級概述
Cloudera Manager和CDH升級流程
升級CM 有以下步驟:

  1. 備份Cloudera Manager服務(wù)器數(shù)據(jù)庫、工作目錄和其他幾個實體。如果升級過程中出現(xiàn)問題,可以使用這些備份來恢復(fù)Cloudera Manager部署

  2. CM主機上 在命令行中使用package命令 升級Cloudera Manager Server ,例如Redhat的yum命令 cm會自動化完成這個過程的大部分流程

  3. 在所有集群主機上升級Cloudera Manager agent,Cloudera Manager升級向?qū)Э梢詭椭闵塧gent(并且,可選JDK) 也可以手動安裝agent 和JDK軟件。CDH在此過程中沒有升級。

有關(guān)Cloudera Manager升級的步驟,請參靠官網(wǎng)文檔:

https://www.cloudera.com/documentation/enterprise/latest/topics/cm_upgrade.html#concept_q1q_mbs_wx

如果你正要從5.x 升級到5.x 的更高版本 還可以使用tarballs升級Cloudera Manager 相關(guān)的過程 請參閱使用Tarball升級Cloudera Manager 5

https://www.cloudera.com/documentation/enterprise/5/latest/topics/cm_ag_ug_cm5_tarballs.html

4.CDH升級概述
Cloudera Manager和CDH升級流程

CDH升級包含Hadoop軟件以及相關(guān)組件的更新 你可以使用Cloudera Manager來升級CDH 根據(jù)您使用的Cloudera Manager版本和要升級到的CDH版本的不同,這些過程也會有所不同 您可以使用Cloudera Manager使用parcels或軟件包升級CDH。

完成準(zhǔn)備步驟后,可以使用Cloudera Manager升級向?qū)瓿缮?如果您使用parcels(推薦)啟用了HDFS高可用性,并且擁有Cloudera Enterprise許可證 您可以執(zhí)行滾動升級,且無需在升級期間使群集脫機。

有關(guān)CDH升級步驟,請參見升級CDH集群

https://www.cloudera.com/documentation/enterprise/upgrade/topics/ug_cdh_upgrade.html#cdh_upgrade5

推薦使用 Parcels升級 CDH
使用parcels升級CDH是選方法 因為Parcels是由Cloudera Manager管理 ,且會自動下載、分發(fā)和激活正確版本的軟件 為了更容易的升級過程 可以考慮從package切換到parcels,以便Cloudera Manager可以自動執(zhí)行更多的過程。還可以在升級CDH時從package切換到parcels。

使用Packages升級 CDH

這個選項是最耗時的,需要您使用ssh登錄并在集群中的所有主機上執(zhí)行一系列package命令 建議您改用Parcels來升級群集,這樣Cloudera Manager就可以將升級后的軟件分發(fā)給集群中的所有主機,而無需登錄到每個主機 如果使用 packages安裝群集,則可以使用parcels進(jìn)行升級,并且群集將使用parcels進(jìn)行后續(xù)升級

5.Cloudera Navigator升級概述

升級Cloudera Manager時 Cloudera Navigator Metadata和Audit servers會自動升級 你還可以選擇升級其他Cloudera Navigator組件 例如Cloudera Navigator Key Trustee Server, Cloudera Navigator Key HSM和Cloudera Navigator Encrypt 您無需隨Cloudera Manager或CDH升級一起升級這些組件 有關(guān)兼容性信息,請參閱:Cloudera Navigator加密產(chǎn)品兼容性矩陣(Cloudera Manager 5.x)和

升級Cloudera Navigator數(shù)據(jù)加密。

https://www.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#pcm_navigator_encryption

https://www.cloudera.com/documentation/enterprise/upgrade/topics/ug_cn_upgrade.html#cn_upgrade

6.Cloudera Manager升級

rpm包下載地址

http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.14.4/RPMS/x86_64/

本地yum源設(shè)置
把下載的包放到某一個目錄 建立yum索引
Cloudera Manager和CDH升級流程

cd /etc/yum.repos.d/ #cd到此目錄下

vi cloudera.repo 建立一個yum源配置文件配置如下
Cloudera Manager和CDH升級流程

檢查yum源可用性

yum list
Cloudera Manager和CDH升級流程

關(guān)閉Cloudera Management Service服務(wù):
Cloudera Manager和CDH升級流程

備份數(shù)據(jù)庫
Cloudera Manager和CDH升級流程

Cloudera Manager和CDH升級流程

關(guān)閉所有服務(wù)器上的Cloudera Manager Server和agent 并停止服務(wù)
Cloudera Manager和CDH升級流程
Cloudera Manager和CDH升級流程
停止所有服務(wù)器上的 server 和 agent 服務(wù)

升級cloudera相關(guān)組件

yum upgrade 'cloudera-*'
Cloudera Manager和CDH升級流程

檢查安裝是否成功:
Cloudera Manager和CDH升級流程

啟動Cloudera Manager Server服務(wù)

service cloudera-scm-server start

準(zhǔn)備升級其他服務(wù)器的agent

點擊繼續(xù)
Cloudera Manager和CDH升級流程

選擇自定義存儲庫
Cloudera Manager和CDH升級流程

注:這里也可以選擇私鑰
升級成功點擊繼續(xù)
等待檢查之后 點擊繼續(xù)
OK

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機、免備案服務(wù)器”等云主機租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。

網(wǎng)站題目:ClouderaManager和CDH升級流程-創(chuàng)新互聯(lián)
標(biāo)題來源:http://m.rwnh.cn/article34/coihse.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供云服務(wù)器虛擬主機、響應(yīng)式網(wǎng)站企業(yè)建站、網(wǎng)站設(shè)計、全網(wǎng)營銷推廣

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

微信小程序開發(fā)
休宁县| 波密县| 昌江| 星座| 泊头市| 长汀县| 建德市| 甘泉县| 合作市| 德钦县| 大港区| 娄烦县| 江北区| 高州市| 景谷| 京山县| 南平市| 贞丰县| 新乡县| 兖州市| 宁安市| 三明市| 荆门市| 句容市| 象州县| 黄骅市| SHOW| 盖州市| 荃湾区| 应城市| 姚安县| 塔城市| 保山市| 阳朔县| 泸定县| 临江市| 喀喇| 抚远县| 喜德县| 忻州市| 普定县|