2020年8月21日金曜日

CDP 7.1でAtlasをインストール

  • このエントリーをはてなブックマークに追加


CDP 7.1でAtlasをインストール

Cloudera Data Platform(CDP)7.1.1をインストールし、Atlasを追加する際に必要な作業をメモしておきます。

CDP 7.1.1は2020年5月末にGAになりました。CDH6/HDP3系の進化版となっています。
インストール後の画面は以下です。
image.png

Atlasをインストールするにはいくつかコンポーネントを先にインストールしないといけません。

大まかな手順

  • Zookeeper, Kafka, Solr(CDP-infra-solr)を「サービスの追加」からインストール
  • Solrの起動に以下のエラーで失敗した場合、「Solrの初期化」と「HDFSホームディレクトリの作成」を実施
Unable to set the cluster property due to following error : Error setting cluster property
Error: Unable to set the cluster property in ZK
ERROR: Failed to configure urlScheme property for Solr cluster in Zookeeper

image.png

  • Atlasのアクションで「Create HBase tables for Atlas」を実行

image.png

  • 続いてAtlasの初期化を実施。Atlasプロセスを停止してからやらないと、「Initialize Atlas」はグレーになります。

image.png

初期化のログ。Solrにvertex_index, edge_index, fulltext_indexが作成される。
image.png

これでAtlasのUIにアクセスできるようになります。