久久国产亚洲偷自,91制片厂在线,18成网站www在线观看

Apache NiFi大數(shù)據(jù)數(shù)據(jù)處理和分發(fā)系統(tǒng)培訓實戰(zhàn)
? 課程信息
Apache NiFi 是一個易于使用、功能強大而且可靠的數(shù)據(jù)處理和分發(fā)系統(tǒng)。Apache NiFi 是為數(shù)據(jù)流設計。它支持高度可配置的指示圖的數(shù)據(jù)路由、轉換和系統(tǒng)中介邏輯。
培訓特色
Apache NiFi 是一個易于使用、功能強大而且可靠的數(shù)據(jù)處理和分發(fā)系統(tǒng)。Apache NiFi 是為數(shù)據(jù)流設計。它支持高度可配置的指示圖的數(shù)據(jù)路由、轉換和系統(tǒng)中介邏輯。
目標收益
NiFi這個項目在2015年7月成功成為Apache開源社區(qū)的頂級項目，NiFi之前是在美國國家安全局使用了8年的一個可視化，可定制的數(shù)據(jù)集成產品，2014年貢獻給了Apache開源社區(qū)。我們認為NiFi的出現(xiàn)填補的大數(shù)據(jù)集成領域的空白，它不僅提供了可視化的工具實現(xiàn)大數(shù)據(jù)環(huán)境下不同系統(tǒng)之間進行數(shù)據(jù)移動和互聯(lián)互通如SQL，HDFS，Kafka， HBASE， Solr，HTTP(s)、(s)FTP 而且還可以以可視化的方式進行各種數(shù)據(jù)格式的轉換，json，xml，avro等。NiFi的出現(xiàn)使得大數(shù)據(jù)環(huán)境下的數(shù)據(jù)移動變得簡單、高效、安全、可視化，大大方便了業(yè)務和開發(fā)人員。
培訓對象
大數(shù)據(jù)開發(fā)團隊、大數(shù)據(jù)運維團隊、數(shù)據(jù)采集和ETL人員、數(shù)據(jù)治理和管理人員
課程大綱
?
主題內容
模塊 1：Nifi原理和架構
Nifi的功能概述
Nifi原理和架構?
Nifi基本模塊介紹
Nifi Groups、Processor、queue和connector模塊介紹
Nifi toolbar 界面演示
模塊2：Nifi安裝和配置
Nifi單機版安裝
Nifi分布式安裝
Nifi slaves節(jié)點配置
數(shù)據(jù)丟失容錯和保證交付?
低延遲和高吞吐量
動態(tài)優(yōu)先級?
流可以在運行時修改?
模塊3：GUI 操作介紹
無縫體驗設計、控制和監(jiān)視
processor的create、stop、start、restart、delete等操作
模塊4：Nifi自帶處理器介紹
Processor的原理和功能
Kafka Processor介紹和實戰(zhàn)
JMS Processor介紹和實戰(zhàn)
Hbase、Cassandera、redis Processor介紹和實戰(zhàn)
Hdfs Processor、spark Streaming實戰(zhàn)
JDBC Processor介紹和實戰(zhàn)
FTP、Http、XML、Json Processor介紹和實戰(zhàn)
模塊5：創(chuàng)建Nifi數(shù)據(jù)流
創(chuàng)建發(fā)送/接收目錄
getFile和putFile Processor創(chuàng)建
創(chuàng)建復制文件從發(fā)送放到接收
創(chuàng)建Queue隊列
模塊6：創(chuàng)建高級數(shù)據(jù)流
自定義文件名
添加自定義屬性
添加正則表達式
實現(xiàn)Path過濾規(guī)則
模塊7：Nifi安全
創(chuàng)建用戶、用戶組、角色?
SSL,SSH,HTTPS加密認證
可插拔的基于角色的驗證/授權
基于webUI的SLA認證授權?
模塊8：創(chuàng)建Nifi處理器
實現(xiàn)一個Kafka、JMS到HDFS的流程設計
查看運行日志
查看監(jiān)控
模塊9：Nifi集群配置和管理
Nifi集群添加節(jié)點
刪除節(jié)點
Nifi性能優(yōu)化
Slaves節(jié)點的負載均衡配置
制定特定的Processor到特定的node節(jié)點
集群動態(tài)負載均衡配置
模塊10：用戶自定義處理器
eclipse工程創(chuàng)建
實現(xiàn)一個FilterFileProcessor功能
編譯&添加到Nifi的lib下面
創(chuàng)建用戶自定義的FilterFile處理器
模塊11：Nifi實戰(zhàn)
Nifi在互聯(lián)網(wǎng)的使用實戰(zhàn)
Nifi在某大型商業(yè)銀行實戰(zhàn)案例分享
?? 3.IAAS存儲選型及規(guī)劃
四：云數(shù)據(jù)中心運維
1.?云數(shù)據(jù)中心面臨的主要問題
2.?云數(shù)據(jù)中心運維平臺總體架構。
3.?云數(shù)據(jù)中心監(jiān)控
4.?云數(shù)據(jù)中心資本管理
5.?IT服務管理
五：云數(shù)據(jù)中心基礎設施規(guī)劃與建設
1.?土建和施工
2.?綠色機房的規(guī)劃
3.?綠色機房建設要點
六：災備解決方案的規(guī)劃與建設
1.?災備的概念
2.?災備的標準規(guī)范
3.?災備的建設要點
七：傳統(tǒng)數(shù)據(jù)中心的改造和整合
1.?架構治理的框架
2.?運營模型
3.?傳統(tǒng)數(shù)據(jù)中心改造和整合
八：云數(shù)據(jù)中心安全
1.?從“斯諾登事件”看安全
2.?云數(shù)據(jù)中心安全措施
3.?安全機制與應急方案
九：云數(shù)據(jù)中心展望
1.?標準化數(shù)據(jù)中心
2.?綠色節(jié)能模式的深入應用。
3.?大虛擬化時代的到來
4.?云數(shù)據(jù)中心在大數(shù)據(jù)方向的應用
7.2　使用ansible-vault
7.3　典型應用場景
第8章　Ansible與云計算
8.1　了解云平臺管理流程
8.2　Ansible AWS和OpenStack
8.3　Ansible與Docker
8.4　Ansible Jenkins
第9章　部署Zabbix組件
9.1　了解部署流程
9.2　編寫業(yè)務roles
9.3　安裝部署
第10章　部署HAProxy + LAMP架構
10.1　了解整體架構流程
10.2　編寫業(yè)務roles
10.3　配置部署以及測試
10.4　擴容與維護
第11章　大數(shù)據(jù)環(huán)境的應用實戰(zhàn)
11.1　某運營商大數(shù)據(jù)環(huán)境
11.2　準備大數(shù)據(jù)集群環(huán)境
11.3　部署Hadoop集群
11.4　部署后Hadoop初始化與驗證
第12章　Ansible管理Windows系統(tǒng)
12.1　Ansible管理Windows工作原理
12.2　搭建Ansible管理工作組Windows環(huán)境
12.3　搭建Ansible管理活動目錄Windows環(huán)境
12.4　支持管理Windows模塊
12.5　常用Windows管理實例
第13章　網(wǎng)絡自動化管理的應用實戰(zhàn)
13.1　網(wǎng)絡管理也自動化了
13.2　Ansible官方集成的網(wǎng)絡角色
13.3　生成配置文件及部署
13.4　通過SNMP方式配置網(wǎng)絡
13.5　網(wǎng)絡設備廠商提供接口實現(xiàn)自動化
第14章　Ansible API
14.1　runner API
14.2　playbook API
14.3　使用Flask封裝Ansible API
14.4　使用Celery實現(xiàn)任務異步化
14.5　使用jQuery Ajax異步請求
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
?
? ?
?
?
?
?
?

免费一看一级欧美-免费一区二区三区免费视频-免费伊人-免费影片-99精品网-99精品小视频