重慶慧都科技有限公司
免費會員
| 參考價: | 面議 |
具體成交價以合同協(xié)議為準- 產(chǎn)品型號
- 品牌
- 其他 廠商性質(zhì)
- 所在地
訪問次數(shù)：132更新時間：2022-03-28 16:30:12
功能描述
需要培訓、定制、外包？
請聯(lián)系我們！：800018081
慧都專業(yè)技術(shù)團隊幫助您提高效率，節(jié)省成本，降低風險！
* 關(guān)于本產(chǎn)品的分類與介紹僅供參考，精準產(chǎn)品資料以介紹為準，如需購買請先行測試。
整體架構(gòu)：
Apache Falcon 提供了一個用于治理和編排 Hadoop 內(nèi)部和周邊數(shù)據(jù)流的數(shù)據(jù)處理框架。該框架為獲取和處理數(shù)據(jù)集、復制與保留數(shù)據(jù)集、重新定向位于非Hadoop擴展中的數(shù)據(jù)集、維護審核跟蹤與沿襲提供了關(guān)鍵性的管控框架。Knox拓展了Hadoop的安全邊界，實現(xiàn)了與LDAP、用于證書管理的活動目錄等框架進行了充分整合，為跨Hadoop和所有相關(guān)項目的提供了一個通用服務。下面是Falcon的架構(gòu)圖：
從上圖可以看出，Apache Falcon：
在Hadoop環(huán)境中各種數(shù)據(jù)和處理元素（processing element）之間建立了聯(lián)系；
可以與Hive/HCatalog集成；
根據(jù)可用的Feed組向最終用戶發(fā)送通知。
用途特性：
Apache Falcon可以滿足企業(yè)數(shù)據(jù)管理的以下三方面需求：
| 需求 | 特性 |
|---|---|
| 集中化數(shù)據(jù)生命周期管理 |
|
| 合規(guī)與審計 |
|
| 數(shù)據(jù)庫復制與存檔 |
|
