ECS 基本應用介紹


ECS是 EMC (DellEMC)的企業資料倉儲私有雲解決方案，本身是Object Storage (物件儲存)，提供多協定存取，以及各種應用場景，適合放寫入後不常被修改，但需要長期保存的資料，或是需要跨地域(跨國)存取同一份資料，或是各種Storage的Tier 2空間，也就是冷資料、最終資料儲存地，或是無帶化 (去磁帶)的替代磁帶方案。

多協定存取：

S3：Amazon Web Service (AWS) 定義的 Simple Storage Service(S3)，雲相關的軟體，硬體幾乎都支援S3協定，發展的最早，幾乎等同物件儲存的代名詞

NFS：Unix/Linux 常用的Network File System 協定，目前支援NFS V3，可以直接掛載起來使用

CIFS：Common Internet File System，Windows使用的網路硬碟，也就是網路芳鄰，底層
應用的是Small Message Block (SMB)協定，Object 本身無法直接變成CIFS來掛載，EMC有提供免費軟體GeoDrive，透過GeoDrive，ECS 的一個 Bucket 空間可以模擬成一個 windows 磁碟機來使用，我們可以設定多個 Bucket 來模擬成多個 windows 磁碟機。

HDFS：Hadoop File System，講到大數據就一定會想到 Hadoop，ECS 本身 single name space的特性，非常適合大數據使用，可以透過 S3 協定，讓 Hadoop 直連，或是透過 plugin掛載給 Hadoop 使用，另外可以透過 EMC Isilon (ECS產品線的另一套產品，Scale Out NAS)，掛載給 Hadoop 使用

SWIFT：OpenStack 的原生儲存方案，ECS提供原生SWIFT介面，可直接提供空間給OpenStack使用。

ATMOS：EMC早期推出的Cloud-otimized Storage解決方案，後來改名為ATMOS

CAS：ECS的上一代產品Centera使用的協定，Content-Addressable Storage


 下圖列出了ECS常用的應用場景：

IoT：物聯網應用，Kafka、Pravega是分散式的訊息或記錄檔(log)架構，主要處理串流資料，也就是流數據，5G及AI的驅動下，IoT應用越來越廣泛，大到自動駕駛的汽車甚至飛機，小到各種微型監控設備，都會產生大量即時的流動數據，分散式架構才能處理大量資料並保持低延遲與高效能

Modern Application：現代化應用如Open Stack(企業自建AWS方案)、Docker\Container(敏捷開發的基礎)、 Cloud Foundry (提供各種雲平台之間的漂移或切轉)

Security, Audio, Video：影像監控(NICE)，語音錄音(Verint)等資安相關應用

CIFS： Common Internet File System，Windows使用的網路硬碟，也就是網路芳鄰，底層應用的是Small Message Block (SMB)協定，Object 本身無法直接變成CIFS來掛載，EMC有提供免費軟體GeoDrive，透過GeoDrive，ECS的空間可以模擬成一個磁碟機來使用。

NFS：Unix/Linux 常用的Network File System 協定，目前支援NFS V3，可以直接掛載起來使用

CloudArray：將EMC Storage介接到雲儲存(ECS)的技術，現在改名為CTA (Cloud  Tier Appliance)，將不常使用的資料，或是符合自訂規則的資料，Tier到雲儲存

Syn & Share：資料同步、分享連結的軟體，類似Dropbox、Google Drive、微軟的OneDrive，或是企業用的Ctera、Syncplicity

Analytics Compute clusters：大數據資料分析，如前面提到的，Hadoop File System，ECS 本身 single name space的特性，非常適合大數據使用，可以透過 S3 協定，讓 Hadoop 直連，或是透過 plugin掛載給 Hadoop 使用，另外可以透過 EMC Isilon (ECS產品線的另一套產品，Scale Out NAS)，掛載給 Hadoop 使用

Other NAS：可透過CTA (Cloud  Tier Appliance)，將不常使用的資料，或是符合自訂規則的資料，Tier到雲儲存

Backup Environment：備份環境尤其適合使用ECS，"寫入後不常被修改，但需要長期保存的資料"，ECS支援IBM TSM、Commvault、EMC Netwoker、EMC Avamar、Veritas NetBackup，另外也可以當EMC Data Domain(高壓縮去重的備份儲存設備)的Second Tier，第二層儲存，將更久的備份(一年以上)Tier到ECS

Long Term Retention：長期資料保留，例如FileNet、Centera，Documentum的長期資料保存倉儲


VMWare Content Library 整合：將ISO及Template放在ECS上，本地datastore僅保留連結(存根)，當需要部屬的時候再從ECS下載到本地datastore，當一段時間不再使用，自動變回連結


回到學習地圖

留言

張貼留言

這個網誌中的熱門文章

ECS 應用篇：Synology 群暉 NAS 同步到 ECS

Synology 群暉的NAS，相信有用NAS的人都不陌生，圖形化的介面，簡單又人性化的操作，讓人忍不住就把資料都放進去。 那萬一這台NAS連線的網路有問題，或是停電了，有沒有簡單的雲備援方案呢？有的， Synology 的套件中心可以下載Cloud Sync，很簡單的就可以把資料同步到付費的雲服務上，或是我們的主角，ECS 私有雲解決方案。 Synology連到Cloud (私有雲 ECS)，必須是認證過的SSL / HTTPS 的格式，大部分的人對申請SSL證書 HTTPS，應該都很陌生，所以我們這邊用ECS Test Drive來做測試。 還是要提醒一下，ECS test drive 是為了給想自建私有雲ECS，試用或開發一下功能使用，ECS Test Drive本身是免費的服務，不定時會自動刪除檔案的喔` PS：硬體版本ECS，起跳5個節點，允許同時壞四個硬碟，或一整個節點，可橫向擴充到無限節點，節點越多，可同時損壞的硬碟或節點就更多，提供11個9的資料耐用度保護，正式或重要的資料建議採購硬體版本ECS。 好了，我們開始吧。
閱讀完整內容

去無帶化，為何資料保護，資料無損這麼重要？Data Domain DIA 技術介紹

圖片
記得去年的新聞 " 維修後資料 全消失" 業者損3千萬氣炸"，大家知道維修的是甚麼嗎？據說就是磁帶機呢。 磁帶剛出來的年代，硬碟非常貴，磁帶以容量大，價格便宜的優勢，擄獲了需要每個資料備份的客戶。 但是呢，磁帶的物理特性，長時間保留還是存在消磁的風險，再來磁帶是線性的儲存設備（妳把磁帶拉出來，就會是長長長的一條啦)，要讀到最早的資料，就得要整捲磁帶重頭讀一次才有辦法，如果客戶要定期檢查，往往曠日廢時，然後讀不出來也只能註記＂資料已毀損" DellEMC提出的無帶化解決方案，其中最重要的一環就是備份專用儲存設備＂Data Domain"，Data Domain本身是X86架構的主機，裡面放SSD硬碟、SAS 硬碟或NS SAS硬碟，上面跑Data Domain優化過的OS，那Data Domain到底要怎麼確保資料無損呢？為何客戶可以非常信任的把資料都轉到Data Domain上面呢？下面我來介紹一下Data Domain的獨門技術：DIA Data Domain的D.I.A（Data Invulnerability Architecture）技術，資料無損架構，總共有四大技術： 1.    端到端驗證：從備份軟體發動備份開始，到寫入Data Domain，資料會作檢查(checksum)檢查，當資料寫入Data Domain後，Data Domain還會把資料再讀出一次確認check sum，過程中有任何一次checksum有問題，Data Domain都會重新針對有問題的資料重新再備份。 2.    特別為備份設計的日誌型檔案系統： a. 新資料不覆蓋原有資料，任一個client發動的每個備份session，都會寫到不同的硬碟區塊，資料不覆蓋，即使是同一個檔案，每次備份都會放在不同硬碟區塊。(傳統的檔案系統，都是指標(inode)的方式，同一個檔案就是會指向固定的區塊) b. 同上，非指標架構(inode)的檔案系統，日誌(log)維護非常簡單，就是維護每一次寫入的備份資料(Container)，檔案系統本身幾乎不會有軟體問題或bug。 c. Data Domain本身有NVRAM (不掉電記憶體)設計，當機房跳電或斷電發生時，尚未寫入硬碟的資料都受到NVR...
閱讀完整內容

Windows 2012 架設 AD server 網域服務、DNS Server

圖片
Windows Active Directory 是企業或是教育單位等管理大型組織的好工具，可以 1. win2012-205-ad先安裝AD Server、DNS Server 2. win2012-205-ad 提升為AD Server，DNS紀錄也會自動加入 3. win2012-203、win2012-204 加入AD Domain 1. win2012-205-ad先安裝AD Server、DNS Server Server Manager 選Manage -> Add Roles and Features 選Next    選預設 Role-base of feature-based installation    選預設"Select a server from the server pool"，確認下面選的主機  打勾"Active Director 網域服務"   直接選"Add Features"    再來選DNS 伺服器    直接選"Add Features"  選Next    因為是測試，所以我都會直接打勾"Restart the destination server automatically if required"，有需要就直接重開生效   2. win2012-205-ad 提升為AD Server，DNS紀錄也會自動加入 好啦，等她安裝好後，再來就是要來設定AD Server了  回到Server Manager，點一下驚嘆號，就會提示你把這台機器變成AD Server  我們是獨立的測試，所以選 Add a new forest，然後設定poc.com   再來設定DSRM的密碼，順便說一下，建議設定九位數以上的密碼喔，避免遇到奇怪的問題 再來選下一步 (我們沒有要先設定DNS，先不管驚嘆號) 再來都是Next，到最後Install 裝好後，會強迫登出，然後改由AD帳號登入，然後改一下密碼 ...
閱讀完整內容