當我深入研究與 Dropbox 遷移到 Apple 的文件提供程序擴展相關的細節時(參見“Apple 的文件提供程序強制 Mac 雲存儲更改”,2023 年 3 月 10 日),我很感興趣地看到媒體界人士的評論,我沒有什麼經驗。這些人生活在與對 1 TB 內部存儲感到滿意的日常用戶完全不同的數字現實中。用戶 millifoo 寫道:

我們將云同步與我們的外部巨大驅動器一起使用,以允許與音頻/視頻編輯進行協作。許多媒體機構的工作流程要求文件是本地的(編輯和播放的速度),而通過云同步不僅有利於實現這一點,還可以備份所有文件以防發生災難。

其他人指出 Dropbox 的計劃 沒有提供足夠的存儲空間。 Plus 和家庭計劃包括 2 TB,專業計劃為 3 TB,標準團隊計劃附帶 5 TB。只有 Advanced 計劃(每個用戶每月 24 美元)可以提供更多存儲空間。這些媒體人需要多少錢? KyleKoch 指出:

我們中的許多人都要求 Dropbox 位於外部驅動器上,而媒體是本地的。當您擁有 50TB 以上的雲存儲空間時,在操作系統驅動器上的 Dropbox 文件夾中管理視頻資產的後勤工作毫無意義。

用戶 solldavid 同意:

我們有先進的計劃,在 Dropbox 雲中有多達 200+ TB 的資產,所有資產都可以通過“僅在線”在 OSX Finder 中查看和搜索,並且可以通過全帶寬下載恢復。在我看來,這是業內最好的產品。是的,您至少需要三個“用戶”。

不幸的是,關於線程的主題,Apple 和 Dropbox 的這種變化威脅到我的整個工作流程。我們保持 3-6TB 離線可用,以保持大型視頻、GFX 和 3D 文件在遠程工作站之間同步,自 2012 年以來,我們一直在使用外部 SSD 成功地做到這一點。它一直是我們工作流程的基石,超級可靠,非常快,我不知道如果沒有它我會做什麼。

還有用戶 jmeredi2 說:

我們有一個有 6 個用戶的商業高級計劃,我們每年支付大約 1,700 美元。這是一個無限制的計劃,所以每次我們達到存儲限制時,他們都會給我們更多的空間。不幸的是,這顯然不再適用於 DropBox“升級”,除非我能找到具有 30-40 TB 內部硬盤驅動器的計算機。

我知道很多人需要超過 1 TB 或兩個雲存儲,但這些評論讓我窺見了專業媒體的需求。我將此作為背景分享,因為在我的文章發表後不久,我從“TNGD”讀者 Steven Niedzielski 那裡聽說了他工作的公司 LucidLink for,為高性能媒體用戶提供流式雲存儲。我很想了解更多信息,即使該系統對我們大多數人來說都太過分了。

LucidLink 重新思考雲存儲

我上一篇文章的背景是 Apple 的文件提供程序擴展,它為 Box、Dropbox、Google Drive 和 Microsoft OneDrive 等“同步和共享”服務提供了連貫的方法。

從概念上講,它們都依賴於相對簡單的架構。您的所有文件都在線存儲,可以通過 Web 界面訪問。不同操作系統的客戶端軟件將數據存儲同步到設備,無論是完整內容(離線)還是佔位符形式(僅在線)。如果您需要處理僅供聯機使用的文件,則必須先完整下載該文件,然後才能訪問它。更改,包括目錄結構的添加、刪除和調整,首先從客戶端同步回雲,然後向下同步到所有其他連接的客戶端。其中一些更改可能依賴於 diff 方法,其中只需要傳輸特定文件的更改位;在其他情況下,必須將整個文件發回。

LucidLink 不能那樣工作。在 Mac 上,它依靠 MacFUSE 來安裝 LucidLink 的專有 Filespace 雲原生文件系統 作為標準 Mac 卷。 (LucidLink 也可用於 Windows 和 Linux。)想一想。您在 Finder 中與看似普通的外部或網絡驅動器進行交互,但其背後是雲原生文件系統中的數據。因此,從 LucidLink 打開文件的工作方式與從 Mac 的內部 SSD 打開文件的方式相同,儘管它以 256 KB 的塊讀取和寫入數據,而 macOS 本地存儲的默認塊大小為 4096 字節。

這意味著 LucidLink 無需在打開文件之前同步整個文件,就像 Dropbox 中的僅在線文件一樣。對於小文件,同步方法效果很好,但對於媒體世界中使用的文件大小,從雲中檢索文件需要花費大量時間——因此需要大型外部驅動器來存儲本地版本。

我一直認為 MacFUSE 是將不尋常的文件系統集成到 Mac 體驗中的絕妙方法,所以我理解 LucidLink 在做什麼。但是,我立即問 Niedzielski LucidLink 需要多少帶寬,希望他承認 1 Gbps 的光纖連接是必要的,而且嚴肅的視頻專業人士都有這樣的連接。

相反,他說 50 Mbps 和10 Mbps up 是非視頻工作的現實最低限度。在理想的視頻世界中,他指出您需要匹配視頻流的帶寬以實現無縫行為。我沒有考慮帶寬方面的視頻,但我懷疑你擁有的越多越好——光纖連接可能是個好主意。一個親身體驗表示 LucidLink 在 230 Mbps 下運行良好向下,儘管這似乎是在代理工作流場景中,其中大多數編輯涉及較小的代理文件。低延遲也很重要,LucidLink 的界面對此進行了報告(另請參閱“使用 Apple 的網絡質量工具測試互聯網響應能力”,2022 年 4 月 22 日)。

儘管帶寬很重要,但任何使用 Dropbox 或類似服務的人無論如何都必須在本地存儲所有數據。 LucidLink 還依賴快速本地緩存來提高性能。內部驅動器默認為 5 GB,但您可以將其重新指向外部驅動器並將其增加到 10 TB。另外,如果您知道您將處理某些文件,您可以“固定”它們以將它們預加載到本地緩存中。即使是固定文件,LucidLink 也只上傳塊級別的差異數據,因此它不必為小的更改傳輸整個文件。

LucidLink 方法的一個缺點是您不能離線工作,即使使用固定文件。因為它在雲中有一個單一的真實來源,所以用戶需要保持互聯網連接才能使服務正常工作。本地緩存只是一個緩存,而不是文件的獨立副本。

LucidLink 的緩存方法還有另一個缺點。一些 Dropbox 用戶將“同步和共享”架構視為提供備份。這當然不是,因為任何具有適當權限的用戶都可能無意或惡意刪除文件,但在大多數情況下你最終會得到多個副本。 LucidLink 的本地緩存甚至不提供。

但是,LucidLink 的文件空間文件系統提供自動快照,就像 APFS 一樣。 (一些 LucidLink 計劃允許您創建自定義快照計劃。)快照會及時記錄文件在該時間點的確切狀態,以便輕鬆恢復已刪除、損壞或更改的文件。他們有效地使用空間,只記錄在兩個快照之間發生變化的塊級數據。更好的是,快照是只讀的,因此它們還可以防禦試圖破壞備份的勒索軟件攻擊。

儘管如此,LucidLink 還是鼓勵備份。 Niedzielski 表示,該公司認為 LucidLink 是一個“熱門的活躍協作空間”,並建議用戶為所有文件保留一份單獨的副本。這可能在本地 NAS 設備上或在雲中到服務,如 Backblaze B2芥末。他還提到,一些客戶依賴名為 CloudSoda 的數據管理服務來遷移和保護他們的 LucidLink 數據——我們談論的是嚴肅的企業級

毫無疑問,LucidLink 的目標是商業世界,無論是媒體公司、醫學影像集團還是遊戲開發團隊。甚至美國財政部也是 LucidLink 的客戶。如果您對每月支付 9.99 美元從 Dropbox、Google Drive 或 iCloud Drive 等設備購買 2TB 存儲空間猶豫不決,那麼 LucidLink 就太過分了。

但這並非不可能。 LucidLink 的 Basic Filespace 計劃 每月每 TB 收費 20 美元,最多可供 5 個用戶使用——額外用戶每人每月收費 10 美元。對於使用消費者級服務的一半存儲來說,這是每月兩倍的費用,這對於自由職業者或小型辦公室來說雖然昂貴但易於管理。 Advanced Filespace 計劃每月每 TB 收費 80 美元,同樣有五個用戶,但使用 IBM 存儲而不是 Wasabi 存儲以獲得更高的性能,提供自定義快照計劃,並提供單點登錄集成。

這是值得的請注意 LucidLink 實際上包含三個部分:在您的 Mac 上運行的 LucidLink 客戶端、管理元數據和快照的 LucidLink 服務以及對象存儲,它是任何 S3 或 Azure 兼容的存儲系統。這就解釋了自定義文件空間計劃,該計劃每月每 TB 僅 40 美元,但允許您提供自己的存儲空間。然而,其他計劃中的 Wasabi 和 IBM 存儲不附帶出口費用,大多數雲存儲提供商收取數據檢索費用。隨著大量數據訪問,出口費用可能會快速且不可預測地增加。

來自 從安全的角度來看,LucidLink 聲稱採用“零知識”方法。 LucidLink 客戶端提供端到端加密,只有用戶持有加密密鑰。此外,LucidLink 服務永遠不會看到您的數據,只會看到它的元數據,並且存儲提供商處的數據是靜態加密的。這似乎是經過深思熟慮的。

如果您只需要雲存儲和基本協作,就沒有理由從 Dropbox、Google Drive 或 iCloud Drive 等產品轉向 LucidLink。但是,如果您要突破這些服務的局限性,尤其是音頻或視頻作品,LucidLink 值得一看。

更一般地說,我在考慮流式在線存儲是否​​有更大的作用看起來和感覺都像本地存儲。如果我們的設備可以隨時在線訪問理論上無限量的存儲空間,那麼免費空間問題可能會成為過去。出於性能原因,緩存仍然有用,並且可能用於消除對持續連接的需求,但我們始終擁有所需的存儲空間……當然,我們願意為此付費。

By Maxwell Gaven

我在 IT 行業工作了 7 年。 觀察 IT 行業的不斷變化很有趣。 IT 是我的工作、愛好和生活。