Quando ero immerso nella ricerca di dettagli relativi alla migrazione di Dropbox all’estensione del provider di file di Apple (vedere”Il provider di file di Apple impone modifiche all’archiviazione nel cloud del Mac”, 10 marzo 2023), sono rimasto incuriosito nel vedere i commenti di persone nel mondo dei media, dove ho poca esperienza. Queste persone abitano una realtà digitale completamente diversa dagli utenti di tutti i giorni che si accontentano di 1 TB di memoria interna. Utente millifoo ha scritto:
Utilizziamo la sincronizzazione cloud con le nostre enormi unità esterne per consentire la collaborazione con l’editing audio/video. Il flusso di lavoro per molte case multimediali con persone che collaborano in più posizioni richiede che i file siano locali (velocità di modifica e riproduzione) e la sincronizzazione attraverso il cloud non solo lo facilita, ma esegue anche il backup di tutti i file in caso di catastrofe.
Altri hanno notato che i piani di Dropbox non forniscono spazio di archiviazione sufficiente. I piani Plus e Family includono 2 TB, il piano Professional è di 3 TB e il piano Team Standard include 5 TB. Solo il piano Advanced, a $ 24 per utente al mese, consente più spazio di archiviazione. Di quanto hanno bisogno questi media? KyleKoch ha notato:
Molti di noi richiedono che Dropbox si trovi su unità esterne quando il supporto è locale. La logistica per gestire le risorse video all’interno di una cartella Dropbox situata sull’unità del sistema operativo non ha alcun senso quando si dispone di oltre 50 TB di spazio di archiviazione nel cloud.
Utente solldavid concorda:
Abbiamo il piano avanzato e abbiamo fino a 200+ TB di risorse nel cloud Dropbox, tutte visibili e ricercabili in OSX Finder tramite”solo online”e ripristinabili con un download a larghezza di banda completa. È il miglior prodotto del settore imo. Sì, hai bisogno di un minimo di tre”utenti”.
Purtroppo, in tema con il thread, questo cambiamento da Apple e Dropbox minaccia il mio intero flusso di lavoro. Manteniamo 3-6 TB disponibili offline alla volta per mantenere sincronizzati file video, GFX e 3D di grandi dimensioni su workstation remote e lo facciamo con successo con SSD esterni dal 2012. È stata la pietra angolare del nostro flusso di lavoro, super affidabile , molto veloce e non so cosa avrei fatto senza di esso.
E l’utente jmeredi2 ha dichiarato:
Abbiamo un piano aziendale avanzato con 6 utenti per il quale paghiamo circa $ 1.700 all’anno. Questo è un piano illimitato, quindi ogni volta che raggiungiamo il nostro limite di archiviazione, ci danno più spazio. Sfortunatamente questo ovviamente non funzionerà più con l’aggiornamento di DropBox a meno che non riesca a trovare computer con dischi rigidi interni da 30-40 TB.
Riconosco che molte persone richiedono più di un terabyte o due del cloud storage, ma questi commenti mi hanno dato una sbirciatina nelle richieste dei media professionali. Condivido questo come contesto perché subito dopo la pubblicazione del mio articolo, ho sentito dal lettore di”TNGD”Steven Niedzielski come LucidLink, la società con cui lavora for, fornisce l’archiviazione cloud in streaming per gli utenti multimediali ad alte prestazioni. Ero curioso di saperne di più, anche se il sistema è eccessivo per la maggior parte di noi.
LucidLink ripensa il cloud storage
Lo sfondo del mio articolo precedente era l’estensione del provider di file di Apple , che offre un approccio coerente per servizi di”sincronizzazione e condivisione”come Box, Dropbox, Google Drive e Microsoft OneDrive.
Si basano tutti su un’architettura relativamente semplice, concettualmente parlando. Tutti i tuoi file sono archiviati online e sono accessibili tramite un’interfaccia web. Il software client per diversi sistemi operativi sincronizza l’archivio dati sui dispositivi, con contenuto completo (offline) o in forma segnaposto (solo online). Se devi lavorare su un file solo online, devi scaricarlo nella sua interezza prima di potervi accedere. Le modifiche, incluse aggiunte, eliminazioni e modifiche alla struttura della directory, vengono sincronizzate da un client prima al cloud e quindi a tutti gli altri client connessi. Alcune di queste modifiche possono basarsi su un approccio diff, in cui devono essere trasferiti solo i bit modificati di un particolare file; in altri casi, l’intero file deve essere restituito.
LucidLink non funziona in questo modo. Su Mac, si appoggia a MacFUSE per montare la Filespace cloud-native system come volume Mac standard. (LucidLink è disponibile anche per Windows e Linux.) Pensaci un attimo. Interagisci con quella che sembra una normale unità esterna o di rete nel Finder, ma ciò che c’è dietro sono i dati in un file system nativo del cloud. Pertanto, l’apertura di un file da LucidLink funziona allo stesso modo dell’apertura di un file dall’SSD interno di un Mac, anche se legge e scrive i dati in blocchi di 256 kilobyte, mentre la dimensione del blocco predefinita per l’archiviazione locale di macOS è di 4096 byte.
Ciò significa che LucidLink non ha bisogno di sincronizzare un file nella sua interezza prima di aprirlo, come nel caso di un file solo online in Dropbox, ad esempio. Con file di piccole dimensioni, l’approccio di sincronizzazione funziona abbastanza bene, ma con le dimensioni dei file utilizzati nel mondo dei media, il recupero di un file dal cloud richiede molto tempo, da qui la necessità di grandi unità esterne per archiviare le versioni locali.
Ho pensato a lungo che MacFUSE fosse un modo brillante per integrare file system insoliti nell’esperienza Mac, quindi ho capito cosa stava facendo LucidLink. Tuttavia, ho subito chiesto a Niedzielski di quanta larghezza di banda avesse bisogno LucidLink, aspettandomi che ammettesse che era necessaria una connessione in fibra da 1 Gbps e che tutti i professionisti del video seri avevano tale connettività.
Invece, ha detto che 50 Mbps in meno e 10 Mbps in più erano un minimo realistico per il lavoro non video. In un mondo video ideale, ha notato che vorresti abbinare la larghezza di banda del tuo flusso video per un comportamento senza interruzioni. Non penso al video in termini di larghezza di banda, ma sospetto che più ne hai, meglio è: quella connessione in fibra potrebbe essere una buona idea. Una revisione pratica ha affermato che LucidLink ha funzionato bene con 230 Mbps verso il basso, anche se apparentemente era in uno scenario di flusso di lavoro proxy, in cui la maggior parte delle modifiche riguardava file proxy più piccoli. Anche la bassa latenza è importante e l’interfaccia di LucidLink lo segnala (vedi anche”Utilizzare lo strumento NetworkQuality di Apple per testare la reattività di Internet”, 22 aprile 2022).
Anche se la larghezza di banda è importante, chiunque utilizzi Dropbox o un servizio simile dovrà comunque archiviare tutti quei dati localmente. LucidLink si basa anche su una cache locale veloce per migliorare le prestazioni. L’impostazione predefinita è 5 GB sull’unità interna, ma è possibile reindirizzarla a un’unità esterna e aumentarla a 10 TB. Inoltre, se sai che lavorerai su determinati file, puoi”bloccarli”per pre-caricarli nella cache locale. Anche con i file appuntati, LucidLink carica solo dati differenziati a livello di blocco, quindi non deve trasferire interi file per piccole modifiche.
Uno svantaggio dell’approccio di LucidLink è che non puoi lavorare offline, anche con file appuntati. Poiché ha un’unica fonte di verità nel cloud, gli utenti devono mantenere la connettività Internet affinché il servizio funzioni. La cache locale è proprio questo, una cache, non una copia indipendente di file.
C’è un altro lato negativo dell’approccio di memorizzazione nella cache di LucidLink. Alcuni utenti di Dropbox considerano l’architettura”sincronizzazione e condivisione”come un backup. Non lo è, ovviamente, dal momento che qualsiasi utente con le autorizzazioni appropriate può eliminare inavvertitamente o maliziosamente i file, ma nella maggior parte dei casi si finisce con l’avere più copie. La cache locale di LucidLink non fornisce nemmeno questo.
Tuttavia, il file system Filespace di LucidLink offre istantanee automatiche, proprio come APFS. (Alcuni piani LucidLink ti consentono di creare pianificazioni di istantanee personalizzate.) Le istantanee registrano lo stato esatto dei tuoi file in quel momento, semplificando il recupero di file eliminati, danneggiati o modificati. Usano lo spazio in modo efficiente, registrando solo i dati a livello di blocco che sono cambiati tra due istantanee. Ancora meglio, le istantanee sono di sola lettura, quindi forniscono anche una difesa contro gli attacchi ransomware che tentano di distruggere i backup.
Tuttavia, LucidLink incoraggia i backup. Niedzielski ha affermato che la società considera LucidLink uno”spazio di collaborazione attivo e attivo”e raccomanda agli utenti di conservare una copia separata di tutti i file. Potrebbe essere su un dispositivo NAS locale o nel cloud su un servizio come Backblaze B2 o Wasabi. Ha anche affermato che alcuni clienti si affidano a un servizio di gestione dei dati chiamato CloudSoda per migrare e proteggere i propri dati LucidLink: stiamo parlando di un serio livello aziendale funzionalità qui.
Non c’è dubbio che LucidLink sia rivolto al mondo degli affari, che si tratti di case dei media, gruppi di imaging medico o team di sviluppo di giochi. Anche il Dipartimento del Tesoro degli Stati Uniti è un cliente di LucidLink. E se esiti a pagare $ 9,99 al mese per 2 TB di spazio di archiviazione da Dropbox, Google Drive o iCloud Drive, LucidLink è eccessivo.
Ma non è fuori questione. Il piano Filespace di base di LucidLink costa $ 20 per terabyte al mese per un massimo di cinque utenti; gli utenti aggiuntivi costano $ 10 ciascuno al mese. È il doppio al mese per metà dello spazio di archiviazione con un servizio a livello di consumatore, che è costoso ma gestibile per un libero professionista o un piccolo ufficio. Il piano Advanced Filespace costa $ 80 per terabyte al mese, sempre con cinque utenti, ma utilizza lo storage IBM anziché lo storage Wasabi per prestazioni più elevate, fornisce pianificazioni di snapshot personalizzate e offre l’integrazione Single Sign-On.
Vale la pena notando che ci sono in realtà tre parti in LucidLink: il client LucidLink in esecuzione sul tuo Mac, il servizio LucidLink che gestisce i metadati e le istantanee e l’archiviazione degli oggetti, che è qualsiasi sistema di archiviazione compatibile con S3 o Azure. Questo spiega il piano Custom Filespace, che costa solo $ 40 per terabyte al mese ma ti consente di fornire il tuo spazio di archiviazione. Tuttavia, l’archiviazione Wasabi e IBM negli altri piani non include le tariffe di uscita, che la maggior parte dei fornitori di archiviazione cloud addebita per recuperare i dati. Con un elevato accesso ai dati, le tariffe in uscita potrebbero aumentare rapidamente e in modo imprevedibile.
Da un punto di vista della sicurezza, LucidLink sostiene un approccio a”conoscenza zero”. Il client LucidLink fornisce la crittografia end-to-end, con solo l’utente che detiene le chiavi di crittografia. Inoltre, il servizio LucidLink non vede mai i tuoi dati, solo i relativi metadati, e i dati presso il provider di archiviazione vengono crittografati a riposo. Sembra molto ben pensato.
Non c’è motivo di passare a LucidLink da Dropbox, Google Drive o iCloud Drive se tutto ciò di cui hai bisogno è l’archiviazione cloud e la collaborazione di base. Tuttavia, se stai spingendo contro i limiti di questi servizi, in particolare con il lavoro audio o video, vale la pena dare un’occhiata a LucidLink.
Più in generale, sto valutando se ci sia un ruolo più ampio per l’archiviazione online in streaming che sembra e si sente come un archivio locale. I problemi di spazio libero potrebbero diventare un ricordo del passato se i nostri dispositivi potessero accedere a quantità teoricamente illimitate di spazio di archiviazione online in qualsiasi momento. La memorizzazione nella cache sarebbe comunque utile per motivi di prestazioni e possibilmente per eliminare la necessità di una connettività costante, ma avremmo sempre tutto lo spazio di archiviazione di cui avevamo bisogno… ed eravamo disposti a pagare, ovviamente.