Názory k článku Privátní cloud pro malou firmu, školu nebo úřad: zálohování s Rclone a Kopia
-
Ano, takže články nebudou prakticky skoro o ničem, protože všechno je ve své podstatě od nějaké chvíle trochu bastl ... Osobně mě to třeba zajímá -- ne každá drobná firma si může dovolit vyhradit půl mega na zbrusu nové servery, racky, switche etc. a přistavět si za milion klimatizovanou serverovnu. Vlastně bych řekl že u malých firem mimo IT Vám žádný majitel neřekne "Hmm... to je dobrý nápad, jdeme do toho".
Prostě za mě normální příběh jak to je řesené v praxi při omezených zdrojích. A i kdyby se to ve finále ukázalo jako blbá cesta, i informace o blbé cestě jsou informace přínosné. -
No jo, ale nemusíme si hrát na Cimrmana a jeho slepé uličky. Když už něco prezentuji, tak by to mělo mít nějakou úroveň. Zatímco tady je snad všechno špatně. Server na desktopu užívaném jako desktop, to se rozebíralo minule. Tady pán řeší zálohování. Rozebírá tady restic a kopia a záměrně si vybere tu méně zaběhlou možnost. Navíc to nasadí s rclone, přitom kopia má jasně napsané: "Rclone support is experimental".
Jako WTF? Takovýhle hraní ať si zkouší doma a rozhodně ať se tím nechlubí. -
Víte, Vy jenom nechápete, co znamená, že něco nefunguje. To, že Vám to aktuálně jede, neznamená, že to funguje. Součástí funkcionality je i schopnost odolat problémovým situacím. To je součást životního cyklu řešení.
Tohle je bastl tak na homelab, dávat to někomu do malé firmy nebo dokonce na úřad je vyloženě nezodpovědnost. -
-
Co jsme si mohli vyzkoušet, že nejde HW, net ani 5G? Jakože chvíli vypadla c Praze elektřina neznamená, že musí nutně jet dva virtuální VM...
Řešil jsem i scénář, že to bylo všechno dělané na notebooku. Pán měl adaptér do autozapalovače jak pro notebook, tak pro modem místního ISP, takže v případě výpadku se nastartovalo auto jako motorgenerátor. Ten ISP měl trasu se zálohou baterie na 24hod. Levné a účinné. -
BuldrZlatý podporovatelElektrocentrála s dálkovým startérem skrze časové relé, které po uplynutí nastaveného času nastartuje elektrocentrálu. Mezitím se přepínače sítí (ATYS) dávno přehodili na záložní zdroje (IT, PO ... jednou 24/7/365 čili těch se překlenutí netýká) a poté již jen čeká, až se objeví napětí v síti a celé se to přepne zpět do standardního stavu.
Řekněme Makita, tak se startérem bude za 15 tisíc, dalších 6-8 tisíc bude za rozvaděč a nějaká ta zlatka padne i za UPS.
-
Ehm ...
" URL http://server:1616/."
To jako fakt? Tohle nekdo napise SEM? Vazne? A muzem pokracovat ...
C:\kopia\kopia.exe
Vazne? Jo aha, ja zapomel, pan je odbornik ...jak pres licence, tak pres funcnost widli, a proto nema ani paru, kam co ve widlich patri ... kdyz uz. Natoz aby vedel ... PROC.
A jedeme dal ...
server start 0.0.0.0 ....
Zjevne je to vazne hypermoderni software ... a predevsim je samozrejme doslova genitalni napad spoustet si jen tak bez dalsiho nejaky verejne dostupny servisy ...
Apropos, vis co je to deduplikace? Zjevne ne. Protoze kdybys tusil, tak bys vedel, ze deduplikace je velice narocnej ukon, jak na ramku, tak na IO, tak na CPU.
Pokud ta vec dela vazne toto "teré dokáží objevit identické bloky dat" tak po dobu kdy to bezi se na tom stroji co u nej ma sedet ten uzivatel ... nic delat neda. Rozhodne ne na stroji kde neni raid s 10k+ IOps.
Proto ze to i na servergrade HW dela mimo provozni hodiny, a pokud nekdo chce/potrebuje delat online deduplikaci tak si musi poradne priplatit.
A samo jedem dal ....
"Klíč k dešifrování má k dispozici jen uživatel"
Na tom jednom disku kterej chcipne predpokladam ...
pricemz JAKYKOLI data na JAKYMKOLI cmoudu === verejny data. Neexistuje zadnej zpusob jak bys ty data smazal, coz lze snadno a vesele dohledat (desitky tisic verejnych pripadu kdy se lidem i po letech zjevily davno smazany soubory) a je jen otazkou casu, kdy bude libovolna sifra nebo jeji implementace prolomena.
Probuh, hlavne to nikdo nikdy nikde ani doma natoz kdekoli jinde nedelejtte tahle.
-
Zkuste být více konkrétní, co vám vadí na URL " URL http://server:1616/."?
Máme firewall, VLANy a další anebojíme se je použít, víte.. Navíc ta služba má autorizační mechanismus a je to OSS , takže auditovatelnost etc...Opět, co vám vadí na
"Jo aha, ja zapomel, pan je odbornik ...jak pres licence, tak pres funcnost widli", no tak jistě, to jste se jen vyzvracel ale jinak nic.A jedeme dal ... Zjevne je to vazne hypermoderni software ...
a pointa? Točit se okolo toho že pouštím službu na 0.0.0.0 jste psal už v prvním bodě a nikde netvrdím, že mám hostitele na veřejné IP adrese, nez forewallu atd.. Máte to fakt za potřebí něco psát bez rozmyslu?K "deduplikace je velice narocnej ukon, jak na ramku, tak na IO, tak na CPU. Pokud ta vec dela vazne toto "teré dokáží objevit identické bloky dat" tak po dobu kdy to bezi se na tom stroji co u nej ma sedet ten uzivatel ... nic delat neda. Rozhodne ne na stroji kde neni raid s 10k+ IOps":
No vidíte a mě to zvládne i na stroji za pár korun a rozhodně se na něm i během zálohy dělat dá. Jen teda pro pořádek, zálohovací okno mám v noci a jede mi cca 2 hodiny při zálohování na OneDrive, které má z proncipu docela slušné latence.Přes den pak běží záloha databáze MS SQL a taky bez viditelného dopadu na uživatele.K "Klíč k dešifrování má k dispozici jen uživatel; Na tom jednom disku kterej chcipne predpokladam": Ironicky se mi chce napsat, že vylepené na papírku na moniitoru, ale ještě by jste to vzal vážně.
K: Je jen otazkou casu, kdy bude libovolna sifra nebo jeji implementace prolomena.." No tak vzhledem k množství denně přepsaných dat by někomu muselo stát orpavdu za to skladovata PB dat několik let, a trávit stovky hodin jejich kompletací, aby si zjistil jaký jsme měl stav disku přex X lety..To ej asi nesmysl největší, co jste napsal.
-
TLS je zcela zbytecna vec, proc by to nekdo pouzival? ... Specielne po nejaky blby siti ... jooo vlany ... ty sifrujou vsechno co najdou ...
Ja vim, je to jen 31 let ...kdo by to vedel zejo :: takova divna adresa, kdo by to dneska znal. A nebo zeby ,... to ten hypernoderni sw ... neumi?
"bez viditelného dopadu na uživatele."
Takze to nic nedela, ok, dik za potvrzeni ...Apropos, mam tu takovy policko ... nic moc, je v tom 12x SSD (server grade SSD zduraznuju, zadny customer ktery zvladne bechmark kdyz je prazndny a pak je pomalejsi nez sindely). Deduplikaci na tom spoustim 1x tydne o vikendu, kdybych to pustil pres den, tak to fungovat neprestane, ale lidi si toho zarucene vsimnou. Jup, stara se o to strojecek kterej ma k dispozici 64GB ram, to aby se do ni ty hashe pokud mozno vsechny vesly. Pak je vyklopi na disk a tam si lezej az do dalsiho cyklu.
Vzhledem m tomu jaky EB nesmyslu se skladujou kvuli AI ...a jak sem psal, a tys nezvladnul precist, dukazy jsou zcela verejne dostupne.
Mimochodem, na papiru by ten klic v bezpeci byl ... coz opet jen ukazuje na tvoji odbornost ....
-
C:\kopia\kopia.exe - nahodou, strcit dulezity software primo do C: je vyborny napad. Z techto duvodu:
1, je to kratka cesta, takze ve skriptu nejsou dlouhe nesmysly
2, neni to v program files, takze to nekoliduje s nejakyma windowsima nesmyslnyma knihovnama, program fil~, a podobnyma kravinama co mrkvosoft navymyslel za poslednich 30 let
3, neni to v podivnych cestach windows\profiles, documents and settings\user, users\user, ktere mrkvosoft furt meni,
4, dnadno se to hleda.
5, pro takove to bezne domaci zvykani je to naprosto validni zpusob.Cely tvuj prispevek je neskutecne nekonstruktivni, vicemene jen pises ze neco je spatne aniz bys napsal proc.
-
Jiste, protoze ocekavam, ze obcas nekdo ma mozek a vi jak veci (ne) fungujou.
Cpat jakoukoli aplikaci mimo program files je pohroma, protoze na tom folderu jsou prava pro zapis pro kazdyho hej nebo pockej a protoze tam zaroven jsou prava na spusteni, muze si tam tu binarku nebo cokoli, kdokoli ci cokoli prepsat a spustit ... MOZEK ....
A cpou se tam typicky megabastly, ktery pisou podpodobni yntelygenty ... protoze tam navic jeste zapisujou data, zejo, coz pro programfiles bez dalsiho nejde. (jako priklad treba stat ... a reportovani celnich prohlaseni ze ... jo zazrak, uz se to asi tak rok nebo dva, da i pres web)
Kam ti mam poslat fakturu za odborny skoleni? Je to exatkne totez jako cpat suidnuty binarky do /home/...
-
Hele ja nemuzu za to ze windows jsou takovy bastl a mrkvosoft se 5x rozhodnul veci migrovat tam a zpatky, ale znam hromadu softwaru ktery proste do Program Files nebo users_cosi nedam protoze to prinese hromadu problemu. Jo, je mozne ze ten software si nese zvyky a nanosy z dob minulych, ale zmeny aby to fungovalo podle predstav nejnovejsi verze windows nikdo platit nebude, to radsi daji penize do nove vlastnosti softwaru.
Taky by se mi libilo mit vsechno pod windowsy jasne a funkcni, ale svet je jiny, takze to konci tim ze to strcim na C: a je klid.
Mozna by stalo za to podivat se jaky vsemozny software se pouziva i jinde nez u tebe doma/v kanclu. Treba takove laboratore, tovarny, dilny, to by ses divil jake obskurnosti vsude mozne porad musi bezet.
18. 5. 2026, 16:30 editováno autorem komentáře
-
> Pokud ta vec dela vazne toto "teré dokáží objevit identické bloky dat" tak po dobu kdy to bezi se na tom stroji co u nej ma sedet ten uzivatel ... nic delat neda. Rozhodne ne na stroji kde neni raid s 10k+ IOps.
Běžný dokument:
# time md5sum ~/Downloads/Assembly_Manual_Tap.pdf
238596551eb8262b56743c153e07fd75
________________________________________________________
Executed in 12.23 millis fish external
usr time 9.71 millis 889.00 micros 8.82 millis
sys time 1.23 millis 125.00 micros 1.10 millis# time sha256sum ~/Downloads/Assembly_Manual_Tap.pdf
903570b2cd2b10e452bd01296ace5197333693b50b64094d6def5d476c3b2939
________________________________________________________
Executed in 7.34 millis fish external
usr time 5.90 millis 694.00 micros 5.21 millis
sys time 1.11 millis 80.00 micros 1.03 millisPak vezmete metadata pro ostatní soubory (které máte z předchozího a současného běhu) a najdete stejný blok (triviální lookup). Osobně kopii a (dřív) borg backup pouštím denodeně a nevšiml jsem si že bych nemohl pracovat.
Jinak všeobecně nevím proč by zrovna dedup měl být nárocný na ramku. V nejtriviálnějším případě bych to implementoval tak že načtu chunk (který může být relativně malý, třeba 4MB) a spočítám nad tím SHA/MD5. Pak ho porovnám s metadaty jestli takový blok už náhodou nemám (což je poměrně dost rychlá operace když to mám naimplementované dobře).
Co se týče náročnosti CPU, tak kdybych třeba použil SHA https://en.wikipedia.org/wiki/SHA_instruction_set .
Mno a ve finále pokud tomu všemu nastavíte ekvivalent nice ve Windows, můžete vesele pracovat dál.
Jediné kde by mohl být reálný problém jsou metalické disky (seeky sem a tam), ale kdo dnes má na normálním počítači primárně metalické disky? -
Pri online deduplikacii v ramci fs je velkost chunku = velkost bloku = velkost memory page, t.j. za normalnych okolnosti 4 kB. Blokov v tejto velkosti sa na bezny filesystem dostane pomerne velke mnozstvo, na filesystem na NAS este vacsie mnozstvo. Ku kazdemu takemuto bloku treba checksum, treba ich drzat pocas celeho casu ako je fs namountovany a musia byt nejako inteligentne organizovane (aby som rychlo nasiel ked prehladavam, ale tiez aby som rychlo vlozil nove, ked sa vyskytnu jedinecne).
Pri offline deduplikacii vstupuju do hry len bloky tej casti fs, ktorej sa deduplikacia tyka, a len pocas deduplikacie. Tu sa da usetrit aj na tom, ze pokial mam rozlicne subvolumes sifrovane rozlicnymi klucmi, tak zhodu medzi nimi pravdepodobne nenajdem a teda ani nehladam (t.j. deduplikujem ich samostatne).
-
Pokud vím bavíme se tu o zálohách. Velikost chunku při záloze může být něco mezi 1b-1<nekonecno>b, protože zálohovací software čte data víc high-level způsobem než po blokách.
Mimochodem mám takový pocit že ani FS dedup neběží tak jak říkáte na všech FS bez výjimky, protože jestli např. chápu tohle dobře, https://openzfs.github.io/openzfs-docs/man/v2.0/8/zfsconcepts.8.html#Deduplication tak "duplicate data blocks are removed synchronously" znamená při write path. A tak nějak bych vydedukoval že DDT bude obsahovat checksumy definovaných bloků pomocí recordsize
-
> server start 0.0.0.0 ....
Zjevne je to vazne hypermoderni software ... a predevsim je samozrejme doslova genitalni napad spoustet si jen tak bez dalsiho nejaky verejne dostupny servisy ...Nežijeme v 90tkách, existují firewally... 127 je jen další "vrstva" zabezpečení ale prakticky stejně všechno zaříznete na firewallu.
-
C:\kopia\kopia.exe
Vazne? Jo aha, ja zapomel, pan je odbornik ...jak pres licence, tak pres funcnost widli, a proto nema ani paru, kam co ve widlich patri ... kdyz uz. Natoz aby vedel ... PROC.To by mě zajímalo PROČ ... jako že Vážně se nechám poučit, já jsem Widle neviděl 20 let. Jestli třeba už zavedli že Program Files má nějaký speciální význam nebo tak ...
-
Pokud nemáte Ceph, tak i MinIO má Erasure Coding jako klíčovou funkci. Kopia se pak připojí k MinIO přes S3 protokol
https://www.root.cz/clanky/projekt-minio-jedna-z-nejuzitecnejsich-aplikaci-naprogramovanych-v-go/17. 5. 2026, 11:33 editováno autorem komentáře
ČLÁNKY DO MAILU