Auteur Topic: Omvang van Backup wijkt af van omvang bron  (gelezen 10181 keer)

Offline Zeist

  • Bedankjes
  • -Gegeven: 4
  • -Ontvangen: 4
  • Berichten: 71
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #15 Gepost op: 19 september 2014, 20:46:59 »
Ik map min gedeelde mappen op mij nas als een netwerkdrives en gebruik daarvoor network drive manager van suncross

Offline Robbedoes

  • MVP
  • *
  • Bedankjes
  • -Gegeven: 68
  • -Ontvangen: 88
  • Berichten: 613
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #16 Gepost op: 19 september 2014, 22:13:05 »
Overigens: iemand dan enig idee waar de adm. Waslijst wordt opgeslagen? Ben benieuwd. W

Volgens mij heb je hier nog geen antwoord op gekregen.
In mijn beleving staan die op je doel NAS, daar zitten extra mappen in voor de administratie.
Niet dat veel impact op het volume heeft.

Overigens controleert de taal wat er nog ge-update moet worden aan de hand van die data in @app met name de submap @metadata.
Als je durft dan kun je die map @app hernoemen en ook de 2 bestandjes in de root van de share en dan je taak opnieuw openen en doorlopen zodat er een nieuwe database aangemaakt wordt.
Risico is wel dat hij wel alles weer gaat updaten.


DS620slim [6x Samsung SSD 870 EVO (TLC) 4TB], 2x8GB Ram, Btrfs - DSM 7.2
met 1 pool SHR-1 (netto 18TB en 1 schijf fouttolerantie)
DS124 [1x Samsung SSD 870 QVO (QLC) 8TB] (back-up NAS) - DSM 7.2
DS214play [2x Seagate NAS HDD 4TB] (ST4000VN000) - DSM 6.2
DS115J      [1x Western Digital Red 4TB] (WD40EFRX) - DSM 6.2

Offline Zeist

  • Bedankjes
  • -Gegeven: 4
  • -Ontvangen: 4
  • Berichten: 71
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #17 Gepost op: 19 september 2014, 22:20:26 »
Het is niet eens zo zeer een kwestie van durf, maar een volledige backup van ruim 7TB is een langdurige bezigheid. Tijdens die tijd voel ik me niet zo zeker van mijn bronbestanden. Hoewel, gedurende alle jaren dat ik al Syno's heb (ooit begonnen met 2 207's) heb ik mijn backup nog nooit nodig gehad.

Maar ik zei al, dit is een breinbreker en inderdaad het antwoord heb ik nog niet

Offline Zeist

  • Bedankjes
  • -Gegeven: 4
  • -Ontvangen: 4
  • Berichten: 71
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #18 Gepost op: 20 september 2014, 09:14:25 »
Vanochtend in alle vroegte met behulp van Winmerge mijn bron en backupbestanden vergeleken. Goed nieuws! Winmerge vond geen verschillen. Daarmee is mijn vraagstelling overigens nog niet opgelost. Waarom melden mijn nassen verschil in omvang van bron- en doelvolume?

Offline Robbedoes

  • MVP
  • *
  • Bedankjes
  • -Gegeven: 68
  • -Ontvangen: 88
  • Berichten: 613
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #19 Gepost op: 20 september 2014, 09:36:12 »
Mooi dat je data in orde is.
Als je verder naar de 45,43 GB wilt zoeken kun je dat op ook via SSH op de onderliggende Linux mappen zoeken.

Misschien heb je ooit CloudStation of een ander pakkage eens op je bron NAS geprobeerd en is daar wat van achter gebleven.

DS620slim [6x Samsung SSD 870 EVO (TLC) 4TB], 2x8GB Ram, Btrfs - DSM 7.2
met 1 pool SHR-1 (netto 18TB en 1 schijf fouttolerantie)
DS124 [1x Samsung SSD 870 QVO (QLC) 8TB] (back-up NAS) - DSM 7.2
DS214play [2x Seagate NAS HDD 4TB] (ST4000VN000) - DSM 6.2
DS115J      [1x Western Digital Red 4TB] (WD40EFRX) - DSM 6.2

Offline Hofstede

  • MVP
  • *
  • Bedankjes
  • -Gegeven: 10
  • -Ontvangen: 1457
  • Berichten: 6.103
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #20 Gepost op: 20 september 2014, 09:38:05 »
Cloudstation kan hier ook de oorzaak van zijn.

Anders via SSH inloggen en dan naar de inhoud van volume1 kijken. Mogelijk staat er nog een verborgen map.

Offline Zeist

  • Bedankjes
  • -Gegeven: 4
  • -Ontvangen: 4
  • Berichten: 71
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #21 Gepost op: 20 september 2014, 09:48:44 »
IK heb op mijn Nassen nog nooit Packages gebruikt. Ik zou niet eens weten wat Cloudstation doet.

SSH ken ik ook niet, maar ik zal hier ter lering ende vermaak eens induiken. Kom ik iets tegen dan houd ik jullie op de hoogte

Offline Birdy

  • Global Moderator
  • MVP
  • *
  • Bedankjes
  • -Gegeven: 1399
  • -Ontvangen: 8046
  • Berichten: 44.176
  • Fijne feestdagen.......
    • Truebase
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #22 Gepost op: 20 september 2014, 10:39:19 »
Citaat
SSH ken ik ook niet, maar ik zal hier ter lering ende vermaak eens induiken.

WinSCP (GUI browser):
1 - Zorg ervoor dat SSH-Service aan staat: Configuratiescherm > Terminal.
2 - Download: http://winscp.net/eng/download.php
3 - Installeer WinSCP
4 - Start WinSCP klik op nieuw
5 - Bestandsprotocol: SCP
6 - Adres doelcomputer: <NAS-IP>
7 - Poortnummer: 22
8 - Gebruikersnaam: root
9 - Opslaan
10 - Inloggen (Password van je admin)

PuTTY (CLI, enige Linux kennis vereist):
1 - Zorg ervoor dat SSH-Service aan staat: Configuratiescherm > Terminal.
2 - Download putty.exe
http://www.chiark.greenend.org.uk/~sgtatham/putty/download.html
3 - Start putty.exe
4 - Geef je IP-adres van je NAS op
5 - Zorg dat SSH aangeklikt is
6 - Save....geef een naam in "Saved Sessions"
7 - Klik op Open
8 - Je krijgt Putty scherm met "login as:"
9 - Geef in: root <enter>
10 - password: <Admin password> <enter> (PS: je ziet de cursor niet verplaatsen).


CS406      DSM 2.0-0731    DS508      DSM 4.0-2265      DS411+II  DSM 6.2.4-25556-8   DS115J    DSM 7.1.1-42962-5   DS918+    DSM 6.2.4-25556-8
DS107+     DSM 3.1-1639    DS411slim  DSM 6.2.4-25556   DS213J    DSM 6.2.4-25556-7   DS1515+   DSM 6.2.4-25556-8   DS220+    DSM 7.2.2-72806-2
DS107+     DSM 3.1-1639    DS111      DSM 5.2-5967-9    DS413J    DSM 6.2.3-25426-2   DS716+II  DSM 7.2.2-72806-2   RT2600ac  SRM 1.3.1-9346-12
BeeDrive   1TB             BeeServer  BSM 1.2-65567                                                                 MR2200ac  SRM 1.3.1-9346-12

Offline Zeist

  • Bedankjes
  • -Gegeven: 4
  • -Ontvangen: 4
  • Berichten: 71
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #23 Gepost op: 20 september 2014, 10:46:52 »
Kijk, dit vind ik van Birdy nou een prima reactie. Hier kan ik iets van leren. Hulde. Zodra ik meer weet horen jullie weer van mij.

Offline Birdy

  • Global Moderator
  • MVP
  • *
  • Bedankjes
  • -Gegeven: 1399
  • -Ontvangen: 8046
  • Berichten: 44.176
  • Fijne feestdagen.......
    • Truebase
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #24 Gepost op: 20 september 2014, 13:56:32 »
Ik heb natuurlijk niet dezelfde configuratie: 2 gelijke NASsen dus ik heb een test gedaan op map nivo.

Kwam tot de volgende ontdekking:

Om te beginnen, op de DOEL NAS wordt ALLEEN op volume1 (dus niet ergens in de root) extra data weggeschreven:

8       DS111_1/@app/@metadata/1
12      DS111_1/@app/@metadata
36      DS111_1/@app <<<<<<<<<<<<<<<Totaal in kilobytes dus, te verwaarlozen.

Als ik kijk in de mappen zelf:

BRON te backuppen Map DS111: 1427704 kilobytes
DOEL backup Map DS411:           1360672 kilobytes

Hier zie ik dus ook dat de Backup Map kleiner is n.l. 67032 kilobytes = 4.92639 %

Echter, als ik kijk in de backup map dan zie ik geen verschil in de file groottes waarvan de backup is gemaakt.
Die conclusie had jij ook.

Waarom dan dat verschil ?
Misschien dat de verklaring te zoeken is in het feit dat de backup data efficiënter weg wordt geschreven, dus de blokken waarin geschreven worden, worden volledig benut t.o.v. de BRON ?

Om dat te bewijzen vergt meer onderzoek.

Het belangrijkste is dat je backup data overeen komt met de BRON.


CS406      DSM 2.0-0731    DS508      DSM 4.0-2265      DS411+II  DSM 6.2.4-25556-8   DS115J    DSM 7.1.1-42962-5   DS918+    DSM 6.2.4-25556-8
DS107+     DSM 3.1-1639    DS411slim  DSM 6.2.4-25556   DS213J    DSM 6.2.4-25556-7   DS1515+   DSM 6.2.4-25556-8   DS220+    DSM 7.2.2-72806-2
DS107+     DSM 3.1-1639    DS111      DSM 5.2-5967-9    DS413J    DSM 6.2.3-25426-2   DS716+II  DSM 7.2.2-72806-2   RT2600ac  SRM 1.3.1-9346-12
BeeDrive   1TB             BeeServer  BSM 1.2-65567                                                                 MR2200ac  SRM 1.3.1-9346-12

Offline Zeist

  • Bedankjes
  • -Gegeven: 4
  • -Ontvangen: 4
  • Berichten: 71
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #25 Gepost op: 20 september 2014, 14:16:27 »
Birdy, dank voor je extra onderzoek. Mijn backup vertrouw ik volledig. Geen zorg daaromtrent. Ik vroeg me alleen af waar het verschil in omvang vandaan zou kunnen komen. Je gedachte dat de backup efficiënter wordt weggeschreven dan op de bronschijf vind ik een interessante gedachtengang. Het zou i.d.d. Best kunnen dat de blokken op de harddisk beter worden benut. Ik heb te weinig verstand van Linux en hun diskgebruik. Onder Windows ben ik geneigd te zeggen dat de kans groot is dat dit de oorzaak is. Wat nu dan weer bij me opkomt dat ik onder Linux nog nooit een defragmenteringsoptie heb gezien. Onder Windows kom je dat wel vaak tegen.

Offline Birdy

  • Global Moderator
  • MVP
  • *
  • Bedankjes
  • -Gegeven: 1399
  • -Ontvangen: 8046
  • Berichten: 44.176
  • Fijne feestdagen.......
    • Truebase
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #26 Gepost op: 20 september 2014, 14:36:44 »
Heb me nooit bezig gehouden met het hoe Linux opslag werkt echter, wel dit gevonden:

Citaat
Linux’s ext2, ext3, and ext4 file systems – ext4 being the file system used by Ubuntu and most other current Linux distributions – allocates files in a more intelligent way.
Instead of placing multiple files near each other on the hard disk, Linux file systems scatter different files all over the disk, leaving a large amount of free space between them.
When a file is edited and needs to grow, there’s usually plenty of free space for the file to grow into.
If fragmentation does occur, the file system will attempt to move the files around to reduce fragmentation in normal use, without the need for a defragmentation utility.
BRON

Wat mij opvalt is wat ik in bold heb aangegeven.
Misschien dat "leaving a large amount of free space between them" een standaard optie is (verwacht ik) die tijdens de backup kan worden uitgezet.
Dat zou een verklaring zijn maar, ook daar, zou ik mij verder in moeten verdiepen  ;D (Blijft een hobby hè ?)


CS406      DSM 2.0-0731    DS508      DSM 4.0-2265      DS411+II  DSM 6.2.4-25556-8   DS115J    DSM 7.1.1-42962-5   DS918+    DSM 6.2.4-25556-8
DS107+     DSM 3.1-1639    DS411slim  DSM 6.2.4-25556   DS213J    DSM 6.2.4-25556-7   DS1515+   DSM 6.2.4-25556-8   DS220+    DSM 7.2.2-72806-2
DS107+     DSM 3.1-1639    DS111      DSM 5.2-5967-9    DS413J    DSM 6.2.3-25426-2   DS716+II  DSM 7.2.2-72806-2   RT2600ac  SRM 1.3.1-9346-12
BeeDrive   1TB             BeeServer  BSM 1.2-65567                                                                 MR2200ac  SRM 1.3.1-9346-12

Offline Zeist

  • Bedankjes
  • -Gegeven: 4
  • -Ontvangen: 4
  • Berichten: 71
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #27 Gepost op: 20 september 2014, 14:46:41 »
Idd hobby en nog verslavend ook

Offline Birdy

  • Global Moderator
  • MVP
  • *
  • Bedankjes
  • -Gegeven: 1399
  • -Ontvangen: 8046
  • Berichten: 44.176
  • Fijne feestdagen.......
    • Truebase
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #28 Gepost op: 20 september 2014, 14:47:17 »
Yep  :lol:


CS406      DSM 2.0-0731    DS508      DSM 4.0-2265      DS411+II  DSM 6.2.4-25556-8   DS115J    DSM 7.1.1-42962-5   DS918+    DSM 6.2.4-25556-8
DS107+     DSM 3.1-1639    DS411slim  DSM 6.2.4-25556   DS213J    DSM 6.2.4-25556-7   DS1515+   DSM 6.2.4-25556-8   DS220+    DSM 7.2.2-72806-2
DS107+     DSM 3.1-1639    DS111      DSM 5.2-5967-9    DS413J    DSM 6.2.3-25426-2   DS716+II  DSM 7.2.2-72806-2   RT2600ac  SRM 1.3.1-9346-12
BeeDrive   1TB             BeeServer  BSM 1.2-65567                                                                 MR2200ac  SRM 1.3.1-9346-12

Ben(V)

  • Gast
Re: Omvang van Backup wijkt af van omvang bron
« Reactie #29 Gepost op: 20 september 2014, 16:39:14 »
Citaat
Linux file systems scatter different files all over the disk, leaving a large amount of free space between them.
Dit is uiteraard correct maar dit zie je niet aan de buitenkant van het fielsystem. Die ruimte die hij openlaat wordt gewoon als vrij ruimte gerapporteerd.

Wat er waarschijnlijk aan de hand is, is dat de housekeeping van de files in de backupset veel efficienter door het filesystem gedaan wordt dan de gegroeide situatie van het orgineel. Daar zijn veel blokken "verspilt" omdat file's groter of kleiner werden, directories extend moesten worden etc.
Bij een backup is de afmeting van met name een directory file al bekend dus die worden niet meer extend en ook de bestanden zelf niet meer.

Als je het orgineel zou deleten en de backup terug zou zetten zou je hetzelfde effect krijgen.
Sterker nog als je alles wat in die backup gewoon naar een andere plek op dezelfde schijf zou copieren wordt hij ook kleiner.

Overigens ben je die winst zo weer kwijt als binnen die directories weer gaat werken en daar weer files bijplaatst, want dan wordt die dat moment zeer efficiente "houskeeping" weer verstoort.


 

help: onverklaarbaar verschil in omvang bestanden??

Gestart door IkeBoard Time Backup

Reacties: 4
Gelezen: 3011
Laatste bericht 05 januari 2014, 20:27:41
door Ike
Max. omvang volume

Gestart door JavaanBoard Synology DSM algemeen

Reacties: 7
Gelezen: 1200
Laatste bericht 08 juli 2019, 16:27:20
door Birdy
Mengen van schijven met verschillende omvang?

Gestart door MusicjohnBoard NAS hardware vragen

Reacties: 11
Gelezen: 505
Laatste bericht 01 mei 2024, 08:47:17
door Hofstede
Omvang Volume na upgrade

Gestart door Marcello73Board NAS hardware vragen

Reacties: 4
Gelezen: 572
Laatste bericht 19 augustus 2020, 10:32:22
door Marcello73
Active backup for Business omvang Incrementele backup

Gestart door FlipjeSRBoard Data replicator & overige backupsoftware

Reacties: 23
Gelezen: 5945
Laatste bericht 03 oktober 2022, 19:58:16
door Sylvester