Chapters ▾ 2nd Edition

10.4 Git Internals - Paklêers (Packfiles)

Paklêers (Packfiles)

As jy al die instruksies in die voorbeeld van die vorige afdeling gevolg het, behoort jy nou 'n toets-Git-bewaarplek (repository) te hê met 11 objekte — vier blobs, drie bome (trees), drie vasleggings (commits), en een merker (tag):

$ find .git/objects -type f
.git/objects/01/55eb4229851634a0f03eb265b69f5a2d56f341 # tree 2
.git/objects/1a/410efbd13591db07496601ebc7a059dd55cfe9 # commit 3
.git/objects/1f/7a7a472abf3dd9643fd615f6da379c4acb3e3a # test.txt v2
.git/objects/3c/4e9cd789d88d8d89c1073707c3585e41b0e614 # tree 3
.git/objects/83/baae61804e65cc73a7201a7252750c76066a30 # test.txt v1
.git/objects/95/85191f37f7b0fb9444f35a9bf50de191beadc2 # tag
.git/objects/ca/c0cab538b970a37ea1e769cbbde608743bc96d # commit 2
.git/objects/d6/70460b4b4aece5915caf5c68d12f560a9fe3e4 # 'test content'
.git/objects/d8/329fc1cc938780ffdd9f94e0d364e0ea74f579 # tree 1
.git/objects/fa/49b077972391ad58037050f2a75f74e3671e92 # new.txt
.git/objects/fd/f4fc3344e67ab068f836878b6c4951e3b15f3d # commit 1

Git pers die inhoud van hierdie lêers saam met zlib, en jy stoor nie baie nie, so al hierdie lêers neem gesamentlik net 925 grepe (bytes) in beslag. Nou sal jy 'n bietjie meer lywige inhoud by die bewaarplek voeg om 'n interessante kenmerk van Git te demonstreer. Om dit te demonstreer, sal ons die repo.rb lêer van die Grit-biblioteek byvoeg — dit is 'n bronkodelêer van ongeveer 22K:

$ curl https://raw.githubusercontent.com/mojombo/grit/master/lib/grit/repo.rb > repo.rb
$ git checkout master
$ git add repo.rb
$ git commit -m 'Create repo.rb'
[master 484a592] Create repo.rb
 3 files changed, 709 insertions(+), 2 deletions(-)
 delete mode 100644 bak/test.txt
 create mode 100644 repo.rb
 rewrite test.txt (100%)

As jy na die resulterende boom kyk, kan jy die SHA-1-waarde sien wat vir jou nuwe repo.rb blob-objek bereken is:

$ git cat-file -p master^{tree}
100644 blob fa49b077972391ad58037050f2a75f74e3671e92      new.txt
100644 blob 033b4468fa6b2a9547a70d88d1bbe8bf3f9ed0d5      repo.rb
100644 blob e3f094f522629ae358806b17daf78246c27c007b      test.txt

Jy kan dan git cat-file gebruik om te sien hoe groot daardie objek is:

$ git cat-file -s 033b4468fa6b2a9547a70d88d1bbe8bf3f9ed0d5
22044

Op hierdie punt, verander daardie lêer 'n bietjie, en kyk wat gebeur:

$ echo '# testing' >> repo.rb
$ git commit -am 'Modify repo.rb a bit'
[master 2431da6] Modify repo.rb a bit
 1 file changed, 1 insertion(+)

Gaan die boom na wat deur daardie laaste vaslegging geskep is, en jy sal iets interessant sien:

$ git cat-file -p master^{tree}
100644 blob fa49b077972391ad58037050f2a75f74e3671e92      new.txt
100644 blob b042a60ef7dff760008df33cee372b945b6e884e      repo.rb
100644 blob e3f094f522629ae358806b17daf78246c27c007b      test.txt

Die blob is nou 'n ander blob, wat beteken dat hoewel jy slegs 'n enkele reël aan die einde van 'n lêer met 400 reëls bygevoeg het, Git daardie nuwe inhoud as 'n heeltemal nuwe objek gestoor het:

$ git cat-file -s b042a60ef7dff760008df33cee372b945b6e884e
22054

Jy het nou twee byna identiese 22K-objekte op jou skyf (elk saamgepers tot ongeveer 7K). Sou dit nie lekker wees as Git een van hulle volledig kon stoor nie, maar dan die tweede objek slegs as die verskil (delta) tussen hom en die eerste een?

Dit blyk dat dit wel kan. Die aanvanklike formaat waarin Git objekte op die skyf stoor, word 'n “los” (loose) objekformaat genoem. Soms pak Git egter verskeie van hierdie objekte in 'n enkele binêre lêer genaamd 'n “paklêer” (packfile) saam om spasie te bespaar en meer doeltreffend te wees. Git doen dit as jy te veel los objekte rondlê, as jy die git gc opdrag handmatig uitvoer, of as jy na 'n afgeleë bediener (remote server) push. Om te sien wat gebeur, kan jy Git handmatig vra om die objekte saam te pak deur die git gc opdrag uit te voer:

$ git gc
Counting objects: 18, done.
Delta compression using up to 8 threads.
Compressing objects: 100% (14/14), done.
Writing objects: 100% (18/18), done.
Total 18 (delta 3), reused 0 (delta 0)

As jy in jou objects-gids kyk, sal jy sien dat die meeste van jou objekte weg is, en 'n nuwe paar lêers verskyn het:

$ find .git/objects -type f
.git/objects/bd/9dbf5aae1a3862dd1526723246b20206e5fc37
.git/objects/d6/70460b4b4aece5915caf5c68d12f560a9fe3e4
.git/objects/info/packs
.git/objects/pack/pack-978e03944f5c581011e6998cd0e9e30000905586.idx
.git/objects/pack/pack-978e03944f5c581011e6998cd0e9e30000905586.pack

Die objekte wat oorbly, is die blobs waarna geen vaslegging wys nie — in hierdie geval die “what is up, doc?” voorbeeld en die “test content” voorbeeld-blobs wat jy vroeër geskep het. Omdat jy hulle nooit by enige vasleggings gevoeg het nie, word hulle as hangend (dangling) beskou en word hulle nie in jou nuwe paklêer saamgepak nie.

Die ander lêers is jou nuwe paklêer en 'n indeks (index). Die paklêer is 'n enkele lêer wat die inhoud van al die objekte bevat wat van jou lêerstelsel verwyder is. Die indeks is 'n lêer wat relatiewe beginpunte (offsets) binne daardie paklêer bevat sodat jy vinnig na 'n spesifieke objek kan soek. Wat gaaf is, is dat hoewel die objekte op die skyf voordat jy die gc-opdrag uitgevoer het gesamentlik ongeveer 15K groot was, die nuwe paklêer slegs 7K is. Jy het jou skyfgebruik in die helfte gesny deur jou objekte op te pak.

Hoe doen Git dit? Wanneer Git objekte oppak, soek dit na lêers wat soortgelyke name en groottes het, en stoor slegs die delta’s van een weergawe van die lêer na die volgende. Jy kan in die paklêer kyk en sien wat Git gedoen het om spasie te bespaar. Die git verify-pack loodgietersopdrag (plumbing command) laat jou toe om te sien wat saamgepak is:

$ git verify-pack -v .git/objects/pack/pack-978e03944f5c581011e6998cd0e9e30000905586.idx
2431da676938450a4d72e260db3bf7b0f587bbc1 commit 223 155 12
69bcdaff5328278ab1c0812ce0e07fa7d26a96d7 commit 214 152 167
80d02664cb23ed55b226516648c7ad5d0a3deb90 commit 214 145 319
43168a18b7613d1281e5560855a83eb8fde3d687 commit 213 146 464
092917823486a802e94d727c820a9024e14a1fc2 commit 214 146 610
702470739ce72005e2edff522fde85d52a65df9b commit 165 118 756
d368d0ac0678cbe6cce505be58126d3526706e54 tag    130 122 874
fe879577cb8cffcdf25441725141e310dd7d239b tree   136 136 996
d8329fc1cc938780ffdd9f94e0d364e0ea74f579 tree   36 46 1132
deef2e1b793907545e50a2ea2ddb5ba6c58c4506 tree   136 136 1178
d982c7cb2c2a972ee391a85da481fc1f9127a01d tree   6 17 1314 1 \
  deef2e1b793907545e50a2ea2ddb5ba6c58c4506
3c4e9cd789d88d8d89c1073707c3585e41b0e614 tree   8 19 1331 1 \
  deef2e1b793907545e50a2ea2ddb5ba6c58c4506
0155eb4229851634a0f03eb265b69f5a2d56f341 tree   71 76 1350
83baae61804e65cc73a7201a7252750c76066a30 blob   10 19 1426
fa49b077972391ad58037050f2a75f74e3671e92 blob   9 18 1445
b042a60ef7dff760008df33cee372b945b6e884e blob   22054 5799 1463
033b4468fa6b2a9547a70d88d1bbe8bf3f9ed0d5 blob   9 20 7262 1 \
  b042a60ef7dff760008df33cee372b945b6e884e
1f7a7a472abf3dd9643fd615f6da379c4acb3e3a blob   10 19 7282
non delta: 15 objects
chain length = 1: 3 objects
.git/objects/pack/pack-978e03944f5c581011e6998cd0e9e30000905586.pack: ok

Hier verwys die 033b4 blob, wat as jy onthou die eerste weergawe van jou repo.rb lêer was, na die b042a blob, wat die tweede weergawe van die lêer was. Die derde kolom in die afvoer is die grootte van die objek in die paklêer, so jy kan sien dat b042a 22K van die lêer opneem, maar dat 033b4 slegs 9 grepe (bytes) in beslag neem. Wat ook interessant is, is dat die tweede weergawe van die lêer die een is wat ongeskonde (intact) gestoor word, terwyl die oorspronklike weergawe as 'n delta gestoor word — dit is omdat jy heel waarskynlik vinniger toegang tot die mees onlangse weergawe van die lêer sal benodig.

Die regtig lekker ding hiervan is dat dit enige tyd weer herpak kan word. Git sal af en toe jou databasis outomaties herpak, altyd in 'n poging om meer spasie te bespaar, maar jy kan dit ook enige tyd handmatig herpak deur git gc self uit te voer.