Hex Artifact Content

Artifact 8b965c29efee127350667aa08884b29ffe3d6847:


0000: 23 21 20 2f 75 73 72 2f 62 69 6e 2f 65 6e 76 20  #! /usr/bin/env 
0010: 74 63 6c 73 68 0a 0a 70 61 63 6b 61 67 65 20 72  tclsh..package r
0020: 65 71 75 69 72 65 20 68 74 74 70 20 32 2e 37 0a  equire http 2.7.
0030: 70 61 63 6b 61 67 65 20 72 65 71 75 69 72 65 20  package require 
0040: 73 71 6c 69 74 65 33 0a 0a 6e 61 6d 65 73 70 61  sqlite3..namespa
0050: 63 65 20 65 76 61 6c 20 3a 3a 61 70 70 66 73 20  ce eval ::appfs 
0060: 7b 0a 09 76 61 72 69 61 62 6c 65 20 63 61 63 68  {..variable cach
0070: 65 64 69 72 20 22 2f 74 6d 70 2f 61 70 70 66 73  edir "/tmp/appfs
0080: 2d 63 61 63 68 65 22 0a 0a 09 70 72 6f 63 20 5f  -cache"...proc _
0090: 68 61 73 68 5f 73 65 70 20 7b 68 61 73 68 20 7b  hash_sep {hash {
00a0: 73 65 70 73 20 34 7d 7d 20 7b 0a 09 09 66 6f 72  seps 4}} {...for
00b0: 20 7b 73 65 74 20 69 64 78 20 30 7d 20 7b 24 69   {set idx 0} {$i
00c0: 64 78 20 3c 20 24 73 65 70 73 7d 20 7b 69 6e 63  dx < $seps} {inc
00d0: 72 20 69 64 78 7d 20 7b 0a 09 09 09 61 70 70 65  r idx} {....appe
00e0: 6e 64 20 72 65 74 76 61 6c 20 22 5b 73 74 72 69  nd retval "[stri
00f0: 6e 67 20 72 61 6e 67 65 20 24 68 61 73 68 20 5b  ng range $hash [
0100: 65 78 70 72 20 7b 24 69 64 78 20 2a 20 32 7d 5d  expr {$idx * 2}]
0110: 20 5b 65 78 70 72 20 7b 28 24 69 64 78 20 2a 20   [expr {($idx * 
0120: 32 29 20 2b 20 31 7d 5d 5d 2f 22 0a 09 09 7d 0a  2) + 1}]]/"...}.
0130: 09 09 61 70 70 65 6e 64 20 72 65 74 76 61 6c 20  ..append retval 
0140: 22 5b 73 74 72 69 6e 67 20 72 61 6e 67 65 20 24  "[string range $
0150: 68 61 73 68 20 5b 65 78 70 72 20 7b 24 69 64 78  hash [expr {$idx
0160: 20 2a 20 32 7d 5d 20 65 6e 64 5d 22 0a 0a 09 09   * 2}] end]"....
0170: 72 65 74 75 72 6e 20 24 72 65 74 76 61 6c 0a 09  return $retval..
0180: 7d 0a 0a 09 70 72 6f 63 20 5f 63 61 63 68 65 66  }...proc _cachef
0190: 69 6c 65 20 7b 75 72 6c 20 6b 65 79 20 7b 6b 65  ile {url key {ke
01a0: 79 49 73 48 61 73 68 20 31 7d 7d 20 7b 0a 09 09  yIsHash 1}} {...
01b0: 73 65 74 20 66 69 6c 65 6b 65 79 20 24 6b 65 79  set filekey $key
01c0: 0a 09 09 69 66 20 7b 24 6b 65 79 49 73 48 61 73  ...if {$keyIsHas
01d0: 68 7d 20 7b 0a 09 09 09 73 65 74 20 66 69 6c 65  h} {....set file
01e0: 6b 65 79 20 5b 5f 68 61 73 68 5f 73 65 70 20 24  key [_hash_sep $
01f0: 66 69 6c 65 6b 65 79 5d 0a 09 09 7d 0a 0a 09 09  filekey]...}....
0200: 73 65 74 20 66 69 6c 65 20 5b 66 69 6c 65 20 6a  set file [file j
0210: 6f 69 6e 20 24 3a 3a 61 70 70 66 73 3a 3a 63 61  oin $::appfs::ca
0220: 63 68 65 64 69 72 20 24 66 69 6c 65 6b 65 79 5d  chedir $filekey]
0230: 0a 0a 09 09 66 69 6c 65 20 6d 6b 64 69 72 20 5b  ....file mkdir [
0240: 66 69 6c 65 20 64 69 72 6e 61 6d 65 20 24 66 69  file dirname $fi
0250: 6c 65 5d 0a 0a 09 09 69 66 20 7b 21 5b 66 69 6c  le]....if {![fil
0260: 65 20 65 78 69 73 74 73 20 24 66 69 6c 65 5d 7d  e exists $file]}
0270: 20 7b 0a 09 09 09 73 65 74 20 74 6d 70 66 69 6c   {....set tmpfil
0280: 65 20 22 24 7b 66 69 6c 65 7d 2e 6e 65 77 22 0a  e "${file}.new".
0290: 0a 09 09 09 73 65 74 20 66 64 20 5b 6f 70 65 6e  ....set fd [open
02a0: 20 24 74 6d 70 66 69 6c 65 20 22 77 22 5d 0a 09   $tmpfile "w"]..
02b0: 09 09 66 63 6f 6e 66 69 67 75 72 65 20 24 66 64  ..fconfigure $fd
02c0: 20 2d 74 72 61 6e 73 6c 61 74 69 6f 6e 20 62 69   -translation bi
02d0: 6e 61 72 79 0a 0a 09 09 09 63 61 74 63 68 20 7b  nary.....catch {
02e0: 0a 09 09 09 09 73 65 74 20 74 6f 6b 65 6e 20 5b  .....set token [
02f0: 3a 3a 68 74 74 70 3a 3a 67 65 74 75 72 6c 20 24  ::http::geturl $
0300: 75 72 6c 20 2d 63 68 61 6e 6e 65 6c 20 24 66 64  url -channel $fd
0310: 20 2d 62 69 6e 61 72 79 20 74 72 75 65 5d 0a 09   -binary true]..
0320: 09 09 7d 0a 0a 09 09 09 69 66 20 7b 5b 69 6e 66  ..}.....if {[inf
0330: 6f 20 65 78 69 73 74 73 20 74 6f 6b 65 6e 5d 7d  o exists token]}
0340: 20 7b 0a 09 09 09 09 73 65 74 20 6e 63 6f 64 65   {.....set ncode
0350: 20 5b 3a 3a 68 74 74 70 3a 3a 6e 63 6f 64 65 20   [::http::ncode 
0360: 24 74 6f 6b 65 6e 5d 0a 09 09 09 09 3a 3a 68 74  $token].....::ht
0370: 74 70 3a 3a 72 65 73 65 74 20 24 74 6f 6b 65 6e  tp::reset $token
0380: 0a 09 09 09 7d 20 65 6c 73 65 20 7b 0a 09 09 09  ....} else {....
0390: 09 73 65 74 20 6e 63 6f 64 65 20 22 39 30 30 22  .set ncode "900"
03a0: 0a 09 09 09 7d 0a 0a 09 09 09 63 6c 6f 73 65 20  ....}.....close 
03b0: 24 66 64 0a 0a 09 09 09 69 66 20 7b 24 6b 65 79  $fd.....if {$key
03c0: 49 73 48 61 73 68 7d 20 7b 0a 09 09 09 09 63 61  IsHash} {.....ca
03d0: 74 63 68 20 7b 0a 09 09 09 09 09 73 65 74 20 68  tch {......set h
03e0: 61 73 68 20 5b 73 74 72 69 6e 67 20 74 6f 6c 6f  ash [string tolo
03f0: 77 65 72 20 5b 65 78 65 63 20 6f 70 65 6e 73 73  wer [exec openss
0400: 6c 20 73 68 61 31 20 24 74 6d 70 66 69 6c 65 5d  l sha1 $tmpfile]
0410: 5d 0a 09 09 09 09 09 72 65 67 73 75 62 20 7b 2e  ]......regsub {.
0420: 2a 3d 20 2a 7d 20 24 68 61 73 68 20 7b 7d 20 68  *= *} $hash {} h
0430: 61 73 68 0a 09 09 09 09 7d 0a 09 09 09 7d 20 65  ash.....}....} e
0440: 6c 73 65 20 7b 0a 09 09 09 09 73 65 74 20 68 61  lse {.....set ha
0450: 73 68 20 24 6b 65 79 0a 09 09 09 7d 0a 0a 09 09  sh $key....}....
0460: 09 69 66 20 7b 24 6e 63 6f 64 65 20 3d 3d 20 22  .if {$ncode == "
0470: 32 30 30 22 20 26 26 20 24 68 61 73 68 20 3d 3d  200" && $hash ==
0480: 20 24 6b 65 79 7d 20 7b 0a 09 09 09 09 66 69 6c   $key} {.....fil
0490: 65 20 72 65 6e 61 6d 65 20 2d 66 6f 72 63 65 20  e rename -force 
04a0: 2d 2d 20 24 74 6d 70 66 69 6c 65 20 24 66 69 6c  -- $tmpfile $fil
04b0: 65 0a 09 09 09 7d 20 65 6c 73 65 20 7b 0a 09 09  e....} else {...
04c0: 09 09 66 69 6c 65 20 64 65 6c 65 74 65 20 2d 66  ..file delete -f
04d0: 6f 72 63 65 20 2d 2d 20 24 74 6d 70 66 69 6c 65  orce -- $tmpfile
04e0: 0a 09 09 09 7d 0a 09 09 7d 0a 0a 09 09 72 65 74  ....}...}....ret
04f0: 75 72 6e 20 24 66 69 6c 65 0a 09 7d 0a 0a 09 70  urn $file..}...p
0500: 72 6f 63 20 5f 64 62 20 7b 61 72 67 73 7d 20 7b  roc _db {args} {
0510: 0a 09 09 72 65 74 75 72 6e 20 5b 75 70 6c 65 76  ...return [uplev
0520: 65 6c 20 31 20 5b 6c 69 73 74 20 3a 3a 61 70 70  el 1 [list ::app
0530: 66 73 3a 3a 64 62 20 7b 2a 7d 24 61 72 67 73 5d  fs::db {*}$args]
0540: 5d 0a 09 7d 0a 0a 09 70 72 6f 63 20 69 6e 69 74  ]..}...proc init
0550: 20 7b 7d 20 7b 0a 09 09 69 66 20 7b 5b 69 6e 66   {} {...if {[inf
0560: 6f 20 65 78 69 73 74 73 20 3a 3a 61 70 70 66 73  o exists ::appfs
0570: 3a 3a 69 6e 69 74 5f 63 61 6c 6c 65 64 5d 7d 20  ::init_called]} 
0580: 7b 0a 09 09 09 72 65 74 75 72 6e 0a 09 09 7d 0a  {....return...}.
0590: 0a 09 09 73 65 74 20 3a 3a 61 70 70 66 73 3a 3a  ...set ::appfs::
05a0: 69 6e 69 74 5f 63 61 6c 6c 65 64 20 31 0a 0a 09  init_called 1...
05b0: 09 69 66 20 7b 21 5b 69 6e 66 6f 20 65 78 69 73  .if {![info exis
05c0: 74 73 20 3a 3a 61 70 70 66 73 3a 3a 64 62 5d 7d  ts ::appfs::db]}
05d0: 20 7b 0a 09 09 09 66 69 6c 65 20 6d 6b 64 69 72   {....file mkdir
05e0: 20 24 3a 3a 61 70 70 66 73 3a 3a 63 61 63 68 65   $::appfs::cache
05f0: 64 69 72 0a 0a 09 09 09 73 71 6c 69 74 65 33 20  dir.....sqlite3 
0600: 3a 3a 61 70 70 66 73 3a 3a 64 62 20 5b 66 69 6c  ::appfs::db [fil
0610: 65 20 6a 6f 69 6e 20 24 3a 3a 61 70 70 66 73 3a  e join $::appfs:
0620: 3a 63 61 63 68 65 64 69 72 20 63 61 63 68 65 2e  :cachedir cache.
0630: 64 62 5d 0a 09 09 7d 0a 0a 09 09 5f 64 62 20 65  db]...}...._db e
0640: 76 61 6c 20 7b 43 52 45 41 54 45 20 54 41 42 4c  val {CREATE TABL
0650: 45 20 49 46 20 4e 4f 54 20 45 58 49 53 54 53 20  E IF NOT EXISTS 
0660: 70 61 63 6b 61 67 65 73 28 68 6f 73 74 6e 61 6d  packages(hostnam
0670: 65 2c 20 73 68 61 31 2c 20 70 61 63 6b 61 67 65  e, sha1, package
0680: 2c 20 76 65 72 73 69 6f 6e 2c 20 6f 73 2c 20 63  , version, os, c
0690: 70 75 41 72 63 68 2c 20 69 73 4c 61 74 65 73 74  puArch, isLatest
06a0: 2c 20 68 61 76 65 4d 61 6e 69 66 65 73 74 29 3b  , haveManifest);
06b0: 7d 0a 09 09 5f 64 62 20 65 76 61 6c 20 7b 43 52  }..._db eval {CR
06c0: 45 41 54 45 20 54 41 42 4c 45 20 49 46 20 4e 4f  EATE TABLE IF NO
06d0: 54 20 45 58 49 53 54 53 20 66 69 6c 65 73 28 70  T EXISTS files(p
06e0: 61 63 6b 61 67 65 5f 73 68 61 31 2c 20 74 79 70  ackage_sha1, typ
06f0: 65 2c 20 74 69 6d 65 2c 20 73 6f 75 72 63 65 2c  e, time, source,
0700: 20 73 69 7a 65 2c 20 70 65 72 6d 73 2c 20 66 69   size, perms, fi
0710: 6c 65 5f 73 68 61 31 2c 20 66 69 6c 65 5f 6e 61  le_sha1, file_na
0720: 6d 65 2c 20 66 69 6c 65 5f 64 69 72 65 63 74 6f  me, file_directo
0730: 72 79 29 3b 7d 0a 09 7d 0a 0a 09 70 72 6f 63 20  ry);}..}...proc 
0740: 64 6f 77 6e 6c 6f 61 64 20 7b 68 6f 73 74 6e 61  download {hostna
0750: 6d 65 20 68 61 73 68 20 7b 6d 65 74 68 6f 64 20  me hash {method 
0760: 73 68 61 31 7d 7d 20 7b 0a 09 09 73 65 74 20 75  sha1}} {...set u
0770: 72 6c 20 22 68 74 74 70 3a 2f 2f 24 68 6f 73 74  rl "http://$host
0780: 6e 61 6d 65 2f 61 70 70 66 73 2f 24 6d 65 74 68  name/appfs/$meth
0790: 6f 64 2f 24 68 61 73 68 22 0a 09 09 73 65 74 20  od/$hash"...set 
07a0: 66 69 6c 65 20 5b 5f 63 61 63 68 65 66 69 6c 65  file [_cachefile
07b0: 20 24 75 72 6c 20 24 68 61 73 68 5d 0a 0a 09 09   $url $hash]....
07c0: 69 66 20 7b 21 5b 66 69 6c 65 20 65 78 69 73 74  if {![file exist
07d0: 73 20 24 66 69 6c 65 5d 7d 20 7b 0a 09 09 09 72  s $file]} {....r
07e0: 65 74 75 72 6e 20 2d 63 6f 64 65 20 65 72 72 6f  eturn -code erro
07f0: 72 20 22 55 6e 61 62 6c 65 20 74 6f 20 66 65 74  r "Unable to fet
0800: 63 68 22 0a 09 09 7d 0a 0a 09 09 72 65 74 75 72  ch"...}....retur
0810: 6e 20 24 66 69 6c 65 0a 09 7d 0a 0a 09 70 72 6f  n $file..}...pro
0820: 63 20 67 65 74 69 6e 64 65 78 20 7b 68 6f 73 74  c getindex {host
0830: 6e 61 6d 65 7d 20 7b 0a 09 09 69 66 20 7b 5b 73  name} {...if {[s
0840: 74 72 69 6e 67 20 6d 61 74 63 68 20 22 2a 5c 5b  tring match "*\[
0850: 2f 7e 5c 5d 2a 22 20 24 68 6f 73 74 6e 61 6d 65  /~\]*" $hostname
0860: 5d 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e 20 2d  ]} {....return -
0870: 63 6f 64 65 20 65 72 72 6f 72 20 22 49 6e 76 61  code error "Inva
0880: 6c 69 64 20 68 6f 73 74 6e 61 6d 65 22 0a 09 09  lid hostname"...
0890: 7d 0a 0a 09 09 73 65 74 20 75 72 6c 20 22 68 74  }....set url "ht
08a0: 74 70 3a 2f 2f 24 68 6f 73 74 6e 61 6d 65 2f 61  tp://$hostname/a
08b0: 70 70 66 73 2f 69 6e 64 65 78 22 0a 0a 09 09 73  ppfs/index"....s
08c0: 65 74 20 69 6e 64 65 78 63 61 63 68 65 66 69 6c  et indexcachefil
08d0: 65 20 5b 5f 63 61 63 68 65 66 69 6c 65 20 24 75  e [_cachefile $u
08e0: 72 6c 20 22 53 45 52 56 45 52 53 2f 5b 73 74 72  rl "SERVERS/[str
08f0: 69 6e 67 20 74 6f 6c 6f 77 65 72 20 24 68 6f 73  ing tolower $hos
0900: 74 6e 61 6d 65 5d 22 20 30 5d 0a 0a 09 09 69 66  tname]" 0]....if
0910: 20 7b 21 5b 66 69 6c 65 20 65 78 69 73 74 73 20   {![file exists 
0920: 24 69 6e 64 65 78 63 61 63 68 65 66 69 6c 65 5d  $indexcachefile]
0930: 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e 20 2d 63  } {....return -c
0940: 6f 64 65 20 65 72 72 6f 72 20 22 55 6e 61 62 6c  ode error "Unabl
0950: 65 20 74 6f 20 66 65 74 63 68 20 24 75 72 6c 22  e to fetch $url"
0960: 0a 09 09 7d 0a 0a 09 09 73 65 74 20 66 64 20 5b  ...}....set fd [
0970: 6f 70 65 6e 20 24 69 6e 64 65 78 63 61 63 68 65  open $indexcache
0980: 66 69 6c 65 5d 0a 09 09 67 65 74 73 20 24 66 64  file]...gets $fd
0990: 20 69 6e 64 65 78 68 61 73 68 5f 64 61 74 61 0a   indexhash_data.
09a0: 09 09 73 65 74 20 69 6e 64 65 78 68 61 73 68 20  ..set indexhash 
09b0: 5b 6c 69 6e 64 65 78 20 5b 73 70 6c 69 74 20 24  [lindex [split $
09c0: 69 6e 64 65 78 68 61 73 68 5f 64 61 74 61 20 22  indexhash_data "
09d0: 2c 22 5d 20 30 5d 0a 09 09 63 6c 6f 73 65 20 24  ,"] 0]...close $
09e0: 66 64 0a 0a 09 09 73 65 74 20 66 69 6c 65 20 5b  fd....set file [
09f0: 64 6f 77 6e 6c 6f 61 64 20 24 68 6f 73 74 6e 61  download $hostna
0a00: 6d 65 20 24 69 6e 64 65 78 68 61 73 68 5d 0a 09  me $indexhash]..
0a10: 09 73 65 74 20 66 64 20 5b 6f 70 65 6e 20 24 66  .set fd [open $f
0a20: 69 6c 65 5d 0a 09 09 73 65 74 20 64 61 74 61 20  ile]...set data 
0a30: 5b 72 65 61 64 20 24 66 64 5d 0a 09 09 63 6c 6f  [read $fd]...clo
0a40: 73 65 20 24 66 64 0a 0a 09 09 61 72 72 61 79 20  se $fd....array 
0a50: 73 65 74 20 70 61 63 6b 61 67 65 73 20 5b 6c 69  set packages [li
0a60: 73 74 5d 0a 09 09 66 6f 72 65 61 63 68 20 6c 69  st]...foreach li
0a70: 6e 65 20 5b 73 70 6c 69 74 20 24 64 61 74 61 20  ne [split $data 
0a80: 22 5c 6e 22 5d 20 7b 0a 09 09 09 73 65 74 20 6c  "\n"] {....set l
0a90: 69 6e 65 20 5b 73 74 72 69 6e 67 20 74 72 69 6d  ine [string trim
0aa0: 20 24 6c 69 6e 65 5d 0a 0a 09 09 09 69 66 20 7b   $line].....if {
0ab0: 5b 73 74 72 69 6e 67 20 6d 61 74 63 68 20 22 2a  [string match "*
0ac0: 2f 2a 22 20 24 6c 69 6e 65 5d 7d 20 7b 0a 09 09  /*" $line]} {...
0ad0: 09 09 63 6f 6e 74 69 6e 75 65 0a 09 09 09 7d 0a  ..continue....}.
0ae0: 0a 09 09 09 69 66 20 7b 24 6c 69 6e 65 20 3d 3d  ....if {$line ==
0af0: 20 22 22 7d 20 7b 0a 09 09 09 09 63 6f 6e 74 69   ""} {.....conti
0b00: 6e 75 65 0a 09 09 09 7d 0a 0a 09 09 09 73 65 74  nue....}.....set
0b10: 20 77 6f 72 6b 20 5b 73 70 6c 69 74 20 24 6c 69   work [split $li
0b20: 6e 65 20 22 2c 22 5d 0a 0a 09 09 09 75 6e 73 65  ne ","].....unse
0b30: 74 20 2d 6e 6f 63 6f 6d 70 6c 61 69 6e 20 70 6b  t -nocomplain pk
0b40: 67 49 6e 66 6f 0a 09 09 09 73 65 74 20 70 6b 67  gInfo....set pkg
0b50: 49 6e 66 6f 28 70 61 63 6b 61 67 65 29 20 20 5b  Info(package)  [
0b60: 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 30 5d 0a  lindex $work 0].
0b70: 09 09 09 73 65 74 20 70 6b 67 49 6e 66 6f 28 76  ...set pkgInfo(v
0b80: 65 72 73 69 6f 6e 29 20 20 5b 6c 69 6e 64 65 78  ersion)  [lindex
0b90: 20 24 77 6f 72 6b 20 31 5d 0a 09 09 09 73 65 74   $work 1]....set
0ba0: 20 70 6b 67 49 6e 66 6f 28 6f 73 29 20 20 20 20   pkgInfo(os)    
0bb0: 20 20 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b     [lindex $work
0bc0: 20 32 5d 0a 09 09 09 73 65 74 20 70 6b 67 49 6e   2]....set pkgIn
0bd0: 66 6f 28 63 70 75 41 72 63 68 29 20 20 5b 6c 69  fo(cpuArch)  [li
0be0: 6e 64 65 78 20 24 77 6f 72 6b 20 33 5d 0a 09 09  ndex $work 3]...
0bf0: 09 73 65 74 20 70 6b 67 49 6e 66 6f 28 68 61 73  .set pkgInfo(has
0c00: 68 29 20 20 20 20 20 5b 73 74 72 69 6e 67 20 74  h)     [string t
0c10: 6f 6c 6f 77 65 72 20 5b 6c 69 6e 64 65 78 20 24  olower [lindex $
0c20: 77 6f 72 6b 20 34 5d 5d 0a 09 09 09 73 65 74 20  work 4]]....set 
0c30: 70 6b 67 49 6e 66 6f 28 68 61 73 68 5f 74 79 70  pkgInfo(hash_typ
0c40: 65 29 20 22 73 68 61 31 22 0a 09 09 09 73 65 74  e) "sha1"....set
0c50: 20 70 6b 67 49 6e 66 6f 28 69 73 4c 61 74 65 73   pkgInfo(isLates
0c60: 74 29 20 5b 65 78 70 72 20 7b 21 21 5b 6c 69 6e  t) [expr {!![lin
0c70: 64 65 78 20 24 77 6f 72 6b 20 35 5d 7d 5d 0a 0a  dex $work 5]}]..
0c80: 09 09 09 69 66 20 7b 5b 73 74 72 69 6e 67 20 6c  ...if {[string l
0c90: 65 6e 67 74 68 20 24 70 6b 67 49 6e 66 6f 28 68  ength $pkgInfo(h
0ca0: 61 73 68 29 5d 20 21 3d 20 34 30 7d 20 7b 0a 09  ash)] != 40} {..
0cb0: 09 09 09 63 6f 6e 74 69 6e 75 65 0a 09 09 09 7d  ...continue....}
0cc0: 0a 0a 09 09 09 69 66 20 7b 21 5b 72 65 67 65 78  .....if {![regex
0cd0: 70 20 7b 5e 5b 30 2d 39 61 2d 66 5d 2a 24 7d 20  p {^[0-9a-f]*$} 
0ce0: 24 70 6b 67 49 6e 66 6f 28 68 61 73 68 29 5d 7d  $pkgInfo(hash)]}
0cf0: 20 7b 0a 09 09 09 09 63 6f 6e 74 69 6e 75 65 0a   {.....continue.
0d00: 09 09 09 7d 0a 0a 09 09 09 73 65 74 20 70 61 63  ...}.....set pac
0d10: 6b 61 67 65 73 28 24 70 6b 67 49 6e 66 6f 28 70  kages($pkgInfo(p
0d20: 61 63 6b 61 67 65 29 29 20 5b 61 72 72 61 79 20  ackage)) [array 
0d30: 67 65 74 20 70 6b 67 49 6e 66 6f 5d 0a 0a 09 09  get pkgInfo]....
0d40: 09 23 20 44 6f 20 6e 6f 74 20 64 6f 20 61 6e 79  .# Do not do any
0d50: 20 61 64 64 69 74 69 6f 6e 61 6c 20 77 6f 72 6b   additional work
0d60: 20 69 66 20 77 65 20 61 6c 72 65 61 64 79 20 68   if we already h
0d70: 61 76 65 20 74 68 69 73 20 70 61 63 6b 61 67 65  ave this package
0d80: 0a 09 09 09 73 65 74 20 65 78 69 73 74 69 6e 67  ....set existing
0d90: 5f 70 61 63 6b 61 67 65 73 20 5b 5f 64 62 20 65  _packages [_db e
0da0: 76 61 6c 20 7b 53 45 4c 45 43 54 20 70 61 63 6b  val {SELECT pack
0db0: 61 67 65 20 46 52 4f 4d 20 70 61 63 6b 61 67 65  age FROM package
0dc0: 73 20 57 48 45 52 45 20 68 6f 73 74 6e 61 6d 65  s WHERE hostname
0dd0: 20 3d 20 24 68 6f 73 74 6e 61 6d 65 20 41 4e 44   = $hostname AND
0de0: 20 73 68 61 31 20 3d 20 24 70 6b 67 49 6e 66 6f   sha1 = $pkgInfo
0df0: 28 68 61 73 68 29 3b 7d 5d 0a 09 09 09 69 66 20  (hash);}]....if 
0e00: 7b 5b 6c 73 65 61 72 63 68 20 2d 65 78 61 63 74  {[lsearch -exact
0e10: 20 24 65 78 69 73 74 69 6e 67 5f 70 61 63 6b 61   $existing_packa
0e20: 67 65 73 20 24 70 6b 67 49 6e 66 6f 28 70 61 63  ges $pkgInfo(pac
0e30: 6b 61 67 65 29 5d 20 21 3d 20 2d 31 7d 20 7b 0a  kage)] != -1} {.
0e40: 09 09 09 09 63 6f 6e 74 69 6e 75 65 0a 09 09 09  ....continue....
0e50: 7d 0a 0a 09 09 09 69 66 20 7b 24 70 6b 67 49 6e  }.....if {$pkgIn
0e60: 66 6f 28 69 73 4c 61 74 65 73 74 29 7d 20 7b 0a  fo(isLatest)} {.
0e70: 09 09 09 09 5f 64 62 20 65 76 61 6c 20 7b 55 50  ...._db eval {UP
0e80: 44 41 54 45 20 70 61 63 6b 61 67 65 73 20 53 45  DATE packages SE
0e90: 54 20 69 73 4c 61 74 65 73 74 20 3d 20 30 20 57  T isLatest = 0 W
0ea0: 48 45 52 45 20 68 6f 73 74 6e 61 6d 65 20 3d 20  HERE hostname = 
0eb0: 24 68 6f 73 74 6e 61 6d 65 20 41 4e 44 20 70 61  $hostname AND pa
0ec0: 63 6b 61 67 65 20 3d 20 24 70 6b 67 49 6e 66 6f  ckage = $pkgInfo
0ed0: 28 24 70 61 63 6b 61 67 65 29 20 41 4e 44 20 6f  ($package) AND o
0ee0: 73 20 3d 20 24 70 6b 67 49 6e 66 6f 28 24 70 61  s = $pkgInfo($pa
0ef0: 63 6b 61 67 65 29 20 41 4e 44 20 63 70 75 41 72  ckage) AND cpuAr
0f00: 63 68 20 3d 20 24 70 6b 67 49 6e 66 6f 28 63 70  ch = $pkgInfo(cp
0f10: 75 41 72 63 68 29 3b 7d 0a 09 09 09 7d 0a 0a 09  uArch);}....}...
0f20: 09 09 5f 64 62 20 65 76 61 6c 20 7b 49 4e 53 45  .._db eval {INSE
0f30: 52 54 20 49 4e 54 4f 20 70 61 63 6b 61 67 65 73  RT INTO packages
0f40: 20 28 68 6f 73 74 6e 61 6d 65 2c 20 73 68 61 31   (hostname, sha1
0f50: 2c 20 70 61 63 6b 61 67 65 2c 20 76 65 72 73 69  , package, versi
0f60: 6f 6e 2c 20 6f 73 2c 20 63 70 75 41 72 63 68 2c  on, os, cpuArch,
0f70: 20 69 73 4c 61 74 65 73 74 2c 20 68 61 76 65 4d   isLatest, haveM
0f80: 61 6e 69 66 65 73 74 29 20 56 41 4c 55 45 53 20  anifest) VALUES 
0f90: 28 24 68 6f 73 74 6e 61 6d 65 2c 20 24 70 6b 67  ($hostname, $pkg
0fa0: 49 6e 66 6f 28 68 61 73 68 29 2c 20 24 70 6b 67  Info(hash), $pkg
0fb0: 49 6e 66 6f 28 70 61 63 6b 61 67 65 29 2c 20 24  Info(package), $
0fc0: 70 6b 67 49 6e 66 6f 28 76 65 72 73 69 6f 6e 29  pkgInfo(version)
0fd0: 2c 20 24 70 6b 67 49 6e 66 6f 28 6f 73 29 2c 20  , $pkgInfo(os), 
0fe0: 24 70 6b 67 49 6e 66 6f 28 63 70 75 41 72 63 68  $pkgInfo(cpuArch
0ff0: 29 2c 20 24 70 6b 67 49 6e 66 6f 28 69 73 4c 61  ), $pkgInfo(isLa
1000: 74 65 73 74 29 2c 20 30 29 3b 7d 0a 0a 09 09 7d  test), 0);}....}
1010: 0a 0a 09 09 72 65 74 75 72 6e 20 43 4f 4d 50 4c  ....return COMPL
1020: 45 54 45 0a 09 7d 0a 0a 09 70 72 6f 63 20 67 65  ETE..}...proc ge
1030: 74 70 6b 67 6d 61 6e 69 66 65 73 74 20 7b 68 6f  tpkgmanifest {ho
1040: 73 74 6e 61 6d 65 20 70 61 63 6b 61 67 65 5f 73  stname package_s
1050: 68 61 31 7d 20 7b 0a 09 09 73 65 74 20 68 61 76  ha1} {...set hav
1060: 65 4d 61 6e 69 66 65 73 74 73 20 5b 5f 64 62 20  eManifests [_db 
1070: 65 76 61 6c 20 7b 53 45 4c 45 43 54 20 68 61 76  eval {SELECT hav
1080: 65 4d 61 6e 69 66 65 73 74 20 46 52 4f 4d 20 70  eManifest FROM p
1090: 61 63 6b 61 67 65 73 20 57 48 45 52 45 20 73 68  ackages WHERE sh
10a0: 61 31 20 3d 20 24 70 61 63 6b 61 67 65 5f 73 68  a1 = $package_sh
10b0: 61 31 20 4c 49 4d 49 54 20 31 3b 7d 5d 0a 09 09  a1 LIMIT 1;}]...
10c0: 73 65 74 20 68 61 76 65 4d 61 6e 69 66 65 73 74  set haveManifest
10d0: 20 5b 6c 69 6e 64 65 78 20 24 68 61 76 65 4d 61   [lindex $haveMa
10e0: 6e 69 66 65 73 74 73 20 30 5d 0a 0a 09 09 69 66  nifests 0]....if
10f0: 20 7b 24 68 61 76 65 4d 61 6e 69 66 65 73 74 7d   {$haveManifest}
1100: 20 7b 0a 09 09 09 72 65 74 75 72 6e 20 43 4f 4d   {....return COM
1110: 50 4c 45 54 45 0a 09 09 7d 0a 0a 09 09 73 65 74  PLETE...}....set
1120: 20 66 69 6c 65 20 5b 64 6f 77 6e 6c 6f 61 64 20   file [download 
1130: 24 68 6f 73 74 6e 61 6d 65 20 24 70 61 63 6b 61  $hostname $packa
1140: 67 65 5f 73 68 61 31 5d 0a 09 09 73 65 74 20 66  ge_sha1]...set f
1150: 64 20 5b 6f 70 65 6e 20 24 66 69 6c 65 5d 0a 09  d [open $file]..
1160: 09 73 65 74 20 70 6b 67 64 61 74 61 20 5b 72 65  .set pkgdata [re
1170: 61 64 20 24 66 64 5d 0a 09 09 63 6c 6f 73 65 20  ad $fd]...close 
1180: 24 66 64 0a 0a 09 09 66 6f 72 65 61 63 68 20 6c  $fd....foreach l
1190: 69 6e 65 20 5b 73 70 6c 69 74 20 24 70 6b 67 64  ine [split $pkgd
11a0: 61 74 61 20 22 5c 6e 22 5d 20 7b 0a 09 09 09 73  ata "\n"] {....s
11b0: 65 74 20 6c 69 6e 65 20 5b 73 74 72 69 6e 67 20  et line [string 
11c0: 74 72 69 6d 20 24 6c 69 6e 65 5d 0a 0a 09 09 09  trim $line].....
11d0: 69 66 20 7b 24 6c 69 6e 65 20 3d 3d 20 22 22 7d  if {$line == ""}
11e0: 20 7b 0a 09 09 09 09 63 6f 6e 74 69 6e 75 65 0a   {.....continue.
11f0: 09 09 09 7d 0a 0a 09 09 09 73 65 74 20 77 6f 72  ...}.....set wor
1200: 6b 20 5b 73 70 6c 69 74 20 24 6c 69 6e 65 20 22  k [split $line "
1210: 2c 22 5d 0a 0a 09 09 09 75 6e 73 65 74 20 2d 6e  ,"].....unset -n
1220: 6f 63 6f 6d 70 6c 61 69 6e 20 66 69 6c 65 49 6e  ocomplain fileIn
1230: 66 6f 0a 09 09 09 73 65 74 20 66 69 6c 65 49 6e  fo....set fileIn
1240: 66 6f 28 74 79 70 65 29 20 5b 6c 69 6e 64 65 78  fo(type) [lindex
1250: 20 24 77 6f 72 6b 20 30 5d 0a 09 09 09 73 65 74   $work 0]....set
1260: 20 66 69 6c 65 49 6e 66 6f 28 74 69 6d 65 29 20   fileInfo(time) 
1270: 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 31 5d  [lindex $work 1]
1280: 0a 09 09 09 73 65 74 20 66 69 6c 65 49 6e 66 6f  ....set fileInfo
1290: 28 6e 61 6d 65 29 20 5b 6c 69 6e 64 65 78 20 24  (name) [lindex $
12a0: 77 6f 72 6b 20 65 6e 64 5d 0a 0a 09 09 09 73 65  work end].....se
12b0: 74 20 66 69 6c 65 49 6e 66 6f 28 6e 61 6d 65 29  t fileInfo(name)
12c0: 20 5b 73 70 6c 69 74 20 5b 73 74 72 69 6e 67 20   [split [string 
12d0: 74 72 69 6d 20 24 66 69 6c 65 49 6e 66 6f 28 6e  trim $fileInfo(n
12e0: 61 6d 65 29 20 22 2f 22 5d 20 22 2f 22 5d 0a 09  ame) "/"] "/"]..
12f0: 09 09 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 64  ..set fileInfo(d
1300: 69 72 65 63 74 6f 72 79 29 20 5b 6a 6f 69 6e 20  irectory) [join 
1310: 5b 6c 72 61 6e 67 65 20 24 66 69 6c 65 49 6e 66  [lrange $fileInf
1320: 6f 28 6e 61 6d 65 29 20 30 20 65 6e 64 2d 31 5d  o(name) 0 end-1]
1330: 20 22 2f 22 5d 0a 09 09 09 73 65 74 20 66 69 6c   "/"]....set fil
1340: 65 49 6e 66 6f 28 6e 61 6d 65 29 20 5b 6c 69 6e  eInfo(name) [lin
1350: 64 65 78 20 24 66 69 6c 65 49 6e 66 6f 28 6e 61  dex $fileInfo(na
1360: 6d 65 29 20 65 6e 64 5d 0a 0a 09 09 09 73 65 74  me) end].....set
1370: 20 77 6f 72 6b 20 5b 6c 72 61 6e 67 65 20 24 77   work [lrange $w
1380: 6f 72 6b 20 32 20 65 6e 64 2d 31 5d 0a 09 09 09  ork 2 end-1]....
1390: 73 77 69 74 63 68 20 2d 2d 20 24 66 69 6c 65 49  switch -- $fileI
13a0: 6e 66 6f 28 74 79 70 65 29 20 7b 0a 09 09 09 09  nfo(type) {.....
13b0: 22 66 69 6c 65 22 20 7b 0a 09 09 09 09 09 73 65  "file" {......se
13c0: 74 20 66 69 6c 65 49 6e 66 6f 28 73 69 7a 65 29  t fileInfo(size)
13d0: 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 30   [lindex $work 0
13e0: 5d 0a 09 09 09 09 09 73 65 74 20 66 69 6c 65 49  ]......set fileI
13f0: 6e 66 6f 28 70 65 72 6d 73 29 20 5b 6c 69 6e 64  nfo(perms) [lind
1400: 65 78 20 24 77 6f 72 6b 20 31 5d 0a 09 09 09 09  ex $work 1].....
1410: 09 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 73 68  .set fileInfo(sh
1420: 61 31 29 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72  a1) [lindex $wor
1430: 6b 20 32 5d 0a 09 09 09 09 7d 0a 09 09 09 09 22  k 2].....}....."
1440: 73 79 6d 6c 69 6e 6b 22 20 7b 0a 09 09 09 09 09  symlink" {......
1450: 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 73 6f 75  set fileInfo(sou
1460: 72 63 65 29 20 5b 6c 69 6e 64 65 78 20 24 77 6f  rce) [lindex $wo
1470: 72 6b 20 30 5d 0a 09 09 09 09 7d 0a 09 09 09 7d  rk 0].....}....}
1480: 0a 0a 09 09 09 5f 64 62 20 65 76 61 6c 20 7b 49  ....._db eval {I
1490: 4e 53 45 52 54 20 49 4e 54 4f 20 66 69 6c 65 73  NSERT INTO files
14a0: 20 28 70 61 63 6b 61 67 65 5f 73 68 61 31 2c 20   (package_sha1, 
14b0: 74 79 70 65 2c 20 74 69 6d 65 2c 20 73 6f 75 72  type, time, sour
14c0: 63 65 2c 20 73 69 7a 65 2c 20 70 65 72 6d 73 2c  ce, size, perms,
14d0: 20 66 69 6c 65 5f 73 68 61 31 2c 20 66 69 6c 65   file_sha1, file
14e0: 5f 6e 61 6d 65 2c 20 66 69 6c 65 5f 64 69 72 65  _name, file_dire
14f0: 63 74 6f 72 79 29 20 56 41 4c 55 45 53 20 28 24  ctory) VALUES ($
1500: 70 61 63 6b 61 67 65 5f 73 68 61 31 2c 20 24 66  package_sha1, $f
1510: 69 6c 65 49 6e 66 6f 28 74 79 70 65 29 2c 20 24  ileInfo(type), $
1520: 66 69 6c 65 49 6e 66 6f 28 74 69 6d 65 29 2c 20  fileInfo(time), 
1530: 24 66 69 6c 65 49 6e 66 6f 28 73 6f 75 72 63 65  $fileInfo(source
1540: 29 2c 20 24 66 69 6c 65 49 6e 66 6f 28 73 69 7a  ), $fileInfo(siz
1550: 65 29 2c 20 24 66 69 6c 65 49 6e 66 6f 28 70 65  e), $fileInfo(pe
1560: 72 6d 73 29 2c 20 24 66 69 6c 65 49 6e 66 6f 28  rms), $fileInfo(
1570: 73 68 61 31 29 2c 20 24 66 69 6c 65 49 6e 66 6f  sha1), $fileInfo
1580: 28 6e 61 6d 65 29 2c 20 24 66 69 6c 65 49 6e 66  (name), $fileInf
1590: 6f 28 64 69 72 65 63 74 6f 72 79 29 20 29 3b 7d  o(directory) );}
15a0: 0a 09 09 09 5f 64 62 20 65 76 61 6c 20 7b 55 50  ...._db eval {UP
15b0: 44 41 54 45 20 70 61 63 6b 61 67 65 73 20 53 45  DATE packages SE
15c0: 54 20 68 61 76 65 4d 61 6e 69 66 65 73 74 20 3d  T haveManifest =
15d0: 20 31 20 57 48 45 52 45 20 73 68 61 31 20 3d 20   1 WHERE sha1 = 
15e0: 24 70 61 63 6b 61 67 65 5f 73 68 61 31 3b 7d 0a  $package_sha1;}.
15f0: 09 09 7d 0a 0a 09 09 72 65 74 75 72 6e 20 43 4f  ..}....return CO
1600: 4d 50 4c 45 54 45 0a 09 7d 0a 7d 0a              MPLETE..}.}.