Hex Artifact Content

Artifact 2fbc0cdff7b8b5295506c00b862976b769d60df3:


0000: 23 21 20 2f 75 73 72 2f 62 69 6e 2f 65 6e 76 20  #! /usr/bin/env 
0010: 74 63 6c 73 68 0a 0a 70 61 63 6b 61 67 65 20 72  tclsh..package r
0020: 65 71 75 69 72 65 20 68 74 74 70 20 32 2e 37 0a  equire http 2.7.
0030: 70 61 63 6b 61 67 65 20 72 65 71 75 69 72 65 20  package require 
0040: 73 71 6c 69 74 65 33 0a 0a 6e 61 6d 65 73 70 61  sqlite3..namespa
0050: 63 65 20 65 76 61 6c 20 3a 3a 61 70 70 66 73 20  ce eval ::appfs 
0060: 7b 0a 09 76 61 72 69 61 62 6c 65 20 63 61 63 68  {..variable cach
0070: 65 64 69 72 20 22 2f 74 6d 70 2f 61 70 70 66 73  edir "/tmp/appfs
0080: 2d 63 61 63 68 65 22 0a 09 76 61 72 69 61 62 6c  -cache"..variabl
0090: 65 20 74 74 6c 20 33 36 30 30 0a 09 76 61 72 69  e ttl 3600..vari
00a0: 61 62 6c 65 20 6e 74 74 6c 20 36 30 0a 0a 09 70  able nttl 60...p
00b0: 72 6f 63 20 5f 68 61 73 68 5f 73 65 70 20 7b 68  roc _hash_sep {h
00c0: 61 73 68 20 7b 73 65 70 73 20 34 7d 7d 20 7b 0a  ash {seps 4}} {.
00d0: 09 09 66 6f 72 20 7b 73 65 74 20 69 64 78 20 30  ..for {set idx 0
00e0: 7d 20 7b 24 69 64 78 20 3c 20 24 73 65 70 73 7d  } {$idx < $seps}
00f0: 20 7b 69 6e 63 72 20 69 64 78 7d 20 7b 0a 09 09   {incr idx} {...
0100: 09 61 70 70 65 6e 64 20 72 65 74 76 61 6c 20 22  .append retval "
0110: 5b 73 74 72 69 6e 67 20 72 61 6e 67 65 20 24 68  [string range $h
0120: 61 73 68 20 5b 65 78 70 72 20 7b 24 69 64 78 20  ash [expr {$idx 
0130: 2a 20 32 7d 5d 20 5b 65 78 70 72 20 7b 28 24 69  * 2}] [expr {($i
0140: 64 78 20 2a 20 32 29 20 2b 20 31 7d 5d 5d 2f 22  dx * 2) + 1}]]/"
0150: 0a 09 09 7d 0a 09 09 61 70 70 65 6e 64 20 72 65  ...}...append re
0160: 74 76 61 6c 20 22 5b 73 74 72 69 6e 67 20 72 61  tval "[string ra
0170: 6e 67 65 20 24 68 61 73 68 20 5b 65 78 70 72 20  nge $hash [expr 
0180: 7b 24 69 64 78 20 2a 20 32 7d 5d 20 65 6e 64 5d  {$idx * 2}] end]
0190: 22 0a 0a 09 09 72 65 74 75 72 6e 20 24 72 65 74  "....return $ret
01a0: 76 61 6c 0a 09 7d 0a 0a 09 70 72 6f 63 20 5f 63  val..}...proc _c
01b0: 61 63 68 65 66 69 6c 65 20 7b 75 72 6c 20 6b 65  achefile {url ke
01c0: 79 20 7b 6b 65 79 49 73 48 61 73 68 20 31 7d 7d  y {keyIsHash 1}}
01d0: 20 7b 0a 09 09 73 65 74 20 66 69 6c 65 6b 65 79   {...set filekey
01e0: 20 24 6b 65 79 0a 09 09 69 66 20 7b 24 6b 65 79   $key...if {$key
01f0: 49 73 48 61 73 68 7d 20 7b 0a 09 09 09 73 65 74  IsHash} {....set
0200: 20 66 69 6c 65 6b 65 79 20 5b 5f 68 61 73 68 5f   filekey [_hash_
0210: 73 65 70 20 24 66 69 6c 65 6b 65 79 5d 0a 09 09  sep $filekey]...
0220: 7d 0a 0a 09 09 73 65 74 20 66 69 6c 65 20 5b 66  }....set file [f
0230: 69 6c 65 20 6a 6f 69 6e 20 24 3a 3a 61 70 70 66  ile join $::appf
0240: 73 3a 3a 63 61 63 68 65 64 69 72 20 24 66 69 6c  s::cachedir $fil
0250: 65 6b 65 79 5d 0a 0a 09 09 66 69 6c 65 20 6d 6b  ekey]....file mk
0260: 64 69 72 20 5b 66 69 6c 65 20 64 69 72 6e 61 6d  dir [file dirnam
0270: 65 20 24 66 69 6c 65 5d 0a 0a 09 09 69 66 20 7b  e $file]....if {
0280: 21 5b 66 69 6c 65 20 65 78 69 73 74 73 20 24 66  ![file exists $f
0290: 69 6c 65 5d 7d 20 7b 0a 09 09 09 73 65 74 20 74  ile]} {....set t
02a0: 6d 70 66 69 6c 65 20 22 24 7b 66 69 6c 65 7d 2e  mpfile "${file}.
02b0: 6e 65 77 22 0a 0a 09 09 09 73 65 74 20 66 64 20  new".....set fd 
02c0: 5b 6f 70 65 6e 20 24 74 6d 70 66 69 6c 65 20 22  [open $tmpfile "
02d0: 77 22 5d 0a 09 09 09 66 63 6f 6e 66 69 67 75 72  w"]....fconfigur
02e0: 65 20 24 66 64 20 2d 74 72 61 6e 73 6c 61 74 69  e $fd -translati
02f0: 6f 6e 20 62 69 6e 61 72 79 0a 0a 09 09 09 63 61  on binary.....ca
0300: 74 63 68 20 7b 0a 09 09 09 09 73 65 74 20 74 6f  tch {.....set to
0310: 6b 65 6e 20 5b 3a 3a 68 74 74 70 3a 3a 67 65 74  ken [::http::get
0320: 75 72 6c 20 24 75 72 6c 20 2d 63 68 61 6e 6e 65  url $url -channe
0330: 6c 20 24 66 64 20 2d 62 69 6e 61 72 79 20 74 72  l $fd -binary tr
0340: 75 65 5d 0a 09 09 09 7d 0a 0a 09 09 09 69 66 20  ue]....}.....if 
0350: 7b 5b 69 6e 66 6f 20 65 78 69 73 74 73 20 74 6f  {[info exists to
0360: 6b 65 6e 5d 7d 20 7b 0a 09 09 09 09 73 65 74 20  ken]} {.....set 
0370: 6e 63 6f 64 65 20 5b 3a 3a 68 74 74 70 3a 3a 6e  ncode [::http::n
0380: 63 6f 64 65 20 24 74 6f 6b 65 6e 5d 0a 09 09 09  code $token]....
0390: 09 3a 3a 68 74 74 70 3a 3a 72 65 73 65 74 20 24  .::http::reset $
03a0: 74 6f 6b 65 6e 0a 09 09 09 7d 20 65 6c 73 65 20  token....} else 
03b0: 7b 0a 09 09 09 09 73 65 74 20 6e 63 6f 64 65 20  {.....set ncode 
03c0: 22 39 30 30 22 0a 09 09 09 7d 0a 0a 09 09 09 63  "900"....}.....c
03d0: 6c 6f 73 65 20 24 66 64 0a 0a 09 09 09 69 66 20  lose $fd.....if 
03e0: 7b 24 6b 65 79 49 73 48 61 73 68 7d 20 7b 0a 09  {$keyIsHash} {..
03f0: 09 09 09 63 61 74 63 68 20 7b 0a 09 09 09 09 09  ...catch {......
0400: 73 65 74 20 68 61 73 68 20 5b 73 74 72 69 6e 67  set hash [string
0410: 20 74 6f 6c 6f 77 65 72 20 5b 65 78 65 63 20 6f   tolower [exec o
0420: 70 65 6e 73 73 6c 20 73 68 61 31 20 24 74 6d 70  penssl sha1 $tmp
0430: 66 69 6c 65 5d 5d 0a 09 09 09 09 09 72 65 67 73  file]]......regs
0440: 75 62 20 7b 2e 2a 3d 20 2a 7d 20 24 68 61 73 68  ub {.*= *} $hash
0450: 20 7b 7d 20 68 61 73 68 0a 09 09 09 09 7d 0a 09   {} hash.....}..
0460: 09 09 7d 20 65 6c 73 65 20 7b 0a 09 09 09 09 73  ..} else {.....s
0470: 65 74 20 68 61 73 68 20 24 6b 65 79 0a 09 09 09  et hash $key....
0480: 7d 0a 0a 09 09 09 69 66 20 7b 24 6e 63 6f 64 65  }.....if {$ncode
0490: 20 3d 3d 20 22 32 30 30 22 20 26 26 20 24 68 61   == "200" && $ha
04a0: 73 68 20 3d 3d 20 24 6b 65 79 7d 20 7b 0a 09 09  sh == $key} {...
04b0: 09 09 66 69 6c 65 20 72 65 6e 61 6d 65 20 2d 66  ..file rename -f
04c0: 6f 72 63 65 20 2d 2d 20 24 74 6d 70 66 69 6c 65  orce -- $tmpfile
04d0: 20 24 66 69 6c 65 0a 09 09 09 7d 20 65 6c 73 65   $file....} else
04e0: 20 7b 0a 09 09 09 09 66 69 6c 65 20 64 65 6c 65   {.....file dele
04f0: 74 65 20 2d 66 6f 72 63 65 20 2d 2d 20 24 74 6d  te -force -- $tm
0500: 70 66 69 6c 65 0a 09 09 09 7d 0a 09 09 7d 0a 0a  pfile....}...}..
0510: 09 09 72 65 74 75 72 6e 20 24 66 69 6c 65 0a 09  ..return $file..
0520: 7d 0a 0a 0a 09 70 72 6f 63 20 5f 69 73 48 61 73  }....proc _isHas
0530: 68 20 7b 76 61 6c 75 65 7d 20 7b 0a 09 09 73 65  h {value} {...se
0540: 74 20 76 61 6c 75 65 20 5b 73 74 72 69 6e 67 20  t value [string 
0550: 74 6f 6c 6f 77 65 72 20 24 76 61 6c 75 65 5d 0a  tolower $value].
0560: 0a 09 09 69 66 20 7b 5b 73 74 72 69 6e 67 20 6c  ...if {[string l
0570: 65 6e 67 74 68 20 24 76 61 6c 75 65 5d 20 21 3d  ength $value] !=
0580: 20 34 30 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e   40} {....return
0590: 20 66 61 6c 73 65 0a 09 09 7d 0a 0a 09 09 69 66   false...}....if
05a0: 20 7b 21 5b 72 65 67 65 78 70 20 7b 5e 5b 30 2d   {![regexp {^[0-
05b0: 39 61 2d 66 5d 2a 24 7d 20 24 76 61 6c 75 65 5d  9a-f]*$} $value]
05c0: 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e 20 66 61  } {....return fa
05d0: 6c 73 65 0a 09 09 7d 0a 0a 09 09 72 65 74 75 72  lse...}....retur
05e0: 6e 20 74 72 75 65 0a 09 7d 0a 0a 09 70 72 6f 63  n true..}...proc
05f0: 20 5f 64 62 20 7b 61 72 67 73 7d 20 7b 0a 09 09   _db {args} {...
0600: 72 65 74 75 72 6e 20 5b 75 70 6c 65 76 65 6c 20  return [uplevel 
0610: 31 20 5b 6c 69 73 74 20 3a 3a 61 70 70 66 73 3a  1 [list ::appfs:
0620: 3a 64 62 20 7b 2a 7d 24 61 72 67 73 5d 5d 0a 09  :db {*}$args]]..
0630: 7d 0a 0a 09 70 72 6f 63 20 5f 6e 6f 72 6d 61 6c  }...proc _normal
0640: 69 7a 65 4f 53 20 7b 6f 73 7d 20 7b 0a 09 09 73  izeOS {os} {...s
0650: 65 74 20 6f 73 20 5b 73 74 72 69 6e 67 20 74 6f  et os [string to
0660: 6c 6f 77 65 72 20 5b 73 74 72 69 6e 67 20 74 72  lower [string tr
0670: 69 6d 20 24 6f 73 5d 5d 0a 0a 09 09 73 77 69 74  im $os]]....swit
0680: 63 68 20 2d 2d 20 24 6f 73 20 7b 0a 09 09 09 22  ch -- $os {...."
0690: 6c 69 6e 75 78 22 20 2d 20 22 66 72 65 65 62 73  linux" - "freebs
06a0: 64 22 20 2d 20 22 6f 70 65 6e 62 73 64 22 20 2d  d" - "openbsd" -
06b0: 20 22 6e 65 74 62 73 64 22 20 7b 0a 09 09 09 09   "netbsd" {.....
06c0: 72 65 74 75 72 6e 20 24 6f 73 0a 09 09 09 7d 0a  return $os....}.
06d0: 09 09 09 22 73 75 6e 6f 73 22 20 7b 0a 09 09 09  ..."sunos" {....
06e0: 09 72 65 74 75 72 6e 20 22 73 6f 6c 61 72 69 73  .return "solaris
06f0: 22 0a 09 09 09 7d 0a 09 09 7d 0a 0a 09 09 72 65  "....}...}....re
0700: 74 75 72 6e 20 2d 63 6f 64 65 20 65 72 72 6f 72  turn -code error
0710: 20 22 55 6e 61 62 6c 65 20 74 6f 20 6e 6f 72 6d   "Unable to norm
0720: 61 6c 69 7a 65 20 4f 53 3a 20 24 6f 73 22 0a 09  alize OS: $os"..
0730: 7d 0a 0a 09 70 72 6f 63 20 5f 6e 6f 72 6d 61 6c  }...proc _normal
0740: 69 7a 65 43 50 55 20 7b 63 70 75 7d 20 7b 0a 09  izeCPU {cpu} {..
0750: 09 73 65 74 20 63 70 75 20 5b 73 74 72 69 6e 67  .set cpu [string
0760: 20 74 6f 6c 6f 77 65 72 20 5b 73 74 72 69 6e 67   tolower [string
0770: 20 74 72 69 6d 20 24 63 70 75 5d 5d 0a 0a 09 09   trim $cpu]]....
0780: 73 77 69 74 63 68 20 2d 67 6c 6f 62 20 2d 2d 20  switch -glob -- 
0790: 24 63 70 75 20 7b 0a 09 09 09 22 69 3f 38 36 22  $cpu {...."i?86"
07a0: 20 7b 0a 09 09 09 09 72 65 74 75 72 6e 20 22 69   {.....return "i
07b0: 78 38 36 22 0a 09 09 09 7d 0a 09 09 09 22 78 38  x86"....}...."x8
07c0: 36 5f 36 34 22 20 7b 0a 09 09 09 09 72 65 74 75  6_64" {.....retu
07d0: 72 6e 20 24 63 70 75 0a 09 09 09 7d 0a 09 09 7d  rn $cpu....}...}
07e0: 0a 0a 09 09 72 65 74 75 72 6e 20 2d 63 6f 64 65  ....return -code
07f0: 20 65 72 72 6f 72 20 22 55 6e 61 62 6c 65 20 74   error "Unable t
0800: 6f 20 6e 6f 72 6d 61 6c 69 7a 65 20 43 50 55 3a  o normalize CPU:
0810: 20 24 63 70 75 22 0a 09 7d 0a 0a 09 70 72 6f 63   $cpu"..}...proc
0820: 20 69 6e 69 74 20 7b 7d 20 7b 0a 09 09 69 66 20   init {} {...if 
0830: 7b 5b 69 6e 66 6f 20 65 78 69 73 74 73 20 3a 3a  {[info exists ::
0840: 61 70 70 66 73 3a 3a 69 6e 69 74 5f 63 61 6c 6c  appfs::init_call
0850: 65 64 5d 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e  ed]} {....return
0860: 0a 09 09 7d 0a 0a 09 09 73 65 74 20 3a 3a 61 70  ...}....set ::ap
0870: 70 66 73 3a 3a 69 6e 69 74 5f 63 61 6c 6c 65 64  pfs::init_called
0880: 20 31 0a 0a 09 09 69 66 20 7b 21 5b 69 6e 66 6f   1....if {![info
0890: 20 65 78 69 73 74 73 20 3a 3a 61 70 70 66 73 3a   exists ::appfs:
08a0: 3a 64 62 5d 7d 20 7b 0a 09 09 09 66 69 6c 65 20  :db]} {....file 
08b0: 6d 6b 64 69 72 20 24 3a 3a 61 70 70 66 73 3a 3a  mkdir $::appfs::
08c0: 63 61 63 68 65 64 69 72 0a 0a 09 09 09 73 71 6c  cachedir.....sql
08d0: 69 74 65 33 20 3a 3a 61 70 70 66 73 3a 3a 64 62  ite3 ::appfs::db
08e0: 20 5b 66 69 6c 65 20 6a 6f 69 6e 20 24 3a 3a 61   [file join $::a
08f0: 70 70 66 73 3a 3a 63 61 63 68 65 64 69 72 20 63  ppfs::cachedir c
0900: 61 63 68 65 2e 64 62 5d 0a 09 09 7d 0a 0a 09 09  ache.db]...}....
0910: 23 20 43 72 65 61 74 65 20 74 61 62 6c 65 73 0a  # Create tables.
0920: 09 09 5f 64 62 20 65 76 61 6c 20 7b 43 52 45 41  .._db eval {CREA
0930: 54 45 20 54 41 42 4c 45 20 49 46 20 4e 4f 54 20  TE TABLE IF NOT 
0940: 45 58 49 53 54 53 20 73 69 74 65 73 28 68 6f 73  EXISTS sites(hos
0950: 74 6e 61 6d 65 20 50 52 49 4d 41 52 59 20 4b 45  tname PRIMARY KE
0960: 59 2c 20 6c 61 73 74 55 70 64 61 74 65 2c 20 74  Y, lastUpdate, t
0970: 74 6c 29 3b 7d 0a 09 09 5f 64 62 20 65 76 61 6c  tl);}..._db eval
0980: 20 7b 43 52 45 41 54 45 20 54 41 42 4c 45 20 49   {CREATE TABLE I
0990: 46 20 4e 4f 54 20 45 58 49 53 54 53 20 70 61 63  F NOT EXISTS pac
09a0: 6b 61 67 65 73 28 68 6f 73 74 6e 61 6d 65 2c 20  kages(hostname, 
09b0: 73 68 61 31 2c 20 70 61 63 6b 61 67 65 2c 20 76  sha1, package, v
09c0: 65 72 73 69 6f 6e 2c 20 6f 73 2c 20 63 70 75 41  ersion, os, cpuA
09d0: 72 63 68 2c 20 69 73 4c 61 74 65 73 74 2c 20 68  rch, isLatest, h
09e0: 61 76 65 4d 61 6e 69 66 65 73 74 29 3b 7d 0a 09  aveManifest);}..
09f0: 09 5f 64 62 20 65 76 61 6c 20 7b 43 52 45 41 54  ._db eval {CREAT
0a00: 45 20 54 41 42 4c 45 20 49 46 20 4e 4f 54 20 45  E TABLE IF NOT E
0a10: 58 49 53 54 53 20 66 69 6c 65 73 28 70 61 63 6b  XISTS files(pack
0a20: 61 67 65 5f 73 68 61 31 2c 20 74 79 70 65 2c 20  age_sha1, type, 
0a30: 74 69 6d 65 2c 20 73 6f 75 72 63 65 2c 20 73 69  time, source, si
0a40: 7a 65 2c 20 70 65 72 6d 73 2c 20 66 69 6c 65 5f  ze, perms, file_
0a50: 73 68 61 31 2c 20 66 69 6c 65 5f 6e 61 6d 65 2c  sha1, file_name,
0a60: 20 66 69 6c 65 5f 64 69 72 65 63 74 6f 72 79 29   file_directory)
0a70: 3b 7d 0a 0a 09 09 23 20 43 72 65 61 74 65 20 69  ;}....# Create i
0a80: 6e 64 65 78 65 73 0a 09 09 5f 64 62 20 65 76 61  ndexes..._db eva
0a90: 6c 20 7b 43 52 45 41 54 45 20 49 4e 44 45 58 20  l {CREATE INDEX 
0aa0: 49 46 20 4e 4f 54 20 45 58 49 53 54 53 20 73 69  IF NOT EXISTS si
0ab0: 74 65 73 5f 69 6e 64 65 78 20 4f 4e 20 73 69 74  tes_index ON sit
0ac0: 65 73 20 28 68 6f 73 74 6e 61 6d 65 29 3b 7d 0a  es (hostname);}.
0ad0: 09 09 5f 64 62 20 65 76 61 6c 20 7b 43 52 45 41  .._db eval {CREA
0ae0: 54 45 20 49 4e 44 45 58 20 49 46 20 4e 4f 54 20  TE INDEX IF NOT 
0af0: 45 58 49 53 54 53 20 70 61 63 6b 61 67 65 73 5f  EXISTS packages_
0b00: 69 6e 64 65 78 20 4f 4e 20 70 61 63 6b 61 67 65  index ON package
0b10: 73 20 28 68 6f 73 74 6e 61 6d 65 2c 20 70 61 63  s (hostname, pac
0b20: 6b 61 67 65 2c 20 76 65 72 73 69 6f 6e 2c 20 6f  kage, version, o
0b30: 73 2c 20 63 70 75 41 72 63 68 29 3b 7d 0a 09 09  s, cpuArch);}...
0b40: 5f 64 62 20 65 76 61 6c 20 7b 43 52 45 41 54 45  _db eval {CREATE
0b50: 20 49 4e 44 45 58 20 49 46 20 4e 4f 54 20 45 58   INDEX IF NOT EX
0b60: 49 53 54 53 20 66 69 6c 65 73 5f 69 6e 64 65 78  ISTS files_index
0b70: 20 4f 4e 20 66 69 6c 65 73 20 28 70 61 63 6b 61   ON files (packa
0b80: 67 65 5f 73 68 61 31 2c 20 66 69 6c 65 5f 6e 61  ge_sha1, file_na
0b90: 6d 65 2c 20 66 69 6c 65 5f 64 69 72 65 63 74 6f  me, file_directo
0ba0: 72 79 29 3b 7d 0a 09 7d 0a 0a 09 70 72 6f 63 20  ry);}..}...proc 
0bb0: 64 6f 77 6e 6c 6f 61 64 20 7b 68 6f 73 74 6e 61  download {hostna
0bc0: 6d 65 20 68 61 73 68 20 7b 6d 65 74 68 6f 64 20  me hash {method 
0bd0: 73 68 61 31 7d 7d 20 7b 0a 09 09 73 65 74 20 75  sha1}} {...set u
0be0: 72 6c 20 22 68 74 74 70 3a 2f 2f 24 68 6f 73 74  rl "http://$host
0bf0: 6e 61 6d 65 2f 61 70 70 66 73 2f 24 6d 65 74 68  name/appfs/$meth
0c00: 6f 64 2f 24 68 61 73 68 22 0a 09 09 73 65 74 20  od/$hash"...set 
0c10: 66 69 6c 65 20 5b 5f 63 61 63 68 65 66 69 6c 65  file [_cachefile
0c20: 20 24 75 72 6c 20 24 68 61 73 68 5d 0a 0a 09 09   $url $hash]....
0c30: 69 66 20 7b 21 5b 66 69 6c 65 20 65 78 69 73 74  if {![file exist
0c40: 73 20 24 66 69 6c 65 5d 7d 20 7b 0a 09 09 09 72  s $file]} {....r
0c50: 65 74 75 72 6e 20 2d 63 6f 64 65 20 65 72 72 6f  eturn -code erro
0c60: 72 20 22 55 6e 61 62 6c 65 20 74 6f 20 66 65 74  r "Unable to fet
0c70: 63 68 22 0a 09 09 7d 0a 0a 09 09 72 65 74 75 72  ch"...}....retur
0c80: 6e 20 24 66 69 6c 65 0a 09 7d 0a 0a 09 70 72 6f  n $file..}...pro
0c90: 63 20 67 65 74 69 6e 64 65 78 20 7b 68 6f 73 74  c getindex {host
0ca0: 6e 61 6d 65 7d 20 7b 0a 09 09 73 65 74 20 6e 6f  name} {...set no
0cb0: 77 20 5b 63 6c 6f 63 6b 20 73 65 63 6f 6e 64 73  w [clock seconds
0cc0: 5d 0a 0a 09 09 73 65 74 20 6c 61 73 74 55 70 64  ]....set lastUpd
0cd0: 61 74 65 73 20 5b 5f 64 62 20 65 76 61 6c 20 7b  ates [_db eval {
0ce0: 53 45 4c 45 43 54 20 6c 61 73 74 55 70 64 61 74  SELECT lastUpdat
0cf0: 65 2c 20 74 74 6c 20 46 52 4f 4d 20 73 69 74 65  e, ttl FROM site
0d00: 73 20 57 48 45 52 45 20 68 6f 73 74 6e 61 6d 65  s WHERE hostname
0d10: 20 3d 20 24 68 6f 73 74 6e 61 6d 65 20 4c 49 4d   = $hostname LIM
0d20: 49 54 20 31 3b 7d 5d 0a 09 09 69 66 20 7b 5b 6c  IT 1;}]...if {[l
0d30: 6c 65 6e 67 74 68 20 24 6c 61 73 74 55 70 64 61  length $lastUpda
0d40: 74 65 73 5d 20 3d 3d 20 30 7d 20 7b 0a 09 09 09  tes] == 0} {....
0d50: 73 65 74 20 6c 61 73 74 55 70 64 61 74 65 20 30  set lastUpdate 0
0d60: 0a 09 09 09 73 65 74 20 74 74 6c 20 30 0a 09 09  ....set ttl 0...
0d70: 7d 20 65 6c 73 65 20 7b 0a 09 09 09 73 65 74 20  } else {....set 
0d80: 6c 61 73 74 55 70 64 61 74 65 20 5b 6c 69 6e 64  lastUpdate [lind
0d90: 65 78 20 24 6c 61 73 74 55 70 64 61 74 65 73 20  ex $lastUpdates 
0da0: 30 5d 0a 09 09 09 73 65 74 20 74 74 6c 20 5b 6c  0]....set ttl [l
0db0: 69 6e 64 65 78 20 24 6c 61 73 74 55 70 64 61 74  index $lastUpdat
0dc0: 65 73 20 31 5d 0a 09 09 7d 0a 0a 09 09 69 66 20  es 1]...}....if 
0dd0: 7b 24 6e 6f 77 20 3c 20 28 24 6c 61 73 74 55 70  {$now < ($lastUp
0de0: 64 61 74 65 20 2b 20 24 74 74 6c 29 7d 20 7b 0a  date + $ttl)} {.
0df0: 09 09 09 72 65 74 75 72 6e 20 43 4f 4d 50 4c 45  ...return COMPLE
0e00: 54 45 0a 09 09 7d 0a 0a 09 09 69 66 20 7b 5b 73  TE...}....if {[s
0e10: 74 72 69 6e 67 20 6d 61 74 63 68 20 22 2a 5c 5b  tring match "*\[
0e20: 2f 7e 5c 5d 2a 22 20 24 68 6f 73 74 6e 61 6d 65  /~\]*" $hostname
0e30: 5d 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e 20 2d  ]} {....return -
0e40: 63 6f 64 65 20 65 72 72 6f 72 20 22 49 6e 76 61  code error "Inva
0e50: 6c 69 64 20 68 6f 73 74 6e 61 6d 65 22 0a 09 09  lid hostname"...
0e60: 7d 0a 0a 09 09 73 65 74 20 75 72 6c 20 22 68 74  }....set url "ht
0e70: 74 70 3a 2f 2f 24 68 6f 73 74 6e 61 6d 65 2f 61  tp://$hostname/a
0e80: 70 70 66 73 2f 69 6e 64 65 78 22 0a 0a 09 09 63  ppfs/index"....c
0e90: 61 74 63 68 20 7b 0a 09 09 09 73 65 74 20 74 6f  atch {....set to
0ea0: 6b 65 6e 20 5b 3a 3a 68 74 74 70 3a 3a 67 65 74  ken [::http::get
0eb0: 75 72 6c 20 24 75 72 6c 5d 0a 09 09 09 69 66 20  url $url]....if 
0ec0: 7b 5b 3a 3a 68 74 74 70 3a 3a 6e 63 6f 64 65 20  {[::http::ncode 
0ed0: 24 74 6f 6b 65 6e 5d 20 3d 3d 20 22 32 30 30 22  $token] == "200"
0ee0: 7d 20 7b 0a 09 09 09 09 73 65 74 20 69 6e 64 65  } {.....set inde
0ef0: 78 68 61 73 68 5f 64 61 74 61 20 5b 3a 3a 68 74  xhash_data [::ht
0f00: 74 70 3a 3a 64 61 74 61 20 24 74 6f 6b 65 6e 5d  tp::data $token]
0f10: 0a 09 09 09 7d 0a 09 09 09 3a 3a 68 74 74 70 3a  ....}....::http:
0f20: 3a 72 65 73 65 74 20 24 74 6f 6b 65 6e 0a 09 09  :reset $token...
0f30: 09 24 74 6f 6b 65 6e 20 63 6c 65 61 6e 75 70 0a  .$token cleanup.
0f40: 09 09 7d 0a 0a 09 09 69 66 20 7b 21 5b 69 6e 66  ..}....if {![inf
0f50: 6f 20 65 78 69 73 74 73 20 69 6e 64 65 78 68 61  o exists indexha
0f60: 73 68 5f 64 61 74 61 5d 7d 20 7b 0a 09 09 09 23  sh_data]} {....#
0f70: 20 43 61 63 68 65 20 74 68 69 73 20 72 65 73 75   Cache this resu
0f80: 6c 74 20 66 6f 72 20 36 30 20 73 65 63 6f 6e 64  lt for 60 second
0f90: 73 0a 09 09 09 5f 64 62 20 65 76 61 6c 20 7b 49  s...._db eval {I
0fa0: 4e 53 45 52 54 20 4f 52 20 52 45 50 4c 41 43 45  NSERT OR REPLACE
0fb0: 20 49 4e 54 4f 20 73 69 74 65 73 20 28 68 6f 73   INTO sites (hos
0fc0: 74 6e 61 6d 65 2c 20 6c 61 73 74 55 70 64 61 74  tname, lastUpdat
0fd0: 65 2c 20 74 74 6c 29 20 56 41 4c 55 45 53 20 28  e, ttl) VALUES (
0fe0: 24 68 6f 73 74 6e 61 6d 65 2c 20 24 6e 6f 77 2c  $hostname, $now,
0ff0: 20 24 3a 3a 61 70 70 66 73 3a 3a 6e 74 74 6c 29   $::appfs::nttl)
1000: 3b 7d 0a 0a 09 09 09 72 65 74 75 72 6e 20 2d 63  ;}.....return -c
1010: 6f 64 65 20 65 72 72 6f 72 20 22 55 6e 61 62 6c  ode error "Unabl
1020: 65 20 74 6f 20 66 65 74 63 68 20 24 75 72 6c 22  e to fetch $url"
1030: 0a 09 09 7d 0a 0a 09 09 73 65 74 20 69 6e 64 65  ...}....set inde
1040: 78 68 61 73 68 20 5b 6c 69 6e 64 65 78 20 5b 73  xhash [lindex [s
1050: 70 6c 69 74 20 24 69 6e 64 65 78 68 61 73 68 5f  plit $indexhash_
1060: 64 61 74 61 20 22 2c 22 5d 20 30 5d 0a 0a 09 09  data ","] 0]....
1070: 69 66 20 7b 21 5b 5f 69 73 48 61 73 68 20 24 69  if {![_isHash $i
1080: 6e 64 65 78 68 61 73 68 5d 7d 20 7b 0a 09 09 09  ndexhash]} {....
1090: 72 65 74 75 72 6e 20 2d 63 6f 64 65 20 65 72 72  return -code err
10a0: 6f 72 20 22 49 6e 76 61 6c 69 64 20 68 61 73 68  or "Invalid hash
10b0: 3a 20 24 69 6e 64 65 78 68 61 73 68 22 0a 09 09  : $indexhash"...
10c0: 7d 0a 0a 09 09 73 65 74 20 66 69 6c 65 20 5b 64  }....set file [d
10d0: 6f 77 6e 6c 6f 61 64 20 24 68 6f 73 74 6e 61 6d  ownload $hostnam
10e0: 65 20 24 69 6e 64 65 78 68 61 73 68 5d 0a 09 09  e $indexhash]...
10f0: 73 65 74 20 66 64 20 5b 6f 70 65 6e 20 24 66 69  set fd [open $fi
1100: 6c 65 5d 0a 09 09 73 65 74 20 64 61 74 61 20 5b  le]...set data [
1110: 72 65 61 64 20 24 66 64 5d 0a 09 09 63 6c 6f 73  read $fd]...clos
1120: 65 20 24 66 64 0a 0a 09 09 73 65 74 20 63 75 72  e $fd....set cur
1130: 72 5f 70 61 63 6b 61 67 65 73 20 5b 6c 69 73 74  r_packages [list
1140: 5d 0a 09 09 66 6f 72 65 61 63 68 20 6c 69 6e 65  ]...foreach line
1150: 20 5b 73 70 6c 69 74 20 24 64 61 74 61 20 22 5c   [split $data "\
1160: 6e 22 5d 20 7b 0a 09 09 09 73 65 74 20 6c 69 6e  n"] {....set lin
1170: 65 20 5b 73 74 72 69 6e 67 20 74 72 69 6d 20 24  e [string trim $
1180: 6c 69 6e 65 5d 0a 0a 09 09 09 69 66 20 7b 5b 73  line].....if {[s
1190: 74 72 69 6e 67 20 6d 61 74 63 68 20 22 2a 2f 2a  tring match "*/*
11a0: 22 20 24 6c 69 6e 65 5d 7d 20 7b 0a 09 09 09 09  " $line]} {.....
11b0: 63 6f 6e 74 69 6e 75 65 0a 09 09 09 7d 0a 0a 09  continue....}...
11c0: 09 09 69 66 20 7b 24 6c 69 6e 65 20 3d 3d 20 22  ..if {$line == "
11d0: 22 7d 20 7b 0a 09 09 09 09 63 6f 6e 74 69 6e 75  "} {.....continu
11e0: 65 0a 09 09 09 7d 0a 0a 09 09 09 73 65 74 20 77  e....}.....set w
11f0: 6f 72 6b 20 5b 73 70 6c 69 74 20 24 6c 69 6e 65  ork [split $line
1200: 20 22 2c 22 5d 0a 0a 09 09 09 75 6e 73 65 74 20   ","].....unset 
1210: 2d 6e 6f 63 6f 6d 70 6c 61 69 6e 20 70 6b 67 49  -nocomplain pkgI
1220: 6e 66 6f 0a 09 09 09 73 65 74 20 70 6b 67 49 6e  nfo....set pkgIn
1230: 66 6f 28 70 61 63 6b 61 67 65 29 20 20 5b 6c 69  fo(package)  [li
1240: 6e 64 65 78 20 24 77 6f 72 6b 20 30 5d 0a 09 09  ndex $work 0]...
1250: 09 73 65 74 20 70 6b 67 49 6e 66 6f 28 76 65 72  .set pkgInfo(ver
1260: 73 69 6f 6e 29 20 20 5b 6c 69 6e 64 65 78 20 24  sion)  [lindex $
1270: 77 6f 72 6b 20 31 5d 0a 09 09 09 73 65 74 20 70  work 1]....set p
1280: 6b 67 49 6e 66 6f 28 6f 73 29 20 20 20 20 20 20  kgInfo(os)      
1290: 20 5b 5f 6e 6f 72 6d 61 6c 69 7a 65 4f 53 20 5b   [_normalizeOS [
12a0: 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 32 5d 5d  lindex $work 2]]
12b0: 0a 09 09 09 73 65 74 20 70 6b 67 49 6e 66 6f 28  ....set pkgInfo(
12c0: 63 70 75 41 72 63 68 29 20 20 5b 5f 6e 6f 72 6d  cpuArch)  [_norm
12d0: 61 6c 69 7a 65 43 50 55 20 5b 6c 69 6e 64 65 78  alizeCPU [lindex
12e0: 20 24 77 6f 72 6b 20 33 5d 5d 0a 09 09 09 73 65   $work 3]]....se
12f0: 74 20 70 6b 67 49 6e 66 6f 28 68 61 73 68 29 20  t pkgInfo(hash) 
1300: 20 20 20 20 5b 73 74 72 69 6e 67 20 74 6f 6c 6f      [string tolo
1310: 77 65 72 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72  wer [lindex $wor
1320: 6b 20 34 5d 5d 0a 09 09 09 73 65 74 20 70 6b 67  k 4]]....set pkg
1330: 49 6e 66 6f 28 68 61 73 68 5f 74 79 70 65 29 20  Info(hash_type) 
1340: 22 73 68 61 31 22 0a 09 09 09 73 65 74 20 70 6b  "sha1"....set pk
1350: 67 49 6e 66 6f 28 69 73 4c 61 74 65 73 74 29 20  gInfo(isLatest) 
1360: 5b 65 78 70 72 20 7b 21 21 5b 6c 69 6e 64 65 78  [expr {!![lindex
1370: 20 24 77 6f 72 6b 20 35 5d 7d 5d 0a 0a 09 09 09   $work 5]}].....
1380: 69 66 20 7b 21 5b 5f 69 73 48 61 73 68 20 24 70  if {![_isHash $p
1390: 6b 67 49 6e 66 6f 28 68 61 73 68 29 5d 7d 20 7b  kgInfo(hash)]} {
13a0: 0a 09 09 09 09 63 6f 6e 74 69 6e 75 65 0a 09 09  .....continue...
13b0: 09 7d 0a 0a 09 09 09 6c 61 70 70 65 6e 64 20 63  .}.....lappend c
13c0: 75 72 72 5f 70 61 63 6b 61 67 65 73 20 24 70 6b  urr_packages $pk
13d0: 67 49 6e 66 6f 28 68 61 73 68 29 0a 0a 09 09 09  gInfo(hash).....
13e0: 23 20 44 6f 20 6e 6f 74 20 64 6f 20 61 6e 79 20  # Do not do any 
13f0: 61 64 64 69 74 69 6f 6e 61 6c 20 77 6f 72 6b 20  additional work 
1400: 69 66 20 77 65 20 61 6c 72 65 61 64 79 20 68 61  if we already ha
1410: 76 65 20 74 68 69 73 20 70 61 63 6b 61 67 65 0a  ve this package.
1420: 09 09 09 73 65 74 20 65 78 69 73 74 69 6e 67 5f  ...set existing_
1430: 70 61 63 6b 61 67 65 73 20 5b 5f 64 62 20 65 76  packages [_db ev
1440: 61 6c 20 7b 53 45 4c 45 43 54 20 70 61 63 6b 61  al {SELECT packa
1450: 67 65 20 46 52 4f 4d 20 70 61 63 6b 61 67 65 73  ge FROM packages
1460: 20 57 48 45 52 45 20 68 6f 73 74 6e 61 6d 65 20   WHERE hostname 
1470: 3d 20 24 68 6f 73 74 6e 61 6d 65 20 41 4e 44 20  = $hostname AND 
1480: 73 68 61 31 20 3d 20 24 70 6b 67 49 6e 66 6f 28  sha1 = $pkgInfo(
1490: 68 61 73 68 29 3b 7d 5d 0a 09 09 09 69 66 20 7b  hash);}]....if {
14a0: 5b 6c 73 65 61 72 63 68 20 2d 65 78 61 63 74 20  [lsearch -exact 
14b0: 24 65 78 69 73 74 69 6e 67 5f 70 61 63 6b 61 67  $existing_packag
14c0: 65 73 20 24 70 6b 67 49 6e 66 6f 28 70 61 63 6b  es $pkgInfo(pack
14d0: 61 67 65 29 5d 20 21 3d 20 2d 31 7d 20 7b 0a 09  age)] != -1} {..
14e0: 09 09 09 63 6f 6e 74 69 6e 75 65 0a 09 09 09 7d  ...continue....}
14f0: 0a 0a 09 09 09 69 66 20 7b 24 70 6b 67 49 6e 66  .....if {$pkgInf
1500: 6f 28 69 73 4c 61 74 65 73 74 29 7d 20 7b 0a 09  o(isLatest)} {..
1510: 09 09 09 5f 64 62 20 65 76 61 6c 20 7b 55 50 44  ..._db eval {UPD
1520: 41 54 45 20 70 61 63 6b 61 67 65 73 20 53 45 54  ATE packages SET
1530: 20 69 73 4c 61 74 65 73 74 20 3d 20 30 20 57 48   isLatest = 0 WH
1540: 45 52 45 20 68 6f 73 74 6e 61 6d 65 20 3d 20 24  ERE hostname = $
1550: 68 6f 73 74 6e 61 6d 65 20 41 4e 44 20 70 61 63  hostname AND pac
1560: 6b 61 67 65 20 3d 20 24 70 6b 67 49 6e 66 6f 28  kage = $pkgInfo(
1570: 24 70 61 63 6b 61 67 65 29 20 41 4e 44 20 6f 73  $package) AND os
1580: 20 3d 20 24 70 6b 67 49 6e 66 6f 28 24 70 61 63   = $pkgInfo($pac
1590: 6b 61 67 65 29 20 41 4e 44 20 63 70 75 41 72 63  kage) AND cpuArc
15a0: 68 20 3d 20 24 70 6b 67 49 6e 66 6f 28 63 70 75  h = $pkgInfo(cpu
15b0: 41 72 63 68 29 3b 7d 0a 09 09 09 7d 0a 0a 09 09  Arch);}....}....
15c0: 09 5f 64 62 20 65 76 61 6c 20 7b 49 4e 53 45 52  ._db eval {INSER
15d0: 54 20 49 4e 54 4f 20 70 61 63 6b 61 67 65 73 20  T INTO packages 
15e0: 28 68 6f 73 74 6e 61 6d 65 2c 20 73 68 61 31 2c  (hostname, sha1,
15f0: 20 70 61 63 6b 61 67 65 2c 20 76 65 72 73 69 6f   package, versio
1600: 6e 2c 20 6f 73 2c 20 63 70 75 41 72 63 68 2c 20  n, os, cpuArch, 
1610: 69 73 4c 61 74 65 73 74 2c 20 68 61 76 65 4d 61  isLatest, haveMa
1620: 6e 69 66 65 73 74 29 20 56 41 4c 55 45 53 20 28  nifest) VALUES (
1630: 24 68 6f 73 74 6e 61 6d 65 2c 20 24 70 6b 67 49  $hostname, $pkgI
1640: 6e 66 6f 28 68 61 73 68 29 2c 20 24 70 6b 67 49  nfo(hash), $pkgI
1650: 6e 66 6f 28 70 61 63 6b 61 67 65 29 2c 20 24 70  nfo(package), $p
1660: 6b 67 49 6e 66 6f 28 76 65 72 73 69 6f 6e 29 2c  kgInfo(version),
1670: 20 24 70 6b 67 49 6e 66 6f 28 6f 73 29 2c 20 24   $pkgInfo(os), $
1680: 70 6b 67 49 6e 66 6f 28 63 70 75 41 72 63 68 29  pkgInfo(cpuArch)
1690: 2c 20 24 70 6b 67 49 6e 66 6f 28 69 73 4c 61 74  , $pkgInfo(isLat
16a0: 65 73 74 29 2c 20 30 29 3b 7d 0a 09 09 7d 0a 0a  est), 0);}...}..
16b0: 09 09 23 20 4c 6f 6f 6b 20 66 6f 72 20 70 61 63  ..# Look for pac
16c0: 6b 61 67 65 73 20 74 68 61 74 20 68 61 76 65 20  kages that have 
16d0: 62 65 65 6e 20 64 65 6c 65 74 65 64 0a 09 09 73  been deleted...s
16e0: 65 74 20 66 6f 75 6e 64 5f 70 61 63 6b 61 67 65  et found_package
16f0: 73 20 5b 5f 64 62 20 65 76 61 6c 20 7b 53 45 4c  s [_db eval {SEL
1700: 45 43 54 20 73 68 61 31 20 46 52 4f 4d 20 70 61  ECT sha1 FROM pa
1710: 63 6b 61 67 65 73 20 57 48 45 52 45 20 68 6f 73  ckages WHERE hos
1720: 74 6e 61 6d 65 20 3d 20 24 68 6f 73 74 6e 61 6d  tname = $hostnam
1730: 65 3b 7d 5d 0a 09 09 66 6f 72 65 61 63 68 20 70  e;}]...foreach p
1740: 61 63 6b 61 67 65 20 24 66 6f 75 6e 64 5f 70 61  ackage $found_pa
1750: 63 6b 61 67 65 73 20 7b 0a 09 09 09 73 65 74 20  ckages {....set 
1760: 66 6f 75 6e 64 5f 70 61 63 6b 61 67 65 73 5f 61  found_packages_a
1770: 72 72 28 24 70 61 63 6b 61 67 65 29 20 31 0a 09  rr($package) 1..
1780: 09 7d 0a 0a 09 09 66 6f 72 65 61 63 68 20 70 61  .}....foreach pa
1790: 63 6b 61 67 65 20 24 63 75 72 72 5f 70 61 63 6b  ckage $curr_pack
17a0: 61 67 65 73 20 7b 0a 09 09 09 75 6e 73 65 74 20  ages {....unset 
17b0: 2d 6e 6f 63 6f 6d 70 6c 61 69 6e 20 66 6f 75 6e  -nocomplain foun
17c0: 64 5f 70 61 63 6b 61 67 65 73 5f 61 72 72 28 24  d_packages_arr($
17d0: 70 61 63 6b 61 67 65 29 0a 09 09 7d 0a 0a 09 09  package)...}....
17e0: 66 6f 72 65 61 63 68 20 70 61 63 6b 61 67 65 20  foreach package 
17f0: 5b 61 72 72 61 79 20 6e 61 6d 65 73 20 66 6f 75  [array names fou
1800: 6e 64 5f 70 61 63 6b 61 67 65 73 5f 61 72 72 5d  nd_packages_arr]
1810: 20 7b 0a 09 09 09 5f 64 62 20 65 76 61 6c 20 7b   {...._db eval {
1820: 44 45 4c 45 54 45 20 46 52 4f 4d 20 70 61 63 6b  DELETE FROM pack
1830: 61 67 65 73 20 57 48 45 52 45 20 68 6f 73 74 6e  ages WHERE hostn
1840: 61 6d 65 20 3d 20 24 68 6f 73 74 6e 61 6d 65 20  ame = $hostname 
1850: 41 4e 44 20 73 68 61 31 20 3d 20 24 70 61 63 6b  AND sha1 = $pack
1860: 61 67 65 3b 7d 0a 09 09 7d 0a 0a 09 09 5f 64 62  age;}...}...._db
1870: 20 65 76 61 6c 20 7b 49 4e 53 45 52 54 20 4f 52   eval {INSERT OR
1880: 20 52 45 50 4c 41 43 45 20 49 4e 54 4f 20 73 69   REPLACE INTO si
1890: 74 65 73 20 28 68 6f 73 74 6e 61 6d 65 2c 20 6c  tes (hostname, l
18a0: 61 73 74 55 70 64 61 74 65 2c 20 74 74 6c 29 20  astUpdate, ttl) 
18b0: 56 41 4c 55 45 53 20 28 24 68 6f 73 74 6e 61 6d  VALUES ($hostnam
18c0: 65 2c 20 24 6e 6f 77 2c 20 24 3a 3a 61 70 70 66  e, $now, $::appf
18d0: 73 3a 3a 74 74 6c 29 3b 7d 0a 0a 09 09 72 65 74  s::ttl);}....ret
18e0: 75 72 6e 20 43 4f 4d 50 4c 45 54 45 0a 09 7d 0a  urn COMPLETE..}.
18f0: 0a 09 70 72 6f 63 20 67 65 74 70 6b 67 6d 61 6e  ..proc getpkgman
1900: 69 66 65 73 74 20 7b 68 6f 73 74 6e 61 6d 65 20  ifest {hostname 
1910: 70 61 63 6b 61 67 65 5f 73 68 61 31 7d 20 7b 0a  package_sha1} {.
1920: 09 09 73 65 74 20 68 61 76 65 4d 61 6e 69 66 65  ..set haveManife
1930: 73 74 73 20 5b 5f 64 62 20 65 76 61 6c 20 7b 53  sts [_db eval {S
1940: 45 4c 45 43 54 20 68 61 76 65 4d 61 6e 69 66 65  ELECT haveManife
1950: 73 74 20 46 52 4f 4d 20 70 61 63 6b 61 67 65 73  st FROM packages
1960: 20 57 48 45 52 45 20 73 68 61 31 20 3d 20 24 70   WHERE sha1 = $p
1970: 61 63 6b 61 67 65 5f 73 68 61 31 20 4c 49 4d 49  ackage_sha1 LIMI
1980: 54 20 31 3b 7d 5d 0a 09 09 73 65 74 20 68 61 76  T 1;}]...set hav
1990: 65 4d 61 6e 69 66 65 73 74 20 5b 6c 69 6e 64 65  eManifest [linde
19a0: 78 20 24 68 61 76 65 4d 61 6e 69 66 65 73 74 73  x $haveManifests
19b0: 20 30 5d 0a 0a 09 09 69 66 20 7b 24 68 61 76 65   0]....if {$have
19c0: 4d 61 6e 69 66 65 73 74 7d 20 7b 0a 09 09 09 72  Manifest} {....r
19d0: 65 74 75 72 6e 20 43 4f 4d 50 4c 45 54 45 0a 09  eturn COMPLETE..
19e0: 09 7d 0a 0a 09 09 69 66 20 7b 21 5b 5f 69 73 48  .}....if {![_isH
19f0: 61 73 68 20 24 70 61 63 6b 61 67 65 5f 73 68 61  ash $package_sha
1a00: 31 5d 7d 20 7b 0a 09 09 09 72 65 74 75 72 6e 20  1]} {....return 
1a10: 46 41 49 4c 0a 09 09 7d 0a 0a 09 09 73 65 74 20  FAIL...}....set 
1a20: 66 69 6c 65 20 5b 64 6f 77 6e 6c 6f 61 64 20 24  file [download $
1a30: 68 6f 73 74 6e 61 6d 65 20 24 70 61 63 6b 61 67  hostname $packag
1a40: 65 5f 73 68 61 31 5d 0a 09 09 73 65 74 20 66 64  e_sha1]...set fd
1a50: 20 5b 6f 70 65 6e 20 24 66 69 6c 65 5d 0a 09 09   [open $file]...
1a60: 73 65 74 20 70 6b 67 64 61 74 61 20 5b 72 65 61  set pkgdata [rea
1a70: 64 20 24 66 64 5d 0a 09 09 63 6c 6f 73 65 20 24  d $fd]...close $
1a80: 66 64 0a 0a 09 09 5f 64 62 20 74 72 61 6e 73 61  fd...._db transa
1a90: 63 74 69 6f 6e 20 7b 0a 09 09 09 66 6f 72 65 61  ction {....forea
1aa0: 63 68 20 6c 69 6e 65 20 5b 73 70 6c 69 74 20 24  ch line [split $
1ab0: 70 6b 67 64 61 74 61 20 22 5c 6e 22 5d 20 7b 0a  pkgdata "\n"] {.
1ac0: 09 09 09 09 73 65 74 20 6c 69 6e 65 20 5b 73 74  ....set line [st
1ad0: 72 69 6e 67 20 74 72 69 6d 20 24 6c 69 6e 65 5d  ring trim $line]
1ae0: 0a 0a 09 09 09 09 69 66 20 7b 24 6c 69 6e 65 20  ......if {$line 
1af0: 3d 3d 20 22 22 7d 20 7b 0a 09 09 09 09 09 63 6f  == ""} {......co
1b00: 6e 74 69 6e 75 65 0a 09 09 09 09 7d 0a 0a 09 09  ntinue.....}....
1b10: 09 09 73 65 74 20 77 6f 72 6b 20 5b 73 70 6c 69  ..set work [spli
1b20: 74 20 24 6c 69 6e 65 20 22 2c 22 5d 0a 0a 09 09  t $line ","]....
1b30: 09 09 75 6e 73 65 74 20 2d 6e 6f 63 6f 6d 70 6c  ..unset -nocompl
1b40: 61 69 6e 20 66 69 6c 65 49 6e 66 6f 0a 09 09 09  ain fileInfo....
1b50: 09 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 74 79  .set fileInfo(ty
1b60: 70 65 29 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72  pe) [lindex $wor
1b70: 6b 20 30 5d 0a 09 09 09 09 73 65 74 20 66 69 6c  k 0].....set fil
1b80: 65 49 6e 66 6f 28 74 69 6d 65 29 20 5b 6c 69 6e  eInfo(time) [lin
1b90: 64 65 78 20 24 77 6f 72 6b 20 31 5d 0a 0a 09 09  dex $work 1]....
1ba0: 09 09 73 65 74 20 77 6f 72 6b 20 5b 6c 72 61 6e  ..set work [lran
1bb0: 67 65 20 24 77 6f 72 6b 20 32 20 65 6e 64 5d 0a  ge $work 2 end].
1bc0: 09 09 09 09 73 77 69 74 63 68 20 2d 2d 20 24 66  ....switch -- $f
1bd0: 69 6c 65 49 6e 66 6f 28 74 79 70 65 29 20 7b 0a  ileInfo(type) {.
1be0: 09 09 09 09 09 22 66 69 6c 65 22 20 7b 0a 09 09  ....."file" {...
1bf0: 09 09 09 09 73 65 74 20 66 69 6c 65 49 6e 66 6f  ....set fileInfo
1c00: 28 73 69 7a 65 29 20 5b 6c 69 6e 64 65 78 20 24  (size) [lindex $
1c10: 77 6f 72 6b 20 30 5d 0a 09 09 09 09 09 09 73 65  work 0].......se
1c20: 74 20 66 69 6c 65 49 6e 66 6f 28 70 65 72 6d 73  t fileInfo(perms
1c30: 29 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20  ) [lindex $work 
1c40: 31 5d 0a 09 09 09 09 09 09 73 65 74 20 66 69 6c  1].......set fil
1c50: 65 49 6e 66 6f 28 73 68 61 31 29 20 5b 6c 69 6e  eInfo(sha1) [lin
1c60: 64 65 78 20 24 77 6f 72 6b 20 32 5d 0a 0a 09 09  dex $work 2]....
1c70: 09 09 09 09 73 65 74 20 77 6f 72 6b 20 5b 6c 72  ....set work [lr
1c80: 61 6e 67 65 20 24 77 6f 72 6b 20 33 20 65 6e 64  ange $work 3 end
1c90: 5d 0a 09 09 09 09 09 7d 0a 09 09 09 09 09 22 73  ]......}......"s
1ca0: 79 6d 6c 69 6e 6b 22 20 7b 0a 09 09 09 09 09 09  ymlink" {.......
1cb0: 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 73 6f 75  set fileInfo(sou
1cc0: 72 63 65 29 20 5b 6c 69 6e 64 65 78 20 24 77 6f  rce) [lindex $wo
1cd0: 72 6b 20 30 5d 0a 09 09 09 09 09 09 73 65 74 20  rk 0].......set 
1ce0: 77 6f 72 6b 20 5b 6c 72 61 6e 67 65 20 24 77 6f  work [lrange $wo
1cf0: 72 6b 20 31 20 65 6e 64 5d 0a 09 09 09 09 09 7d  rk 1 end]......}
1d00: 0a 09 09 09 09 7d 0a 0a 09 09 09 09 73 65 74 20  .....}......set 
1d10: 66 69 6c 65 49 6e 66 6f 28 6e 61 6d 65 29 20 5b  fileInfo(name) [
1d20: 6a 6f 69 6e 20 24 77 6f 72 6b 20 22 2c 22 5d 0a  join $work ","].
1d30: 09 09 09 09 73 65 74 20 66 69 6c 65 49 6e 66 6f  ....set fileInfo
1d40: 28 6e 61 6d 65 29 20 5b 73 70 6c 69 74 20 5b 73  (name) [split [s
1d50: 74 72 69 6e 67 20 74 72 69 6d 20 24 66 69 6c 65  tring trim $file
1d60: 49 6e 66 6f 28 6e 61 6d 65 29 20 22 2f 22 5d 20  Info(name) "/"] 
1d70: 22 2f 22 5d 0a 09 09 09 09 73 65 74 20 66 69 6c  "/"].....set fil
1d80: 65 49 6e 66 6f 28 64 69 72 65 63 74 6f 72 79 29  eInfo(directory)
1d90: 20 5b 6a 6f 69 6e 20 5b 6c 72 61 6e 67 65 20 24   [join [lrange $
1da0: 66 69 6c 65 49 6e 66 6f 28 6e 61 6d 65 29 20 30  fileInfo(name) 0
1db0: 20 65 6e 64 2d 31 5d 20 22 2f 22 5d 0a 09 09 09   end-1] "/"]....
1dc0: 09 73 65 74 20 66 69 6c 65 49 6e 66 6f 28 6e 61  .set fileInfo(na
1dd0: 6d 65 29 20 5b 6c 69 6e 64 65 78 20 24 66 69 6c  me) [lindex $fil
1de0: 65 49 6e 66 6f 28 6e 61 6d 65 29 20 65 6e 64 5d  eInfo(name) end]
1df0: 0a 0a 09 09 09 09 5f 64 62 20 65 76 61 6c 20 7b  ......_db eval {
1e00: 49 4e 53 45 52 54 20 49 4e 54 4f 20 66 69 6c 65  INSERT INTO file
1e10: 73 20 28 70 61 63 6b 61 67 65 5f 73 68 61 31 2c  s (package_sha1,
1e20: 20 74 79 70 65 2c 20 74 69 6d 65 2c 20 73 6f 75   type, time, sou
1e30: 72 63 65 2c 20 73 69 7a 65 2c 20 70 65 72 6d 73  rce, size, perms
1e40: 2c 20 66 69 6c 65 5f 73 68 61 31 2c 20 66 69 6c  , file_sha1, fil
1e50: 65 5f 6e 61 6d 65 2c 20 66 69 6c 65 5f 64 69 72  e_name, file_dir
1e60: 65 63 74 6f 72 79 29 20 56 41 4c 55 45 53 20 28  ectory) VALUES (
1e70: 24 70 61 63 6b 61 67 65 5f 73 68 61 31 2c 20 24  $package_sha1, $
1e80: 66 69 6c 65 49 6e 66 6f 28 74 79 70 65 29 2c 20  fileInfo(type), 
1e90: 24 66 69 6c 65 49 6e 66 6f 28 74 69 6d 65 29 2c  $fileInfo(time),
1ea0: 20 24 66 69 6c 65 49 6e 66 6f 28 73 6f 75 72 63   $fileInfo(sourc
1eb0: 65 29 2c 20 24 66 69 6c 65 49 6e 66 6f 28 73 69  e), $fileInfo(si
1ec0: 7a 65 29 2c 20 24 66 69 6c 65 49 6e 66 6f 28 70  ze), $fileInfo(p
1ed0: 65 72 6d 73 29 2c 20 24 66 69 6c 65 49 6e 66 6f  erms), $fileInfo
1ee0: 28 73 68 61 31 29 2c 20 24 66 69 6c 65 49 6e 66  (sha1), $fileInf
1ef0: 6f 28 6e 61 6d 65 29 2c 20 24 66 69 6c 65 49 6e  o(name), $fileIn
1f00: 66 6f 28 64 69 72 65 63 74 6f 72 79 29 20 29 3b  fo(directory) );
1f10: 7d 0a 09 09 09 09 5f 64 62 20 65 76 61 6c 20 7b  }....._db eval {
1f20: 55 50 44 41 54 45 20 70 61 63 6b 61 67 65 73 20  UPDATE packages 
1f30: 53 45 54 20 68 61 76 65 4d 61 6e 69 66 65 73 74  SET haveManifest
1f40: 20 3d 20 31 20 57 48 45 52 45 20 73 68 61 31 20   = 1 WHERE sha1 
1f50: 3d 20 24 70 61 63 6b 61 67 65 5f 73 68 61 31 3b  = $package_sha1;
1f60: 7d 0a 09 09 09 7d 0a 09 09 7d 0a 0a 09 09 72 65  }....}...}....re
1f70: 74 75 72 6e 20 43 4f 4d 50 4c 45 54 45 0a 09 7d  turn COMPLETE..}
1f80: 0a 7d 0a                                         .}.