Hex Artifact Content

Artifact 07f0ced01b3e460dcc378189ad4a82f16b1d7b99:


0000: 23 21 20 2f 75 73 72 2f 62 69 6e 2f 65 6e 76 20  #! /usr/bin/env 
0010: 74 63 6c 73 68 0a 0a 70 61 63 6b 61 67 65 20 72  tclsh..package r
0020: 65 71 75 69 72 65 20 68 74 74 70 20 32 2e 37 0a  equire http 2.7.
0030: 70 61 63 6b 61 67 65 20 72 65 71 75 69 72 65 20  package require 
0040: 73 71 6c 69 74 65 33 0a 0a 6e 61 6d 65 73 70 61  sqlite3..namespa
0050: 63 65 20 65 76 61 6c 20 3a 3a 61 70 70 66 73 20  ce eval ::appfs 
0060: 7b 0a 09 76 61 72 69 61 62 6c 65 20 73 69 74 65  {..variable site
0070: 73 20 5b 6c 69 73 74 5d 0a 09 76 61 72 69 61 62  s [list]..variab
0080: 6c 65 20 63 61 63 68 65 64 69 72 20 22 2f 74 6d  le cachedir "/tm
0090: 70 2f 61 70 70 66 73 2d 63 61 63 68 65 22 0a 0a  p/appfs-cache"..
00a0: 09 70 72 6f 63 20 5f 68 61 73 68 5f 73 65 70 20  .proc _hash_sep 
00b0: 7b 68 61 73 68 20 7b 73 65 70 73 20 34 7d 7d 20  {hash {seps 4}} 
00c0: 7b 0a 09 09 66 6f 72 20 7b 73 65 74 20 69 64 78  {...for {set idx
00d0: 20 30 7d 20 7b 24 69 64 78 20 3c 20 24 73 65 70   0} {$idx < $sep
00e0: 73 7d 20 7b 69 6e 63 72 20 69 64 78 7d 20 7b 0a  s} {incr idx} {.
00f0: 09 09 09 61 70 70 65 6e 64 20 72 65 74 76 61 6c  ...append retval
0100: 20 22 5b 73 74 72 69 6e 67 20 72 61 6e 67 65 20   "[string range 
0110: 24 68 61 73 68 20 5b 65 78 70 72 20 7b 24 69 64  $hash [expr {$id
0120: 78 20 2a 20 32 7d 5d 20 5b 65 78 70 72 20 7b 28  x * 2}] [expr {(
0130: 24 69 64 78 20 2a 20 32 29 20 2b 20 31 7d 5d 5d  $idx * 2) + 1}]]
0140: 2f 22 0a 09 09 7d 0a 09 09 61 70 70 65 6e 64 20  /"...}...append 
0150: 72 65 74 76 61 6c 20 22 5b 73 74 72 69 6e 67 20  retval "[string 
0160: 72 61 6e 67 65 20 24 68 61 73 68 20 5b 65 78 70  range $hash [exp
0170: 72 20 7b 24 69 64 78 20 2a 20 32 7d 5d 20 65 6e  r {$idx * 2}] en
0180: 64 5d 22 0a 0a 09 09 72 65 74 75 72 6e 20 24 72  d]"....return $r
0190: 65 74 76 61 6c 0a 09 7d 0a 0a 09 70 72 6f 63 20  etval..}...proc 
01a0: 5f 63 61 63 68 65 66 69 6c 65 20 7b 75 72 6c 20  _cachefile {url 
01b0: 6b 65 79 20 7b 6b 65 79 49 73 48 61 73 68 20 31  key {keyIsHash 1
01c0: 7d 7d 20 7b 0a 09 09 69 66 20 7b 24 6b 65 79 49  }} {...if {$keyI
01d0: 73 48 61 73 68 7d 20 7b 0a 09 09 09 73 65 74 20  sHash} {....set 
01e0: 6b 65 79 20 5b 5f 68 61 73 68 5f 73 65 70 20 24  key [_hash_sep $
01f0: 6b 65 79 5d 0a 09 09 7d 0a 0a 09 09 73 65 74 20  key]...}....set 
0200: 66 69 6c 65 20 5b 66 69 6c 65 20 6a 6f 69 6e 20  file [file join 
0210: 24 3a 3a 61 70 70 66 73 3a 3a 63 61 63 68 65 64  $::appfs::cached
0220: 69 72 20 24 6b 65 79 5d 0a 0a 09 09 66 69 6c 65  ir $key]....file
0230: 20 6d 6b 64 69 72 20 5b 66 69 6c 65 20 64 69 72   mkdir [file dir
0240: 6e 61 6d 65 20 24 66 69 6c 65 5d 0a 0a 09 09 69  name $file]....i
0250: 66 20 7b 21 5b 66 69 6c 65 20 65 78 69 73 74 73  f {![file exists
0260: 20 24 66 69 6c 65 5d 7d 20 7b 0a 09 09 09 73 65   $file]} {....se
0270: 74 20 74 6d 70 66 69 6c 65 20 22 24 7b 66 69 6c  t tmpfile "${fil
0280: 65 7d 2e 6e 65 77 22 0a 0a 09 09 09 73 65 74 20  e}.new".....set 
0290: 66 64 20 5b 6f 70 65 6e 20 24 74 6d 70 66 69 6c  fd [open $tmpfil
02a0: 65 20 22 77 22 5d 0a 0a 09 09 09 73 65 74 20 74  e "w"].....set t
02b0: 6f 6b 65 6e 20 5b 3a 3a 68 74 74 70 3a 3a 67 65  oken [::http::ge
02c0: 74 75 72 6c 20 24 75 72 6c 20 2d 63 68 61 6e 6e  turl $url -chann
02d0: 65 6c 20 24 66 64 5d 0a 09 09 09 73 65 74 20 6e  el $fd]....set n
02e0: 63 6f 64 65 20 5b 3a 3a 68 74 74 70 3a 3a 6e 63  code [::http::nc
02f0: 6f 64 65 20 24 74 6f 6b 65 6e 5d 0a 09 09 09 3a  ode $token]....:
0300: 3a 68 74 74 70 3a 3a 72 65 73 65 74 20 24 74 6f  :http::reset $to
0310: 6b 65 6e 0a 09 09 09 63 6c 6f 73 65 20 24 66 64  ken....close $fd
0320: 0a 0a 09 09 09 69 66 20 7b 24 6e 63 6f 64 65 20  .....if {$ncode 
0330: 3d 3d 20 22 32 30 30 22 7d 20 7b 0a 09 09 09 09  == "200"} {.....
0340: 66 69 6c 65 20 72 65 6e 61 6d 65 20 2d 66 6f 72  file rename -for
0350: 63 65 20 2d 2d 20 24 74 6d 70 66 69 6c 65 20 24  ce -- $tmpfile $
0360: 66 69 6c 65 0a 09 09 09 7d 20 65 6c 73 65 20 7b  file....} else {
0370: 0a 09 09 09 09 66 69 6c 65 20 64 65 6c 65 74 65  .....file delete
0380: 20 2d 66 6f 72 63 65 20 2d 2d 20 24 74 6d 70 66   -force -- $tmpf
0390: 69 6c 65 0a 09 09 09 7d 0a 09 09 7d 0a 0a 09 09  ile....}...}....
03a0: 72 65 74 75 72 6e 20 24 66 69 6c 65 0a 09 7d 0a  return $file..}.
03b0: 0a 09 70 72 6f 63 20 67 65 74 69 6e 64 65 78 20  ..proc getindex 
03c0: 7b 68 6f 73 74 6e 61 6d 65 7d 20 7b 0a 09 09 69  {hostname} {...i
03d0: 66 20 7b 5b 73 74 72 69 6e 67 20 6d 61 74 63 68  f {[string match
03e0: 20 22 2a 5c 5b 2f 7e 5c 5d 2a 22 20 24 68 6f 73   "*\[/~\]*" $hos
03f0: 74 6e 61 6d 65 5d 7d 20 7b 0a 09 09 09 72 65 74  tname]} {....ret
0400: 75 72 6e 20 2d 63 6f 64 65 20 65 72 72 6f 72 20  urn -code error 
0410: 22 49 6e 76 61 6c 69 64 20 68 6f 73 74 6e 61 6d  "Invalid hostnam
0420: 65 22 0a 09 09 7d 0a 0a 09 09 73 65 74 20 75 72  e"...}....set ur
0430: 6c 20 22 68 74 74 70 3a 2f 2f 24 68 6f 73 74 6e  l "http://$hostn
0440: 61 6d 65 2f 61 70 70 66 73 2f 69 6e 64 65 78 22  ame/appfs/index"
0450: 0a 0a 09 09 73 65 74 20 69 6e 64 65 78 63 61 63  ....set indexcac
0460: 68 65 66 69 6c 65 20 5b 5f 63 61 63 68 65 66 69  hefile [_cachefi
0470: 6c 65 20 24 75 72 6c 20 22 53 45 52 56 45 52 53  le $url "SERVERS
0480: 2f 5b 73 74 72 69 6e 67 20 74 6f 6c 6f 77 65 72  /[string tolower
0490: 20 24 68 6f 73 74 6e 61 6d 65 5d 22 20 30 5d 0a   $hostname]" 0].
04a0: 0a 09 09 69 66 20 7b 21 5b 66 69 6c 65 20 65 78  ...if {![file ex
04b0: 69 73 74 73 20 24 69 6e 64 65 78 63 61 63 68 65  ists $indexcache
04c0: 66 69 6c 65 5d 7d 20 7b 0a 09 09 09 72 65 74 75  file]} {....retu
04d0: 72 6e 20 2d 63 6f 64 65 20 65 72 72 6f 72 20 22  rn -code error "
04e0: 55 6e 61 62 6c 65 20 74 6f 20 66 65 74 63 68 20  Unable to fetch 
04f0: 24 75 72 6c 22 0a 09 09 7d 0a 0a 09 09 73 65 74  $url"...}....set
0500: 20 66 64 20 5b 6f 70 65 6e 20 24 69 6e 64 65 78   fd [open $index
0510: 63 61 63 68 65 66 69 6c 65 5d 0a 09 09 67 65 74  cachefile]...get
0520: 73 20 24 66 64 20 69 6e 64 65 78 68 61 73 68 5f  s $fd indexhash_
0530: 64 61 74 61 0a 09 09 73 65 74 20 69 6e 64 65 78  data...set index
0540: 68 61 73 68 20 5b 6c 69 6e 64 65 78 20 5b 73 70  hash [lindex [sp
0550: 6c 69 74 20 24 69 6e 64 65 78 68 61 73 68 5f 64  lit $indexhash_d
0560: 61 74 61 20 22 2c 22 5d 20 30 5d 0a 09 09 63 6c  ata ","] 0]...cl
0570: 6f 73 65 20 24 66 64 0a 0a 09 09 73 65 74 20 66  ose $fd....set f
0580: 69 6c 65 20 5b 64 6f 77 6e 6c 6f 61 64 20 24 68  ile [download $h
0590: 6f 73 74 6e 61 6d 65 20 24 69 6e 64 65 78 68 61  ostname $indexha
05a0: 73 68 5d 0a 09 09 73 65 74 20 66 64 20 5b 6f 70  sh]...set fd [op
05b0: 65 6e 20 24 66 69 6c 65 5d 0a 09 09 73 65 74 20  en $file]...set 
05c0: 64 61 74 61 20 5b 72 65 61 64 20 24 66 64 5d 0a  data [read $fd].
05d0: 09 09 63 6c 6f 73 65 20 24 66 64 0a 0a 09 09 61  ..close $fd....a
05e0: 72 72 61 79 20 73 65 74 20 70 61 63 6b 61 67 65  rray set package
05f0: 73 20 5b 6c 69 73 74 5d 0a 09 09 66 6f 72 65 61  s [list]...forea
0600: 63 68 20 6c 69 6e 65 20 5b 73 70 6c 69 74 20 24  ch line [split $
0610: 64 61 74 61 20 22 5c 6e 22 5d 20 7b 0a 09 09 09  data "\n"] {....
0620: 73 65 74 20 6c 69 6e 65 20 5b 73 74 72 69 6e 67  set line [string
0630: 20 74 72 69 6d 20 24 6c 69 6e 65 5d 0a 0a 09 09   trim $line]....
0640: 09 69 66 20 7b 5b 73 74 72 69 6e 67 20 6d 61 74  .if {[string mat
0650: 63 68 20 22 2a 2f 2a 22 20 24 6c 69 6e 65 5d 7d  ch "*/*" $line]}
0660: 20 7b 0a 09 09 09 09 63 6f 6e 74 69 6e 75 65 0a   {.....continue.
0670: 09 09 09 7d 0a 0a 09 09 09 69 66 20 7b 24 6c 69  ...}.....if {$li
0680: 6e 65 20 3d 3d 20 22 22 7d 20 7b 0a 09 09 09 09  ne == ""} {.....
0690: 63 6f 6e 74 69 6e 75 65 0a 09 09 09 7d 0a 0a 09  continue....}...
06a0: 09 09 73 65 74 20 77 6f 72 6b 20 5b 73 70 6c 69  ..set work [spli
06b0: 74 20 24 6c 69 6e 65 20 22 2c 22 5d 0a 0a 09 09  t $line ","]....
06c0: 09 75 6e 73 65 74 20 2d 6e 6f 63 6f 6d 70 6c 61  .unset -nocompla
06d0: 69 6e 20 70 6b 67 49 6e 66 6f 0a 09 09 09 73 65  in pkgInfo....se
06e0: 74 20 70 6b 67 49 6e 66 6f 28 70 61 63 6b 61 67  t pkgInfo(packag
06f0: 65 29 20 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72  e)  [lindex $wor
0700: 6b 20 30 5d 0a 09 09 09 73 65 74 20 70 6b 67 49  k 0]....set pkgI
0710: 6e 66 6f 28 76 65 72 73 69 6f 6e 29 20 20 5b 6c  nfo(version)  [l
0720: 69 6e 64 65 78 20 24 77 6f 72 6b 20 31 5d 0a 09  index $work 1]..
0730: 09 09 73 65 74 20 70 6b 67 49 6e 66 6f 28 6f 73  ..set pkgInfo(os
0740: 29 20 20 20 20 20 20 20 5b 6c 69 6e 64 65 78 20  )       [lindex 
0750: 24 77 6f 72 6b 20 32 5d 0a 09 09 09 73 65 74 20  $work 2]....set 
0760: 70 6b 67 49 6e 66 6f 28 63 70 75 41 72 63 68 29  pkgInfo(cpuArch)
0770: 20 20 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20    [lindex $work 
0780: 33 5d 0a 09 09 09 73 65 74 20 70 6b 67 49 6e 66  3]....set pkgInf
0790: 6f 28 68 61 73 68 29 20 20 20 20 20 5b 73 74 72  o(hash)     [str
07a0: 69 6e 67 20 74 6f 6c 6f 77 65 72 20 5b 6c 69 6e  ing tolower [lin
07b0: 64 65 78 20 24 77 6f 72 6b 20 34 5d 5d 0a 09 09  dex $work 4]]...
07c0: 09 73 65 74 20 70 6b 67 49 6e 66 6f 28 68 61 73  .set pkgInfo(has
07d0: 68 5f 74 79 70 65 29 20 22 73 68 61 31 22 0a 09  h_type) "sha1"..
07e0: 09 09 73 65 74 20 70 6b 67 49 6e 66 6f 28 69 73  ..set pkgInfo(is
07f0: 4c 61 74 65 73 74 29 20 5b 65 78 70 72 20 7b 21  Latest) [expr {!
0800: 21 5b 6c 69 6e 64 65 78 20 24 77 6f 72 6b 20 35  ![lindex $work 5
0810: 5d 7d 5d 0a 0a 09 09 09 69 66 20 7b 5b 73 74 72  ]}].....if {[str
0820: 69 6e 67 20 6c 65 6e 67 74 68 20 24 70 6b 67 49  ing length $pkgI
0830: 6e 66 6f 28 68 61 73 68 29 5d 20 21 3d 20 34 30  nfo(hash)] != 40
0840: 7d 20 7b 0a 09 09 09 09 63 6f 6e 74 69 6e 75 65  } {.....continue
0850: 0a 09 09 09 7d 0a 0a 09 09 09 69 66 20 7b 21 5b  ....}.....if {![
0860: 72 65 67 65 78 70 20 7b 5e 5b 30 2d 39 61 2d 66  regexp {^[0-9a-f
0870: 5d 2a 24 7d 20 24 70 6b 67 49 6e 66 6f 28 68 61  ]*$} $pkgInfo(ha
0880: 73 68 29 5d 7d 20 7b 0a 09 09 09 09 63 6f 6e 74  sh)]} {.....cont
0890: 69 6e 75 65 0a 09 09 09 7d 0a 0a 09 09 09 73 65  inue....}.....se
08a0: 74 20 70 61 63 6b 61 67 65 73 28 24 70 6b 67 49  t packages($pkgI
08b0: 6e 66 6f 28 70 61 63 6b 61 67 65 29 29 20 5b 61  nfo(package)) [a
08c0: 72 72 61 79 20 67 65 74 20 70 6b 67 49 6e 66 6f  rray get pkgInfo
08d0: 5d 0a 09 09 7d 0a 0a 09 09 72 65 74 75 72 6e 20  ]...}....return 
08e0: 5b 61 72 72 61 79 20 67 65 74 20 70 61 63 6b 61  [array get packa
08f0: 67 65 73 5d 0a 09 7d 0a 0a 09 70 72 6f 63 20 64  ges]..}...proc d
0900: 6f 77 6e 6c 6f 61 64 20 7b 68 6f 73 74 6e 61 6d  ownload {hostnam
0910: 65 20 68 61 73 68 20 7b 6d 65 74 68 6f 64 20 73  e hash {method s
0920: 68 61 31 7d 7d 20 7b 0a 09 09 73 65 74 20 75 72  ha1}} {...set ur
0930: 6c 20 22 68 74 74 70 3a 2f 2f 24 68 6f 73 74 6e  l "http://$hostn
0940: 61 6d 65 2f 61 70 70 66 73 2f 24 6d 65 74 68 6f  ame/appfs/$metho
0950: 64 2f 24 68 61 73 68 22 0a 09 09 73 65 74 20 66  d/$hash"...set f
0960: 69 6c 65 20 5b 5f 63 61 63 68 65 66 69 6c 65 20  ile [_cachefile 
0970: 24 75 72 6c 20 24 68 61 73 68 5d 0a 0a 09 09 69  $url $hash]....i
0980: 66 20 7b 21 5b 66 69 6c 65 20 65 78 69 73 74 73  f {![file exists
0990: 20 24 66 69 6c 65 5d 7d 20 7b 0a 09 09 09 72 65   $file]} {....re
09a0: 74 75 72 6e 20 2d 63 6f 64 65 20 65 72 72 6f 72  turn -code error
09b0: 20 22 55 6e 61 62 6c 65 20 74 6f 20 66 65 74 63   "Unable to fetc
09c0: 68 22 0a 09 09 7d 0a 0a 09 09 72 65 74 75 72 6e  h"...}....return
09d0: 20 24 66 69 6c 65 0a 09 7d 0a 7d 0a               $file..}.}.