remove a couple of unused methods of buckets

mv amdlib/util/* to allmydata/util/

small tweaks to test_storage.py

update notes about lease deletion logic

add some vdrive logging

more upload unit tests

add download code to vdrive, add system-level test for vdrive functionality, refactor DownloadTargets

unit tests for vdrive

ignore .buildbot options directory

update roadmap more

update roadmap

initial file-table support, VirtualDrive service, rearrange Storage somewhat

manhole: add more keybindings

implement/test download, modify Storage to match

make the system test work

add more logging

encode: delay completion until all our messages have been delivered

client: closures confuse me, late binding bites me yet again

make sure the StorageServer goes underneath the client's basedir

improving system test, still broken, possibly a Foolscap problem

misc upload fixes and improvements

deal with the face that peerids are always binary in tests

avoid race conditions and multiple-notify in the Roster

make logging multiple nodes at once easier to follow

rearrange node startup again, allowing Tub.registerReference to happen in startService rather than in some later turn. Also add a 'local_ip' file with which you can override the published IP address of the node

beginnings of a system test, with 5 nodes and a queen

rearrange client setup, factor out common Node functionality, add Uploader service to client

prototype encoder

rearrange names, add more RemoteInterfaces to make tests pass again

fix pyflakes warnings/errors

standardize on keeping nodeids (and all other SHA1-derived values as binary everywhere, only doing idlib.b2a() when interacting with a human or the filesystem

improve RemoteInterface specifications

add RemoteInterfaces (foolscap schemas). some tests break.

change bucket writer protocol, give Encoder a RemoteReference instead of a file-like object

add the 'Denver Airport' design doc, for Chord-based peer selection

upload: add WriterProxy

split 'Bucket' into separate subclasses for read and write

prevent reading unfinished buckets

implement upload peer selection

allow buckets written by previous runs to be read

added read and cross check to storage unit test, minor cleanups

added storage test

fix another read_attr bug

fix counting of bytes written

fix bug in bucketstore read/write _attr

manhole: ctrl-h is Backspace, not Delete. War Is Peace, Freedom Is Slavery, etc

fix test cases to not use camelCase

roadmap: connection management v1 milestone done

add Client.permute_peers

fix up StorageServer so that unit tests will run again

rerecord all the storageserver patches in one go

darcs was dying trying to deal with the conflict resolution patches.

this adds a (very rough) bucketstore and storageserver.
probably needs lots of work both in api and implementation.

added 'debugshell' module a convenient dumping ground for tools for manhole environment

added run-client2 target to makefile

added create_dirs makefile target to create initial dirs

update assertutil to use twisted log instead of amdlib Log

pulled in assertutil and with it humanreadable from amdlib.util

add ctrl-U and ctrl-H handling to our form of Manhole

change manhole setup for queen too

change manhole setup for client: create authorized_keys.8022 (or other portnum)

set Client.nodeid to our (ascii, base32) tubid

add Client.get_remote_service utility method

ignore all client-basedirNN directories

fix losing-client-connection handler

implement more Roster stuff: add_peer, lost_peer. Changed Client service registration scheme.

start developing Roster, track all active peers

add Manhole to queen (port 8021), also change manhole namespace to just have 'app' (for both queen and client)

add Manhole functionality to the client: port 8022, add an authorized_keys file to the client's basedir to enable it

point client.tac at yumyum's queen

add roadmap

remove that queen_host stuff

help the queen have a persistent PBURL, have the client connect to it

start on client what-is-my-ipaddress functionality

actually add tests

add test infrastructure, use 'make test' to run it, please run before pushing

create a Makefile to drive things

add beginning queen code

add darcs boringfile

create a stub Storage service, start work on publishing it

have client running, no queen to connect to yet

start client framework

some pointless fussing about with sizes.py

fix bug in simulator graphing (still doesn't work though)

attempt to graph utilization with pyrrd (doesn't quite work)

make Simulator instance s global so that I can play with it in "python -i" after main() has exited

fix delete

added a simulator tool

emit tables up to 1TiB

tool to generate an overhead/alacrity table for various hashing schemes