uri.py: share counts are not base32-encoded

upload: change _compute_uri a bit, get infile in a different way

switch upload to use encode_new, fix a few things (but not nearly all of them)

test_encode: make sure encode_new can produce the data it is supposed to

chunk.py: remove unused non-tagged hash code

encode_new: use tagged (sha256) hashes everywhere

import fileutil, some of which came from amdlib.util and some of which came from the pyutil library

finish storage server and write new download

TODOs

new upload and storage server

add TODO

chunk.py: fix a pyflakes warning

update feisty packaging

first attempt at adding debian packaging support for ubuntu 'feisty'

node creation: be willing to utilize a pre-existing (but empty) directory

webish: add 'my nodeid' to the page

change HashTree to use new hashutil convenience methods, thus fixing a security flaw

hashutil: convenience methods for tagged and encoded hashes
In various cases, including Merkle Trees, it is useful to tag and encode the inputs to your secure hashes to prevent security flaws due to ambiguous meanings of hash values.

change #!/usr/bin/python to #!/usr/bin/env python
Note that using "whatever version of python the name 'python' maps to in the current shell environment" is more error-prone that specifying which python you mean, such as by executing "/usr/bin/python setup.py" instead of executing "./setup.py".  When you build tahoe (by running "make") it will make a copy of bin/allmydata-tahoe in instdir/bin/allmydata-tahoe with the shebang line rewritten to execute the specific version of python that was used when building instead of to execute "/usr/bin/env python".

However, it seems better that the default for lazy people be "whatever 'python' means currently" instead of "whatever 'python' meant to the manufacturer of your operating system".

debian: add python-nevow to the sid dependencies

debian: add python-twisted, python-nevow, python-pyopenssl to the dapper dependencies

fix the sid debian packaging too

probably fix the debian dapper packaging to include pyfec and crypto.. sid still needs to be fixed

tahoe readme - updated to included all packages and clarify text

test_iputil: remove the test that only works on linux, since we're using the cross-unix 'get_local_addresses_async' anyways. This should allow the tests to pass on OS-X

introducer: add some comments about separating nodeid from tubid

hush pyflakes warnings in codec and test_codec

encode_new.py: rearrange methods into the order in which they should be called

update memory-footprint and share-size docs in ICodecEncoder

pyfec: more thanks to Brian

pyfec: fix another error path, combine the type-level docstring with the (hitherto unlinked) init docstring

pyfec: fix some error-checking, add more unit tests

document a proposed IDecoder interface, still pretty bare-bones

document IEncoder, add Encoder.set_landlords()

encode_new.py: add comments, make variable names more illuminating

added a README explaining how to get started and what library dependencies are needed

remove left-over early encode mechanism

switch to pyfec

pyfec: correctly handle wrongly typed input by raising exception

fix test_codec and test_upload to handle current API

pyfec: fix bug in easyfec

pyfec: add easyfec wrapper which takes a single string and splits it into input shares and pads, then passes it on to the inner fec object

pyfec: add documentation, assertion, licence information

pyfec: add benchmark measurement on my cool new MacBook Pro

update ReplicatingEncoder and decoder to match the current ICodecEncoder/decoder interface

ICodecEncoder: resolve some questions about the API, still more to examine

update the docs on ICodecEncoder and ICodecDecoder

fix some python2.5 incompatibilities, and remove an old webish display that suggested we might know about peers but not be connected to them

add verbosity option to bench

test_introducer: flushEventualQueue at the end of the test run

complete the Introducer changes, separate out vdrive access, make everything work again

add link to mailing list

pyfec repository description of how to download the code via darcs

merge incomplete stuff with other patches

incomplete work to be finished elsewhere

hush a pyflakes warning

separate queen's service of introduction-to-the-network from queen's service of providing-access-to-the-vdrive

more work on a memory-footprint test program

start work on a memory-measuring test tool

add test-pyfec target, not added to the main 'test' target because it adds 20 seconds to the test run

test_system.py: remove the lowered (20s) timeouts, since some buildslaves require more like 30 or 40 seconds to complete the test

test_observer: improve test coverage

Makefile: add an upload-figleaf target, rather than having the buildbot create the rsync command itself

node.py: switch to using get_local_addresses_async, which is slightly more portable (most forms of unix)

rearrange service startup a bit, now Node.startService() returns a Deferred that fires when the tub is actually ready, and there is also a Node.when_tub_ready() hook. This allows get_local_addresses() to be slow and not break everything. Changed all necessary test cases to accomodate this slow startup.

test_observer.py: remove the code that allows observers to run out-of-order, our use of foolscap.eventual removes this error case

add OneShotObserverList from the amdlib tree

control.py: fix get_memory_usage, add a sample client tool

iputil: switch to a scapy-inspired SIOCGIFADDR approach, very linux-specific now

iputil: use the subprocess module instead of os.popen

control: add RIControlClient, fix some pyflakes warnings

add a local foolscap control interface, to upload/download files and check memory usage

iputil: use explicit /sbin/ifconfig, to avoid depending upon PATH

change node startup to put all local addresses in the PBURL, including 127.0.0.1. This should facilitate testing on both connected and disconnected systems.

iputil: add get_local_addresses(), an attempt to enumerate all IPv4 addresses on this host. This is pretty unix-specific for right now (it calls ifconfig)

util.iputil: try to survive not having a global network connection at all

add some questions to allmydata.interfaces

Makefile: update figleaf code to use INSTDIR instead of now-obsolete builddir.py

dummy line to show off buildbot

hush pyflakes warnings

update the use of the encoder API in download.py

fix purely syntactic merge conflict

use pyfec instead of py_ecc for erasure coding and update API to codec

add mathutil.next_power_of_k() and mathutil.ave()

"make clean" recursively runs cleanup in subprojects (pyfec and Crypto)

pyfec: version number bump to v0.99

pyfec: add ACK and TODO

pyfec: add TODO

pyfec: fix typo in unit test

pyfec: fix preconditions and typing, remove unused error-checking, tidy-up naming and documentation

pyfec: licensing tweak

Makefile: $(PWD) doesn't always work, in particular the buildslaves don't
update environment variables like $(PWD) when the launch commands.

Makefile: parameterize 'trial' and 'python' to enable a python2.5 builder

Makefile: count-lines: ignore build/* files, also add total number of .py files

add new build/instdir directories to the boringfile

rename Crypto to allmydata.Crypto
This kind of makes me think that there is a general principle that things
shouldn't know their own names.  After all, a name is what *other* people use
to refer to you.  And in the general case, some other people might refer to you
in ways incompatible with the ways that other people refer to you.

cleanup new "instdir" on "make clean"

pyfec: make it compatible with Python 2.4 as well as Python 2.5

pyfec: silence compiler warnings, add -Wall to debugmode compilation

change build system to use subpackages pristinely and ask them to install themselves into an "instdir"