knoppixはここからリンクを辿ってダウンロードすることができます。 プログラムをするならMathが大変お薦めです。
Vine Linuxがダウンロードできます。Vineは数あるディストリビューションでも かなりお薦めです。Tips集やマニュアルもあるので困ったときには見てみるのもいいかもしれません。
JavaコンパイラやJVMなどダウンロードできます。 また、APIの仕様なども載っているため大変重宝します。 上のリンク先は英語ですが、リファレンスやダウンロードページなど、 日本語もちゃんとあるので安心です。