Downloadliste

Projektbeschreibung

HarvestMan is a multithreaded off-line browser.It has many features for customizing offline browsing through URL filters, word filters, domain filters, URL priorities, depth-fetching, fetch levels, file limits, time limits, robot exclusion protocols, and many more. It is useful to download an entire Web site or certain files from a Web site to the hard disk for offline browsing later. It supports HTTP/HTTPS and FTP protocols and can work across proxies.

Systemanforderungen

Die Systemvoraussetzungen sind nicht definiert
Information regarding Project Releases and Project Resources. Note that the information here is a quote from Freecode.com page, and the downloads themselves may not be hosted on OSDN.

2004-12-17 12:20
1.4

Diese Version verfügt über eine ad / Banner Filter Anzeige URLs zu filtern, eine Option auf eine URL Baum Datei mit URL Eltern-Kind-Beziehungen, eine Option, um Downloads von maximale Dateigröße Kontrolle Dump, verbesserte Setup-Skripten, eine neue Linux / Unix-Skript installieren, Bugfixes für Downloads über Thread lokalen Puffern, einen Link Körperregion Algorithmus, und viele Bugfixes, unter anderem in den Vorschriften Modul zum Parsen von der Regel zu filtern URLs von Dateinamenerweiterungen.
Tags: Major bugfixes
This release features an ad/banner filter to filter
advertisement URLs, an option to dump a URL tree file
showing URL parent-child relations, an option to control
downloads by maximum file size, improved setup scripts, a
new Linux/Unix install script, bugfixes for downloads using
thread local buffers, a link localization algorithm, and many
bugfixes, including in the rules module for parsing a rule to
filter URLs by file name extensions.

2004-11-18 14:25
1.4 beta 2

Die Logik wurde geändert, um lokalen Threads Puffer-Prozess, so sind Downloads nicht bis zum lokalen Puffern verarbeitet werden, abgeschlossen. Dies behebt das Problem mit teilweiser Downloads. Thread idle Zeit wurde erhöht, um die CPU-Auslastung zu verringern. Die urlparser Methoden wurden modifiziert, um Fehler in der URL-Protokoll-Analyse und den Dateinamen fest / relativer Dateiname Bau. Bugs behoben und Optimierungen wurden in "robots.txt"-Parsing-Regeln aufgenommen. Fehler in der Überprüfung urlfilter Algorithmus festgelegt worden sind. Fixes wurden vorgenommen, um Sonderzeichen und Umgebungsvariablen in Projekt-Verzeichnis Spezifikation zu ermöglichen.
Tags: Development, Major bugfixes
The logic was modified to process local thread
buffers, so downloads are not completed until
local buffers are processed. This fixes the
problem with partial downloads. Thread idle time
was increased to reduce CPU usage. The urlparser
methods were modified to fix errors in URL
protocol parsing and filename/relative filename
construction. Bugs were fixed and optimizations
were added in robots.txt rules parsing. Bugs in
the urlfilter checking algorithm were fixed. Fixes
were made to allow special characters and
environment variables in project directory
specification.

2004-11-08 15:10
1.4 beta 1

Ein großes Problem mit hängenden Fäden wurde durch die Einführung Thread Local Storage mit nicht-blockierende Warteschlange festen I / O. Ein Fehler mit der Aktualisierung von Dateien aus dem Cache wurde behoben.
Tags: Development, Major bugfixes
A major problem with hanging threads was fixed by
introducing thread local storage with non-blocking
queue I/O. A bug with updating files from cache
was fixed.

2004-11-03 17:00
1.4 alpha 3

Die asynchrone Server-URL wurde geändert, um in einem separaten Thread ausgeführt. Ascynchronous URL-Server-Modus gestellt wurde der Standardmodus, statt Warteschlange. Urlserver Das Modul wurde von Grund auf neu geschrieben. URL-Objekte werden über ihre ganze Indizes in die Warteschlange und Server-Belastung zu verringern. Weitere kleinere Bugfixes wurden.
Tags: Development, Major bugfixes
The asynchronous URL server was modified to run in
a separate thread. Ascynchronous URL server mode
has been made the default mode, instead of queue.
The urlserver module was rewritten from scratch.
URL objects are managed using their integer
indexes to reduce queue and server load. Other
minor bugfixes were made.

2004-10-28 15:34
1.4 alpha 2

Eine asynchrone URL-Server basierend auf asyncore hinzugefügt wurde. Dies kann an die Stelle der URL-Warteschlange verwendet werden. Der Caching-Algorithmus wurde geändert, um Daten-Datei zu speichern, damit die Aktualisierung von Dateien direkt aus dem Cache. Slow-Modus wurde behoben. Das Programm verwendet nun eine eigene strptime Modul. Viele Bugfixes und Performance-Fixes wurden für Windows gemacht.
Tags: Development, Major feature enhancements
An asynchronous URL server based on asyncore was added. This can be used in the place of the URL queue. The caching algorithm was modified to store file data to allow updating of files directly from the cache. Slow mode was fixed. The program now uses its own strptime module. Many bugfixes and performance fixes were made for Windows.

Project Resources