src - crawler - Unnamed repository; edit this file 'description' to name the repository.

Mode	Name	Size
-rw-r--r--	ChainURLFilter.cpp	729	log plain
-rw-r--r--	ChainURLFilter.hpp	429	log plain
-rw-r--r--	DNSResolver.hpp	80	log plain
-rw-r--r--	Deduper.cpp	49	log plain
-rw-r--r--	Deduper.hpp	231	log plain
-rw-r--r--	Fetcher.hpp	217	log plain
-rw-r--r--	Frontier.hpp	209	log plain
-rw-r--r--	GNUmakefile	1280	log plain
-rw-r--r--	GoogleURLNormalizer.cpp	2499	log plain
-rw-r--r--	GoogleURLNormalizer.hpp	681	log plain
-rw-r--r--	HTMLLinkExtractProcessor.cpp	2092	log plain
-rw-r--r--	HTMLLinkExtractProcessor.hpp	683	log plain
-rw-r--r--	HostURLFilter.cpp	412	log plain
-rw-r--r--	HostURLFilter.hpp	306	log plain
-rw-r--r--	LibFetchFetcher.cpp	237	log plain
-rw-r--r--	LibFetchFetcher.hpp	266	log plain
-rw-r--r--	LibFetchRewindInputStream.cpp	1843	log plain
-rw-r--r--	LibFetchRewindInputStream.hpp	437	log plain
-rw-r--r--	Logger.hpp	3006	log plain
-rw-r--r--	MD5Deduper.hpp	299	log plain
-rw-r--r--	MemoryFrontier.hpp	513	log plain
-rw-r--r--	MemoryURLSeen.cpp	402	log plain
-rw-r--r--	MemoryURLSeen.hpp	248	log plain
-rw-r--r--	Processor.hpp	197	log plain
-rw-r--r--	ProtocolURLFilter.cpp	467	log plain
-rw-r--r--	ProtocolURLFilter.hpp	321	log plain
-rw-r--r--	RewindInputStream.hpp	346	log plain
-rw-r--r--	SimpleURLNormalizer.cpp	3767	log plain
-rw-r--r--	SimpleURLNormalizer.hpp	344	log plain
-rw-r--r--	URL.cpp	37	log plain
-rw-r--r--	URL.hpp	2763	log plain
-rw-r--r--	URLFilter.hpp	179	log plain
-rw-r--r--	URLNormalizer.hpp	291	log plain
-rw-r--r--	URLSeen.hpp	166	log plain
-rw-r--r--	crawlingwolf.cpp	1745	log plain