Commit de006333 authored by yihua.huang's avatar yihua.huang

update java docs

parent 827972d8
...@@ -232,7 +232,7 @@ public class Spider implements Runnable, Task { ...@@ -232,7 +232,7 @@ public class Spider implements Runnable, Task {
/** /**
* 建立多个线程下载 * 建立多个线程下载
* @param threadNum 线程数 * @param threadNum 线程数
* @return * @return this
*/ */
public Spider thread(int threadNum) { public Spider thread(int threadNum) {
checkIfNotRunning(); checkIfNotRunning();
......
...@@ -5,7 +5,7 @@ import us.codecraft.webmagic.Request; ...@@ -5,7 +5,7 @@ import us.codecraft.webmagic.Request;
import us.codecraft.webmagic.Task; import us.codecraft.webmagic.Task;
/** /**
* Downloader是webmagic下载页面的接口。webmagic默认使用了HttpComponent作为下载器,一般情况,你无需自己实现这个接口。 * Downloader是webmagic下载页面的接口。webmagic默认使用了HttpComponent作为下载器,一般情况,你无需自己实现这个接口。<br>
* @author code4crafter@gmail.com <br> * @author code4crafter@gmail.com <br>
* Date: 13-4-21 * Date: 13-4-21
* Time: 下午12:14 * Time: 下午12:14
......
...@@ -12,6 +12,7 @@ import us.codecraft.webmagic.selector.PlainText; ...@@ -12,6 +12,7 @@ import us.codecraft.webmagic.selector.PlainText;
import java.io.*; import java.io.*;
/** /**
* 使用缓存到本地的文件来模拟下载,可以在Spider框架中仅进行抽取工作。<br>
* @author code4crafer@gmail.com * @author code4crafer@gmail.com
* Date: 13-6-24 * Date: 13-6-24
* Time: 上午7:24 * Time: 上午7:24
......
...@@ -20,6 +20,7 @@ import java.io.IOException; ...@@ -20,6 +20,7 @@ import java.io.IOException;
/** /**
* 封装了HttpClient的下载器。已实现指定次数重试、处理gzip、自定义UA/cookie等功能。<br>
* @author code4crafter@gmail.com <br> * @author code4crafter@gmail.com <br>
* Date: 13-4-21 * Date: 13-4-21
* Time: 下午12:15 * Time: 下午12:15
......
...@@ -16,7 +16,7 @@ import java.util.concurrent.atomic.AtomicBoolean; ...@@ -16,7 +16,7 @@ import java.util.concurrent.atomic.AtomicBoolean;
import java.util.concurrent.atomic.AtomicInteger; import java.util.concurrent.atomic.AtomicInteger;
/** /**
* 磁盘文件实现的安全Scheduler,可以保证在长时间执行的任务中断后,下次启动从中断位置重新开始。<br> * 磁盘文件实现的url管理模块,可以保证在长时间执行的任务中断后,下次启动从中断位置重新开始。<br>
* @author code4crafter@gmail.com <br> * @author code4crafter@gmail.com <br>
* Date: 13-4-21 * Date: 13-4-21
* Time: 下午1:13 * Time: 下午1:13
......
Markdown is supported
0% or
You are about to add 0 people to the discussion. Proceed with caution.
Finish editing this message first!
Please register or to comment