haodoo

這是好讀網站的網路爬蟲, 可以把ebook連結找出來

建立環境

sudo python3 get-pip.py

 pip3 install virtualenv
 virtualenv bin

source bin/bin/activate

pip3 install -r requirements.txt

deactivate

此tool會依據三個步驟下載ebook連結

步驟一: 下載目錄網頁, 並把目錄網頁裡書的網頁連結
```
python3 parser.py -t generate_book_page_links
```
步驟二: 下載書的網頁與把書的網頁裡關於ebook的下載連結找出來
```
python3 parser.py -t generate_book_download_links
```
步驟三: 依序下載"book_link"下的ebook連結
```
python3 parser.py -t download_book
```

步驟詳細說明如下:

如您只想下載某些目錄, 您可以更改project_config/config.json(需符合JSON格式), 例如您只想下載"歷史煙雲"種類, 可改成

{
  "target_link":[
      {"title":"歷史煙雲", "link":"http://www.haodoo.net/?M=hd&P=history"}
  ]
}

Name		Name	Last commit message	Last commit date
Latest commit History 12 Commits
book_html/【吶喊】		book_html/【吶喊】
book_link/【吶喊】		book_link/【吶喊】
index_html/世紀百強		index_html/世紀百強
index_link/世紀百強		index_link/世紀百強
project_config		project_config
README.md		README.md
get-pip.py		get-pip.py
parser.py		parser.py
requirements.txt		requirements.txt