shihjyun / PTTmineR

Parallel Searching and Crawling Data from PTT 🚀

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

爬取結果都是dummy

JackChen89 opened this issue · comments

你好~

image

image

如上圖,爬取結果export之後全部都是dummy,換了好幾個版跟參數還是一樣,也確定版名跟網址一樣,請問有可能是哪裡有問題嗎?

非常感謝!

你好~
謝謝你回報這個問題
我剛剛試了一下,只要對同個 miner 重複執行一次 mine_ptt 應該就可以順利爬到資料
這的確是個 bug,但最近有點忙,所以短時間內不會去修復,所以麻煩你先用以上這個方法試試看
謝謝!

你好~
謝謝你的回覆!
另外還有個問題是,爬取速度變得非常非常慢。
去年使用時還很正常,今年再用完全沒辦法爬。
我設定min.date到大約五天前,我也看過文章大概100篇上下。
但等了一個小時仍然爬不下來,不確定是甚麼原因造成的。

謝謝你~~