re3turn / twicrawler

Crawling and upload videos and photos from the Twitter timeline to Google Photos

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

ダウンロードに失敗、またはGoogle APIが失敗した場合に救う手立てがない

re3turn opened this issue · comments

以下の場合、ファイルを救う手立てが現状ないので失敗したファイルのURL、descriptionを保存するテーブルを作成して後でリトライするような処理が欲しい。

  • ダウンロードに失敗
  • Google APIが失敗

失敗してもDBに追加しちゃうのが問題なような気もしてきた

失敗したやつはDBに保存せず、失敗した時点でsince_idを更新しないようにして次回実行時に託すだと微妙ですかね

無しではないけど、画像が複数ある場合のどれか一つが失敗しただけでもまた全部実行することになるし重複登録される可能性もある
同じデータだと失敗するっぽいが

draftです。
4aedddd