これは何か

• シェル芸botのツイートアーカイヴCSVを保存する
• ランキングを生成する
• 分析をする

必要

• matplotlib
• numpy
• pandas
• pytablewriter
• requests-oauthlib
• scipy

収集ツール

• Twitter メディアダウンローダ
  • API制限で通常はstatuses/user_timelineで直近3200件しか取れないがそれを超えて取得できる優れもの

生成する

• analyze.ipynbを実行するとよしなに/CSV/にある新しいデータを読み込む

基本

• formatted.csv
  • 最初4行削除
  • カラム削除
    • Action date
    • Display name
    • Username
    • Media type
    • Media URL
    • Saved filename
    • Remarks
    • Tweet content
    • Replies
  • カラム追加
    • RT+FAV
    • User
      • Tweet contentからユーザーを抽出
      • 複数ユーザーのID(minyoruminyon除く)があればTwitter API叩く
      • 特定できなければminyoruminyonとしてカウント

バズり

• buzz.csv
  • 全ツイートRT, LIKEでソート
  • RANK, URL, USER, RT+LIKE, RT, LIKE
• buzz_1000.md
  • buzz.csvの1000行バージョン
• buzz_500.md
  • buzz.csvの500行バージョン
• buzz_100.md
  • buzz.csvの100行バージョン

ユーザーリスト

• user.csv
  • ユーザ一覧(実行を一度でもされた)
  • 実行回数でソート
  • RANK, NAME, COUNT
• user.md
  • user.csvのmdバージョン
• /user/
  • tweet>=10のユーザーが実行したリスト
  • <user name>.csv