遅刻の言い訳提案システム稼働四日目

2015/03/12

お疲れ様です。高橋です。

本日も遅刻の言い訳提案システムのデータの分析と改善のための修正です。

本日の寝坊数と提案数

先日の致命的なバグを除いたので、正常に稼働していました。8時ちょい過ぎあたりに提案がされなくなるのは既知の問題(TwitterAPIの上限到達)です。

新しい発見は無いので、特に感動無し。

端末種別

先日のAndroid率は22.68%でしたが、本日は25.84%でした。大体そんくらいなのでしょう。

TwitterAnalyticsのデータを可視化

Twitter公式AnalyticsからデータをExportして可視化してみますが、その前に、公式Analyticsのページに載っている各種グラフについて。

これ、3/11には投稿していないにも関わらず8,000impressionがある風なグラフになってます。

また、

こっちも昨日は稼働していなかったのに数字が伸びていて、おかしいです。

結論: 公式Analyticsで表示されているグラフの基準タイムゾーンは、GMT(+0000)で動いていると思われます。また、Export出来るデータも、見てみると+0000のままなので、9時間追加してJST補正掛けないと正しく反映されません。

JST補正したデータを使うと、きちんと3/11のデータは無かった事になるので、問題なし。

主要metricsについて

主要metricsを、正常に動作した10日と12日で並べてみます。

impression = 目に触れた数
detail expands = 詳細を開いた数
user profile clicks = 「遅刻の言い訳」アカウントのプロフィールを開いた数
retweet = RTした数
favorites = お気に入りした数
engagement rate = engagements / impression
replies = お返事数
follows = 「遅刻の言い訳」アカウントをフォローした数

RT率 = 82RT数 ÷ 287回提案= 0.286 = 28.6%と、案外高い感じです。Twitterから引っ張ってきた「寝坊した」Tweetは、「リプライツイートではなく&直近1分以内&ハッシュタグもない&RTでもない」という、本当の純然たるつぶやきを対象にするよう追加でフィルタを掛けているので、そこに誰かしらのツッコミが入ると、嬉しくなってRTしてしまう心理を突いています。寝坊をTweetする事自体若干の気恥ずかしさがあり、言い訳提案をRTして恥ずかしさを紛らわす効果もあるのかと思われます。

沢山のmetricsの中で、KPIとするべきはuser profile clicksです。アプリDLリンクはプロフィールの中に潜ませているので、これを開いてもらわない事には何にも始まりません。

今日だけに限定しても、287回の提案が、RTされて12,592のimpressionを産み、プロフィールクリックを395も生んでいる。さらにその395人の内、Androidユーザ率はおそらく25%程度なので、100人程度のAndroidユーザがプロフィールを見てくれる。さらにその内10%、10人でもDLしてくれたら、最高に高効率です。

提案の言葉遣いによる数字の違いを評価

「提案の言葉遣いの微妙な違いは数値に影響するのか？きっとすると思う。」という仮説の元、言葉遣いを2つに分けています。

like machine「寝坊を検知しました。遅刻の言い訳を提案します。」
like human「もしかして寝坊しましたか?勝手に遅刻の言い訳を考えました!」

の2パターン毎に、metricsに差があるかを調べます。

微妙な差ですが、やはり先日体感したように、機械タイプのほうが若干数字が良いようです。

impressionを除くと、こんな感じ。

これは、1つの提案毎に、23～29%の確率でRTされ、120〜130%の確率でプロフィールをクリックしてくれるという事と同義です。ただ、差が微妙なので、もう少しサンプルを集めてから機械にするか人間にするか決定します。

しかし、iOSユーザよりAndroidユーザを優遇すべきです。限られたTwitterAPIコール数は最大限に有効活用すべきなので、明日はAndroidフィルタを稼働させます。おそらく0700～0859まで余裕で稼働すると思います。今までは1時間でダメになっていましたが、コール数は25%になるはずなので、0600～0959まで4時間稼働させてみようと思います。

本日のリプライネガポジ

リプライ(お返事)は、読んでてほのぼのします。

まだ中学生だよ！！！！！子供なんか居ねぇよ！！！！！
ちょっとよくわからない。
ありがとうございます。ぼくもう社会人なので社会人用の言い訳お願いします！笑
ご丁寧にありがとうございます。
会社に連絡した( ??ω?? ).｡o?素直に寝坊したって言いました(´･ω･`)すいません。。。＿|￣|○
ありがとうございます??笑
は、はい笑笑ありがとうございます笑笑
しばくぞ
爆笑。遅刻の言い訳ありがとうございます。笑。でも、大丈夫です。辛うじて間に合います。笑
もしかして寝坊しましたか?勝手に遅刻の言い訳を考えました!「朝起床したら、洗濯機からホースが外れて水漏れしており、業者に修理に来てもらいますが、午後に修理しに来るため、完了後いきます。」”余計なお世話wwwwww
あ！ありがとうございます（笑）でも、今日は自宅勤務なので大丈夫です( ?° ?? ?° )にや
ありがとうございます○┓ﾍﾟｺｯwwwwww
遅刻の言い訳さんから素敵な言い訳おしえてもろた? “@chikoku_ewake: @momjoon もしかして寝坊しましたか?勝手に遅刻の言い訳を考えました!「行く途中に社員証を忘れた事に気づいたため、今、交番にいます。午後から行きます。」”
いつも遅刻してるので先生に何言っても信じてないと思います笑
ありがとうございます！！その言い訳使わせてもらいました！！
子供いないです…笑