Rを使ったXGBoostの高度なパラメータチューニングと細かいノウハウ
XGBoostは機械学習手法として 比較的簡単に扱える 目的変数や損失関数の自由度が高い（欠損値を扱える） 高精度の予測をできることが多い ドキュメントが豊富（日本語の記事も多い） ということで大変便利。 ただチューニン… Read More »
機械学習用のクラウドインスタンスを管理するためのメモ
Linuxで最初にやっておくべき設定 EC2やGCEなどクラウドで機械学習用のインスタンスを立ち上げる際、 安定した運用をするために共通してこれらの設定はやっておく必要がある スワップメモリの設定 クラウドのインスタンス… Read More »
Rで時系列分析の簡単なまとめ
時系列のアプローチ 単系列 ざっと見る ARIMA/SARIMAモデルをあてはめる 複数系列の関係→VAR（ベクトル自己回帰）モデル その他の変数がある（時系列＋回帰）→状態空間モデル （単なるラグ変数回帰→目的変数自体… Read More »
Googleアナリティクスなどのツールにとらわれないウェブ解析の基本的な考え方
ツールを問わずやりたいのはアクセス解析 Googleアナリティクスは無料でアクセス解析、ウェブ解析ができるツールで、手軽に使えるような環境からよく「Googleアナリティクスの使いかたを学びたい」という声が出てくる。 有… Read More »
アドホックなウェブ解析が簡単に―GoogleアナリティクスとGoogle Data Studioの探索機能
ついにGoogleアナリティクスの無料版で、マウスのドラッグ＆ドロップでディメンションや指標を選択し、自由にレポートを作れるようになった。 アドホックなウェブ解析の変遷 ある程度まともにウェブ解析をやっている方であればG… Read More »
RでExcelファイルを読み書きする（openxlsxライブラリ）
RでExcelファイル（.xlsx）を読み書きするライブラリはいくつかあるが、openxlsxが多機能でかつ使いやすい。Javaも不要なのでインストールや動作も軽い。古いファイル（.xls）には非対応だが、現行のファイル… Read More »
Googleタグマネージャーの使い方
Googleタグマネージャー（GTM）とはGoogleが提供している無料のタグマネージャ。 Googleアナリティクスの管理に向いている。 設置 タグは2個あり、両方設置する。それぞれ設置個所が決まっている。 ～内 &l… Read More »
Rでデータセットの抽出（行の抽出、並べ替え、サンプリング、分割）
前のページではデータフレーム、data.tableの列（変数）の処理について解説したが、今度は行の抽出、並べ替え、サンプリング、分割といった行の処理についてまとめる。 行の削除（抽出） データフレーム adlog <… Read More »
Rでデータクリーニング、変数の生成
このあたりから処理がアドホック寄りになるので、data.tableを使う場合でもパイプ（dplyr）を使って一度に実行するのではなく添字記法を使って1ステップずつ進めていくといい（1行ずつ実行する場合は添字記法を使った方… Read More »
Rでデータの整形（列のデータ型確認、列の抽出、列名の変更、列の型変換）
ローデータから分析対象とする変数のみ抽出し（個人情報など、保持すべきでない変数を削除するなど）、情報を失わない範囲で分析するためのデータセットを作る。分析プロジェクトにおけるローデータと同じ量の情報を持つ、整形された（扱… Read More »