• LLMタスク分類ツリー

    calendar Mar 4, 2026 · 2 分で読了 · プロンプト  ·
    共有する: linkedin copy
    LLMタスク分類ツリー

    LLMタスク分類ツリー LLM（大規模言語モデル）に依頼できるタスクを体系的に分類したガイドだ。タスクの性質ごとに章を分け、それぞれの難易度・必要な推論レベル・推奨モデル・注意点・具体例を示している。自分がやりたいことがどのカテゴリに属するかを把握することで、最適なモデル選びやプロンプト設計に役立てることができる。 なぜこの分類が重要か LLMを使いこなすうえで、タスクの性質を正確に把握することはモデル選択・プロンプト設計・ツール組み合わせのすべてに影響する、基礎的な判断である。 コストと品質のトレードオフという観点では、フォーマット変換のような軽量タスクに最高性能モデルを充てるのはコストの無駄であり、逆に多段階推論が必要な論理パズ …


    続きを読む

  • IPA非機能要件グレードの樹形図

    calendar Mar 3, 2026 · 20 分で読了 · 非機能要件IPA要件定義  ·
    共有する: linkedin copy

    非機能要件の定番であるIPAの非機能要件グレード。公式ではExcelファイルで非機能要件の階層構造を説明しているが、親子関係を直感的に把握しにくい。そこでマインドマップ的に表現した。 大分類 %%{init: { 'flowchart': { 'nodeSpacing': 50, 'rankSpacing': 70, 'curve': 'basis' } } }%% graph LR %% ルートノード R["非機能要件"] %% 大分類 R –> A["可用性"] R –> B["性能・拡張性"] R –> C["運用・保守性"] R –> D["移行性"] R –> E["セキュリティ"] R –> F["システム環 …


    続きを読む

  • 機械学習や分析時のカテゴリ変数の高度なあれこれ

    calendar Feb 12, 2026 · 4 分で読了 · 機械学習カテゴリ変数データ前処理  ·
    共有する: linkedin copy
    機械学習や分析時のカテゴリ変数の高度なあれこれ

    データの前処理において重要となるカテゴリ変数の扱い。高度なTipsを紹介する。 水準数を減らす 機械学習タスクの場合、水準数を削減することも重要。特にダミーコーディング（One-Hot Coding）では水準数がほぼカラム数になり、計算負荷の原因になるケースがある。 たとえば出現頻度がレアな水準はまとめて「その他」にするなどの方法があるが、目的変数に対する影響の大きい重要な水準は削除してはならない。精度を落とさぬよう、効率的に水準数を減らすことが重要になる。 水準の選び方としては、目的変数に対する情報量に着目するといい。関心対象のカテゴリ変数だけをダミーコーディングで説明変数にしたツリー系のモデルを作り、重要度上位N個の変数（水準） …


    続きを読む

  • JavaScriptの計測タグと最近のウェブページレンダリング（SPA、SSRなど）

    calendar Nov 7, 2024 · 1 分で読了 · SPAGTM計測  ·
    共有する: linkedin copy
    JavaScriptの計測タグと最近のウェブページレンダリング（SPA、SSRなど）

    最近増えているSPA、SSR、SSGとは何か 最近ではSPA（シングルページアプリケーション）、SSR（サーバサイドレンダリング）などといったウェブページの表示の仕組みを採用するサイトが増えている。これらのページではウェブ解析ツールの計測タグや広告のリマーケティングタグなどが正しく動作しないことがある。SPAの仲間にはSSR、SSGがあるが、これらの共通点はSPA内でのページの遷移時にページの読み込み処理（ロード）が行われない点である。 これらのページではページを最初に表示するときにだけ読み込み処理が行われる。そこでページのアセット（画像やJavaScriptのファイル）がまとめて読み込まれる。その後のページの切り替わり時にはページ …


    続きを読む

  • 機械学習用のLinuxインスタンスの環境構築（GCEやEC2などクラウド）

    calendar Jun 24, 2022 / · 2 分で読了 · GCP機械学習環境構築  ·
    共有する: linkedin copy
    機械学習用のLinuxインスタンスの環境構築（GCEやEC2などクラウド）

    最近では機械学習の計算のためにLinuxマシンを構築しては消し、を繰り返すことが多い。サーバの構築と消去が柔軟に可能なことからもEC2やGCEなどクラウドのインスタンスをよく使うということも影響している。 この記事では一般的なサーバ構築の記事では紹介されていない、クラウドのインスタンスで意外と盲点になる点を中心に、機械学習の計算用サーバとして安定した運用をするために最低限必要な設定をまとめた。 GPUドライバ（CUDA、cuDNN）やコンテナランタイム（Docker/NVIDIA Container Toolkit）の設定は別途必要となる。 Linuxで最初にやっておくべき設定 Amazon EC2やGoogle Compute …


    続きを読む

  • GA4無料版と有料版のBigQueryエクスポートの違い

    calendar Mar 23, 2022 / · 1 分で読了 · GA4BigQueryエクスポート  ·
    共有する: linkedin copy
    GA4無料版と有料版のBigQueryエクスポートの違い

    2種類のBigQueryエクスポート GA4のBigQueryエクスポートデータには以下の2種類がある。 イベントデータ ユーザーデータ ユーザーデータは1行1人で、user_pseudo_id単位で集約したデータと、user_id単位で集約したデータのそれぞれのテーブルが生成される。 所属するオーディエンスの情報やユーザ（user_pseudo_id / user_id）単位の通算指標が含まれる。 分析によく使うのがイベントデータで、1行1イベントでイベントパラメータなどがネストされて含まれている。 エクスポートの頻度 イベントデータの出力頻度は以下の3種類がある。 ストリーミング＝リアルタイム。重複や使えない列あり（トラフィック …


    続きを読む

  • GA4/Firebaseのログをフラット化する汎用クエリ

    calendar Jan 27, 2022 · 5 分で読了 · GA4FirebaseBigQuery  ·
    共有する: linkedin copy
    GA4/Firebaseのログをフラット化する汎用クエリ

    GA4（Firebase）のログを扱う際、ネストされているイベントパラメータやユーザープロパティをフラット化しないと使いにくい。ところが格納されているパラメータやプロパティは決まっているわけではないため、通常はそれをハードコーディングで指定することが多い。つまり使用しているパラメータやプロパティに応じてその都度クエリを手動作成することになる。 しかしそれでは面倒なので、どんなイベントパラメータやユーザープロパティを使っていても、それがどんな型であっても、オールマイティにフラット化するクエリを作る。存在するパラメータやプロパティに基づいて動的にクエリを作って実行する。このクエリひとつあればどんなケースにも対応できる、汎用的なものである …


    続きを読む

  • GCPのIAMポリシー

    calendar Jan 12, 2022 / · 1 分で読了 · GCPIAM権限管理  ·
    共有する: linkedin copy
    GCPのIAMポリシー

    GCPのIAMポリシー（権限設定） GCPにおける階層と言葉の定義 組織 （フォルダ） プロジェクト 各種リソース Cloud Storage BigQuery Compute Engine
    プロジェクトとリソースを中心に考える。 フォルダや組織はプロジェクトを便宜的に束ねるもの。フォルダや組織は設定しなくてもいい →後述するが、組織／プロジェクト／リソース単位で権限設定ができる アカウント アカウントには2種類 ユーザーアカウント Googleのログイン画面からログインできるアカウント 人間ユーザ。異動や退職とともにアカウントがなくなるケースも想定する必要がある 一部のGoogleアカウントではアカウント単位のコストが発生する …


    続きを読む

  • Rにおける代表的な一般化線形モデル（GLM）の実装ライブラリまとめ

    calendar Jan 3, 2022 · 2 分で読了 · RGLM統計学  ·
    共有する: linkedin copy

    一般化線形モデル（GLM）は統計解析のフレームワークとしてとにかく便利。Rでもビルトインの関数から拡張までさまざまなライブラリから提供されている機能だが、さまざまなライブラリがありすぎてどれを使えばいいのかわかりにくいのと、さらに一般化線形モデル（GLM）自体にもいろいろな亜種があるため、どの手法をどのライブラリの関数で実装すればいいかわからなくなる。 そこでRに実装されている代表的なGLM系の関数と特徴についてまとめてみた。 一般化線形モデルのおさらい 一般化線形モデルとは $$ y = g^{-1}(\alpha + \beta_1 x_1 + \beta_2 x_2 + … + \beta_i x_i) + \epsilon …


    続きを読む

  • Googleアナリティクス4のBigQueryエクスポート仕様

    calendar Mar 11, 2021 / · 3 分で読了 · GA4BigQueryスキーマ  ·
    共有する: linkedin copy
    Googleアナリティクス4のBigQueryエクスポート仕様

    GA4のBigQueryエクスポートの仕様とデータの扱い方を説明する。GA4のログはネストされたレコードなど特殊な形式になっており、そのままでは扱いにくいのでいくつかテクニックがある。 BigQueryへのエクスポート設定 GA4の管理画面で設定するが、手順はこちらの記事を参照。 https://www.marketechlabo.com/ga-app-web-property-to-bigquery/ テーブルの場所 プロジェクト：GA4のBigQueryエクスポート設定で指定したプロジェクト データセット「analytics_999999999」（「999999999」の部分はプロパティID） テーブル名 前日までのデータ（日付 …


    続きを読む