導入事例

淡水化は、人口増加、産業拡大、気候変動の圧力を増加させるための有限資源です。 節水キャンペーンは、消費量を削減し、世帯、企業、および機関の間で持続可能な習慣を促進するための取り組みの礎となりました。 しかし、キャンペーンを実行しているのは、その数の半分だけです。 実際に動作するかどうかを知ることは不可欠です。 厳しい評価なしに、組織は行動を変える失敗する取り組みに限られた予算を浪費し、作業をスケールアップする機会が欠如しました。

水保護キャンペーンの評価は、総水の使用が低下するかどうかを単に確認するだけでなく、. それは、異なるオーディエンスがどのように反応するかを理解することを含みます, どのような障壁がより深く変化を防ぎました, そして、任意の節約は、初期のプッシュを超えて持続しました. この記事では、成功した評価を定義する重要なメトリック, 方法, そして、課題を敷設, あなたの次のキャンペーンをより測定可能かつより効果的にするために実用的な戦略と一緒に.

アメリカ南西部からオーストラリアのアウトバック、都市、水域はデータ主導の評価に向け、投資を正当化し、アウトリーチを精製します。何が測定できるかに焦点を当て、キャンペーンマネージャーは、結果を着実に向上させるフィードバックループを構築することができます。

評価のための主要なメトリック

水保護キャンペーンが成功しているかどうかを判断するために、評価者は、通常、コアメトリックの便利な追跡を行います。各メトリックは、さまざまな影響の次元に光を当てます。

水利用削減

最も直接インジケータは、ターゲット人口の中で水消費量の測定値が低下します。これは、多くの場合、キャンペーンの前後、介入を受けていないコントロールグループに対して理想的に計算されます。削減は、絶対的な条件(ガロンまたはリットル保存)またはカピタごとに報告することができます。例えば、干ばつ耐性の造園を促進するキャンペーンは、12か月以内に屋外水使用の20%低下を目標とする可能性があります。[FLTS]または最もスマートに測定されたデータを監視します。[FLTS]:[F]または[FLTS]:[F]:[F]:[F]:[F]:[F]:[F]:[F]]:[F]]:[F]:[F]:[F]]:[F]:[F]]]:[F]:[F]:[F]:[:[:[:[:[F]]]]]]:[F]:[F]]:[:[:[:[:[:[:[:[:[:[:[:[:[:[:[:[:]]]]]]]]]]]]

公共の意識

水の使用がすぐに変化しない場合でも、意識を高めるキャンペーンは、将来のシフトの基礎を敷きます。 意識は、水不足の問題、キャンペーンメッセージ、または特定の保存慣行の知識をテストする事前および後キャンペーン調査によって測定されます。 質問は、漏れの確認方法や、水やりに最適な日がどの日であるかを知っているかどうか、回答者に尋ねるかもしれません。 正しい回答の重要な増加は、キャンペーンの教育コンテンツが通過していることを意味します。 [[FLT] {Streamsssssssss = [Reports]またはイベントのreports] またはイベントのログをキャプチャすることができます。

行動変化

注意だけでは、水を保存し、行動の変化は橋です。このカテゴリのメトリックは、より短いシャワーを浴びたり、洗濯のフルロードを実行したり、ダリッピングフェスタを固定したり、芝生の水やりの頻度を削減したりするなどの特定のアクションを追跡します。これらは、セルフレポート調査(例:「あなたの芝生を水にかける頻度は?」)または観察研究(例えば、灌漑タイマーのスポットチェック)を介してキャプチャすることができます。一部のLTFiler[F]は、または自宅の監視を介した状態にすることができます。[F]

参加料金

ワークショップ、リベート、または課題を提供するキャンペーンは、実際にどのように多くの人が関与するかを追跡する必要があります。これは、コミュニティイベントでの出席、ホームウォーター監査のためのサインアップ、効率的な備品のためのリベートオファーの償還、または入札価格設定プログラムへの入学を含みます。ハイ参加は、キャンペーンのメッセージングと配送チャネルが魅力的です。しかし、参加だけでは十分ではありません。それはにリンクする必要があります。実際の節減水:プログラムが、低速報を提示する)、プログラムを削減するために、プログラムを削減する必要があります。

長期影響

ウォーター・リベーションは、一撃の努力ではありません。 行動的「リバウンド」と「マダッシュ」を節約する場所。 特にインセンティブが期限切れや注意がちな後に、一般的です。 長期的影響を評価することは、キャンペーン終了後に数か月または数年間同じメトリックを追跡する必要があります。 低流シャワーヘッドはまだインストールされていますか? 世帯は週2回だけ水を続けますか? 長期的パネルの調査や繰り返しの監査は、新しいLTF [F] が最終的には、最終的には[F] {Festalse] {Festalse = [Fest]} {Festal = [Fest]} {Fest} {[Fest]} {[Fest]} = [Fest]} = [Fest]} = [Fest] = [Fest] = [Fest] = [Fest] = [Fest] = [Fest] = [Fest] = [Fest = [Fest = [Fest = [Fest] = [Fest] = [Fest] = [Fest] = [Fest] = [Fest] = [Fest]

評価方法

特定のツールとテクニックのメトリック呼び出し。メソッドの選択は、予算、利用可能なデータ、および必要なインサイトの深さによって異なります。

水道メーターのデータ

メーター読み取りは、使用量削減のための金基準を維持します。 多くの近代的なメートルは、ベースライン期間と比較して1時間または毎日消費データを提供する「スマート」です。 高度な分析は、漏れや異常なスパイクなどの異常を検出することもできます。 評価のために、季節的な変動と天候を制御することが重要です。 熱波は、水の使用とマスクのキャンペーン効果を膨脹させることができます。 統計調整 差異的なキャンペーンや回帰などの方法を使用して、統計調整が役立ちます。

アンケート・アンケート

調査は、意識、態度、自己報告された行動を測定するために不可欠です。 オンラインパネル、電話インタビュー、またはコミュニティセンターで配布された紙のフォームは、すべての有用なデータをもたらすことができます。 変更を追跡するために、同じ調査は、キャンペーンの前後に、同じアンケートを管理する必要があります。 ]ランダムサンプリング[は、代表性を確保し、良好な調査設計は、主要な質問を回避します。 例えば、「あなたの水の使用を削減するのではなく、(後には、あなたが6ヶ月後に、あなたが主張したかを尋ねました。

観察研究

時々、人々は何をするかに一致しません。直接観察—スプリンクラーの使用や、xeriscaped yards&mdashを調べるために、夜明けにウォーキング周辺地域などの近隣地域。地下のデータを生成します。モバイルアプリや市民科学プログラムは、コミュニティボランティアを列挙することにより観察をスケールすることができます。観察は、特に[]屋外水使用のために有用です。これは、多くの場合、世帯の消費量または消費地域に50%以上を占めることが多いです。

参加・参加記録

イベントのサイン入りシート、リベートアプリケーションログ、ウェブサイト分析(例:「ヒント」ページをクリック)は、エンゲージメントを定量化するのに役立ちます。デジタルキャンペーンでは、メールのオープン率、ソーシャルメディア共有などのメトリック、および教育ビデオに費やした時間などは、コンテンツがどのように関連しているかのプロキシを提供します。ただし、エンゲージメントは影響を保証するものではありません。ウイルスビデオは、何百万にも達するかもしれませんが、少しの行動を促します。 エンゲージメントデータ[FLT:]を組み合わせることは、実際にデータを保存するデータを使用します。

ケーススタディと定性方法

数字は物語の一部だけを教えてくれます。詳細なインタビューやフォーカスグループでは、キャンペーンが機能したり失敗したりする理由を明らかにすることができます。例えば、人々は彼らがあまりにも一般的なので、彼らはドアハンガーを無視したり、近隣からの友好的な電話が雨のバレルをインストールすることを確信しているので、彼らはドアハンガーを認めるかもしれません。Qualitativeインサイトは、将来の努力のためにメッセージングとターゲティングを精製するのに役立ちます。単一の成功のストーリー&mdashを文書化し、家庭所有者の関連付けと同様に、彼らは、大規模な資金調達のために役立つコミュニティを経由して、また、大規模な資金調達をすることができます。

評価の課題

優れたメトリックと方法でも、評価者は結果を損なうことができる持続的な障害に直面しています。

データの正確性と一貫性

メーターの誤読、キャンペーンタイミングと整列しない請求サイクル、またはレンタルプロパティの欠落データがノイズを導入することができます。自己報告された調査データは、社会的望ましいバイアスと障害のあるメモリの対象となります。これに対処するには、複数のソースを横断:スマートメーターデータで自己報告されたシャワータイムを比較するか、または、リベートフィクスのサブセットを監査します。 標準化されたプロトコルおよびデータ収集期間を削減し、検証期間を削減します。

属性

キャンペーンの効果を他の影響から分離する—干ばつ、率の増加、または新しいビルドコードとmdashのメディアカバレッジなど; それほど難しくありません。 ランダム化制御試験(RCT)は金標準ですが、政治的または論理的に不可解です。 マッチングされた比較グループや中断された時間シリーズ分析などの簡単な説明は、ランダム化が不可能なときに信頼できる見積もりを提供することができます。 [FLT] [FLT] 外部キャンペーンの要因[FALT]: [FALT] 外部の要因: [FALT]

長期追跡

長年にわたる評価の持続性は、継続的な資金調達と組織的コミットメントを必要とします。 スタッフの売上高、メートルインフラの変化、またはキャンペーンの優先順位をシフトすることは、長期的研究を中断することができます。 1つのソリューションは、ルーチンのユーティリティ操作に対する評価を埋め込むことです。例えば、顧客情報システムにおける顧客エンゲージメントレコードとメーターデータをリンクします。 Partnerships]]) 大学や非営利の研究グループでは、長期パネルの研究に必要な継続性も提供できます。

コミュニティのエンゲージメントと表現

多岐にわたる人口と出産データに潜在的存在している。低所得世帯、貸し手、非ネイティブ言語スピーカー&マダッシュ;多くの場合、調査や参加データに代表されるが、保存プログラムから得られるのは最も多くある。これらのグループを含むように特別に設計されたアウトリーチ戦略は、複数の言語やコミュニティ組織とのパートナーシップを計測し、データの完全な改善を行うなど、これらグループを、これらに示すように設計されている。 Equity-focused-LT:[F]すべての成功は、すべてのセグメントが確実に達成されるように[F] [FLT] [FLT:] [FLT:] [F] [F] [F]] [F]] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] セクション全体で成功は、すべてのセグメント全体で成功が成功が保証されます。 [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F] [F

現代評価における技術のロール

データの収集と分析の進歩は、保存キャンペーンの評価方法に革命を起こします。

スマートな水道メーター

スマートメーターは、消費データを高周波で送信し、評価者がキャンペーンに即時応答を検出できるようにします。例えば、パーソナライズされた水使用レポートを送信すると、ユーティリティは、家庭用の消費が翌日に低下するかどうかを見ることができます。これは、ドアをのラップドサイクル評価]に開き、戦術がほぼリアルタイムでテストされ、洗練された場所。スマートメーターデータは、屋内および屋外での使用の不一致を可能にし、より詳細な動作を補正します。

データ分析と機械学習

マシン学習モデルは、人間のアナリストが見逃す可能性がある消費データ内のパターンを識別することができます。アルゴリズムは、特定のメッセージに対応する可能性がある世帯をフラグするか、または保存対策(例えば、シャワータイマー対灌漑コントローラー)が特定の顧客セグメントの最大の節約をもたらす可能性があることを予測することができます。これらのツールは、技術的な専門知識を必要とするが、それらは[オープンソースプラットフォームおよびクラウドベースの分析サービスを介してよりアクセス可能になります。

デジタル調査とソーシャルメディアのリスニング

高価な電話調査の代わりに、ユーティリティは、顧客をスケールで達する短いSMSまたは電子メールアンケートを展開しています。ソーシャルメディア監視は、公開された感情にリアルタイムのパルスを提供し、キャンペーンメッセージの広がりを明らかにすることができます。しかし、プライバシーの懸念とプラットフォームポリシーは、慎重な取り扱いを必要とします。 []]顧客データベースとの統合]は、全体的なビューのための実際の消費データにデジタルエンゲージメントをリンクすることができます。

成功評価のケーススタディ

リアルワールドの例では、厳格な評価がより良い結果をもたらす方法を示しています。

[[[[]] カリフォルニア南]]] では、メトロポリタン水地区は、社会的比較(Opowerのモデルのような)を備えた家庭用水使用レポートの有効性をテストするために、ランダム化された制御試験を使用しました。 この研究では、世帯が制御グループと比較して平均6%削減された消費量を受け、年間持続するということがわかりました。 測定データがプログラムを拡大するのに納得の資金提供者を説得し、最終的にはガロンの億億を節約する。 詳細は、 EPF 保存プログラムを参照してください。 [F]

メルボルン、オーストラリア[、重度の干ばつの間に、都市の「Target 155」キャンペーンは、毎日155リットルの使用法目標を設定しました。 月間メートルのデータと定期調査に依存した評価。 キャンペーンは30%の減少を達成し、明確なターゲット、定期的なフィードバック、およびコミュニティエンゲージメントの組み合わせが重要であることを示す評価を達成しました。 メルボルンからのレッスンは[FLT]のベンチで文書化されています[FLTFLT]:世界規模の危機管理]:[FLTF]:[FLT]:]

効果的な評価を設計するための最良のプラクティス

一般的な落とし穴を避け、学習を最大限に活用するために、キャンペーン管理者は、一日からプログラム設計に評価を組み込む必要があります。

ベースラインデータ初期化

どこから始めても、変更は測定できません。 少なくとも12か月の事前キャンプ水使用データを収集し、意識や行動のベースライン調査と共に。 これにより、既存の傾向をコントロールすることができます。

コントロールまたは比較グループを含める

同様の治療されていない近距離との簡単な比較でも、アトリビューションを強化します。 可能であれば、キャンペーンを受ける領域をランダム化します。 ランダム化が不可能な場合は、統計的なマッチングを使用して、信頼できる偽物を作成します。

縦方向フォローアップの計画

キャンペーン終了後、少なくとも1回のフォローアップ評価6〜12ヶ月の予算。 これは、早期の節約が保持または消去されたかどうかを明らかにします。 スケールアップ前に測定の実現可能性をテストするために、小規模な「永続的な研究」を操縦することを検討してください。

量的および定性的方法の結合

数値は何が起こったのかを示しています。インタビューやフォーカスグループがなぜ説明しています。混合方法がアプローチすることで、より深い洞察を生み、将来のキャンペーンの改良に役立ちます。例えば、節水がターゲットの下にある場合、定性的な研究は、住民が推奨する行動が不便であることを明らかにするかもしれません。

コンテンツ

効果的な評価は、証拠に基づく戦略に推測する水保護キャンペーンを回します。適切なメトリックとマダッシュを追跡することにより、セージの軽減、意識、行動の変化、参加、長期的インパクトとマダッシュ。スマートメーターから詳細なインタビューまで多様な方法を使用して、組織は投資収益を実証し、継続的にアウトリーチを改善することができます。アトリビューションや長期追跡などの課題は、慎重な設計と適切な分析技術を通して実質的には耐えられます。

水ストレスは、世界中に浸透するにつれて、すべてのドロップカウントを作るための圧力は成長するだけです。 厳格な評価を抱えるキャンペーンは、より多くの水を節約するだけでなく、より広範な保全ポリシーに必要な公共の信頼と政治支援を構築します。 水質学の未来は、それらのレッスンを共有し、次のコミュニティから成功をスケーリングする仕事を学ぶことです。