合成中小企業パネル、Flash Eurobarometer 549との近似度87.1%

合成中小企業意思決定者300名に、欧州委員会のFlash Eurobarometer 549と同じ質問をしました。この調査は資源効率とグリーン市場を扱っています。対象はドイツ、フランス、ポーランド、スペイン、スウェーデン、イタリアで、各国50名です。その後、回答を公表済みの調査結果と比べました。

合成回答と実際の調査との近似度は87.1%でした。

近似度87.1%とは

近似度は、合成回答が実際の回答にどれだけ近いかを示します。100%なら、どの回答も調査とまったく同じ割合で選ばれたことになります。87.1%の場合、合成パネルでの各回答の割合は、実際の割合から平均12.94パーセントポイントずれていました。

このスコアは調査の5つの主要設問を対象とし、6か国を均等に扱っています。設問は、現在の資源効率化の取り組み、計画中の取り組み、必要な支援、気候戦略、グリーン製品またはサービスです。再生可能エネルギーは補足設問でした。

リサンプリングによる確認では、スコアは85.6%から87.4%の範囲に収まります。

設問別の近似度

最後の列は比較の目安です。各国の結果を、他の5か国の実際の結果の平均で予測しました。この目安の全体スコアは93.3%ですが、それらの国の実際の調査データが必要です。合成パネルには実データは一切不要でした。

国別の近似度

合成パネルの近似度は、どの国でも84.3%から89.1%の間です。

合成パネルの強みと弱み

強み：回答の順位を正しく捉えています。実際に多くの企業が取り組んでいること、たとえば省エネルギーや廃棄物の削減は、合成パネルでも上位に来ています。

弱み：計画については楽観的すぎ、補助金を求める傾向が強すぎます。

合成パネルでは44.1%が気候戦略を計画していますが、実際の企業では17.7%です。支援については、64.0%が助成金や補助金を求めていますが、調査では34.6%でした。

弱み：国ごとの違いが小さすぎます。

実際には、国によって大きな違いがあります。たとえば、節水に取り組む中小企業はスペインで73%ですが、ドイツでは35%です。合成パネルでは29%と26%でした。実際の国ごとの違いのうち、捉えられているのは約三分の一です。

政策の仕事にとっての意味

• 向いている用途：どの施策、障壁、支援の種類が中小企業にとって重要かを素早く把握すること。また、実地調査の前に質問文を試すこと。
• 注意して使う用途：正確な導入率、表明された計画、資金へのニーズ。
• 代わりにならないもの：全国調査、国別ランキング、特定の国に向けた政策判断。

限界

• 合成パネルは実際の企業からの無作為標本ではありません。
• 合成パネルは英語で回答しました。実際の調査は各国語で電話により実施されました。
• 調査結果はこのテストの前に公表されており、言語モデルの学習データに含まれている可能性があります。これはブラインドテストではありません。
• 結果は、調査が実施された2024年6月時点の状況を示しています。

調査再現の概要では、この結果を他の公開ベンチマークと比較しています。検証チェックリストでは近似度をより詳しく説明し、方法論ではMindsのオーディエンスの作り方を説明しています。調査そのものはFlash Eurobarometer 549として公開されています。