要約

  • AFRINICの公式会合報告によれば、2009年5月10日から21日にカイロで開かれたAFRINIC-10には135人が参加し、会後調査の回答者は42人だった。42÷135は14÷45、すなわち0.311111…=31.111111…%である。ただし、招待・適格性の共通枠や回答者の一意性が示されていないため、これは回答率ではなく「回答者数対会合参加者数の粗いカバレッジ比」と呼ぶべきである。
  • 42件の回答は、会場、登録、内容、会合形式、ウェブサイト、ニュースレター、広報、初心者向けセッション、MyAFRINIC紹介に関する実務的な手掛かりを与える。特にウェブサイトでは「内容は非常に有用」が56%である一方、「改善が必要」が95%とされ、記録は単純な賛美ではない。
  • 有用性は権限を生まない。回答者、参加者、AFRINIC会員、会員組織、投票者、影響を受ける事業者、エンドユーザー、コミュニティー、人口は互換ではない。参加は証拠であって権限ではなく、コンセンサスは技術的判断であって主権ではない。レジストリは民間の記帳者・調整者であり、統治者ではない。

分母が調査を壊すのではなく、調査を守る

AFRINIC-10は、AfNOGとの共同開催として、2009年5月10日から21日までエジプトのカイロにあるInterContinental Cairo Citystars Hotelで開かれた。AFRINICの公式報告は会合参加者を135人と記し、その会合について得た調査回答を42件と記録している。調査の価値を考える最初の作業は、形容詞ではなく、この二つの数を同じ紙面に置くことだ。

計算は明快である。

42÷135=14÷45=0.311111…=31.111111…%。

135から42を引くと93であり、93÷135=31÷45=0.688888…=68.888888…%となる。したがって、会合参加者数と回答者数を単純に比べれば、回答者数に入っていない人数は93人分ある。この93という差は、回答しなかった93人が確定している、という意味ではない。全参加者に同じ調査票が届いたのか、全員が回答資格を持っていたのか、42件が42人の一意な回答なのかを報告から確定できないからだ。言えるのは、報告された二つの集計値の間に93の差があることだけである。

それでも、この比率は役に立つ。31.111111…%を「回答率」と早合点せず、「回答者数対会合参加者数の粗いカバレッジ比」と置けば、調査結果の届く範囲が見える。42件はゼロではない。現場を経験した人々から得たまとまった反応であり、運営上の問題を発見し、次回の改善仮説を立てるには十分な材料になり得る。他方で、135人全体の評価を立証するものではない。ましてAFRINIC会員、アフリカのネットワーク運用者、域内の利用者、あるいは「コミュニティー」全体の意思を証明しない。分母の開示は調査を無効にするのではなく、調査が耐えられない主張を背負わされるのを防ぐ。

この区別は、数値の細かさ以上に重要である。「回答者のうち何%か」という記述は、回答した集団に関する記述だ。「会合参加者がそう考えた」という記述には、少なくとも全参加者へ届く調査枠、非回答の扱い、重複排除、項目ごとの回答数といった追加の橋が要る。「会員の意思」「事業者の支持」「アフリカの総意」まで進むなら、さらに会員資格、組織ごとの権限、対象母集団、委任、代表性を証明する別の橋が必要になる。42という数には、その橋を自動的に架ける力はない。

42件から実際に分かったこと

公式報告が示した調査結果には、明確な実務価値がある。出席理由が「完全に満たされた」とする値は72.5%だった。報告は、回答者が会場、登録、内容に非常に満足していたと要約している。また64%が、当時の会合形式をより適切だと見なしたとされる。これらは、回答した人々の経験について、運営側が継続すべき要素を探るための信号になる。

ただし、満足の記録だけを抜き出すと調査の性格を誤る。ウェブサイトについては、内容を「非常に有用」とした割合が56%だった一方、操作性は58%が「ある程度ナビゲートできる」とする水準にとどまり、95%が改善の必要を認めたと報告されている。内容への評価と使い勝手への不満が同居している。これは矛盾ではない。情報の中身に価値を感じながら、その情報へ到達する経路には困難を感じることは十分あり得る。運営者にとって重要なのは、56%を成功の見出しにして95%を脚注へ追いやることではなく、両方を同じサービス課題として読むことだ。

ニュースレターについて、報告された読者割合は51%、内容を非常に有用とした値は50%である。広報については75%が十分だとした。初心者向けセッションへの参加として39%、MyAFRINICのプレゼンテーションへの参加として33%が報告されている。これらも一枚岩の評価ではない。情報提供の到達、内容評価、個別セッションへの接触は別々の変数である。広報が十分だという回答が多いことと、特定セッションへの参加が限られることは同時に成立する。次回運営では、告知の有無だけでなく、時間帯、対象者、事前知識、会場導線、他セッションとの競合を分けて検討する余地が生まれる。

会員属性に関する内訳も重要である。42件のうち、22件は会員、19件は非会員という回答で、1件はこの項目への回答がない。22+19+1=42である。ここで「22の会員組織が答えた」と書いてはならない。報告が示すのは会員と答えた22件であり、22の別個の法人を立証する名簿でも、各法人から法的に委任された代表者を確認する記録でもない。同じ組織から複数人が参加していた可能性、個人がどの資格で答えたか、回答を組織意思として扱えるかは示されていない。1件の欠落も、なかったことにして41件だけで全体を説明すべきではない。欠落は小さくても、項目によって分母が動くという事実の手掛かりになる。

ここまでの結果は「42人の完全な回答票」という像さえ確定しない。42は報告された回答者数だが、各設問を42人全員が答えたとは書かれていない。72.5%を42に掛ければ30.45人になり、64%なら26.88人、56%なら23.52人、58%なら24.36人、95%なら39.9人となる。人を小数で数えることはできない。このことは、掲載値が丸められている、あるいは設問ごとの回答数が異なる、またはその両方であることと整合する。しかし、どちらなのかを証明はしない。したがって、掲載割合から「31人が完全に満足した」などと整数人数を逆算するのは不適切である。各割合は報告が公表した丸め済みの値として保持し、分子と項目別分母は不明と明記するのが正確だ。

公表値を一つの「総合満足度」に畳まない

調査結果を読む際には、数値ごとに測っている対象を分ける必要がある。出席理由が完全に満たされたという72.5%は、参加前の目的と参加後の経験の対応を問う値だと読める。会場、登録、内容への満足は、三つの異なる運営面について報告が「非常に満足」と要約したものだ。会合形式をより適切とする64%は、形式の比較判断であって、内容満足や組織への信任と同じではない。これらを平均して「総合支持率」を作れば、質問の違いを消してしまう。

ウェブサイトの56%、58%、95%も、同じ物差しではない。内容の有用性、操作のしやすさ、改善の必要性は別の問いであり、一人の回答者が「内容は非常に有用だが、操作しにくく、改善が必要だ」と三つすべてに答えていても不思議ではない。改善が必要という95%を「ウェブサイトが役に立たない」と読み替えるのも、内容が非常に有用という56%を「ウェブサイトに問題はない」と読み替えるのも不正確である。改善の対象が検索、分類、表示速度、導線、更新頻度、アクセシビリティーのどれだったかは、公表値だけでは分からない。

ニュースレターの読者割合51%と、内容を非常に有用とした50%の関係にも注意が要る。後者の質問が全回答者に向けられたのか、読んでいる人だけに向けられたのかが示されていないため、二つの割合を直接比較できない。仮に読者だけが内容を評価したなら項目分母は小さくなるし、全員が答えたなら非読者がどの選択肢を選んだかという別の問題が生じる。広報が十分という75%も、どの広報経路を指したか、会合前か会期中か、情報の量か時期かを区別できない。報告値は信号を与えるが、改善策を一意には決めない。

初心者向けセッションの39%とMyAFRINIC紹介の33%は、参加したと報告された割合であり、満足した割合とは限らない。対象者でない人が参加しなかった可能性、同時刻の別企画を選んだ可能性、会合の一部日程だけに出た可能性がある。参加の低さが企画の失敗を証明するわけではなく、参加した人の評価も示さない。逆に、参加割合だけを根拠に需要がないと結論すれば、初参加者の定義や収容規模を見落とす。接触、評価、成果を分けることが、運営改善を具体化する前提である。

さらに、複数の割合を足し引きして回答者の類型を作ることもできない。例えば、ウェブサイト改善を求めた人と会場合理性を評価した人が同じかどうか、初心者向けセッションへ出た人が広報を十分と感じたかは、個票またはクロス集計がなければ分からない。集計値は各設問の周辺分布を示すだけで、回答者一人ひとりの組み合わせを示さない。数値が同じ報告に並んでいることは、それらの間の相関や因果を証明しない。

質問票が見えないと、同じ割合でも意味が変わる

公表された会合報告からは、質問票の全文と正確な質問文を確認できない。これは細部ではない。「満足したか」と尋ねたのか、「非常に満足、満足、どちらでもない、不満、非常に不満」から選ばせたのか、「期待が満たされたか」と尋ねたのかで、72.5%の意味は変わる。「完全に満たされた」が単独の最上位選択肢なのか、複数選択肢を統合した報告表現なのかも不明である。報告が用いる形容を尊重しつつ、回答尺度そのものを復元したふりをしてはならない。

調査言語も明らかでない。会合参加者が複数の言語背景を持つ場合、質問を読みやすい人と、業務上は会合に参加できても調査文面に負担を感じる人では、回答しやすさが異なる可能性がある。紙の調査票だったのか、電子入力だったのか、口頭支援があったのか、障害のある参加者に利用可能だったのかも分からない。回答方式は、未回答の起こり方、自由記述の長さ、重複の検知方法に関係する。分からない点を列挙するのは、結果を否定するためではなく、比較可能性の境界を示すためである。

実施期間も重要だ。閉会日の催促と抽選枠は分かるが、調査票がいつ配られ、いつまで受け付けられたかは確定していない。会合序盤に答えた人と、全日程終了後に答えた人では、経験したセッションが異なり得る。135人という参加者数が延べ人数でないとしても、全員が全日程、全企画へ参加したとは限らない。特定セッションの評価に必要な対象分母は、会合全体の135でも、回答者全体の42でもなく、そのセッションを経験した回答者数かもしれない。

匿名性と本人確認の関係も見えない。完全匿名なら率直な批判を得やすい一方、重複回答や属性別の照合が難しくなる場合がある。記名式なら一意性を確かめやすい一方、組織や運営者への批判を控える誘因が生じ得る。どちらが採用されたか、その選択が回答方向へどう働いたかは推測できない。重要なのは、匿名性を理由に信頼することでも、記名性を理由に疑うことでもなく、方式を開示して解釈の条件に含めることである。

部分回答、除外、重複の規則も記録からは分からない。42は一問でも答えた票なのか、主要項目を完了した票なのか、最後まで完了した票なのか。空欄の多い票を含めたか、不整合な票を除いたか、同一人物らしい複数票をどう扱ったか。会員属性の一件欠落は、少なくとも全項目が完全ではない票が含まれる可能性を示すが、他の項目の欠落量を確定しない。したがって「42件の回答」は保ちながら、「42件の完全回答」や「42人の一意な回答」と強めてはいけない。

自由記述がどのように扱われたかも不明である。類似意見を一つのテーマへまとめたのか、頻度の高い意見だけを載せたのか、深刻だが少数の問題を残したのか。誰が符号化し、別の担当者との一致を確認したのか、引用を要約したのかも示されない。これは改ざんを示すものではない。会合報告は限られた紙幅で編集されるのが普通である。だからこそ、報告の要約を「回答者が発したすべての声」と同一視せず、編集された窓として扱う必要がある。

報告の正確な公表日と、調査部分の執筆者も確定していない。2009年の会合後報告であることは分かっても、回収から集計、編集、公表までの時間や担当責任は再現できない。これも結果を無効にしない。しかし後から訂正や説明を求める際、誰が元データを保持し、どの版が確定版かを追える記録が望ましいことを示す。

誰を数えたのかを混ぜない

回答者とは、調査票に何らかの回答を返した人を指す。会合参加者とは、会合の参加者として集計された人を指す。AFRINIC会員は会員資格を持つ主体であり、会員組織は法人などの組織単位である。投票者は特定の手続きで投票資格を持ち、実際に投票した主体である。影響を受ける事業者は資源配分や登録サービスの変更によって運用上の影響を受け得るが、会合出席や会員資格と一致するとは限らない。エンドユーザーはさらに広く、ネットワークを利用していても調査の存在すら知らない場合がある。「コミュニティー」は関係者を描写する便利な語だが、意思を一つに束ねて他者へ権限を委任できる法的な本人ではない。「人口」は統計上定義される対象全体であり、この調査では定義されていない。

これら九つの集合を入れ替えると、意味が段階的に膨らむ。回答者の満足を参加者の満足へ、参加者の反応を会員の意思へ、会員の意見を事業者の支持へ、最後にはアフリカ全体の承認へと運ぶことができてしまう。しかし各段階には、包含関係、代表資格、回答機会、非回答、組織内委任を示す証拠が必要である。その証拠がないまま名詞だけを大きくするのは分析ではない。

特に「42人は135人の31.111…%だから、31.111…%の参加者が回答した」と断言するのも避けるべきだ。計算上の比は正しいが、同じ招待枠が証明されていない。135人全員に一回ずつ調査票が渡り、42件がその中の一意な42人から来たと確認できて初めて、通常の意味での回答率に近づく。現存する報告は、配布数、到達数、回答資格、重複確認を示さない。だから31.111…%は、二つの公表数を比べた粗い比率としては正確でありながら、調査設計上の回答率としては未証明なのである。

景品と回答行動——分かること、分からないこと

閉会日の2009年5月21日、参加者は、会合調査票を記入するとiPod Nanoが当たる機会を得られると案内された。公式日程には16時15分から16時30分まで「Lucky Draw-Survey」の枠が置かれていた。これは推測ではなく、調査運営に関する記録された事実である。回答を促す景品は、忙しい会合の終盤で回収を増やすための現実的な手段になり得る。実務的なイベント評価で景品を用いること自体を、不正や買収と呼ぶ根拠はない。

同時に、景品の効果は不明である。景品がなければ何人が答えたか、景品が特定の属性を持つ人に強く響いたか、回答内容を肯定的または否定的に動かしたかは分からない。景品目当ての人が増えれば意見の強さが薄まる可能性もあるし、普段なら回答しない層の声が加わる可能性もある。抽選に関心のない人は動かないかもしれない。どの方向が優勢だったかを示す比較データはない。従って、景品を隠すのも、偏りの原因と断定するのも誤りである。「iPod Nanoの抽選機会があり、その参加・回答方向への効果は不明」と記すことが、最も情報量の多い表現になる。

自己選択は両方向に働き得る

取得された記録の範囲では、回答は自発的だった可能性がある。自発回答には自己選択の不確実性が伴う。強く満足した人は感謝を伝えるために答えやすいかもしれない。強く不満を持った人は改善を求めて答えやすいかもしれない。景品に関心のある人、時間に余裕のある人、調査で使われた言語に慣れた人、組織活動への関与が深い人も、別の反応傾向を持つ可能性がある。しかし、どの層が多く、どの方向へ結果を動かしたかは記録されていない。

会場に来る前にも選択は起きている。渡航費を確保できたか、職務として出席できたか、開催言語に対応できたか、カイロまで移動できたかによって、135人の構成自体が形成される。それでも、報告には国、職務、資金源、言語、参加日、出席セッションごとの調査クロス集計がない。42件を135人へ重み付けする基礎がなく、ましてAFRINIC会員全体、アフリカの事業者、域内人口へ重み付けする基礎もない。

このため、通常の世論調査のような誤差範囲や信頼区間を計算してはならない。無作為抽出、標本枠、抽出確率、重み付けが文書化されていない以上、数式を足しても欠けた設計は補えない。小数点の精密さは、母集団への代表性の精密さではない。必要なのは架空の統計的確信ではなく、何が観測され、何が観測されていないかを区切ることである。

93人分の差に、賛成も反対も代入しない

135と42の差である93は、分析上の重要な空白だが、意見の集計ではない。93人が調査を拒否したとは言えない。調査票を受け取らなかった人、回答資格がなかった人、会期の一部しか滞在しなかった人、回答を始めて完了しなかった人がいたかもしれないが、記録はその内訳を示さない。同様に、93人が満足して沈黙したとも、不満で離脱したとも言えない。

非回答を肯定へ数える誤りは、「反対しなかったのだから支持した」という形で現れる。非回答を否定へ数える誤りは、「答えなかったのだから疎外されていた」という形で現れる。どちらも、観測されていない意見を分析者が作っている。沈黙は、質問を受けたうえでの棄権なのか、接触不能なのか、時間不足なのかさえ分からない。93は、未観測部分の大きさを示す境界線としてのみ使うべきだ。

また、42と93を二つの政治陣営のように扱ってはならない。調査は特定の議案への賛否投票ではなく、複数のサービス経験を尋ねたものだった。回答者の中でも、会場には満足し、ウェブサイトには改善を求めるという混合した評価があり得る。非回答側にも同様の組み合わせがあり得るが、分からない。単一の支持軸へ変換すると、調査が持っていた具体的な改善情報まで失われる。

代表性がなくても、診断性はある

この調査の価値を「代表的か、無価値か」の二択にすると、実務を誤る。代表性とは、定義された母集団について標本から推論できる性質であり、標本枠、抽出方法、非回答、重み付けなどの設計に依存する。診断性とは、寄せられた回答から問題候補や改善点を見つけ、次の確認行動を導ける性質である。42件は前者を証明しないが、後者を十分に持ち得る。

例えば、ウェブサイト改善を求める値が高いなら、次の段階で利用者テスト、検索ログ、問い合わせ分類、具体的な自由記述を確認できる。会場や登録への満足が高いなら、どの運営要素を維持すべきかを担当者へ聞ける。初心者向けセッションの接触が限られるなら、対象者数、告知、時間割を調べられる。調査値は決定の終点ではなく、調査対象を絞る起点として働く。

診断として使う場合にも、強い信号をそのまま因果へ変えてはいけない。操作性への評価が低いとしても、原因が画面設計なのか、接続環境なのか、情報構造なのかは別途確かめる必要がある。セッション参加が少なくても、時間帯のためか、対象者が少なかったためか、定員のためかは分からない。調査は「どこを見るか」を教えるが、「なぜそうなったか」を単独では確定しない。

この使い分けにより、42件を軽視せず、同時に過大評価もしない姿勢が可能になる。代表性を主張しないことは、回答者の経験を二級品にすることではない。一人の具体的な障害でも、サービス提供者が修正できるなら価値がある。反対に、42件すべてが同じ方向でも、明示的な委任がなければ権限にはならない。サービス改善に必要な証拠水準と、他者を拘束する決定に必要な証拠水準は違う。

この調査に対する最も強い弁護

公正に読めば、この調査は選挙でも、科学的な世論調査でもなかった可能性が高い。会合運営者が参加経験を振り返り、次回の会場、登録、内容、情報提供を改善するための実務的な評価票だった。42件の直接回答は、仮説を立てるには相当な量である。会員・非会員・無回答の内訳を公開し、ウェブサイト改善を求める95%という厳しい信号も載せた点から、報告が拍手だけを編集したとは言えない。iPod Nanoの抽選も、会合最終日の回収を促す合理的な完了策として理解できる。

この弁護は受け入れるべきである。42件だから価値がない、という批判は粗雑だ。少数でも、同じ障害が繰り返し現れれば改善の優先順位を示す。会場や登録への高い満足は維持すべき運営要素を知らせる。ウェブサイトの改善要求は、コンテンツ品質だけでは解けない導線の問題を示唆する。初心者向けセッションやMyAFRINIC紹介の値は、対象者と配置を見直す質問を生む。調査は、問題を確定する最終判決でなくても、次に何を確かめるべきかを教えられる。

しかし、その弁護から権限は導けない。実務的に有用であることと、制度を拘束する正統性を持つことは別である。回答者のサービス経験がよく測られていても、欠席者、非回答者、会員組織、影響を受ける事業者、利用者からの委任にはならない。景品が合理的でも、抽選参加が政策同意へ変わるわけではない。批判的な回答を掲載したことが誠実さの手掛かりでも、報告の要約が代表性を獲得するわけではない。調査を評価する最善の方法は、役立つところでは十分に使い、権限を証明できないところでは止めることだ。

経験が「報告」になるまでに失われ得るもの

調査結果は、個人の経験から公表報告へ一直線に移るわけではない。少なくとも次の連鎖を通る。

  1. 回答者本人の経験、関心、期待がある。
  2. 質問文、選択肢、尺度、使用言語、景品が、何を答えやすくするかを形づくる。
  3. 回答資格、調査票の到達、自発的な参加、未回答項目が、観測される集団を狭める。
  4. AFRINICが回答を回収し、重複や無効票を扱い、データを確定する。
  5. 自由記述を分類し、設問ごとの分母を決め、割合を丸める。
  6. 会合報告へ載せる項目を選び、詳細を短い記述へ圧縮する。
  7. 後の発言者が報告を引用し、サービス改善の信号をより大きな制度的主張へ広げる可能性がある。

各段階は、操作があったという告発ではない。むしろ、通常の調査でも情報が失われる場所を示している。質問文がなければ、72.5%がどの選択肢の組み合わせなのかを検証できない。項目別分母がなければ、95%が何件中の何件かを再現できない。自由記述の分類規則がなければ、少数意見がどの見出しへ入ったかを追えない。編集基準がなければ、掲載されなかった項目が無関係だったのか、紙幅の都合だったのかも分からない。透明性は、悪意を想定するためではなく、善意の要約に不可避な損失を見えるようにするために要る。

再現可能性の最小単位

完全な個票公開がなくても、第三者が集計の輪郭を確かめる最小単位は作れる。各設問について、質問文、選択肢、回答件数、空欄件数、除外件数、各選択肢の件数、割合の丸め方を一行ずつ対応させる。会員・非会員のような属性別結果を示す場合は、個人を特定しない大きさを保ちつつ、属性項目自体の欠落も表示する。これだけで、割合から小数人数が生まれる問題の大半は解消できる。

調査全体については、登録者、実参加者、招待対象、到達した調査票、回答開始、部分完了、一意な完了を別々に数える。ここで一つの数字を別の数字の代用にしないことが重要だ。登録して欠席した人は実参加者ではない。実参加者でも招待が届かなければ回答可能者ではない。開始して途中でやめた票は、答えた項目には寄与しても完了数には入らない。一意性を確認できない回答は、固有人数として強く表現しない。

自由記述は、原文を個人情報から切り離して保存し、分類表と一緒に保持する。少数意見を頻度だけで捨てず、サービス停止、安全、差別、アクセス障害のように頻度が低くても重大になり得る問題は別に記録する。掲載要約と元の集計を結び、後の引用がどの資料のどの値を使ったかを追えるようにする。そうすれば、調査の運営目的を損なわず、後年の制度的な拡大解釈を検証できる。

再現可能性は、全回答者の身元公開を意味しない。匿名性を守った集計、アクセス制限された監査記録、公開用の集約表を階層化できる。必要なのは、読者が個人を知ることではなく、集計者がどの母数からどの値を作り、どの判断で公表したかを追えることである。この違いを守れば、プライバシーを口実に分母を消す必要も、透明性を口実に回答者をさらす必要もない。

この連鎖で最も危険なのは最後の拡大である。「回答者は会場に満足した」が「参加者はAFRINICを支持した」へ変わり、さらに「コミュニティーが制度を承認した」へ進めば、対象も質問も入れ替わっている。会場評価票は、統治権限を問う委任状ではない。集計を作った組織が自らの権限について語るときは、サービス評価の証拠と法的・組織的な権限連鎖を分離しなければならない。

分母のない「コミュニティー」は本人になれない

統制原則は明確である。参加は証拠、専門知、警告を供給するが、それ自体は不在の本人を拘束する権限ではない。コンセンサスは技術的判断を調整する方法であって、主権ではない。コミュニティーは関係者の集合を描写する語であり、単一の意思を持って財産や権利を他者へ委任する法的な本人ではない。レジストリの台帳は運用上の現実を支えるが、台帳を管理することは、その現実を所有することではない。

従ってAFRINICは、番号資源に関する民間の記帳者・調整者である。主権、立法、規制、警察、訴追、司法、処罰、没収、所有の権力を持たない。影響力は、運用者が記録を認識し、相互運用のために信頼することから生じる。ルーティングそのものを物理的・主権的に支配することから生じるのではない。この境界を守ると、調査の位置づけも安定する。アンケートはサービス提供者が利用者経験を学ぶ手段であり、記帳者を統治者に変える儀式ではない。

AFRINICの公式報告が用いる「コミュニティー」の語、満足に関する要約、会合形式への評価は、AFRINICがそのように記録し公表したことを証明する。だが、公式文書であることは、その語が指す集団の範囲、代表性、委任、正統性を自動的に証明しない。自己記述は行為と発言の一次記録として強い。自己記述を権限の証明として使うには、別の権限連鎖が必要である。

42、135、93がつくる正しい結論

42件から得られる正しい結論は、回答者の中に、会場・登録・内容を高く評価する声があり、現在の会合形式を適切とする傾向が報告され、同時にウェブサイト改善への強い要求や、情報提供・個別セッションに関する混合した信号があった、というものだ。会員と答えた22件、非会員と答えた19件、欠落1件という構成も、回答群の内部を少し見せる。

135という数は、42を会合の文脈に戻す。93という差は、沈黙の内容を教えないが、観測外の領域が大きいことを知らせる。93人分の差を不満とも満足とも数えてはならない。回答しなかった理由も、質問を受け取ったかも、会合のどの日にいたかも推測できない。だからこそ、42を135に置き換えず、135を会員母集団に置き換えず、会員を「アフリカ」に置き換えないことが重要になる。

分母がぼやけると、回答者の感想が全参加者の評価に、参加者の評価が会員の承認に、会員の承認がコミュニティーの命令に変換される。運営上の好みが、資源や制度を制御する根拠のように見えてしまう。分母を開示すれば、この仕組みは逆向きに働く。非回答と自己選択の不確実性が見え、サービス学習と権限の問題が離れ、制度的な主張には別の証拠が必要だと分かる。

AFRINIC-10の調査が残した最も有用な遺産は、高い満足値でも厳しい改善値でもない。42という回答数と135という参加者数を同時に残したことで、読み手が主張の限界を計算できるようにしたことだ。分母は、調査の敵ではない。調査を実務へ返し、権限を証明するふりから救う防護柵である。