知識と技術：上位の結果は独立した証拠か？
導入済み| English | 意味 |
|---|---|
| provenance/ˈpruːvnəns/ | 出所追跡 |
| proxy/ˈprɒksi/ | 代理指標 |
| algorithm/ˈælɡərɪθəm/ | アルゴリズム |
3つの見出しは一致しているように見える
- 架空の検索ツールが3つの上位結果を表示し、いずれもある学校クラブの会員数が倍増したと伝えている。これら3つはいずれも同じプレスリリースを繰り返している。3つの結果が独立して確認されたことになり、会员数の増加が裏付けられたか？
- プロヴェナンス は情報の出所と読者に届いた経路を記録する。それらを別々の証拠として数える前に、報告書の出所を遡る。
情報連鎖を追跡する
- 指定されたソースを開き、日付、著者、引用記録を比較する。すべての報告書が一つのプレスリリースから派生している場合、一致は独立した検証ではなく、単なるコピーによって反映されている可能性が高い。
- 主張に適した会員記録を求める。登録会員、実際の参加者、来場者を区別せよ。ある指標が倍増したからといって、別の指標も倍増したとは限らない。
一つのリリースからコピーされた3つのレポートが、それらの証拠について何を立証するか？
難易度 1/5 · 100 コイン + 今日初回完了時に小ボーナス付与
レポートは、独立した検証を加えずに一つの主張を繰り返す可能性がある。
どの証拠が能動的参加に直接関連しているか。
難易度 1/5 · 100 コイン + 今日初回完了時に小ボーナス付与
出席は、登録や注目の異なる指標である。
ランキングが何を測定しているかを問う
- ツールは関連性、人気度、または他の明示されたシグナルに基づいて結果をランキングする。先頭に来たからといって、その報告書が会員データを検証したことを自ら保証するわけではない。
- プロキシ（代理指標）とは、代替となる指標のこと。クリック数は注目を示すかもしれないが、注目は正確性と異なる。一方を他方の証拠とする前に、その関連性を説明せよ。
上位結果は自動的に最も正確な情報源である。
難易度 1/5 · 100 コイン + 今日初回完了時に小ボーナス付与
ランキング信号が検証や正確さを測定する必要はない。
この場合、クリック数は何の代替指標になり得るか。
難易度 1/5 · 100 コイン + 今日初回完了時に小ボーナス付与
注目はクリックで測定できるが、正確さには他の証拠が必要である。
ツールが省略しているものを確認する
- ランキングにより、いくつかのソースは目立ちやすく、他のソースは探しにくくなる。質問を慎重に変更し、ソース範囲を検証し、声称された基盤となる記録が利用できない時期を記録せよ。
- アルゴリズム は指定された手順を用いて情報を処理する。その出力を評価するには、タスク、入力データ、および適切な検証が必要であり、自動化が完璧か無効かという一般的な仮定だけで判断してはいけない。
この技術全体について而非この結果についての主張をする
- ツールの選定が知識主張に対する信頼性にどう影響するかを問う。コピーされたソースの連鎖、ランキングシグナル、そしてまだ必要な独立した証拠について説明せよ。
- 正当化された結論は限定される：表示された3つのレポートは1つの起源を共有している。これだけではプレスリリースが誤りであることを証明するものではない；これはなぜ、見かけ上の反復が独立した支援をほとんど加えないのかを説明するものである。
各チェックとそれぞれの役割を対応させよ。
難易度 2/5 · 140 コイン + 今日初回完了時に小ボーナス付与
これらの確認作業は、証拠とその提示方法を区別する。
説明された情報源連鎖から導かれる結論は何か。
難易度 2/5 · 140 コイン + 今日初回完了時に小ボーナス付与
共通の発生源は、真実を断定するものではないため、裏付けの限界がある。
上位3つの報告書は、登録数を数える同じクラブのプレスリリースにリンクしている。別日に付された出席記録は参加数を示す。これらのソースは異なる質問に答える。報告書の一致は登録数を独立して検証するものではなく、どちらの指標もメンバーの出勤頻度を自動的に確定させるものではない。読者は出典をたどり、測定された値を明記し、選択した主張を直接裏付ける記録を求めるべきである。
反復、ランキング、そして自信満々の要約は、独立した検証とは異なる。各結果が実際に用什么の証拠を用いているかを追跡せよ。
出典を追跡し、測定された値を特定し、ツールが何を選択したかを評価してから、表示された結果が何を確立するかを判断せよ。