慶英会 塾長｜慶應義塾大学卒・英検1級
中高一貫校の学校英語・NEW TREASURE・英検対策を専門とするオンライン個別指導塾です。塾長紹介
結論：inter-rater agreement（評価者間一致）は、二人の評価者が同じ対象に同じ判断をした割合です。10件中8件で判定が一致したなら一致率は80％ですが、その判断が80％正しかったとまではいえません。正しさを確認するには別の基準や検証が必要です。 NEW TREASURE Stage5を学ぶ高校1・2年生向け、慶英会オリジナルの英文和訳10問・記述5問・初見長文5問と全訳・詳解です。学校によって採用Stage・版・学年が異なり、出版社本文・問題の転載はありません。
3つの重要ポイント
二人が同じ10枚の説明文を確認し、一致8件・不一致2件なら、観察された一致率は8÷10＝80％です。
二人とも同じ誤った判断をすることもあり得ます。agreementは判断が一致した割合、accuracyは正しい基準と照合した正答率です。
一致率が高くても同意しやすい分類が多いと偶然一致が増え得ます。Cohen’s kappaなどは偶然一致を補正する方法ですが、この教材は単純な一致率に限定します。
独自英文和訳10問
問1｜和訳
英文：Two reviewers evaluated the same ten captions.
和訳：二人の評価者が同じ10個の説明文を評価した。
解説：共通の対象。
問2｜和訳
英文：They agreed on eight of the ten judgments.
和訳：二人は10件中8件の判断で一致した。
解説：一致8件。
問3｜和訳
英文：They disagreed on two judgments.
和訳：二件の判断では一致しなかった。
解説：10−8。
問4｜和訳
英文：The observed agreement rate was eighty percent.
和訳：観察された一致率は80％だった。
解説：8÷10。
問5｜和訳
英文：Agreement is not the same as accuracy.
和訳：一致率は正確さと同じではない。
解説：評価基準の違い。
問6｜和訳
英文：Both reviewers could make the same mistake.
和訳：二人とも同じ誤りを犯す可能性がある。
解説：一致しても誤り得る。
問7｜和訳
英文：An independent source was needed for checking dates.
和訳：日付確認には独立した出典が必要だった。
解説：正答の基準。
問8｜和訳
英文：The reviewers discussed the two disagreements.
和訳：評価者は不一致だった二件を検討した。
解説：判定の相違。
問9｜和訳
英文：Clearer criteria may improve consistency.
和訳：明確な基準は一貫性を改善する可能性がある。
解説：mayで限定。
問10｜和訳
英文：The report did not call agreement a measure of truth.
和訳：報告書は一致率を真実性の尺度とは呼ばなかった。
解説：一致と正確さを区別。
独自計算・判断5問
問11｜記述
問題：10件中8件が一致。一致率は。
正答：Eighty percent.
和訳：80％。
根拠：8÷10×100。
問12｜記述
問題：不一致は何件か。
正答：Two.
和訳：2件。
根拠：10−8。
問13｜記述
問題：Agreement was 80 percent.からaccuracyも80 percentと断定できるか。
正答：No. Agreement and accuracy are different.
和訳：一致率から正答率は不明。
根拠：共通の誤判断があり得る。
問14｜記述
問題：二人が両方とも同じ間違いをした場合、その項目は一致に数えるか。
正答：Yes. It counts as agreement, even though both may be wrong.
和訳：一致した項目として数える。
根拠：正確さとは別。
問15｜記述
問題：何を確認すれば評価の正確さに近づけるか。
正答：An independent reference standard or verified source.
和訳：独立した検証基準。
根拠：出典と照合する。
独自初見長文5問・全文和訳
Original Reading: A high school media club asked two students to evaluate ten historical photograph captions. Each reviewer worked independently and classified a caption as ready for publication or needing revision. After both had finished, the editor compared their judgments. The reviewers agreed on eight captions and disagreed on two, giving an observed agreement rate of eighty percent. One student wrote that the captions were therefore eighty percent accurate. The editor explained why that conclusion was unsupported. Both reviewers might have accepted the same incorrect date in a caption, so agreement did not guarantee accuracy. The club used original archive records to check factual claims in all ten captions, rather than only those on which the two reviewers disagreed. It found that one caption the reviewers had both approved contained an incorrect location. The group corrected the caption and discussed why it had been overlooked. The teacher also noted that a simple percentage agreement did not adjust for agreement that could occur by chance, particularly when one category was very common. The club decided to revise its evaluation checklist so that each reviewer would verify the date and location separately. The next trial would use the same definitions and clearly record agreements, disagreements, and factual corrections as different measures.
全文和訳
高校のメディア部は歴史写真の説明文10件を二人の生徒に評価させた。各評価者は独立して、公開可能か修正が必要か分類した。編集長が判定を比べると8件が一致、2件が不一致で、一致率は80％だった。ある生徒はだから説明文の正確さは80％だと書いたが、編集長は証拠のない結論と説明した。二人が同じ誤った日付を承認する可能性もあり、一致は正しさを保証しない。部は不一致だった項目だけでなく全10件の事実について元の資料記録と照合した。その結果、二人が承認した説明の一つに場所の誤りがあった。班は説明を修正し、見逃した理由を議論した。教師は単純な一致率は偶然一致を調整しないとも説明した。特に一つの分類が多い場合には注意が必要だった。部は各評価者が日付と場所を別々に確認するよう判定表を修正した。次の試行では同じ定義を使い、一致・不一致・事実の訂正を別の数値として記録する予定にした。
問16｜読解
Question: How many captions did both students evaluate?
Answer: Ten.
根拠：共通の対象10件。
問17｜読解
Question: On how many captions did they agree?
Answer: Eight.
根拠：一致8件。
問18｜読解
Question: What was their observed agreement rate?
Answer: Eighty percent.
根拠：8÷10。
問19｜読解
Question: What mistake did both reviewers initially approve?
Answer: An incorrect location in one caption.
根拠：同じ誤りを見逃した。
問20｜読解
Question: Why did the editor check all captions rather than only disagreements?
Answer: Agreement did not ensure factual accuracy.
根拠：一致でも誤り得る。
7日間復習・FAQ
当日は10英文を和訳し、翌日に記述5問を自力で再解答、3日後に長文の数字と限定表現を確認します。7日後には学校指定Readから測定したことと測定していないことを二列に整理し、根拠を示して説明してください。
一致率80％なら正答率も80％ですか。
いいえ。一致しても両者が同じ誤りを犯している場合があります。
一致率の計算だけで十分ですか。
目的によります。偶然の一致や判定基準の妥当性を検討する場合には追加の指標も必要です。
関連教材と無料体験
Stage5のデータ辞書20問／Stage5の観察効果20問。慶英会の最大1か月完全無料体験・学習相談の条件は申込先をご確認ください。
出版社公式情報
Ｚ会 NEW TREASURE Stage5 Third Edition。英文・数字・全設問・訳は慶英会独自制作です。
最大1か月完全無料体験・学習相談受付中
最大1か月の完全無料体験をご案内
学校教材・学力・目標に合わせた個別指導
入塾前に授業の進め方や講師との相性をお確かめください。
学校英語・定期テスト・英検の学習相談にも対応します。
保護者様の教育相談も無料で承ります。
1.学年 2. 学習目標 3.体験ご希望をお送りください。
体験の期間・回数・担当講師・日程は、ご希望と受付状況を確認してご案内します。
慶英会 塾長｜慶應義塾大学卒・英検1級。中高一貫校の学校英語・NEW TREASURE・英検対策を専門としています。塾長の経歴・指導方針を確認する