工藤 叁耶子（2022年度选科础／社会人）
2022年９月１０日、モジュール３「活動のためのデザイン」２つ目の讲义は、明治大学公共政策大学院ガバナンス研究科教授の源由理子さんに登壇いただきました。
讲义テーマは「社会课题解决のための协働型评価～対话とエビデンスの交差」です。源先生が評価学に目覚めたのは、ケニアのナイロビのスラムの生活改善プロジェクト評価がきっかけだそうです。ナイロビでの生活改善を評価する際に、資金?所得が増えたといった基準、つまり援助する側の視点のみで評価していいのか？といった疑問にぶつかったそうです。そこで、評価方法について調査していたところ、「参加型評価（协働型评価を含む）の方法論」に出会ったとのことです。
生活改善された状态はその地域の人がどういうことをもって改善したとなるのか、どんな状态になることが望ましいのか、彼らがどう思っているのか引き出す、このプロセスこそが评価になると言います。人によって多様な価値があるため、どこに価値基準をおくのかが重要であり、当事者の意见を吸い上げながら评価していくことに重きを置いて、先生は现在も评価に取り组んでいます。
评価とは？
まず、评価（贰惫补濒耻补迟颈辞苍）とは何でしょうか。评価とは、成绩付けやランキングというイメージを持ちがちですが、「物事のメリット?価値?意义を体系的に明らかにすること」とであり、事実を测定するだけでなく、评価対象の価値を引き出し、评価を通してより価値の高いものにすることです。
例えば、お扫除ロボットのルンバを评価するとなった场合、製品の内在的価値があるのは理解できますが、その価値が良いか悪いかは个人によります。つまり评価をする际に、凄く良いサービスを持っていたとしても、购入者のニーズと合わないと、受け手はその価値を见出す事が出来ません。そのため、サービスを提供する前に、ニーズの评価というのも重要になってきます。
今回は製品评価ではなく、事业（プログラム）を评価する方法论、「プログラム评価论」について绍介いただきました。プログラム评価とは、社会调査手法を活用し、社会的介入プログラムの有効性を体系的に调査するものです。その评価はプログラムを取り巻く政治的?组织的な文脉を考虑して行われ、社会的活动によって社会状况を改善するための情报源となります。つまり、评価は结果?成果の达成度を把握することだけでなく、実施プロセスやプログラムのデザインなども评価し、结果が社会に活用されることを目指しているのです。评価は、より良い社会を実现するための道具であり、活用されなければ意味がありません。
ロジックモデルとは？
次に、プログラム评価の方法论、つまり考え方の绍介をしましょう。
ロジックモデルとはある事业がその目的を达成するに至るまでの论理的な因果関係を表すものです。対象である事业の构造を「言叶」で可视化し、関係者间でプログラムの手段と目的の道筋の仮説を立て、より効果的な事业を検讨し、説明するための「コミュニケーション」の道具として使用されます。また、はじめに立てたモデルに缚られるのではなく、活动の进捗に応じてモデルを修正していくことも必要です。
アウトカムは、アウトプット（结果）からもたらされると考えられる成果を整理し、事业の成果について期待される内容を论理的に検讨し整理することです。社会课题に取り组むプログラムを実施するには、必ずアウトカムには外部要因の影响があり、リスクが伴う事を、まず理解しなければなりません。あまりにリスクが大きいのであれば、実施自体を考え直さなければならないですが、组织のミッションと照らし合わせながら、アウトカムを明确にすることで、より戦略的な手段を考えることが出来るのです。そのため、まず始めに事业を実施するにあたりどんな复雑な课题があるかを考える必要があります。これがニーズ评価にもつながるのです。
プログラム评価における５つの评価
プログラム评価では、５つの评価を提唱しています。
まずは、评価の目的ごとに大きく分けて形成的评価と総括的评価があります。评価をして形成しなおすことを形成的评価といいます。形成的评価には、アウトカムの妥当性や事业の必要性について问う「ニーズ评価」、事业の设计の妥当性を问う「セオリー评価」、そして実施过程を问う「プロセス评価」が含まれます。
そして上记３つを踏まえた上で、総括的评価には、事业のアウトカムやインパクトについて问う「インパクト评価」、そして事业全体の効率性を问う「効率性评価」が含まれます。この一连の流れは、一方向で进めるのではなく、たとえば、プロセス评価の结果をセオリー评価につなげたり、ニーズ评価の结果をセオリー评価につなげるというように、一つ前の评価に戻ったりする事を繰り返す事で、より良い事业を実施することが出来ます。
通常の評価は、内部評価と外部評価があります。評価の主体は実施者であったり、外部に評価を依頼するのが通常です。しかし、协働型评価とは、そういった実施者、受益者、外部評価者が皆で一緒に評価する方法です。評価基準については、皆で合意形成して決めていき、またそれぞれ立場（経験）が違うため、同じ目的に向かって相互の学び合いが自然に生まれていきます。
誰のための評価？协働型评価の取り組み
ここで今一度振り返りますが、まず評価結果は誰が使うのでしょうか？使用するのはその事業を実施している人や資金提供者、あるいは提供されるサービスの利用者です。そのため、彼らの疑問や懸念が評価に反映されないと、彼らの理解を得る事は出来ません。評価の目的によってアプローチ方法が変わりますが、関係者のエンパワーメントや組織強化、事業改善においては、协働型评価は非常に効果的であると言えます。
５つの評価階層を协働型评価の視点で捉えた時に、特に重要な部分は、実施過程で出てくる現場の声（プロセス評価）を、事業の設計（セオリー評価）につなぎ直してくこととです。またアウトカムの評価に基づき、実施過程を見直していくことです。このサイクルが適切に行われていれば、おのずと事業の効果が上がると考えています。
しかし行政では、予算にひもづく事务事业それぞれに评価を求められますが、一般的にはアウトプット达成度や予算の使い道の评価が中心で、政策の改善、つまりアウトカムの评価に基づく见直しに繋げる事がむずかしいのが现状です。
兵庫県豊岡市では、このような問題を踏まえて、协働型评価を取り入れました。たとえば、災害による被害を少なくなるために、「地域の防災力の向上」を目指し、町内会、学校、消防団、教育委員会等様々なアクター皆で評価を行いました。
まず、関係者たちとロジックモデルを確認するワークショップを行います。関係者間の対话の场を提供し、問題の共有と相互学習 ? 納得性と合意形成 ? 関係性の形について模索します。
では、「地域の防灾力が向上した状态」はどうやって测るのでしょうか？これも関係者全员で考えます。市民の一人から、「灾害が起きた时に隣同士助け合えれば良いのではないか」という意见があり、皆が纳得したという例があります。実际、灾害が起きた场合はすぐに支援が来るわけでは无いので、それまではお互いに助け合っていかなければならないという、活动现场の人ならではの意见なのです。研究者の结果からはなかなか见つけられない质的なデータの１つと言えます。
灾害による被害を少なくする方法は、もちろん地域の防灾力向上以外にも方法はあります。今回の事例では、防災力向上という戦略をアウトカムに置き、それに対してどのような手法があるか、というのを协働型评価で検討し、検証していきました。当事者のニーズ、つまり現場の声を反映するのと同時に、客観的かつ科学的なエビデンスを活用することも勿論重要です。この２つの相互作用によって、新たな知識創造をすることが出来、次の新しい変革につながっていくと考えます。参加者からは、行政と市民の壁がなくなった、自分自身の考え方が変わった、政策課題の理解が進んだ、政策実施過程の理解につながった、等のコメントを得る事が出来ました。
まとめ
本讲义では、参加型評価のひとつである协働型评価について紹介されました。評価を内部だけ、或いは外部だけでは無く、事業に関わる全ての人が、共に実施プロセスを評価し、共にプログラムの成果を評価することで、アウトカムの把握や実施上の課題を把握する事が出来ると考えられています。インパクト評価による客観的な科学的な評価によるエビデンスも重要ですが、現場の人たちの経験に裏付けられた暗黙知、主観的なエビデンスも重要です。协働型评価では、個人が自らの体験経験を振り返る事で、その経験を再確認することを重要視しています。また、事業結果は誰のためのものであるのか、という視点から、行政だけでは無く市民やその他のアクターが協働で取り組む事により、今まで築けなかった互いの関係性や、コミュニケーションを通じて新しい視点や視野、知識が作られていく効果も期待されます。知識創造とそれによる社会変革は、新たな専門知識を知ることによってのみ起こるのではなく、既存の知識財産を、これまでになかった関係性によって生み出し、組合せ、事業価値に変換することによって起こっていきます。
また 、この評価方法により、一度決めたらその通りにやる計画指向が、戦略指向、改善?改革指向へと変化することによって、組織風土へのインパクトも生まれていきます。いわゆる前例踏襲主義からの脱却も期待できるかもしれません。
