研究会4|議事メモ

第4回TARL評価ゼミ研究会
日時:2010年11月29日(月)19時-
場所:Tokyo Artpoint Project Room 302(アーツ千代田3331内)
内容:
1)前回の議論の振り返り
2)事例報告 東京アートポイント計画の評価
3)ディスカッション


以下は、ディスカッションの話題を中心にまとめています。

■ 事例報告をうけて
・ AAFのようなフラットな関係ではなく、アートポイントは比重があるのでは。「可能性の評価」に近い。全体の配分のなかで、段階や状況が違うプロジェクトが組まれている。価値的なものが入っている感じがする。
・ そういう意味では、ピアメンタリングが難しいのでは。逆にピアメンタリングはみんながフラットだったら、成り立たないのではないか。お姉さんやお兄さん的な立場があったほうがいい。
・ 弟がお姉さんを評価するのは可能なのか。教師と学生の評価がありえるから、どちらでも意味をもちうるだろう。

■ インタヴューの手法
・ アートプロジェクトはアートを評価できるのか、という芹沢さんの投げかけ。たとえばインタヴュー調査をするときでも可能性や展開可能性を引き出したり、次の展開まで踏み込める何かを提示していく必要があるかもしれない。
・ そうすると具体的にどういう方法がありえるのか。インタヴューしていく人が価値化をしていくのか。
・ インタヴューをする人で、出てくる意見が変わってしまう。出てくるエピソードが恣意的になってくる。同じ質問内容でも違ったトーンの回答が出てくる。
・ インタヴュー対象者の選び方や聞き手によって変わってくるのではないか。

■ 結果の提示の仕方
・ 評価をするときに課題や問題点が分かっているから、次のステップを提示できるはず。マイナスな部分の扱いをどうしていくのか。課題があるから「次にどうしようか」という視点が出てくるはず。
・「問題は分かっているが、人が足りない、お金がない」で終わってしまうのではなく「課題だから次どうするか」というものを、どうすれば一緒に見つけていけるのか。
・ 話しを聞くのがいいのか。その先に何かを提示したほうがいいのか。

■ 内堀と外側の調査スタンス
・ 内堀で一緒にやっていくならば、外側の調査をするときに「内側の人です」と言うか「外側の人で内側にフィードバックする」と言うか。
・ 外側は外側、内側は内側でインタヴューも報告書も分けたほうがいいのでは。いいエピソードが出たとしても、ぐぐっと留めて分けていく。実際にやってみると、結局混ざってしまうのではないか。
・ 外に出すインタヴューとして始まっても、公開の確認の時点で公開できなくなってしまうことがある(削除依頼)。
・ 通りいっぺんの話(たとえば商店街が活性化したなど)しか出てこないことがある。でも、逆にそれは外向きにはぴったりなのではないか。わざわざ対面インタヴューなのに、通りいっぺんのストーリーが出てくる!みたいな(そういう話しを集めるにはアンケートがやりやすい)。
・ 現場を見ている雰囲気が重要になってくるのではないか。可能性を見ていくには。

■ 東京アートポイント計画という傘
・ 東京アートポイント計画全員で最後にミーティングをしてはどうか。
・ 東京全部のなかでどんな位置づけ(どんな可能性があって)ということから、東京アートポイント計画を考えていかなければならないのでは。
・ そもそも(共催団体が)他を意識したり、大きな活動のなかでやっているという意識があるのか。
・ 共催企画としてやっているので、ひとつひとつのアイデンティティが強くて、東京アートポイント計画としての傘で考えることはないのか。大きな傘をよりよくしていこうという考えは難しいか。
・ 東京アートポイント計画以外のプロジェクトも含めて、全体のプロジェクトで見ていくのはどうか。
・ プロジェクト全体の枠組みを問うようなやりかたができないか。企業が大きくなるときに明らかな他社をウィルス的なものを組みこむことがある(そういうやりかたがあるのではないか)。
・ その際の呼びかけは東京アートポイント計画なのか、評価をしたい外部の主体なのか。

■ 傘の影響力と設定の仕方
・ 大きな傘のインパクトと魅力はあるが、M&A的な感じもする。小さなプロジェクトが、たくさん生まれてきた状態で、全体として底上げしていくのか、ということを考える状況もあるのではないか。
・ 傘に入れるときの双方の思い込みで路線が修正されてしまうのでは(個人でやってきた面白さがなくなってしまう)。
・ 傘に入れることで、よりに自由にやってもらおうと思ったはずなのに、共通の目標が出来てしまう…。
・ 知らないうちに傘に入っているのがいいのか。傘が目的をもってしまう(たとえば地域活性化)と問題。ガイドブックのようなかたちになってくるのか。るるぶ的な。
・ AAF傘に入ることの変更度は少ないのではないか。傘にあることのインパクトは大きいのでは。AAFのような活動がいっぱいあるんだ、と全体的な盛りあがりを生んでいるのでは。
・ お金的なものではないけど、テンションが上がったとか、周りからの知名度が上がったなど。
・ AAFのグループ企業のブランドのような影響力。とはいえ、それもAAFの恣意的な判断があったから。

■ 他者をいかに巻きこむか
・ 芹沢さんの話しを聞いていて、AAFは開催2年目にディレクター制度をなくしたことは、大きなブレイクスルーだったのではないか。
・ たとえば偶然性の高い手法で選んでしまうとか。いきなり、他者を恣意性を排していれてしまうことの可能性。公募でも選考は恣意的になる。
・ 事業の枠組み自体を問い直すようなやり方ができないか。全然理解しえない人や知らなかった人と、どのように入れていくのか。
・(同じような価値観をもった人々の)ピアメンタリングなやり方、違う価値観をもった人も入ってくる方法。前者は東京アートポイント計画では可能だけど、後者は呼びかけることに「勢力意図」みたいなものが出てしまうだろう。
・ 東京のキャベツモデルを年に1回、書き換える場。大きな勢力としての東京アートポイント計画が見えてくるかも。

■ 次回のこと
・ 議論は出尽くしている。方向性は何となく確認できているのではないか。
・ これまでの意見をまとめていけば、何か見えてくるのではないか。
・ それから、何かアクションを起こすのにも遅くはない。

11/16、第5回ゼミ開催

全8回の評価ゼミ。
いよいよ後半に入った11/16の第5回ゼミは、P3 art and environment エグゼクティブ・ディレクター/アサヒ・アート・フェスティバル(AAF)事務局長の芹沢高志さんをゲストにお迎えしました。テーマは、「ピア・モニタリング」=同種の活動を行う関係者による相互評価です。


さて、なぜこの評価ゼミで「ピア・モニタリング」を取り上げたかといいますと…。

もう10年近く前になりますが、ロビーコンサートを開催していたある企業のメセナ担当者が、「ベンチマーク、ベンチマーク!」といいながら、スタッフを引き連れて、他社のロビコンを見学していたことがありました。「なるほど、メセナでもベンチマーキング(wikipedia)か、企業らしい」と思ったのですが、同じ頃、「メセナ留学」という、他社のメセナの現場運営に1日参加する試みに強い興味を示す担当者さんもでてきたりしました。メセナ関係の会議のたびに、超ライバル企業同士の担当者らが悩みを真剣に話し合っている様子にも驚きました。メセナ業界では、同種の活動をする人同士が最高の助言者であり、理解者、よき相談相手、時に厳しくも貴重な忠告者なのだということが自分の中でみえてきました。

これを、どうにか企業メセナ担当者が長年悩んできた「評価の仕組み作り」にいかせないかと考えていたところ、「ピア・モニタリング」というものがあることを知りました。メセナの調査でお世話になっていた当時三和総研の太下義之さんも、確か「ピア・レビュー」という言葉で、メセナ評価についてアドバイスをくださったことがありました。 こうした<仲間による評価>は、メセナ含む非営利セクターの活動、特に活動をよりよいものにするための検証手段としては有効ではないだろうかという、直感のようなものがありました。


私自身は今もなかなかこれを仕組み化できずにいるのですが、2003年にアサヒビールのメセナ評価を取材した際に、協働相手であるNPOに「自社のメセナについて」の簡単なアンケートを提出してもらっていることを知りました。今でこそ、企業のCSR活動ではステークホルダーの意見を聞くためにアンケートを取ることは常識の域に入っていますが、当時の特にメセナ活動においては珍しいことでした。「ピア・モニタリング」の一種だと注目していたところ、アサヒビールはその後NPOとのパートナーシップ事業をメセナの主軸に据え、さらに本格的にAAFを展開するようになったので、その「NPOアンケート」も“本格的”になってきました。


プロジェクトをいかに評価し、それをどのように活用していくのか等を考える「ひぐれ学校」 という場をAAFに設けるなど、AAF初期段階から評価について、問題意識がありました。外から見ていると、とにかく愚直に、(いい意味で)しつこいほどに、アートプロジェクトの評価を試行錯誤しているように見えました。評価という言葉をやめて「検証」にしたり(第1回ゼミの付箋ワークショップで評価という言葉について訊ねたのは、AAFでの議論もあったからです)。そして、格闘している評価の中味は、まさに「ピア・モニタリング」といえるものでした。


日々、多くのアートプロジェクトに携わる方と話をしたり、JCDN(ジャパン・コンテンポラリーダンス・ネットワーク)やアートNPOリンクのようなネットワーク型NPOが次々と生まれてきたのを見るにつけ、アート業界も「同種の活動をする人同士が最高の助言者であり、理解者、よき相談相手。時に厳しくも貴重な忠告者」 だと感じます。アートプロジェクトの評価を考えるに当たっては、こうした「同士・同志」の役割も評価プロセスに組み込んでいくといいのではと思い、(自分がうまくメセナで仕組化できず気になっていることもあって)、ゼミのテーマのひとつに設定しました。もちろん講師は、「AAF評価格闘の歴史」を語っていただける芹沢さんに、と思ったのでした。 なぜそこまで、そして何を話し合ってきたのか、本ゼミとしてうかがえたらと思いました。


芹沢さんのレクチャーの内容は、ゼミ生のレポートに譲りますが、印象的だった芹沢さんからの投げかけを1つ。 「仲間が行う評価の難しさもある。当事者の、当事者による、当事者のための評価も重要」――なるほどです。 ピア・モニタリングを考えるにあたって、「当事者」というキーワードもいただきました。


芹沢さん、お忙しい中ありがとうございました!
終了後は、近くの中華やさんで芹沢さんと楽しく交流しました。


【第5回評価ゼミ】
-------------------------------------
■日時:2010年11月16日(火)19-21時
■会場:Tokyo Artpoint Project Room 302(アーツ千代田3331内)
■講師:芹沢高志さん(P3 art and environment エグゼクティブ・ディレクター/AAF事務局長)
■内容:「アートプロジェクトの評価:ピア・モニタリング編」
関係者が相互に活動を検証しあう評価方法について、事例に基づいて学ぶ。 
    ・19:00~20:40 芹沢さんレクチャー
    ・20:40~21:00 質疑・応答、ディスカッション
----------------------------------------------------
※ピア【peer】…同等、同格の人、対等者、仲間、同僚、同級生、クラスメート、友人、同輩、同業者

■講師プロフィール
芹沢高志 (せりざわ たかし) 
P3 art and environment エグゼクティブ・ディレクター/AAF事務局長 

1951年東京生まれ。神戸大学数学科、横浜国立大学建築学科を卒業後、(株)リジオナル・プランニング・チームで生態学的土地利用計画の研究に従事。その後、東京・四谷の禅寺、東長寺の新伽藍建設計画に参加したことから、89年にP3 art and environment (http://www.p3.org/) を開設。99年までは東長寺境内地下の講堂をベースに、その後は場所を特定せずに、さまざまなアート、環境関係のプロジェクトを展開している。
帯広競馬場で開かれたとかち国際現代アート展『デメーテル』の総合ディレクター(2002年)、アサヒ・アート・フェスティバル事務局長(2002年~)、横浜トリエンナーレ2005キュレーター、別府現代芸術フェスティバル2009『混浴温泉世界』総合ディレクター。慶応大学理工学部非常勤講師(2001年~2006年、建築論)。著書に『この惑星を遊動する』(岩波書店)、『月面からの眺め』(毎日新聞社)、訳書にバックミンスター・フラー『宇宙船地球号操縦マニュアル』(ちくま学芸文庫)、エリッヒ・ヤンツ『自己組織化する宇宙』(工作舎、内田美恵との共訳)など。


■配布資料
・レジュメ「アートプロジェクトの評価:ピア・モニタリング編」(芹沢高志)
・「アサヒ・アート・フェスティバル2005 評価報告書」
・AAF検証シート
・アサヒ・アート・フェスティバル2010 リーフレット
・アサヒ・アート・フェスティバル2010 報告会(11/20-21)案内


■参考情報
・「アサヒ・アート・フェスティバル2010」 http://www.asahi-artfes.net/  


【若林】

11/16第5回ゼミの参考資料(事前連絡)

初期のゼミ写真をみると、皆さん半袖姿。
あれから夏が過ぎ、秋も深まりゆき、いよいよゼミも後半戦です。

以下、第5回評価ゼミの事前連絡です。
-------------------------------------
■日時:2010年11月16日(火)19-21時
■会場:Tokyo Artpoint Project Room 302(アーツ千代田3331内)
■講師:P3 art and environment エグゼクティブ・ディレクター/AAF事務局長 芹沢高志さん
■内容:「アートプロジェクトの評価:ピア・モニタリング編」
関係者が相互に活動を検証しあう評価方法について、事例に基づいて学びます。 
    ・19:00~20:30 芹沢さんレクチャー
    ・20:30~21:00 質疑・応答、ディスカッション
----------------------------------------------------
大枠のテーマは、ピアモニタリング=同種の活動を行う関係者の相互評価ですが、AAF(アサヒ・アート・フェスティバル)の検証事業をひとつの事例に、評価についてさまざまな角度からお話いただく予定です。
 ・AAFの紹介
 ・AAFにおける評価導入の変遷
 ・AAFの現状における評価手法
 ・評価について(一般論)
 ・予測/計画/目標/評価といった概念について、線形予測とアートとの関係性
  (従来型の評価がいかにアートプロジェクトには有効でないか) 他

★参考情報
・「アサヒ・アート・フェスティバル2010」 http://www.asahi-artfes.net/ 

★当日配布資料
・芹沢さんレジュメ
・「AAF2005 評価報告書」
・アサヒ・アート・フェスティバル2010 リーフレット
・アサヒ・アート・フェスティバル2010 報告会(11/20-21)案内





















※ セルフリサーチ用資料は、以下を配布します。
・「大地の芸術祭 越後妻有アートトリエンナーレ2009」総括報告書(本編・資料編)



【若林】

文化庁「文化政策部会」で議論している「評価」のこと

第4回ゼミの柴沼さんのお話を受け、行政、特に文化庁の評価について、もう少し共有しておきたいと思います。 文化庁に対して政策提言する方、文化庁から助成金を得ている/これから申請しようとしている団体、今後パブリックコメントを出そうと思っている方などには、おおいに関係ある話です。

                  *        *       *

9/29に開催された文化庁の「文化審議会 第8期 第11回文化政策部会」 の議題の一つは、「政策目的・達成目標の在り方について」。 配布資料が公開されています。

○資料4-1: 文部科学省(文化庁)における文化行政の政策評価(実績評価)体系(PDF:116KB)
○資料4-2: 文部科学省における事業評価(平成23年度対象事業の例)(抜粋)(PDF:284KB)
○資料5: 文化政策の評価について【吉本委員提出資料】 (PDF:152KB)


来年度の文化庁予算の概算要求には、「日本版アーツカウンシルの試行的運用」が掲げられており、PDCAサイクルを回す、つまり「評価」を行うことが明記されています。
どのような評価方法が効果的か、文化政策部会で今後も議論されていくのでしょうか。本ゼミとしてもフォローしていきたいと思います。

上記配布資料の「5番」、ニッセイ基礎研究所の吉本光宏さんがレクチャーされた際の資料は、大変参考になります!ぜひご一読を。



【若林】

行政の政策評価~文化庁の評価の現状

第4回評価ゼミで、講師の柴沼雄一朗さん(総務省行政評価局)から、文化庁の事業についても相当なボリュームがある細かな評価結果がまとめられている、調べれば確認可能とのお話がありました。
何がどのように評価されているのでしょうか?その手法は? 文科省や文化庁の行政評価の現状は、しっかりフォローしておきたいところ。 下記に、いくつか事例をまとめます。

■文部科学省の実施する政策評価 (文科省サイト)
http://www.mext.go.jp/a_menu/hyouka/index.htm 
文科省の政策評価の方針(柴沼さんのお話にあった国の方針に沿った内容)や、「実績評価書」(H13年~)、「事業評価書(新規・継続事業)」(H14年度~)、「規制に関する評価書」(H16年~)、「総合評価書」などが公開されています。独立行政法人評価の結果も掲載(これは以下で別途説明)。

例えば…昨年度(2009年)新規事業として始まった「アートマネジメント重点支援事業」がどのような展望のもと、どのように事前評価され、公表されていたか、みてみましょう。

⇒「文部科学省事業評価書―平成21年度新規・拡充等―」 の中で、「平成21年度 文部科学省新規・拡充事業 」の「政策目標12 文化による心豊かな社会の実現」という枠の中で、新規事業として事前評価されています→ 「97.アートマネジメント重点支援事業(新規)【達成目標12-1-2】」。

点検項目は、下記の通り。
◎事業の概要等
 1.事業目的
 2.事業に至る経緯・今までの実績
 3.事業概要
 4.指標と目標 ([指標] [目標] [効果の把握方法])
◎事業の事前評価結果
 A.19年度実績評価結果との関係
 B.必要性の観点
   1.事業の必要性
   2.行政・国の関与の必要性(官民、国と地方の役割分担等)
   3.関連施策との関係 (①主な関連施策 施策目標12−1 、②関連施策との関係)
   4.関係する施政方針演説、審議会の答申等
 C.有効性の観点
   1.目標の達成見込み
   2.上位目標のために必要な効果が得られるか
 D.効率性の観点
   1.インプット
   2.アウトプット
   3.事業スキームの効率性
   4.代替手段との比較
 E.公平性の観点
 F.優先性の観点
 G.総括評価と反映方針
◎指摘事項と対応方針 (【指摘事項】 【指摘に対する対応方針】 )

※気になるのは、冒頭に「事業開始年度:平成21年度、事業達成年度:平成25年度」とありますが、この新規事業、1年で終わってしまったんですよね…。せっかく評価方針や目標達成度の評価指標を定めても、事業がたった1年でなくなってしまったら、事前評価の時間や労力がもったいない。 ところで、このように「事業をやめると決める/決めた時の評価」については公表されていないようです。


■文部科学省 行政事業レビュー(文科省サイト)
http://www.mext.go.jp/a_menu/kouritsu/detail/1293397.htm 
予算の支出先や使途の実態を把握し、改善の余地がないか事後点検を行う「行政事業レビュー」を、文科省も実施。レビュー対象事業の事後点検内容=「レビューシート」を公表しています。
次年度概算要求への点検結果の反映状況も公表。


■文化庁レビューシート (文科省サイト)
http://www.mext.go.jp/a_menu/kouritsu/detail/1295386.htm 
レビュー対象事業の「レビューシート」を個別に公開。 点検項目は次の通り:
1)予算事業名
2)事業開始年度
3)レビュー作成責任者
4)担当部長局
5)担当課室
6)会計区分
7)上位政策
8)根拠法令(具体的条項)
9)関係する計画、通知等
10)事業の目的(目指す姿)
11)事業概要
12)実施状況
13)予算の状況
14)自己点検:支出先・使途の把握水準・状況/見直しの余地
15)予算監視・効率化チームの所見
16)補記
17)資金の流れ(資金の受け取 り先が何を行っているかについて補足)
18)費目・使途(「資金の流れ」においてブロックごとに最大の金額が支出されている者について記載。使途と費目の双方で実情が分かるように記載)
19)「複数支出先ブロック」の支出先一覧(上位10機関)

ちなみに、レビュー対象となっている事業には、以下のようなものがあります(一部抜粋)。
0453 メディア芸術振興総合プログラム
0455 新進芸術家の養成・発表への支援
0456 芸術団体等が行う養成・発表機会の充実
0459 「文化芸術による創造のまち」支援事業
0460 地域人材の活用による文化活動支援事業
0461 地域文化活動活性化推進事業
0465 日本芸術院会員年金の支給等に必要な経費
0466 独立行政法人国立美術館運営費交付金に必要な経費
0469 独立行政法人日本芸術文化振興会施設整備に必要な経費
0470 文化財の維持管理等の推進
0471 文化財保護対策の検討等
0472 美術館・博物館活動の充実
0473 鑑賞・体験機会等充実のための事業推進
0491 文化政策企画立案
0492 文化ボランティア活動推進事業
0493 文化政策情報システムの整備


■独立行政法人の評価
http://www.mext.go.jp/a_menu/hyouka/d_kekka/main10_a11.htm 
各年度毎に、業務実績に係る評価が夏ごろ発表される(例:「平成21年度に係る業務の実績に関する評価及び中期目標に係る業務の実績に関する評価について」) 。
実際の評価結果は、法人ごとにまとめられています。文科省関係(文化系)の独法「日本芸術文化振興会」の評価も公表されています。
⇒「独立行政法人日本芸術文化振興会の平成21年度に係る業務の実績に関する評価」(PDF:1499KB) 。

※全部で86ページと膨大。これは事前の指標設定にも、評価そのものにも相当な労力がかかります。たとえ一般に公表されても、読むのだけで一苦労。行政が事業評価結果を公表することの最大の効果のひとつ=「議論の喚起」には繋がりにくいように思えます。

【最後に番外編】
■事業仕分け結果・国民から寄せられた意見と今後の取組方針について
行政刷新会議の事業仕分けの対象となった文科省の事業についてパブコメを募集。その結果を受けて発表した今後の取り組み方針。


【若林】