2023/10/3 Go Conference mini打ち合わせ
Goal
CfPの選考準備を進めるために必要な事項を決める
Agenda
Goal, Agenda, Memoの黙読(5min)
CfPの選考ガイドラインと選考手順の決定(20min)
CfPの選考作業の流れとスケジュールの決定(15min)
その他懸念事項の共有、アクションプランを決める(10min)
Memo
CfPの選考ガイドライン
決定したこと
選考時に非表示にする項目
プロポーザルの応募者名
プロフィール(所属など)
特別枠(地元・学生枠)
アーカイブの許可
選考者は自身に公正な選考ができないと思われるプロポーザルの評価は行わない
たとえば自分のプロポーザルや、同僚などの自身の関係者のプロポーザルであることが内容から明らかな場合
特定の被選考者に対して評価不能者が多すぎる場合には再選考などの対応を行う
相談
ポイント付けの際に特別枠を考慮するか?
しない
優遇は採択ルールによって行うので、ポイント付けの際には判断基準には使用せず、非表示にする
「評価不能」はSessionizeではどう表現する?
Sessionizeの機能で「評価不能」にマークできる
Yes/No/Meybe以外にもう一つ選択肢があった気がする
Q. 同僚や知人が多い(審査不可になりやすい)応募者が不利または有利になることはないか?
A. (合計値/評価者の人数)で順位を決めれば、大幅に影響を受けることはないはず。あまりにも審査不可が多い場合は少数の評価者だけに左右されてしまうので、状況を見て相談しましょう。
選考手順
決定したこと
プロポーザルを審査基準ごとに1〜5点で投票していく
Sessionizeでは4項目しか設定できないので、明瞭性と正確性は1基準とする(他の基準の2倍の重みづけをする)
ポイントの(合計値/評価者の人数)が高いものから選択していく
ポイント高いものから選択するだけではうまくいかない可能性もあるが、実際に問題が起きてから考える
テーマが重複していて、ポイントが僅差であるものなど
別のカンファレンスでも話せる内容であれば選外とする
選考通過したトークとかぶっていれば選外とする
相談
手順決定の目安
対外的に公正な選考だと説明できる手順である必要がある
登壇者を早期に確定させたいので時間が掛かる手順は避けたい
遠方から参加していただく方も多いので、参加可否は早めにご連絡したい
再投票を繰り返さないといけない方法は避けたい
ポイント方式案
評価者1人1人の意向が結果に強く反映されてしまうリスクがある
評価者のうち大多数が低評価だけどごく少数は高評価で採択基準に入るなど
(採択の方針によってはこれが良い方向に寄与する場合もあると思います)
外れ値の対応をするにも手間がかかる
46件のプロポーザルすべてにポイントつけるの結構大変そう…(5段階だとそこまで苦じゃないか…?) uji.icon
Go Conference本家は100件超えてたのでそれを思えばまあなんとかなる(50件だと3時間くらい悩んだ記憶)luccafort.icon
ポイントで評価するとして、その評価理由を正確に説明するのは難しいluccafort.icon
審査基準1つを満たしていれば1ptとするのはどうかnotpop.icon
基準1つを1ptとマッピングしてもいいのかという疑問はあるluccafort.icon
5段階ではなくて4段階などの偶数にした方が明確に分かれるため良いluccafort.icon
真ん中ぐらいのポイントばかりになって差異が出なくなるリスク
選考者は定められた観点に従ってプロポーザルにポイントを付ける
選考者間でポイントが大きく異なるプロポーザルについては評価の理由を確認する
(ポイントの合計値 / 評価者の人数)が高いプロポーザルから選出する
これは最低人数/ポイントは決めない?notpop.icon
選出済みのプロポーザルとテーマが大きく重複するプロポーザルは選考者の協議によって選外とすることがある
同一テーマだったときにどれを選ぶか?はいつも悩ましい。基準決める?luccafort.icon
一般枠→優先枠の順で採用を行う
Y/N方式案
Go Conferenceでは Yes/No/Maybe?(評価できない) の形式で評価してた
自分が投稿した、あるいは投稿者が推測され、かつ自分と関係性が深い人の場合はスキップする…みたいなのは明示したほうがいいかもluccafort.icon
関係性が深いの判断どうするねん?というのはあるluccafort.icon
1, 0なのでプロポーザルごとに順位付けしづらい
CfPの選考作業の流れ
Sessionizeで投票を行う
Anonymous modeを有効にして、個人名をマスクした状態で選考する
投票者を明示したいかなー。何人くらい投票するのか、誰なのかをはっきりさせたいluccafort.icon
投票者名簿を作る。max 8名
投票初めてで不安という人がいらっしゃれば30分ほどレクチャーするかも
その他Q&A
Q. 自分はGoの知見がないので投票しないほうがいいのでは?
A. Go Conference本家でも同様の理由で辞退された方もいらっしゃるので、ご自身の判断で辞退されるのは大丈夫です!
Q. 選考しない人はプロポーザルを閲覧してよい?
A. プロポーザル自体は非公開の選考なので、運営作業上の必要性がない場合には閲覧不可とさせてください。
キックオフ会
投票予定者に参加していただく
話す内容
ノベルティの用意が難しい旨を説明
選考方法の共有
選考基準の共有
選考辞退の目安を共有
暫定案
「Goでアプリケーションを実装できる、または業務で触っている」を満たした方に選考していただきたい?
共有を受けて投票に参加するかどうか確認
タイムスケジュール
今日、キックオフMTGの調整をするuji.icon
今週キックオフMTGを開催
遅くとも10/9までに投票ができている状態にする
10/10 確定
審査基準
プロポーザルは以下の基準によって審査します。
Goとの関連性: Goコミュニティに関連したトピックにしてください。Go Conference miniは、Goのカンファレンスであり、参加者もGoに関するトピックを期待しています。
明瞭性: セッションの内容を明確に記載してください。
正確性: Goのエキスパートのようでなくても、過去の経験から正しいGoに関する知見を共有してください。
達成可能性: 時間以内にしっかり伝えられる内容にしてください。
インパクト: 参加者がセッションから何か新しいアイデア、技術、ツール、情報を得られるものにしてください。
↑の優先順位を決めておくと判断しやすい?uji.icon
これって優先順位というよりマトリックスの属性みたいなものなので決めれないのではないかなぁluccafort.icon
CfPに優先順位を持たせている話をしていなかったので優先順位を取り決めないでFixluccafort.icon
CoCに抵触するプロポーザルは選外とする
どちらかというと、どれかの項目が極端に低い場合には強くネガティブな判定にしたいような気もしてきた…yebis0942.icon
もしも何らかの問題がある場合には申し送りする
Action Plan
Sessionizeの投票の準備yebis0942.icon
キックオフ会を開催するuji.icon
CfP選考終了後、香盤表質問会を開く(10/16以降)luccafort.icon