\documentclass[japanese,other]{jnlp_3.8}
\usepackage{jnlpbbl_2.2}
\usepackage[dvipdfmx]{graphicx}
\usepackage{amsmath}
\usepackage{amssymb}
\usepackage{url}
\usepackage{array}
\allowdisplaybreaks


%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
%%%% author's definition

%%%%%\usepackage{booktabs}
\usepackage{cleveref}
\crefformat{footnote}{$^{#1}$}

\newcommand\blfootnote[1]{%
  \begingroup
  \renewcommand\thefootnote{}\footnote{#1}%
  \addtocounter{footnote}{-1}%
  \endgroup
}

%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%

\Volume{31}
\Number{4}
\Month{December}
\Year{2024}
%%%%\Issuetitle{「　　　　」特集号}

\setcounter{page}{1755}



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
\jsubject{学会記事}
\jtitle{開催報告：The 13th Edition of the Workshop on Cognitive Modeling and Computational Linguistics (CMCL 2024)}
\jauthor{栗林　樹生\affiref{Author_1}\and 大関　洋平\affiref{Author_2}}


\etitle{Event Report on The 13th edition of the Workshop on Cognitive Modeling and Computational Linguistics (CMCL 2024)}
\eauthor{Tatsuki Kuribayashi\affiref{Author_1}\footref{1} \and Yohei Oseki\affiref{Author_2}} 
%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
\headauthor{栗林，大関}
\headtitle{開催報告：CMCL 2024}


%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
\affilabel{Author_1}{MBZUAI}{MBZUAI}
\affilabel{Author_2}{東京大学}{University of Tokyo}



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
\begin{document}
\maketitle
\def\thefootnote{\fnsymbol{footnote}}



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%S1
\section{はじめに}
\label{sec:intro}
本稿は，ACL 2024にて開催されたワークショップ``CMCL 2024: The 13th Edition of the Workshop on Cognitive Modeling and Computational Linguistics'' \cite{cmcl-2024-cognitive}の開催報告である．大関が\ref{sec:cmcl}節（CMCLの概要）を，栗林が\ref{sec:cmcl2024}節（CMCL 2024の運営・詳細）を担当している．

\def\thefootnote{\arabic{footnote}}
\setcounter{footnote}{0}



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%S2
\section{CMCLの概要}
\label{sec:cmcl}
CMCL (Cognitive Modeling and Computational Linguistics)\footnote{\url{https://cmclorg.github.io/}\label{foot:web}}は，人間の言語処理や言語獲得に対して計算論的にアプローチする認知モデリング・計算心理言語学に特化した，自然言語処理トップカンファレンス併設の国際ワークショップである．認知モデリング・計算心理言語学を対象とした学会・ワークショップには，ACL/NAACL/EMNLPなど自然言語処理トップカンファレンスの``Linguistic theories, Cognitive Modeling and Psycholinguistics''トラック，CoNLL (Conference on Computational Natural Language Learning)，SCiL (Society for Computation in Linguistics) などが存在するが，規模が小さかったり，歴史が浅かったり，必ずしも認知モデリング・計算心理言語学に特化していなかったりするので，そういう意味でCMCLは貴重なワークショップである．例えば，CoNLLはかつて認知モデリング・計算心理言語学に特化しており，特別な学会賞もあったが，その色合いが徐々に薄れ一般的な自然言語処理の学会・ワークショップになりつつあり，2020年にニューヨーク大学のTal Linzen氏とアムステルダム大学のRaquel Fernandez氏が``theoretically, cognitively and scientifically motivated approaches to computational linguistics''というスローガンを改めて強調し改革を断行してもなお，必ずしも認知モデリング・計算心理言語学とは関係が無さそうな論文が，依然として採択・発表されている印象が残る．

歴史的には，CMCLは2010年にジョンズ・ホプキンズ大学のJohn Hale氏（当時はコーネル大学）によって創設され，それ以来ほぼ毎年ACL/NAACL/EMNLPなど自然言語処理トップカンファレンスの併設ワークショップとして開催されて来た\footnote{John Hale氏（私信）によると，出身校であるジョンズ・ホプキンズ大学の認知科学科に学会開催の助成を申請し，学会賞や学生旅費など経済的な支援を受けていた様である．}．例外として，2016年と2023年はCMCLが開催されていないが，これらの年はワークショップ提案が不採択であった年であり，特に2023年は査読のスコアが満点であったにもかかわらず，ワークショップの増加に伴いスペースが無いというのが不採択の理由であった．また，2018年は自然言語処理トップカンファレンスでは無く，Linguistic Society of America (LSA) の姉妹学会として2018年に創設されたSCiL (Society for Computation in Linguistics) の併設ワークショップとして開催が試みられたが，LSA/SCiLは自然言語処理の学会・ワークショップと異なり予稿集作成のサポートが無い等の理由により，2019年以降は自然言語処理トップカンファレンスの併設ワークショップに戻った様である\footnote{\url{https://cmclorg.github.io/previous_cmcls}}．

\bigskip
\begin{itemize}
    \item CMCL 2010 (Uppsala): ACL
    \item CMCL 2011 (Portland): ACL
    \item CMCL 2012 (Montreal): NAACL
    \item CMCL 2013 (Sofia): ACL
    \item CMCL 2014 (Baltimore): ACL
    \item CMCL 2015 (Denver): NAACL
    \item[] ------------------------------
    \item CMCL 2017 (Valencia): EACL
    \item \textbf{CMCL 2018 (Salt Lake City): SCiL}
    \item CMCL 2019 (Minneapolis): NAACL
    \item CMCL 2020 (online): EMNLP
    \item CMCL 2021 (online): NAACL
    \item CMCL 2022 (Dublin): ACL
    \item[] ------------------------------
    \item \textbf{CMCL 2024 (Bangkok): ACL}
\end{itemize}
\bigskip

\noindent 以下では，ACL 2024の併設ワークショップとして開催されたCMCL 2024に焦点を当てて，その運営・詳細について記述する．



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%S3
\section{CMCL 2024の運営・詳細}
\label{sec:cmcl2024}
ここからは，ACL 2024にて開催されたCMCL 2024について報告する．自然言語処理トップカンファレンス併設の国際ワークショップ運営に関する日本語の情報はそう多くないということも考慮し，そのような情報源としての役割も意識して，開催までの詳細な流れや裏話も含めて，時系列順に書き進めてみる\footnote{2024年8月までの経験・情報に基づいている．またワークショップ運営に関する，英語の比較的新しい資料であれば，\url{https://zeerak.org/workshops}も参考になる．}．



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%S3.1
\subsection{ワークショップ採択まで}
CMCL 2024は，もともと私\footnote{以下，栗林の視点で執筆しており，「私」は栗林を指す．}を含めた若手研究者3名 (Tatsuki, Giulia, Ece) を中心に運営する予定であった．
というのも，大関先生を含む旧CMCL運営メンバーが若い世代に運営を引き継ぐ運びであり，前回のCMCL 2022 \cite{cmcl-2022-cognitive}後，旧運営メンバーやCMCLとの繋がりなどから，この3名が新規運営メンバーとして集まっていた．
本来CMCL 2023を引き継ぎ年度にする予定であったが，\ref{sec:cmcl}節のとおり予期せぬ不採択が続き，CMCL 2023の開催は断念され，CMCL 2024を開催するのであればワークショップ運営経験のない若手で存続せざるを得ない状況であった．
私としては関心の近いコミュニティを盛り上げたい気持ちがあり，またトップカンファレンス本会議には，やはり大規模言語モデルなどのタイムリーで競争的な話題が採択される傾向にあると感じており，ACLコミュニティにおける純粋な計算言語学・心理言語学的な関心の受け皿として，CMCL 2024を開催させたく考えていた．
とはいえ，ワークショップ運営経験者がいない状況で運営を進めることは心細く，提案書としても説得力に欠けないかと懸念し，またさらに予算の問題もあり，「あと一年で良いので」と私から大関先生を運営に引き止め，さらに知り合いづてで協力いただける研究者とも繋がり，結果的に3+2=5名の運営メンバーによりCMCL 2024を計画した．
幸いにも，CMCL 2024はACL 2024併設ワークショップとして採択され，開催に至った．

上で示唆されるように，ワークショップを開催するには，ワークショップ提案書が採択される必要がある．
例えば2025年の場合は，Joint Call for Workshops for NAACL/ACL/EMNLP 2025\footnote{\url{https://www.aclweb.org/portal/content/joint-call-workshops-naaclaclemnlp-2025}}が掲示されており，ここでの指示に従い提案書を作成し，提出することになる．
この段階で，運営メンバーや招待講演者，査読者，シェアドタスクの有無，併催を希望する会議，推定される規模（論文数など），などを暫定的に決定する必要がある．
また，ACLからは招待講演者1名分の学会参加費用しか提供されないため，それを超える謝礼（典型的には招待講演者は2名以上いる）および，論文賞などに対する賞金，渡航費支援などを用意する場合は，スポンサーも必要になり，関係者に頭出しをしておく必要がある．
ワークショップの採択は，これらの提案内容をもとに決定されることになる．ただし，ワークショップ全体におけるテーマバランスなど，提案書の外側の要因も大きいのではないかと感じる．



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%S3.2
\subsection{ワークショップ開催まで}
ワークショップが採択された場合，ここからは対応する学会のスケジュールに従って，Call for papers (CfP) の掲示，投稿締め切りの決定，査読，採択通知などを行っていくことになる．
CfPについては，ACLウェブポータルページ\footnote{\url{https://www.aclweb.org/portal/}}のイベントカレンダーに情報を追加することで掲載され，適当なタイミングで，自動でACLメーリングリストにもメールが送信される．
またワークショップのWebページ\cref{foot:web}を作成し，そこにも情報を掲示していくと良いだろう．
論文募集・査読システムについては，CMCL 2024ではACL Roling Review (ARR) との互換性なども考慮してOpenReviewを採用した．結果的にACL 2024については，ほぼ全てのワークショップがOpenReviewを採用していた．
なお，OpenReviewシステムの仕様はやや複雑であり\footnote{ドキュメンテーション (\url{docs.openreview.net/getting-started/hosting-a-venue-on-openreview}) は存在する．特定の機能（査読割当など）は，イベントのスケジュール（投稿締め切り後など）に応じて，初めて触れるようになる．また，コンソールページのコメントでOpenReview supportに向けて質問を書けば，対応してもらえる．}，またARRからのコミットメントと直接投稿の両方を受け付ける場合，OpenReview上で別々のイベントとして管理することになり，かえって煩雑になるなどの懸念\footnote{近年自然言語処理分野では，ARR (\url{https://aclrollingreview.org}) で一律に査読を受け，その査読内容を提出（コミットメント）する形で国際会議に論文を投稿するという仕組みが採用されている．このコミットメント先として特定のワークショップを含めるかは，ワークショップ運営者側の判断になる．現状，\url{https://openreview.net/group?id=aclweb.org/ACL/2024/Workshop}で確認できるように，ワークショップに対してコミットメントページと直接投稿ページが存在することが多く，投稿者視点でも，混同しないように注意が必要である．}も確認されたが，やはり予稿集を作成する際にAPIで採択論文情報を取得しやすいなど運営側の利点も大きく，OpenReviewの採用が一般的になっているのだと考えられる．

関連した論点として，予稿集非掲載 (non-archival) 論文
\footnote{これらの論文は，ワークショップでの発表や議論，フィードバックなどを目的として投稿されることが多い．その後，同様の論文を別の会議や論文誌へ投稿することは，通常，二次投稿に抵触しない．}
の採択，同一会議併設ワークショップ間での二重投稿，Findings論文の発表などを，どの程度，またどのような基準で許容すべきかは，運営として悩ましく感じた．
前回のCMCL 2022と比べると，幸いにもCMCL 2024では投稿数が22件→55件と増加し，その中でも特に，予稿集非掲載論文数の増加が顕著であった（2件→18件）．
予稿集非掲載論文については，分野全体として論文の数が増えており，様々な場所で研究を宣伝・議論し，認知してもらう場の需要が増しているのだと考えられる．
ワークショップの盛り上がりとしても，予稿集非掲載論文の増加は嬉しい一方，これらの論文が査読者の負担を圧迫している懸念は否めず，CMCL2024では，Findings論文など既にどこかで採択されている論文については無条件で発表可能，その他の予稿集非掲載論文については，査読者を2名に減らして発表可能性に関する参考意見として扱うなどの対策を施したが，予稿集掲載 (archival) 論文と同様の査読がされると思っていたなどの齟齬が一部の投稿者と生じてしまい，今後の課題となっている．



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%S3.3
\subsection{ワークショップ終了まで}
ワークショップ自体は，大きな滞りなく進行した．
招待講演者としては，エジンバラ大学のFrank Keller氏，DeepMindのAida Nematzadeh氏，アムステルダム大学のSandro Pezzelle氏を招き，マルチモーダルな認知モデリング，マルチモーダルモデルの言語理解能力，語用論的省略の理解などに関する興味深い発表をいただいた．
また採択論文では，認知モデリングをはじめ，言語モデルの言語獲得効率・汎化，言語知識の評価・プロービング，創発言語，マルチモダール処理といった幅広い話題について，計算心理言語学・認知科学寄りの視点から議論・検証がなされていた．
ベストペーパーも選定し，位相空間論に基づいた読み時間のモデリング \cite{wang-etal-2024-large-language-models}や，錯視に対するマルチモーダルモデルの分析 \cite{panagopoulou-etal-2024-evaluating}といった話題が取り上げられた．
分野の関係者からは，本会議よりも満足度が高かったとの意見もあり，私としても非常に有意義なワークショップであったと感じる．



%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%S3.4
\subsection{ワークショップ運営を通して}
CMCL 2024では，これら一連の作業の全体像が掴めておらず，ひとまず今回は全体を把握する目的で，私が全体の作業に携わった．
おそらく主著研究を1本以上遂行する程度の労力を割いた感触があるが，ワークショップや学会の裏側について，非常に多くの学びがあった．
また，ワークショップ・学会運営者に対する私の感謝・尊敬は一層増した．

特定テーマのワークショップに投稿・参加するメリットとして，通常の学会以上に，近い領域の専門家から査読を受けられることや，知っている研究者に直接会って繋がりを持ちやすいことなどが上げられる．
また運営としては，関心のあるコミュニティを直接盛り上げるチャンスでもある．
ワークショップの運営・参加にひととおり関わり，このようなワークショップの利点を再認識させられた．
トップカンファレンス・論文誌への採択が評価される業界ではあるが，尖ったことを言えば，研究の価値はどこに通ったかではなくその中身で決まるはずであり，関連コミュニティとの繋がりを強める目的でのワークショップ投稿という選択肢も，決して消極的なものではないだろう．
CMCLに関していえば，例えば\citeA{goodkind-bicknell-2018-predictive}や\citeA{merkx-frank-2021-human}といった業界内で注目度の比較的高い論文も掲載されてきている．またありがたいことに，今年は日本からも多くの論文が発表された．
2025年も新たな運営メンバーを加え，CMCLを開催する予定で動いている．



%%% Acknowledgement %%%
%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
\acknowledgment
CMCL 2024はJSPS科研費24H00087の助成を受けたものです.



%%% Bibliography %%%
%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
\bibliographystyle{jnlpbbl_1.7}
\bibliography{33refs}



%%% Biography %%%
%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%
\begin{biography}
\bioauthor{栗林　樹生}{Mohamed bin Zayed University of Artificial Intelligence (MBZUAI) 研究員．2022年に東北大学大学院情報科学研究科博士課程修了．同大学特任研究員を経て，2023年より現職．Langsmith株式会社共同創業者．
}
\bioauthor{大関　洋平}{東京大学大学院総合文化研究科准教授，理化学研究所革新知能統合研究センター客員研究員．2018年にニューヨーク大学言語学科博士課程修了．2018--2020年に早稲田大学理工学術院助教，2020--2024年に東京大学大学院総合文化研究科講師を経て，2024年より現職．
}
\end{biography}


\end{document}

