AIに月次決算のチェックを頼むなら、「問題がないか見て」より「監査人として、社長に聞く質問だけ出して」と頼んだほうが、次に手を動かせるものが返ってきます。試算表をAIに貼って「チェックして」と頼んだら、もっともらしい指摘がずらっと並んで、結局どれが本当の問題なのか分からなかった、ということはありませんか? 同じ数字で2通りの頼み方を比べた結果と、そのまま貼れる依頼文を載せます。
KPMG UKのAI監査で、何が評価されたのか?
大手会計事務所KPMGの英国法人が、100を超えるAIエージェントに、上場企業1社の監査をすべての段階で並行してやらせる実験をしていました。AIエージェントは、与えられた目的に向けて、作業の手順を自分で決めて進めるAIのことです。11月18日にFinancial Timesが報じ、それを伝えたThe DecoderやTech Timesによると、対象はFTSE 250(ロンドン市場で時価総額が上位100社の次に大きい250社の株価指数)に入る1社で、社名は公表されていません。
社内での呼び名はProject Exponentialです。AIの監査はいつもの人の監査チームと並べて走らせたもので、正式な監査意見は人のチームの監査をもとに出しています。仕組みを作るのに約4か月かかり、今後は最大20件の大きな監査に広げる計画だそうです。
私がいちばん引っかかったのは、KPMG UKの監査部門の責任者、Cath Burnetさんの評価です。FTの取材に対して、いくつかの場面ではAIのほうが人のチームよりずっと深く掘り下げ、ときには「より良い質問(better questions)」をした、と話したと伝えられています。AIの成果として、処理の速さと並んで問いの質が挙がっているのが面白いところなんですよ。
一方で、失敗も1件報じられています。エージェントの1つが、規制の要件と会社の書類をうまく突き合わせられず、人の監査人が介入しました。AIに目標を与え、途中で作業を見直し、AIの結論に異を唱えたのも人のチームです。Burnetさんは何千件もの監査に使える段階ではないとも話していて、データがきれいに整った会社が少ないことも壁として挙げられています。
なお、AIエージェントの数は、英国のBusiness Mattersは「数十」と伝えていて、報道によって食い違いがあります。FTの記事本体は有料のため、ここに書いた内容はFTを引いた各メディアの記事によるものです。
答えを出させるより、人が聞き漏らした問いを出させる。この使い方なら、監査法人の規模がなくても一人社長の月次決算に持ち込めます。あなたの会社の月次にも、誰にも聞かれないまま流れている数字はありませんか?
同じ月次決算の数字で、AIへの頼み方を2通り比べた
架空の会社の10月の月次を8行用意しました。社員が社長1人だけのWeb制作の会社で、決算は3月という設定です。実在の会社の帳簿を使わなかったのは、会社の情報を外部のAIに渡すことになるからです。
- 売上は10月182万円(9月96万円、前年10月120万円)。うちA社が118万円
- 外注費は10月74万円(9月31万円)。外注先は2人で、うち1人は今月から
- 売掛金の残高は10月末265万円(9月末140万円)。A社の分が190万円
- 普通預金は10月末88万円(9月末131万円)
- 役員報酬は毎月35万円
- 雑費は10月9.8万円(9月1.2万円)。中身はまだ見ていない
- 前受金は10月末0円(9月末40万円)
- 消費税は2年前から課税事業者。中間申告はしていない
この数字の後ろに、頼み方Aでは「この10月の月次の数字を見て、問題がないかチェックして、気になる点を教えてください。」と1文だけ足しました。頼み方Bで足したのは、次の3行です。
あなたは監査人です。答えや結論、改善の提案は書かないでください。
この数字を見て、社長本人に聞くべき質問だけを、聞く順番に10個まで出してください。
それぞれの質問に、どの数字を見てその質問をしたのかを1行で添えてください。Claudeに、条件ごとにまっさらな状態から1回ずつ頼みました。Web検索は使っていません。返ってきたものを並べるとこうなります。
「チェックして」と頼むと、AIは答えまで書いてしまう
Aの返答は、読み物としてはよくできていました。最初に資金繰りを挙げて、11月に出ていくお金は110万〜150万円ほどで、預金88万円では足りないと計算しています。10月に回収できたのは17万〜31万円ほど、外注費の割合は9月の32%から41%に上がった、と数字も細かいです。
ただ、この計算の多くは仮定の上に乗っています。Aは返答の最後で、自分でこう断っていました。
数字だけでは判断できないところ(A社との支払い条件、前期の消費税額、外注先が個人か法人か、雑費の明細、売上・売掛金が税込か税抜か)は推測で書いています。
その「推測」の中身を知っているのは、社長本人なんですよね。回収額の計算も「前受金の40万円が10月の売上に振り替わったとすると」という仮定から始まっていて、そこが違えば見立てごと変わります。
もう1つ気になったのが税の話です。Aは、インボイスの経過措置の割合、源泉徴収の対象になる業務、中間申告が必要になる基準額まで、Web検索なしで言い切っていました。制度の説明が今のルールに合っているかは、税理士さんか国税庁の案内で確かめる必要があります。
AIの指摘を読んで、納得した気になって画面を閉じたことはありませんか? 答えの形で整って返ってくるほど、前提を確かめる手間は飛ばしがちです。
監査人役のAIは、社長しか答えられない質問を出した
Bの返答には、結論も提案も入っていませんでした。質問は聞く順に10個並んでいて、どれにも「根拠」として見た数字が1行付いています。そのうち4つを、番号は返答のままで抜粋します。
質問1 A社の118万円は、どの案件の何の作業に対する売上ですか。納品とA社の検収は10月中に終わっていますか。終わった日はいつですか。 根拠:10月の売上182万円(9月96万円)のうち、A社1社で118万円を占めているため。
質問2 9月末にあった前受金40万円は、どの取引先から何の名目で受け取ったものですか。10月に売上へ振り替えましたか。振り替えたなら、その40万円はA社の118万円に入っていますか。 根拠:前受金が9月末40万円から10月末0円になっているため。
質問3 A社の売掛金190万円は、何月に出した請求書の合計ですか。それぞれの支払期日はいつですか。 根拠:A社の10月の売上は118万円なのに、10月末のA社の売掛金は190万円あるため。
質問6 今月から頼んでいる外注先はどなたですか。社長とどういう関係の方ですか。契約書や請求書はありますか。 根拠:外注先2人のうち1人が10月からの取引で、外注費が43万円増えた月と重なるため。
質問2と質問3は、Aも気づいていた点です。Aは前受金が売上に振り替わったと仮定して計算を進め、Bは「振り替えましたか」と聞いたところで止まっています。同じ数字に目を付けても、仮定をAIが埋めるか、社長が埋めるかで、返ってくるものがここまで変わるんです。
個人的にいちばん効いたのは質問6でした。今月からの外注先が社長とどういう関係か、という問いは、一人社長なら聞かれると一瞬身構えると思います。Aの返答には、この問いは出てきませんでした。KPMGの話で言われていた「より良い質問」は、こういう自分では避けがちな問いのことなんじゃないか、と私は考えてます。
税理士との面談の前に、質問リストを作っておく
Bの依頼文の使い方は単純です。
- 月次の数字が出たら、Bの依頼文と一緒にAIに貼る。社名・取引先名・口座番号は「A社」のように伏せておく
- 出てきた質問に、自分で答えを書く。請求書や通帳を見て答えられたものは、そこで終わり
- 答えられなかった質問と、答えに自信がない質問だけを、税理士さんとの面談に持っていく
税理士さんの月次報告を聞いても、何を聞けばいいか浮かばないことはありませんか? 「自分では答えられなかった質問」が手元に2〜3個あるだけで、面談で聞くことがはっきりします。
使う前に知っておいてほしいことが2つあります。同じ依頼文でも、出てくる質問は毎回変わります。私が試したのは各条件1回ずつなので、10問を正解の一覧と思わず、自分が答えに詰まったものを拾うくらいがちょうどいいです。
それから、Bは答えを書かせない頼み方なので、税金の判断は出てきません。そこは税理士さんの仕事として残しておけばいい、と私は思ってます。
KPMGの実験でも、AIに目標を与えて、結論に異を唱えたのは人のチームでした。一人社長の会社なら、その役は社長本人です。AIには問いを出させて、答えは自分の帳簿と請求書から書く。11月の月次が締まったら、まずBの3行を数字の後ろに貼ってみてください。
コメント
ログイン か 会員登録 するとコメントできます