本書從會計和商業(yè)數(shù)據(jù)分析、建模與評估、可視化、審計數(shù)據(jù)分析、財務報表數(shù)據(jù)等角度分析信息技術和大數(shù)據(jù)在會計、審計中的應用。全書著重強調實踐操作,每章主體內容以及每章末尾的實踐案例,為學生提供了數(shù)據(jù)庫的使用方法,幫助學生提出問題、下載數(shù)據(jù)、執(zhí)行測試,然后交流測試結果。全書還關注數(shù)據(jù)分析工具,重點介紹了如何使用Excel、Access(包括SQL)、Tableau、IDEA和Weka等進行數(shù)據(jù)分析,便于學生比較不同的工具,從而選擇適用于不同數(shù)據(jù)分析、數(shù)據(jù)可視化以及交流分析結果的工具。
我們的生活被數(shù)據(jù)所環(huán)繞,數(shù)據(jù)分析也正在改變著商業(yè)世界!有了大量的有關我們每個人的數(shù)據(jù)(例如,我們的購物方式、閱讀的內容、購買的商品、所聽的音樂、旅行的地點、信任的人等),我們就可以通過分析數(shù)據(jù)回答基本的商業(yè)和會計問題并創(chuàng)造價值。
普華永道(PwC)發(fā)起的第18屆年度全球CEO調查的結果顯示,許多CEO都對數(shù)據(jù)分析給予了高度重視,其中80%的CEO將掌握數(shù)據(jù)挖掘和數(shù)據(jù)分析視為CEO第二重要的戰(zhàn)略性技術。實際上,普華永道的第6次年度數(shù)字化IQ調查的結果顯示,根據(jù)參與調查的1?400多位數(shù)字商務領導者的反饋,商業(yè)分析在CEO優(yōu)先考慮的投資領域列表中被列為首位。
這與我們認為的數(shù)據(jù)分析將對會計和審計產生的影響相類似。例如,我們認為數(shù)據(jù)分析未來將在審計中發(fā)揮越來越重要的作用。畢馬威(KPMG)會計師事務所發(fā)表于《福布斯觀察》(Forbes Insights)的報告審計2020:關注變化(Audit 2020: A Focus on Change)顯示,絕大多數(shù)受訪者認為:
1.審計工作必須更好地與技術相結合。
2.技術將提高審計的質量、透明度和準確性。
審計工作將不再僅僅是檢查財務報表中包含的錯誤、錯報、舞弊和風險,或在審計結束時報告審計結果。通過運用數(shù)據(jù)分析,審計師將像商業(yè)分析師一樣收集和分析公司的數(shù)據(jù),從而幫助管理層做出更好的商業(yè)決策。在本書中,我們著重講解了審計數(shù)據(jù)分析以及執(zhí)行審計測試時將會涉及的測試內容。
數(shù)據(jù)分析同時也有可能對財務報告產生影響。基于財務會計中使用的諸多評估和估值,有些人認為使用數(shù)據(jù)分析可以大大提高評估和估值的質量。同樣,會計人員對XBRL數(shù)據(jù)的使用為數(shù)據(jù)分析提供了更及時、更廣泛的會計數(shù)據(jù)。
我們認為會計人員不需要成為數(shù)據(jù)科學家會計人員可能不需要建立數(shù)據(jù)存儲庫或執(zhí)行真正的核心數(shù)據(jù)分析或機器學習。但在新環(huán)境下,會計人員需要掌握7種數(shù)據(jù)分析思維的技能,具體列舉如下。
1.數(shù)據(jù)分析思維模式了解何時應用數(shù)據(jù)分析以及如何應用數(shù)據(jù)分析解決商業(yè)問題。
2.數(shù)據(jù)清理和數(shù)據(jù)準備理解數(shù)據(jù)分析之前所需的清理數(shù)據(jù)和準備數(shù)據(jù)的流程。
3.數(shù)據(jù)質量了解數(shù)據(jù)質量的含義,即數(shù)據(jù)的完整性、可靠性和有效性。
4.描述性數(shù)據(jù)分析通過執(zhí)行基本的分析來了解數(shù)據(jù)質量,以及通過分析數(shù)據(jù)來解決商業(yè)問題。
5.操控數(shù)據(jù)、執(zhí)行數(shù)據(jù)分析以提高分析能力為目的,排列、重組、合并和重新配置數(shù)據(jù)。
6.通過統(tǒng)計數(shù)據(jù)分析來解決問題采用某種方法,該方法將使用統(tǒng)計數(shù)據(jù)分析來得出結論,并及時提出建議。
7.數(shù)據(jù)可視化和數(shù)據(jù)報告針對不同的決策者,根據(jù)其特定的需求報告分析結果。
數(shù)據(jù)分析是一個流程。該流程始于提出可以用數(shù)據(jù)解決的商業(yè)問題,然后通過測試數(shù)據(jù)、優(yōu)化測試,終將數(shù)據(jù)分析結果傳達給管理層。我們使用Isson和Harriott?所建立的IMPACT 循環(huán)模型來描述數(shù)據(jù)分析流程,如圖0-1所示。
圖0-1 IMPACT循環(huán)模型
資料來源:Adapted from Win with Advanced Business Analytics: Creating Business Value from Your Data, by Jean Paul Isson and Jesse S. Harriott.
1.提出問題(identify the question);
2.處理數(shù)據(jù)(master the data);
3.執(zhí)行測試計劃(perform test plan);
4.處理和優(yōu)化結果(address and refine results);
5.交流見解(communicate insights);
6.追蹤結果(track outcomes)。
我們在本書前4章中描述了IMPACT循環(huán)模型,然后在后4章中說明了該模型在審計、財務會計、財務報告以及管理會計領域中的應用。
本書著重強調了實踐操作的重要性。本書每章的主體內容以及每章末尾的實踐案例為學生提供了數(shù)據(jù)庫的使用方法。學生將練習如何提出問題、下載數(shù)據(jù)、執(zhí)行測試,后交流測試結果。我們在案例中應用了大量來自Lending Club、College Scorecard、Dillards、Sams Club、State of Oklahoma的真實數(shù)據(jù)以及其他數(shù)據(jù)。
同時本書著重講解了學生將會使用到的數(shù)據(jù)分析工具。在本書中,我們重點介紹了如何使用Excel、Access(?包括SQL?)、Tableau、IDEA和Weka執(zhí)行數(shù)據(jù)分析。學生將比較不同的工具,從而了解適用于不同數(shù)據(jù)分析、數(shù)據(jù)可視化以及交流分析結果的工具。例如,理解哪種工具適于執(zhí)行內部控制測試,哪種工具適于分析大數(shù)據(jù)集或執(zhí)行大型SQL查詢,等等。
弗農·J. 理查森(Vernon J. Richardson)---------阿肯色大學
山雨鑫(Yuxin Shan)----------------------------威斯康星歐克萊爾大學
瑞安·A. 蒂特(Ryan A. Teeter)-----------------匹茲堡大學
凱蒂·L. 特勒爾(Katie L. Terrell) ------------阿肯色大學
前言
作者簡介
致謝
本書使用說明
第1章 會計和商業(yè)數(shù)據(jù)分析 1
本章概覽1 / 下章預覽1 / 學習目標1
開篇案例 阿里巴巴的數(shù)據(jù)應用 1
1.1 數(shù)據(jù)分析 2
1.2 數(shù)據(jù)分析對商業(yè)的影響 3
1.3 數(shù)據(jù)分析對會計行業(yè)的影響 3
1.4 數(shù)據(jù)分析流程:IMPACT循環(huán)模型 6
1.5 具有數(shù)據(jù)分析思維的會計人員的技能 10
1.6 IMPACT循環(huán)模型的應用實例 10
本章小結16 / 關鍵術語17
選擇題17 / 討論題18
簡答題18 / 參考答案20
案例1-0 如何完成本書中包含的案例 21
案例1-1 數(shù)據(jù)分析在財務會計中的應用 22
案例1-2 數(shù)據(jù)分析在管理會計中的應用 25
案例1-3 數(shù)據(jù)分析在審計中的應用 28
案例1-4 綜合案例 狄樂百貨數(shù)據(jù)分析 29
第2章 數(shù)據(jù)的準備和清理 33
本章概覽33 / 上章回顧33
下章預覽33 / 學習目標33
開篇案例 OkCupid約會網站數(shù)據(jù) 33
2.1 數(shù)據(jù)在會計循環(huán)中的使用和存儲 35
2.2 關系數(shù)據(jù)庫中的數(shù)據(jù)及其關系 35
2.3 數(shù)據(jù)字典 37
2.4 數(shù)據(jù)的提取、轉換和加載 38
2.5 數(shù)據(jù)提取 38
2.6 數(shù)據(jù)轉換 42
2.7 加載數(shù)據(jù) 43
本章小結44 / 關鍵術語44
選擇題44 / 討論題45
簡答題46 / 參考答案46
案例2-1 創(chuàng)建數(shù)據(jù)提取請求 47
案例2-2 使用數(shù)據(jù)透視表對數(shù)據(jù)進行去規(guī)范化分析 49
案例2-3 解決Excel和Access中常見的數(shù)據(jù)問題 57
案例2-4 在Excel中獲得數(shù)據(jù)的統(tǒng)計摘要信息 61
案例2-5 數(shù)據(jù)準備:顧客信息文檔 62
案例2-6 大學計分卡的數(shù)據(jù)提取和數(shù)據(jù)準備 66
案例2-7 綜合案例 狄樂百貨數(shù)據(jù)分析:如何創(chuàng)建一個實體關系圖 68
案例2-8 綜合案例 狄樂百貨數(shù)據(jù)分析:如何從查詢(Query)中預覽數(shù)據(jù) 69
案例2-9 綜合案例 狄樂百貨數(shù)據(jù)分析:將Excel連接到SQL數(shù)據(jù)庫 72
案例2-10 綜合案例 狄樂百貨數(shù)據(jù)分析:合并表 78
第3章 模型建立與評估:從商業(yè)問題出發(fā),通過對可獲取數(shù)據(jù)進行合理的分析來回答和解決問題 80
本章概覽80 / 上章回顧80
下章預覽80 / 學習目標80
開篇案例 BART加班費用欺詐案例 80
3.1 數(shù)據(jù)分析的具體實施:認識和了解數(shù)據(jù)分析方法 81
3.2 剖析法 84
3.3 數(shù)據(jù)精簡法 87
3.4 回歸方程 88
3.5 分類法 90
3.6 聚類分析法 93
本章小結94 / 關鍵術語95
選擇題95 / 討論題96
簡答題96 / 參考答案96
案例3-1 數(shù)據(jù)精簡法:模糊匹配 97
案例3-2 數(shù)據(jù)精簡法:提取連續(xù)序列中的缺失值 100
案例3-3 分類法 104
案例3-4 綜合案例 狄樂百貨數(shù)據(jù)分析:數(shù)據(jù)提。⊿QL)和回歸分析 105
第4章 可視化:使用可視化工具和書面報告等向利益相關者分享分析結果 113
本章概覽113 / 上章回顧113
下章預覽113 / 學習目標113
開篇案例 通過可視化視圖展示總統(tǒng)選舉得票情況 114
4.1 確定數(shù)據(jù)可視化的目的 114
4.2 選擇正確的圖表 118
4.3 進一步優(yōu)化圖表以更好地傳達信息 128
4.4 溝通:使用文字傳達有價值的信息 129
本章小結131 / 關鍵術語131
選擇題132 / 討論題133
簡答題133 / 參考答案134
案例4-1 通過數(shù)據(jù)透視表完成描述性數(shù)據(jù)可視化 135
案例4-2 使用Tableau來執(zhí)行探索性分析和創(chuàng)建儀表盤 137
案例4-3 使用Tableau制作詞云 145
案例4-4 使用Tableau發(fā)現(xiàn)數(shù)據(jù)中的群集 152
案例4-5 綜合案例 狄樂百貨數(shù)據(jù)分析:在Tableau中創(chuàng)建地理數(shù)據(jù)可視化 158
案例4-6 綜合案例 狄樂百貨數(shù)據(jù)分析:Tableau中的可視化回歸 166
第5章 現(xiàn)代審計和持續(xù)審計 169
本章概覽169 / 上章回顧169
下章預覽169 / 學習目標169
開篇案例 普華永道的Halo軟件 169
5.1 現(xiàn)代審計 170
5.2 審計計劃自動化 173
5.3 持續(xù)審計技術 174
5.4 工作底稿和審計工作流程 175
本章小結176 / 關鍵術語177
選擇題177 / 討論題178
問答題178 / 參考答案178
案例5-1 在云端設置文件 179
案例5-2 查看對工作底稿的修改(OneDrive) 180
案例5-3 確定審計數(shù)據(jù)要求 181
案例5-4 準備審計計劃 182
第6章 審計數(shù)據(jù)分析 184
本章概覽184 / 上章回顧184
下章預覽184 / 學習目標184
開篇案例 惠普內部控制案例 184
6.1 何時使用審計數(shù)據(jù)分析 185
6.2 描述性分析 189
6.3 診斷性分析和本福德定律 194
6.4 創(chuàng)建高級預測性分析和規(guī)范性分析 200
本章小結201 / 關鍵術語202
選擇題202 / 討論題203
簡答題203 / 參考答案203
案例6-1 評估地址中的異常情況 204
案例6-2 對賬戶余額進行實質性檢測 207
案例6-3 查找重復付款交易 212
案例6-4 綜合案例 狄樂百貨
數(shù)據(jù)分析:假設檢驗(部分) 214
案例6-5 綜合案例 狄樂百貨數(shù)據(jù)分析:假設檢驗(第二部分:數(shù)據(jù)可視化) 219
第7章 生成主要績效指標 222
本章概覽222 / 上章回顧222
下章預覽222 / 學習目標222
開篇案例 肯尼亞紅十字會案例 222
7.1 提出問題 227
7.2 處理數(shù)據(jù)并執(zhí)行測試計劃 228
7.3 處理和優(yōu)化結果 229
7.4 交流見解和追蹤結果 229
本章小結230 / 關鍵術語230
選擇題230 / 討論題231
簡答題232 / 參考答案232
案例7-1 評估管理需求并在列表中選擇有用的KPI 233
案例7-2 在Tableau的儀表板中創(chuàng)建平衡計分卡 233
案例7-3 綜合案例 狄樂百貨數(shù)據(jù)分析:在Excel中創(chuàng)建KPI(部分) 241
案例7-4 綜合案例 狄樂百貨數(shù)據(jù)分析:在Excel中創(chuàng)建KPI(第二部分) 246
案例7-5 綜合案例 狄樂百貨數(shù)據(jù)分析:在Excel中創(chuàng)建KPI(第三部分) 252
案例7-6 綜合案例 狄樂百貨數(shù)據(jù)
分析:在Excel中創(chuàng)建KPI(整合以上分析) 259
第8章 財務報表分析 264
本章概覽264 / 上章回顧264
學習目標264
開篇案例 StockSnips案例 264
8.1 XBRL 265
8.2 比率分析 268
8.3 文本挖掘和情感分析 271
本章小結273 / 關鍵術語273
選擇題273 / 討論題274
簡答題274 / 參考答案275
案例8-1 使用XBRLAnalyst訪問XBRL數(shù)據(jù) 276
案例8-2 使用XBRLAnalyst創(chuàng)建動態(tài)的財務報表 279
案例8-3 使用XBRL計算和分析財務報表比率:杜邦比率的運用 283
案例8-4 使用SQL查詢語句獲取XBRL數(shù)據(jù)庫的數(shù)據(jù) 285