做這個(gè)功能之前我一直覺得“Excel導(dǎo)入”在進(jìn)銷存軟件里是最吃力不討好的需求之一。天天有人喊著要說手工錄單太慢太容易錯(cuò)可真把導(dǎo)入功能做出來了又有一批人根本不用寧可繼續(xù)一行一行敲鍵盤。我后來想明白了這兩個(gè)聲音其實(shí)都沒錯(cuò)問題不在“要不要導(dǎo)入”而在“模板設(shè)計(jì)得好不好用”跟供應(yīng)商平時(shí)給的Excel對(duì)不上跟業(yè)務(wù)現(xiàn)場(chǎng)的填寫習(xí)慣對(duì)不上那功能就是個(gè)擺設(shè)。這次給時(shí)空智友的“采購(gòu)入庫(kù)單”增加導(dǎo)入Excel模板的方式也是先把這句話掰扯清楚才開始動(dòng)手。一套采購(gòu)入庫(kù)單牽涉的不只是庫(kù)存數(shù)字還連著應(yīng)付賬款、采購(gòu)成本、批次保質(zhì)期、財(cái)務(wù)憑證一步錯(cuò)后面全是窟窿。本文把從需求分析、字段映射、模板制作到導(dǎo)入鏈路、踩坑排查的完整過程捋一遍給正在折騰ERP/進(jìn)銷存系統(tǒng)導(dǎo)入功能的同學(xué)一個(gè)可以直接套用的思路。1. 從一筆三十行的入庫(kù)單說起手工錄入的賬目與時(shí)間成本1.1 一張普通入庫(kù)單背后的手工鏈路時(shí)空智友里的“采購(gòu)入庫(kù)單”業(yè)務(wù)上不只是“貨到了登個(gè)記”這么簡(jiǎn)單。供應(yīng)商送貨過來倉(cāng)庫(kù)清點(diǎn)完得錄入商品、數(shù)量、單價(jià)然后這張單子會(huì)一路牽動(dòng)庫(kù)存臺(tái)賬、采購(gòu)明細(xì)、應(yīng)付暫估、成本核算。如果采購(gòu)單是分批到貨的還要關(guān)聯(lián)原采購(gòu)訂單做分單入庫(kù)反寫訂單執(zhí)行數(shù)量。這些聯(lián)動(dòng)關(guān)系決定了入庫(kù)單的每一行數(shù)據(jù)都必須是干凈的。手工錄入時(shí)一條完整的鏈路大致是這樣先打開入庫(kù)單界面選供應(yīng)商、選倉(cāng)庫(kù)、填日期然后在表體一行行加商品。商品通?？烤幋a或者助記碼搜索找到以后填數(shù)量再回填采購(gòu)價(jià)。三十行的單子運(yùn)氣好熟手也要半小時(shí)以上遇到?jīng)]建檔的新商品還要先停下來去貨品檔案里補(bǔ)資料。連鎖門店或者商貿(mào)公司一天的采購(gòu)單如果有個(gè)五六張大半天時(shí)間就沒了手累眼累還容易把相近編碼的商品選錯(cuò)把含稅價(jià)當(dāng)成無稅價(jià)填進(jìn)去。這個(gè)痛點(diǎn)其實(shí)不用多講真正做業(yè)務(wù)的人都懂。但我在設(shè)計(jì)時(shí)提醒自己花的功夫不能只省掉“打字”這一步如果導(dǎo)入還得讓人先費(fèi)勁整理Excel那同樣是徒勞。所以整個(gè)項(xiàng)目的目標(biāo)拆成了三條——導(dǎo)得進(jìn)模板容易填、對(duì)得上字段映射清晰、錯(cuò)得明白導(dǎo)入失敗時(shí)能快速定位。1.2 為什么不能只把Excel當(dāng)成“加速錄入”的工具有個(gè)容易被忽略的點(diǎn)采購(gòu)入庫(kù)單導(dǎo)入Excel本質(zhì)上不是在給錄入員找一個(gè)快捷方式而是在給“數(shù)據(jù)產(chǎn)生方式”換一個(gè)源頭。供應(yīng)商的送貨清單、采購(gòu)部的訂購(gòu)明細(xì)、倉(cāng)庫(kù)的驗(yàn)收記錄很多本來就在Excel里流轉(zhuǎn)。如果到了入庫(kù)這一步還要脫褲子放屁重新打一遍等于把已經(jīng)電子化的數(shù)據(jù)又人工轉(zhuǎn)錄一次。轉(zhuǎn)錄這件事一次是省事兩次就是風(fēng)險(xiǎn)源。而且入庫(kù)單的時(shí)效性影響很大。手工錄入總有延遲貨到了、賬還沒入庫(kù)存查詢不準(zhǔn)采購(gòu)催單也不知道哪些訂單已經(jīng)履約。Excel導(dǎo)入縮短的不僅是錄入工時(shí)更是從“貨到”到“賬到”的時(shí)間差。但反過來也要承認(rèn)一個(gè)現(xiàn)實(shí)有些企業(yè)嘗試過導(dǎo)入后來放棄了原因是模板設(shè)計(jì)得太“軟件化”字段全是系統(tǒng)內(nèi)部概念比如“存貨編碼”“倉(cāng)庫(kù)內(nèi)碼”“業(yè)務(wù)類型”填的人根本不知道每個(gè)格子該寫什么。真正能長(zhǎng)期跑起來的模板一定是從“供應(yīng)商/采購(gòu)員手里的Excel長(zhǎng)什么樣”出發(fā)再往系統(tǒng)字段上靠。2. 供應(yīng)商的Excel長(zhǎng)什么樣先理解對(duì)方再設(shè)計(jì)模板2.1 別嫌對(duì)方格式亂要先接受現(xiàn)實(shí)我在項(xiàng)目啟動(dòng)前做了一件看起來不太起眼的事找了幾家供應(yīng)商和內(nèi)部采購(gòu)員把他們手上實(shí)際在用的Excel送貨單、采購(gòu)明細(xì)表收集了一批。結(jié)果可以用“慘不忍睹”來形容——有從財(cái)務(wù)系統(tǒng)里導(dǎo)出的明細(xì)賬格式有倉(cāng)庫(kù)手工維護(hù)的臺(tái)賬格式還有從對(duì)賬單里復(fù)制出來的混合格式。列名也是五花八門同一家公司這次發(fā)貨單叫“數(shù)量”下次就叫“發(fā)貨數(shù)”再下次直接是個(gè)沒表頭的。這個(gè)收集動(dòng)作極其重要。因?yàn)橐坏┫肭宄皩?dǎo)入模板最終是給誰(shuí)填的”就會(huì)發(fā)現(xiàn)模板設(shè)計(jì)的第一約束條件不是數(shù)據(jù)庫(kù)字段而是使用者的認(rèn)知習(xí)慣。做進(jìn)銷存系統(tǒng)設(shè)計(jì)的常見錯(cuò)誤是站在開發(fā)者視角設(shè)計(jì)一個(gè)“最規(guī)范”的模板結(jié)果一線人員要對(duì)照著供應(yīng)商的Excel手工轉(zhuǎn)置把數(shù)據(jù)從一個(gè)格子搬到另一個(gè)格子這跟直接錄單沒有本質(zhì)區(qū)別甚至還多一道工序。2.2 模板字段怎么定能不放的都不放不能少的必須精這一版模板我最終確定了一套“少而精”的字段方案共十二列。這么說吧模板列越少使用門檻越低錯(cuò)誤率越低。但少不意味著該省的全全省了有五個(gè)字段是底線缺了導(dǎo)入就沒法落庫(kù)。模板列是否必填作用說明供應(yīng)商名稱或編碼必填定位供應(yīng)商檔案兩個(gè)都填時(shí)優(yōu)先編碼倉(cāng)庫(kù)存放地名稱或編碼必填入庫(kù)的倉(cāng)庫(kù)/門店多倉(cāng)庫(kù)場(chǎng)景必須先落庫(kù)入庫(kù)日期必填默認(rèn)填當(dāng)天但補(bǔ)錄上月單據(jù)時(shí)必用商品編碼必填系統(tǒng)內(nèi)商品的唯一識(shí)別不支持名稱識(shí)別數(shù)量必填入庫(kù)數(shù)量正數(shù)不允許負(fù)數(shù)和零含稅單價(jià)選填不填則取供應(yīng)商該商品最近一次采購(gòu)價(jià)稅率%選填默認(rèn)0按賬務(wù)要求填批次號(hào)選填啟用批次管理的商品必填生產(chǎn)日期選填涉及保質(zhì)期管理時(shí)使用到期日期選填有效期管理時(shí)使用采購(gòu)訂單號(hào)選填用于關(guān)聯(lián)請(qǐng)購(gòu)/采購(gòu)訂單推單入庫(kù)備注選填原單信息、到貨說明等這里有兩個(gè)容易起爭(zhēng)議的設(shè)計(jì)我說明原因。一是“商品編碼必填、不支持名稱識(shí)別”。剛開始很多人覺得填名稱更方便但倉(cāng)庫(kù)實(shí)際發(fā)貨單上商品的叫法常常不統(tǒng)一“伊利純牛奶250ml”和“伊利純牛奶箱”可能是同一個(gè)東西名稱匹配極易出錯(cuò)。編碼是系統(tǒng)內(nèi)唯一的匹配永遠(yuǎn)精準(zhǔn)這是寧可讓人多查一次編碼也要堅(jiān)持的原因。二是“含稅單價(jià)可選填、不填則取上次采購(gòu)價(jià)”。實(shí)際做采購(gòu)入庫(kù)時(shí)很多時(shí)候單子上的價(jià)格跟上次一模一樣與其讓人反復(fù)翻舊賬不如默認(rèn)帶出歷史價(jià)只要填單人確認(rèn)過就沒問題。這算是在“少填”和“數(shù)據(jù)完整”之間找的平衡點(diǎn)。2.3 固定表頭就是一個(gè)穩(wěn)定的“數(shù)據(jù)邊界”確定字段后我把這套模板做成了兩種交付物一版是“空白模板”只有表頭和數(shù)據(jù)行預(yù)留區(qū)用于日常錄入另一版是“帶示例數(shù)據(jù)模板”前三行預(yù)填了幾條不同狀態(tài)的商品數(shù)據(jù)比如正常商品、啟用批次管理的商品、超量入庫(kù)觸發(fā)校驗(yàn)的商品用來演示填寫規(guī)則。表頭行我固定在第1行數(shù)據(jù)從第2行開始而不是把說明文字放在表頭上面占幾行。因?yàn)榻馕鯡xcel時(shí)“跳過N行表頭”是最容易出錯(cuò)的環(huán)節(jié)有的業(yè)務(wù)員會(huì)在模板里加一行“請(qǐng)按規(guī)則填寫”再開始真正的表頭程序一旦沒跳過就會(huì)把說明文字當(dāng)字段名。固定規(guī)則就是把這個(gè)出錯(cuò)的窗口直接堵死。模板里第一行固定是字段名第二行開始是數(shù)據(jù)誰(shuí)改誰(shuí)負(fù)責(zé)。3. 字段映射的精髓Excel列到入庫(kù)單的每一處對(duì)應(yīng)關(guān)系3.1 主表字段先定“這張單是誰(shuí)的、從哪進(jìn)、放哪、什么時(shí)候”時(shí)空智友的采購(gòu)入庫(kù)單分主表和表體。主表記錄單據(jù)本身的信息一般包括供應(yīng)商、倉(cāng)庫(kù)、單據(jù)日期、業(yè)務(wù)類型、制單人、備注等。Excel導(dǎo)入時(shí)主表的每個(gè)字段來源必須逐一對(duì)齊因?yàn)橥慌鷶?shù)據(jù)里如果有多個(gè)供應(yīng)商或多個(gè)入庫(kù)日期程序要么拆單要么直接拒絕。我們定下的規(guī)則比較簡(jiǎn)單粗暴單次導(dǎo)入只支持同一供應(yīng)商、同一倉(cāng)庫(kù)同一天入庫(kù)如果Excel里混著兩家供應(yīng)商就提示“第幾行供應(yīng)商不一致請(qǐng)拆分文件后再導(dǎo)入”。寧可讓用戶多拆幾次文件也不要讓程序在后臺(tái)“聰明地”自動(dòng)拆單——自動(dòng)拆單的邏輯一旦判斷失誤很容易把倉(cāng)庫(kù)和供應(yīng)商張冠李戴出了問題極難追溯。主表字段的映射邏輯是供應(yīng)商編碼或名稱取整列的最大重合值如果某一行跟其他行不一致就標(biāo)紅報(bào)錯(cuò)入庫(kù)日期默認(rèn)取當(dāng)天但Excel里填寫了日期就按填寫的來倉(cāng)庫(kù)同理。制單人不需要填導(dǎo)入時(shí)取當(dāng)前登錄操作員。業(yè)務(wù)類型的默認(rèn)值按系統(tǒng)配置走一般采購(gòu)入庫(kù)就是“普通采購(gòu)”特殊業(yè)務(wù)如“采購(gòu)?fù)素洝辈辉谶@條導(dǎo)入通道處理避免業(yè)務(wù)邏輯復(fù)雜化。3.2 表體字段商品、數(shù)量、單價(jià)、稅率和批次的對(duì)應(yīng)細(xì)節(jié)表體字段是錯(cuò)誤的高發(fā)區(qū)尤其要注意四個(gè)細(xì)節(jié)。第一個(gè)是數(shù)量。很多系統(tǒng)在數(shù)據(jù)庫(kù)里存的是基本單位數(shù)量而Excel里填的可能是輔助單位。舉個(gè)例子商品主單位是“箱”輔助單位是“罐”一箱24罐Excel里填“2箱”如果系統(tǒng)直接按數(shù)值入庫(kù)數(shù)量就錯(cuò)了。我們采用的方案是模板里只允許填“基本單位數(shù)量”不做單位自動(dòng)換算。雖然增加了填寫人的換算負(fù)擔(dān)但換來了結(jié)果的確定性不會(huì)出現(xiàn)“你以為填的是箱系統(tǒng)當(dāng)成了罐”這種哈希式錯(cuò)誤。第二個(gè)是含稅單價(jià)的處理。模板里的“含稅單價(jià)”是給業(yè)務(wù)看的但入庫(kù)單明細(xì)里往往還會(huì)拆分出“無稅單價(jià)”和“稅額”。很多財(cái)務(wù)對(duì)單價(jià)的口徑極其敏感采購(gòu)談的是含稅價(jià)入賬卻需要無稅價(jià)。我們不做自動(dòng)換算而是采用“填寫時(shí)二選一”的方式填了含稅單價(jià)系統(tǒng)根據(jù)稅率自動(dòng)推算無稅單價(jià)和稅額如果單獨(dú)填了無稅單價(jià)系統(tǒng)反推含稅價(jià)。兩列都填了但算出來不一致直接報(bào)錯(cuò)不做“以某列優(yōu)先”的默認(rèn)值。這個(gè)“不算就被逼著搞明白”的設(shè)計(jì)讓財(cái)務(wù)和采購(gòu)在錄入時(shí)就確認(rèn)口徑而不是等月底對(duì)賬再扯皮。第三個(gè)是稅率。模板里默認(rèn)填0但實(shí)際上很多采購(gòu)業(yè)務(wù)有13%、9%、6%等不同稅率。如果系統(tǒng)本身不帶稅率字段忽略這個(gè)問題也無所謂但時(shí)空智友的入庫(kù)單涉及采購(gòu)結(jié)算和憑證生成稅率錯(cuò)了應(yīng)付暫估和進(jìn)項(xiàng)稅就全歪了。所以導(dǎo)入邏輯里稅率列留白時(shí)按主數(shù)據(jù)里該供應(yīng)商的默認(rèn)稅率走填寫了則按填寫的校驗(yàn)合法性。第四個(gè)是批次和有效期。啟用批次管理或保質(zhì)期管理的商品Excel模板里必填批次號(hào)生產(chǎn)日期和到期日選填。批次號(hào)碰撞時(shí)會(huì)限制同一商品同一批次在同一倉(cāng)庫(kù)不能重復(fù)入庫(kù)因?yàn)檎嬲鲠t(yī)藥、食品、化工業(yè)務(wù)的人都知道批號(hào)是追溯的關(guān)鍵線索同批號(hào)分多次到貨是可以的但同一行的入庫(kù)不能憑空多出來一個(gè)根本不存在的批次。3.3 重復(fù)行、合并單元格和空行的“預(yù)處理規(guī)則”Excel導(dǎo)入最翻車的地方其實(shí)不在字段本身而在文件格式的“臟數(shù)據(jù)”。這次整理了一套明確的預(yù)處理規(guī)則規(guī)則如下整行為空的行直接忽略但處于中間位置的空行如果引起行號(hào)錯(cuò)亂后續(xù)報(bào)錯(cuò)提示會(huì)誤導(dǎo)人所以導(dǎo)入前先將空行物理刪除再把結(jié)果反饋給用戶。合并單元格在解析時(shí)只有左上角單元格有值其余全為空這會(huì)導(dǎo)致數(shù)量列大量被判為空值。開發(fā)解析時(shí)先“取消合并”重新計(jì)算每個(gè)單元格的值再做校驗(yàn)。重復(fù)行不自動(dòng)去重。去重要靠用戶業(yè)務(wù)判斷同一種商品分兩車到貨也是合理的系統(tǒng)不能替用戶決定。首列出現(xiàn)類似“合計(jì)”“總計(jì)”等文字時(shí)直接按冗余行跳過但不影響其他行的合法性判斷。這些規(guī)則我會(huì)在后面的“導(dǎo)入鏈路”章節(jié)給出具體實(shí)現(xiàn)思路。4. 導(dǎo)入鏈路實(shí)現(xiàn)解析、校驗(yàn)、落庫(kù)與失敗回滾4.1 技術(shù)選型別糾結(jié)“要不要用組件”核心是容錯(cuò)和日志實(shí)現(xiàn)Excel導(dǎo)入網(wǎng)上能抄的方案一抓一大把無非是用第三方庫(kù)讀文件再把行數(shù)據(jù)轉(zhuǎn)成實(shí)體對(duì)象。真正的復(fù)雜度不在讀文件而在“從文件到可落庫(kù)的合法數(shù)據(jù)結(jié)構(gòu)”這一段的完整性處理。我用方案時(shí)堅(jiān)持了三個(gè)原則第一同時(shí)兼容xls和xlsx格式因?yàn)楹芏喙?yīng)商的老電腦還在用極老的Office版本第二讀取階段嚴(yán)格區(qū)分“單元格類型”文本、數(shù)字、日期、公式值都要轉(zhuǎn)成統(tǒng)一格式再進(jìn)校驗(yàn)避免數(shù)字單元格被解析成科學(xué)計(jì)數(shù)法文本第三所有讀取過程不得因?yàn)閱蝹€(gè)單元格解析異常中斷整個(gè)文件而是要記錄錯(cuò)誤行號(hào)后繼續(xù)掃完最后一次性反饋。另外一個(gè)容易被新手忽略的是文件上傳的存儲(chǔ)路徑。很多實(shí)現(xiàn)直接把文件放在臨時(shí)目錄程序跑完就刪。但我們的做法是保留每次導(dǎo)入的原始文件和解析日志按日期歸檔。萬一后續(xù)有人問“當(dāng)時(shí)導(dǎo)的這個(gè)數(shù)怎么來的”能直接找到源頭文件這一點(diǎn)在財(cái)務(wù)審計(jì)時(shí)特別管用。這里我補(bǔ)充一個(gè)關(guān)于“是否預(yù)覽”的設(shè)計(jì)決斷導(dǎo)入過程分兩段第一段是上傳并解析預(yù)覽第二段是確認(rèn)導(dǎo)入。Excel先解析出表頭和前幾行數(shù)據(jù)反饋到界面上讓用戶確認(rèn)“列對(duì)沒對(duì)上、數(shù)據(jù)是不是想導(dǎo)的一批”再點(diǎn)“開始導(dǎo)入”正式落庫(kù)。多一步確認(rèn)能攔截掉因?yàn)榱绣e(cuò)位引發(fā)的整單錯(cuò)誤。這在給門店操作員培訓(xùn)時(shí)特別關(guān)鍵他們能看到“誒這一列怎么跑到備注里去了”比自己事后翻庫(kù)存差異靠譜太多。4.2 三類校驗(yàn)的順序格式校驗(yàn)、業(yè)務(wù)校驗(yàn)、沖突校驗(yàn)導(dǎo)入時(shí)的校驗(yàn)順序同樣有講究。我把校驗(yàn)分成三層按順序執(zhí)行任一環(huán)節(jié)出錯(cuò)就停止往下走。這樣做的好處是避免同一行數(shù)據(jù)既報(bào)“格式錯(cuò)誤”又報(bào)“業(yè)務(wù)錯(cuò)誤”讓使用者無從下手。第一層是格式校驗(yàn)主要檢查必填列是否為空、數(shù)量是否為數(shù)字、日期是否符合實(shí)際格式、批次號(hào)是否超過指定字符長(zhǎng)度。這一層是機(jī)械性檢查速度快能在文件解析后秒級(jí)完成。第二層是業(yè)務(wù)校驗(yàn)主要檢查編碼是否存在、供應(yīng)商檔案是否停用、倉(cāng)庫(kù)是否對(duì)應(yīng)該操作員的權(quán)限范圍、商品是否啟用了批次管理但未填批次號(hào)、稅率是否在合法枚舉值內(nèi)。這一層要查數(shù)據(jù)庫(kù)但也是明確了才能進(jìn)行。第三層是沖突校驗(yàn)跟前兩層不同它檢查的是數(shù)據(jù)之間的關(guān)系。比如同一文件內(nèi)商品編碼重復(fù)且數(shù)量相同——這很可能是同一批貨被復(fù)制了兩行系統(tǒng)不會(huì)直接判錯(cuò)而是提示“可能存在重復(fù)數(shù)據(jù)請(qǐng)確認(rèn)”。再比如批號(hào)對(duì)應(yīng)的生產(chǎn)日期不能晚于到期日這個(gè)也是常識(shí)性檢查。我把這三層校驗(yàn)的結(jié)果匯總到一張“導(dǎo)入校驗(yàn)報(bào)告”里用“行號(hào)-列名-原因”的方式列出所有問題同時(shí)在界面上標(biāo)注最大錯(cuò)誤行數(shù)超過50行時(shí)直接整個(gè)文件拒絕防止用戶在幾百行錯(cuò)誤里迷失。4.3 落庫(kù)與回滾一張單據(jù)要么完全成功要么完全失敗數(shù)據(jù)校驗(yàn)通過后就到了落庫(kù)階段。這一階段的實(shí)現(xiàn)重點(diǎn)只有一個(gè)事務(wù)邊界。整個(gè)導(dǎo)入過程外部表現(xiàn)是“一張入庫(kù)單”內(nèi)部可能拆成主表插入、表體明細(xì)批量插入、批次更新、庫(kù)存數(shù)量變化、訂單執(zhí)行記錄反寫等好幾個(gè)步驟。這些步驟必須在一個(gè)數(shù)據(jù)庫(kù)事務(wù)里完成任何一個(gè)失敗都整體回滾。我在實(shí)現(xiàn)中特意做了兩件事一是落庫(kù)前把“校驗(yàn)通過的數(shù)據(jù)快照”保存下來萬一會(huì)話斷掉、服務(wù)器異?？梢曰诳煺栈謴?fù)重試二是批量的數(shù)量做了拆捆處理每次寫庫(kù)100行不用一條一條insert但拆捆后任一批次失敗同樣全量回滾不允許出現(xiàn)“前100行成功、后100行失敗”的臟數(shù)據(jù)狀態(tài)。導(dǎo)入結(jié)果分三類統(tǒng)計(jì)成功數(shù)、失敗數(shù)、警告數(shù)。警告不影響落庫(kù)但會(huì)提示用戶關(guān)注比如供應(yīng)商上次采購(gòu)價(jià)缺失、商品已經(jīng)停用但仍進(jìn)貨等。導(dǎo)入完成頁(yè)不只給“成功多少行”這個(gè)結(jié)論還要允許一鍵把失敗明細(xì)和原因?qū)С龀尚碌腅xcel方便業(yè)務(wù)員拿回去核對(duì)修改后再導(dǎo)。這比在頁(yè)面上看一堆紅字友好得多。這里還有一點(diǎn)要強(qiáng)調(diào)導(dǎo)入不等于審核。入庫(kù)單導(dǎo)入后處在“已保存”狀態(tài)不代表庫(kù)存已經(jīng)生效。是否需要審核后再入賬按企業(yè)流程走可以由系統(tǒng)參數(shù)控制。但我會(huì)在“已保存”狀態(tài)和“已審核”狀態(tài)之間留一個(gè)明確的提示不給操作員混淆空間。5. 導(dǎo)入失敗的高頻原因與修復(fù)辦法5.1 數(shù)字格式陷阱單價(jià)、數(shù)量和Excel單元格的“臟類型”導(dǎo)入功能上線后測(cè)試過程里暴露最多的問題集中在這幾個(gè)場(chǎng)景。第一類是數(shù)字居然能錯(cuò)。Excel單元格看起來是“11.10”解析出來卻變成“11.1”數(shù)據(jù)庫(kù)里保存的也是“11.10”顯示出來實(shí)際一樣但財(cái)務(wù)人員追求賬面兩列合計(jì)完全相等一旦有單價(jià)11.10元數(shù)量100的貨手工合計(jì)是1110.00系統(tǒng)是1110.00她就沒話說但如果單價(jià)是11.09數(shù)量是100手工一加是1109.00系統(tǒng)算出1109.02她就要找你麻煩了。這個(gè)問題不大但根本原因在于Excel把“11.10”這種數(shù)值存成了浮點(diǎn)數(shù)小數(shù)位誤差在那一刻出現(xiàn)。解決方式是解析階段對(duì)金額、數(shù)量列統(tǒng)一做“乘以100轉(zhuǎn)整數(shù)”或者使用固定小數(shù)位數(shù)截?cái)喽皇侵苯佑酶↑c(diǎn)數(shù)相加。第二類是格式偽裝成字符串的數(shù)字。比如從某系統(tǒng)導(dǎo)出的Excel數(shù)量列單元格左上角有個(gè)綠色小三角是文本型數(shù)字。文本型數(shù)字在大多數(shù)組件里能自動(dòng)轉(zhuǎn)數(shù)值但有時(shí)帶不可見字符比如換行、空格一轉(zhuǎn)換就報(bào)“不是數(shù)字類型”。處理這類問題的通用招數(shù)是在解析時(shí)先Trim掉所有非可見字符再做類型轉(zhuǎn)換界面上的校驗(yàn)提示也會(huì)寫明“第5行數(shù)量列存在空格”。5.2 商品編碼里的字母大小寫與前后空格商品編碼匹配失敗是最容易讓用戶崩潰的錯(cuò)誤。很多商品編碼帶有字母供應(yīng)商發(fā)來的Excel編碼大小寫不一致、編碼前后多了一個(gè)空格、某些字符看著一樣實(shí)際是全角半角不同這些都能讓一對(duì)一匹配直接撲空。我在排查這類問題時(shí)發(fā)現(xiàn)一個(gè)規(guī)律用戶拿到的Excel很少是自己輸入的大多是從別的系統(tǒng)復(fù)制出來的復(fù)制過程中編碼列經(jīng)常被帶上格式尾巴。處理策略是三管齊下讀取時(shí)先做Trim和全半角統(tǒng)一匹配時(shí)優(yōu)先精確匹配、失敗后嘗試忽略大小寫二次匹配仍然失敗再嘗試去空格模糊匹配。但這里有一個(gè)原則系統(tǒng)匹配邏輯可以寬容落庫(kù)的編碼必須是規(guī)范檔案中的原始編碼不能把帶空格、改大小寫的拼接字符串寫進(jìn)數(shù)據(jù)庫(kù)。還有一種更氣人的情況商品編碼里藏了肉眼看不見的零寬字符。這類字符在處理時(shí)用正則方案過濾掉否則你的導(dǎo)入日志里永遠(yuǎn)不會(huì)告訴你“為什么這兩個(gè)編碼看起來一模一樣卻匹配不上”。5.3 日期格式與合并單元格的典型鬧劇日期列也是重災(zāi)區(qū)。Excel里的日期有三種形態(tài)真的日期類型、字符串格式“2024-01-15”、文本格式“2024/01/15”。如果解析時(shí)強(qiáng)行統(tǒng)一格式很容易出現(xiàn)“1900年1月15日”這種因?yàn)閱卧窀袷藉e(cuò)誤而生成的錯(cuò)誤日期。我們的規(guī)則是“按模板說明優(yōu)先使用YYYY-MM-DD”但解析時(shí)兼容常見分隔符遇到日期類型單元格則直接轉(zhuǎn)成標(biāo)準(zhǔn)字符串。合并單元格的坑比日期還隱蔽。某次演示中用戶發(fā)來的模板有合并單元格表頭下方兩行商品合并了導(dǎo)入后所有商品只來了第一行第二行數(shù)據(jù)全部消失。后來查是合并單元格的值只在左上角程序讀第二行對(duì)應(yīng)列時(shí)為null校驗(yàn)時(shí)被判“數(shù)量為空”直接丟棄。前面預(yù)處理規(guī)則里“先取消合并再取值”就是為這個(gè)場(chǎng)景準(zhǔn)備的。程序邏輯上徹底斷絕合并單元格進(jìn)入數(shù)據(jù)區(qū)這不是建議是必須。5.4 導(dǎo)入重復(fù)的“冪等”處理幫用戶擋住自己挖的坑上線試用后出現(xiàn)頻率最高的一個(gè)操作是同一份Excel導(dǎo)了兩遍庫(kù)存憑空翻倍。這種事基本無解——導(dǎo)入本身是合法操作系統(tǒng)判斷不了用戶是“就想重復(fù)入庫(kù)”還是“手滑又點(diǎn)了一次”。我們做的是四重防線導(dǎo)入界面上在提交按鈕旁邊給出“本次導(dǎo)入的行數(shù)及單據(jù)號(hào)碼”的二次確認(rèn)同時(shí)生成一次性導(dǎo)入批次號(hào)每次導(dǎo)入成功后把該批次號(hào)關(guān)聯(lián)的單據(jù)明細(xì)保留在導(dǎo)入歷史里下次上傳時(shí)系統(tǒng)會(huì)自動(dòng)比對(duì)“供應(yīng)商商品編碼數(shù)量批次號(hào)”四條完全一致的數(shù)據(jù)并提示“該文件與某次歷史導(dǎo)入高度相似是否確認(rèn)繼續(xù)”如果用戶是正常補(bǔ)錄、歷史原因?qū)е碌恼Ｖ貜?fù)到貨則可以強(qiáng)制繼續(xù)最后從系統(tǒng)層面看操作記錄里會(huì)保全這次導(dǎo)入的賬號(hào)、時(shí)間、文件指紋。防重復(fù)導(dǎo)入這件事做多少層都不過分。業(yè)務(wù)數(shù)據(jù)的重復(fù)比數(shù)據(jù)缺失更麻煩因?yàn)槿笔н€能補(bǔ)重復(fù)往往要手動(dòng)沖銷而沖銷又是一張新單據(jù)來來回回的賬目痕跡抹不干凈。6. 上線前的驗(yàn)證清單與導(dǎo)入性能的優(yōu)化觀察6.1 三條必跑通的驗(yàn)收用例正常、部分失敗、全部失敗功能開發(fā)完別急著全量開放先按我的經(jīng)驗(yàn)把這三條用例跑通。第一條是正常路徑用完全符合規(guī)范的Excel導(dǎo)入100行驗(yàn)證主表和表體數(shù)據(jù)、庫(kù)存數(shù)量、訂單反寫都準(zhǔn)確無誤。第二條是部分失敗路徑構(gòu)造一版有5行錯(cuò)誤、95行正確的文件驗(yàn)證錯(cuò)誤提示是否能準(zhǔn)確定位到行和列以及導(dǎo)入成功部分是否和預(yù)期一致。第三條是全部失敗路徑構(gòu)造一個(gè)從第一行就缺必填列的文件驗(yàn)證程序是否會(huì)干凈利落地拒絕并給出明確指引而不是導(dǎo)出一半卡死。另外還要做一次“格式破壞實(shí)驗(yàn)”把.xlsx文件另存成.xls刪掉模板里的隱藏行或者加一列備注看程序是否還能正確識(shí)別列位置。很多導(dǎo)入實(shí)現(xiàn)其實(shí)很脆弱一旦模板的列位置變了就全部錯(cuò)位這版模板特意支持了“列名定位”而不是“列序號(hào)定位”——只要表頭名稱對(duì)得上列的順序打亂也能導(dǎo)。這個(gè)特性在一次供應(yīng)商交付中被驗(yàn)證了價(jià)值對(duì)方把備注放到了第二列系統(tǒng)仍然識(shí)別正確。6.2 大數(shù)據(jù)量與并發(fā)幾萬行導(dǎo)入會(huì)不會(huì)拖垮業(yè)務(wù)庫(kù)導(dǎo)入性能問題也要提前想清楚。普通商貿(mào)公司一次采購(gòu)入庫(kù)100行就很多了但有些批發(fā)商、電商倉(cāng)單次導(dǎo)入能達(dá)到5000行以上。代碼實(shí)現(xiàn)上如果是一次性把所有數(shù)據(jù)加載到內(nèi)存再批量寫庫(kù)幾百行沒問題5000行也可能沒問題但到了幾萬行時(shí)內(nèi)存和數(shù)據(jù)庫(kù)連接池的壓力就上來了。我實(shí)測(cè)下來比較穩(wěn)的參數(shù)是這樣單次導(dǎo)入限制2萬行以內(nèi)解析階段用流式讀取不把整個(gè)工作簿一次性載入落庫(kù)階段每500行一個(gè)批次BatchInsert事務(wù)內(nèi)所有批次執(zhí)行完后統(tǒng)一Commit任一批次失敗全量Rollback。2萬行的入庫(kù)單從上傳到導(dǎo)入完成整體耗時(shí)控制在10秒以內(nèi)如果超過這個(gè)數(shù)多半是主數(shù)據(jù)校驗(yàn)里編碼匹配拖后腿得先優(yōu)化查詢而不是改導(dǎo)入代碼。這么做順便也把并發(fā)的坑解決了不限制導(dǎo)入端并發(fā)的話兩個(gè)人在同一時(shí)間導(dǎo)同一供應(yīng)商同一天的入庫(kù)單就可能出現(xiàn)主數(shù)據(jù)查詢和庫(kù)存扣減的競(jìng)態(tài)問題。我的做法是在事務(wù)開始時(shí)對(duì)該供應(yīng)商和倉(cāng)庫(kù)的組合加分布式鎖或數(shù)據(jù)庫(kù)行鎖避免重復(fù)寫庫(kù)存。聽起來復(fù)雜但真正遇到過一次“兩個(gè)人同時(shí)導(dǎo)入同一批貨庫(kù)存翻倍”的事故你就明白為什么非做不可。6.3 模板版本的管理Excel也是要“迭代”的模板這個(gè)東西從誕生第一天起就在被使用者改。今天張三把表頭文字改成了“供應(yīng)商名稱必填”明天李四把“數(shù)量”列挪了位置后天王五在中間插入了一列“物流單號(hào)”每次改動(dòng)都可能導(dǎo)致導(dǎo)入“莫名其妙”失敗。我們的對(duì)策是在模板里放一個(gè)版本標(biāo)記比如“模板版本V3”程序解析時(shí)先讀取這個(gè)版本號(hào)跟當(dāng)前支持的版本比對(duì)不一致時(shí)直接報(bào)“模板版本不匹配請(qǐng)重新下載最新模板”。這個(gè)設(shè)計(jì)初期覺得“是不是有點(diǎn)小題大做”上線后卻成了降低客服咨詢量最有效的功能。沒這個(gè)標(biāo)記之前幾乎每周都有人在群里喊“導(dǎo)入不了”一問全是模板被改了。模板文件的下載入口要跟系統(tǒng)版本掛鉤后臺(tái)發(fā)布新模板時(shí)導(dǎo)入界面會(huì)提示“有新版模板可用”。舊模板也不是立刻作廢會(huì)保留一個(gè)過渡期這個(gè)過渡期里舊模板仍然能導(dǎo)但會(huì)在校驗(yàn)結(jié)果上方顯示“當(dāng)前使用的模板版本較低建議升級(jí)”等過了一個(gè)月再?gòu)?qiáng)制禁用舊版。這樣既照顧了不常導(dǎo)人的使用習(xí)慣也控制了模板演化帶來的導(dǎo)入錯(cuò)誤率。6.4 上線后的真實(shí)感受誰(shuí)在用誰(shuí)不用為什么功能上線兩周后我抽看了導(dǎo)入日志。用得最勤的還真是之前手工錄單最慢的兩個(gè)倉(cāng)庫(kù)一個(gè)月導(dǎo)了六十多單平均每單導(dǎo)入加確認(rèn)不到一分鐘。但也有一些操作員基本不用點(diǎn)開導(dǎo)入一次發(fā)現(xiàn)要填模板就關(guān)掉了。后來聊了下不是功能難用是他們習(xí)慣了在錄入界面里邊搜邊填邊填邊看到貨單一個(gè)界面能完成所有事。Excel導(dǎo)入讓他們“看不到一張正在生成的單據(jù)”心理上不踏實(shí)。這個(gè)反饋?zhàn)屛乙庾R(shí)到導(dǎo)入功能不是用來“替代”手工錄入的而是給不同工作習(xí)慣的人多一條路。老員工可以繼續(xù)手工錄年輕人可以批量導(dǎo)最后形成的日?qǐng)?bào)、庫(kù)存、應(yīng)付數(shù)據(jù)是完全一致的。這才是一個(gè)倉(cāng)庫(kù)版塊真正落地的狀態(tài)功能多做一點(diǎn)不虧但別指望它讓所有人改變習(xí)慣。最后提醒一句工具做得再好也得有人在每次大版本更新后重新下載最新模板。模板版本這件事我一定會(huì)寫進(jìn)SOP讓新人第一天就知道“先看模板版本再談導(dǎo)入”。