跳至內容
Astera Technology

匯入名稱為何多了取代字元?

來源位元組解不通,應先暫停該筆,不把取代字元當正常名稱入庫。

下載完整個案資料及參考答案 ↓

先核來源與已訂規則

本例只收有效 UTF-8。C3 28 的前一位要接續字節,後一位卻不合;寬鬆解碼會換字。此處約定要保留原位元組待查,空文字則可收。

已填假設輸入
紀錄輸入 JSON
原例輸入{"bytes":[195,40]}
下載可編輯 CSV ↓

比較兩條實際路徑

畫面的取代字不會還原原意。更正輸出拒收,留下 [195,40];不能靠畫面猜人名再改字。

錯誤與更正路徑的輸出
路徑輸出 JSON
錯誤路徑{"text":"\uFFFD(","accepted":true}
更正路徑{"accepted":false,"error":"invalid-utf8","bytes":[195,40]}
下載可編輯 CSV ↓
本地 Node.js 程序:22.23.3 或 24.14.1
import {DatabaseSync} from 'node:sqlite';
import {TextDecoder} from 'node:util';
import {inflateSync} from 'node:zlib';
import {posix} from 'node:path';
import {createHash} from 'node:crypto';
const rows=(db,sql)=>db.prepare(sql).all().map(r=>({...r}));
const failed=(action)=>{try{action();return null;}catch(e){return {code:e.errcode??e.code??e.name};}};

import assert from 'node:assert/strict';
const run=function run(i,corrected=true){
    try{return {text:new TextDecoder('utf-8',{fatal:corrected}).decode(Uint8Array.from(i.bytes)),accepted:true};}
    catch{return {accepted:false,error:'invalid-utf8',bytes:i.bytes};}
  };
const cases=[{"label":"misleading base","input":{"bytes":[195,40]},"expected":{"text":"\uFFFD(","accepted":true},"corrected":false},{"label":"corrected base","input":{"bytes":[195,40]},"expected":{"accepted":false,"error":"invalid-utf8","bytes":[195,40]},"corrected":true},{"label":"valid accented character","input":{"bytes":[195,169]},"expected":{"text":"é","accepted":true},"corrected":true},{"label":"empty encoded text","input":{"bytes":[]},"expected":{"text":"","accepted":true},"corrected":true}];
for(const test of cases){
  const actual=run(test.input,test.corrected);
  assert.deepEqual(actual,test.expected,test.label);
  console.log(test.label,actual);
}
下載可執行例子 ↓

下次載入前核邊界

有效兩字節可解成 é;零字節可成空字串,沒有解碼錯誤。

可編輯邊界紀錄及預期輸出
情況輸入 JSON預期輸出 JSON
有效重音字節{"bytes":[195,169]}{"text":"é","accepted":true}
零字節輸入{"bytes":[]}{"text":"","accepted":true}
下載可編輯 CSV ↓

錯誤畫面可否確定原名稱?

查看參考答案

不可以,畫面的替代字不能還原來源名稱。這筆留待查,有效 é 邊界則收。

相關資源