mirror of
https://github.com/hellodigua/ChatLab.git
synced 2026-04-24 20:45:22 +08:00
c36878c58d
- 新增 preprocessor 模块：数据清洗(XML卡片)、黑名单过滤、智能去噪、连续发言合并、数据脱敏
- 内置多国脱敏规则（中国手机号/身份证、美国SSN、日韩号码等）+ 自定义规则支持
- 工具层统一 wrapWithPreprocessing 包装，自动对 rawMessages 执行预处理+格式化
- 昵称匿名化：用 U{id} 替代真实昵称，跨工具调用一致
- SQL 查询补充 senderId/senderPlatformId
- PreprocessConfig 类型定义（preload + 主进程）
4 lines
243 B
TypeScript
4 lines
243 B
TypeScript
export type { PreprocessConfig, PreprocessableMessage, DesensitizeRule } from './types'
|
|
export { preprocessMessages } from './pipeline'
|
|
export { BUILTIN_DESENSITIZE_RULES, getDefaultRulesForLocale, mergeRulesForLocale } from './builtin-rules'
|