5.2 KiB
5.2 KiB
02.1-数据管理
模块概述
数据管理是项目工作台的核心模块之一，用于统一接入来自行内流水、征信数据、人工上传等不同来源和格式的数据，并自动化检查识别数据问题，保证后续风险识别的准确性。
模块结构
数据管理
├── 数据导入
└── 数据质量检查
功能分解
1.1 数据导入
功能描述: 提供多种数据源的导入功能，支持行内数据拉取和外部数据上传。
功能点:
- 拉取本行信息: 输入证件号码或导入身份证号表格，自动拉取行内流水、资产等数据信息
- 他行流水导入: 批量上传员工的他行银行、支付宝微信等交易流水文件，支持Excel、文本型PDF，系统自动解析提取交易金额、对手方、交易时间、余额、摘要等关键字段
- 征信信息导入: 上传个人信用报告（HTML格式），系统自动解析提取信贷账户、负债总额、担保信息、查询记录等核心数据
- 员工家庭关系导入: 上传员工的家庭成员信息，用于构建关系人图谱和关联分析
- 名单库选择: 从"信息维护-中介库管理"内的名单中选择确认后的可疑名单
- 生成报告: 生成初核结果，跳转至结果页
数据要素:
- 证件号码/身份证号
- 本行流水数据
- 他行流水文件
- 征信报告文件
- 员工家庭关系信息
- 名单库数据
1.2 数据质量检查
功能描述: 在数据导入后，系统自动执行预定义的质量规则对数据集进行检查。
功能点:
- 质量规则执行: 自动执行数据质量检查规则
- 检查结果展示: 以列表形式展示发现的具体问题
- 数据格式不一致（如日期格式不统一、金额单位混杂）
- 余额链条性异常（相邻交易记录间的余额计算逻辑断裂）
- 缺失关键字段（如交易记录缺少对手方账号或户名）
- 质量评分仪表盘: 通过三个关键指标量化数据质量
- 数据完整性（衡量必填字段的填充率）
- 格式一致性（衡量数据遵循预定格式规范的程度）
- 余额连续性（衡量流水数据中余额连续、计算正确的程度）
数据要素:
- 数据完整性评分
- 格式一致性评分
- 余额连续性评分
- 异常记录详情
数据模型
数据导入记录 (DataImport)
| 字段名 | 类型 | 说明 | 必填 |
|---|---|---|---|
| importId | Long | 导入ID | 是 |
| projectId | Long | 项目ID | 是 |
| importType | String | 导入类型（本行/他行/征信/家庭关系） | 是 |
| importTime | DateTime | 导入时间 | 是 |
| importStatus | String | 导入状态 | 是 |
| fileCount | Integer | 文件数量 | 否 |
| recordCount | Integer | 记录数量 | 否 |
数据质量检查结果 (DataQualityCheck)
| 字段名 | 类型 | 说明 | 必填 |
|---|---|---|---|
| checkId | Long | 检查ID | 是 |
| projectId | Long | 项目ID | 是 |
| completenessScore | Double | 数据完整性评分 | 是 |
| consistencyScore | Double | 格式一致性评分 | 是 |
| continuityScore | Double | 余额连续性评分 | 是 |
| formatIssueCount | Integer | 格式不一致数量 | 是 |
| balanceIssueCount | Integer | 余额链条性异常数量 | 是 |
| missingFieldCount | Integer | 缺失关键字段数量 | 是 |
| checkTime | DateTime | 检查时间 | 是 |
支持的文件格式
| 数据类型 | 支持格式 | 解析方式 |
|---|---|---|
| 他行流水 | Excel、文本型PDF | 自动解析 |
| 征信报告 | HTML | 自动解析 |
| 身份证号表格 | Excel | 导入读取 |
| 员工家庭关系 | Excel | 导入读取 |
业务规则
- 数据导入顺序: 建议先拉取本行信息，再导入他行流水和征信信息
- 质量检查触发: 数据导入完成后自动触发质量检查
- 质量评分计算:
- 数据完整性 = (已填充必填字段数 / 应填必填字段数) × 100%
- 格式一致性 = (格式正确记录数 / 总记录数) × 100%
- 余额连续性 = (余额计算正确记录数 / 总记录数) × 100%
- 异常数据处理: 发现异常需要用户确认后才能生成报告
页面原型
1. 数据导入页面
- 数据源选择区
- 文件上传区
- 导入进度展示
2. 数据质量检查页面
- 质量评分仪表盘
- 异常记录列表
- 异常详情展示
交互关系
| 关联模块 | 交互说明 |
|---|---|
| 初核结果总览 | 点击"生成报告"跳转到初核结果总览页 |
| 信息维护模块 | 从"中介库管理"选择名单 |
| 专项排查 | 导入的数据用于专项排查分析 |
异常处理
| 异常类型 | 处理方式 |
|---|---|
| 文件格式不支持 | 提示用户支持的格式，拒绝导入 |
| 数据解析失败 | 记录失败原因，提示用户检查文件 |
| 质量检查失败 | 展示异常详情，允许用户修正后重新导入 |
| 余额计算异常 | 标注异常记录，提示数据可能缺失或被篡改 |
功能点统计
- 二级功能: 2个
- 三级功能点: 10个
版本信息
- 文档版本: V1.0
- 创建日期: 2026-01-27
- 基于原文档: 纪检初核系统功能说明书V1.0 第73-118行