20260518-morning:新增内容
This commit is contained in:
75
papers/zeng-neurida-2025.md
Normal file
75
papers/zeng-neurida-2025.md
Normal file
@@ -0,0 +1,75 @@
|
||||
---
|
||||
title: "NeurIDA: Dynamic Modeling for Effective In-Database Analytics"
|
||||
created: 2026-05-15
|
||||
updated: 2026-05-15
|
||||
type: paper
|
||||
tags: [database, machine-learning, tabular-data, autonomous-system, in-database-analytics]
|
||||
sources: [raw/papers/zeng-neurida-2025.md]
|
||||
---
|
||||
|
||||
# NeurIDA: Dynamic Modeling for Effective In-Database Analytics
|
||||
|
||||
**Lingze Zeng, Naili Xing, Shaofeng Cai, Peng Lu, Gang Chen, Jian Pei, Beng Chin Ooi** — NUS, Zhejiang University, Duke University
|
||||
**arXiv:** [2512.08483v3](https://arxiv.org/abs/2512.08483v3) | cs.DB | 2025-12-15
|
||||
|
||||
## 核心问题
|
||||
|
||||
RDBMS 的核心设计是**动态性**(支持多样且演化的分析查询),而传统 ML 模型是**静态的**(为单一任务训练、部署后固定)。当一个新分析任务到来时,现有模型往往无法直接适应,必须从头构建数据到模型的 pipeline,开发成本高、无法规模化。
|
||||
|
||||
**根本矛盾**:ML 模型的「刚性」vs RDBMS 环境的「动态性」。
|
||||
|
||||
## 方法论贡献
|
||||
|
||||
NeurIDA 是一个**自主端到端系统**,通过 **动态库内建模(Dynamic In-Database Modeling)** 范式解决上述矛盾:
|
||||
|
||||
```
|
||||
NLQ → Query Intent Analyzer → Conditional Model Dispatcher → DIME → Analytical Report Synthesizer → 报告
|
||||
```
|
||||
|
||||
### 四大组件
|
||||
|
||||
1. **[[query-intent-analyzer|Query Intent Analyzer]]** — LLM 驱动的自然语言查询解析,从 NLQ 提取结构化任务画像和数据画像
|
||||
2. **[[conditional-model-dispatcher|Conditional Model Dispatcher]]** — 用 [[zero-cost-proxies|ZCP]] + 历史 EMA 选择最优基础模型,按需触发模型增强
|
||||
3. **[[dime-dynamic-in-database-modeling-engine|DIME]]** — 核心引擎,动态从 [[composable-base-model-architecture|可组合基础模型架构]] 中装配定制模型
|
||||
4. **[[analytical-report-synthesizer|Analytical Report Synthesizer]]** — LLM 将预测结果转化为可解释分析报告
|
||||
|
||||
### DIME 的四阶段建模
|
||||
|
||||
| 阶段 | 作用 | 共享组件 |
|
||||
|------|------|----------|
|
||||
| [[base-table-embedding|Base Table Embedding]] | 捕获表内语义,双路径编码(基础模型 + 统一元组编码器) | 统一元组编码器 |
|
||||
| [[dynamic-relation-modeling|Dynamic Relation Modeling]] | 通过 FK-PK 图上消息传递,融入跨表关系结构 | 关系感知消息传递模块 |
|
||||
| [[dynamic-model-fusion|Dynamic Model Fusion]] | 上下文感知融合,将关联表信息注入目标表元组 | 上下文感知融合模块 |
|
||||
| Task-Aware Prediction | 基于融合嵌入的最终预测 | 任务特定预测头 |
|
||||
|
||||
### 关键设计
|
||||
|
||||
- **[[composable-base-model-architecture|可组合基础模型架构]]**:异构基础模型池 + 共享模型组件 → 查询时动态装配
|
||||
- **[[data-slice|Data Slice]]**:任务特定的数据库子集,通过 SQL 自动生成
|
||||
- **[[relational-graph|Relational Graph]]**:以 FK-PK 为边的元组图,是 DIME 的数据结构基础
|
||||
|
||||
## 实验结果
|
||||
|
||||
- 5 个真实数据集、10 个分析任务
|
||||
- **分类**:AUC-ROC 提升最高 12%
|
||||
- **回归**:MAE 相对降低 10%–25%
|
||||
- 消融实验证实 Dynamic Relation Modeling 和 Dynamic Model Fusion 的独立贡献
|
||||
- 延迟开销仅 1.1×–2.1×,参数量增加 1.2×–2.5×
|
||||
|
||||
## 关键洞察
|
||||
|
||||
1. **从"为每个任务训一个模型"转向"从共享组件装配模型"** — 这是 ML-RDBMS 集成的范式转变
|
||||
2. **关系结构是预测信号**:当目标表特征稀疏时,关联表的关系建模带来最大增益
|
||||
3. **LLM 作为统一界面**:NLQ 输入 → 结构化画像 → 执行 → 自然语言报告,降低使用门槛
|
||||
|
||||
## 相关概念
|
||||
|
||||
- [[in-database-analytics|In-Database Analytics]] 是更广泛的领域背景
|
||||
- 基础模型池涵盖 [[tabular-foundation-models|Tabular Foundation Models]](TabPFN, TabICL)、TRM(FT-Transformer, ARM-Net, TabM)、LTM(TP-BERTa)等
|
||||
- [[zero-cost-proxies|Zero-Cost Proxies]] 源自 Neural Architecture Search
|
||||
|
||||
## 相关论文
|
||||
|
||||
- [[xing-trails-2024]]: Database Native Model Selection (VLDB 2024)
|
||||
- [[zeng-dynamic-model-slicing-2024]]: Powering In-Database Dynamic Model Slicing (VLDB 2024)
|
||||
- [[zhao-neurdb-2025]]: NeurDB — AI-powered Autonomous Database (CIDR 2025)
|
||||
Reference in New Issue
Block a user