https://terms-en.ai-term-hub.com/zh/tags/data-engineering/Recent content in Data Engineering on 中文AI术语词典Hugozh-cnSat, 18 Jul 2026 11:44:45 +0000https://terms-en.ai-term-hub.com/zh/terms/streaming/Sat, 18 Jul 2026 11:35:19 +0000https://terms-en.ai-term-hub.com/zh/terms/streaming/<h2 id="definition">Definition</h2> <p>流式处理指在数据生成时实时或近实时地持续摄入和处理数据。与处理固定数据集的批处理不同，流式系统管理无边界的数据流，能够即时响应数据变化。</p> <h3 id="summary">Summary</h3> <p>一种数据处理范式，信息以小块形式连续处理，而非作为大型静态批处理。</p> <h2 id="key-concepts">Key Concepts</h2> <ul> <li>实时处理</li> <li>增量更新</li> <li>低延迟</li> <li>无界数据</li> </ul> <h2 id="use-cases">Use Cases</h2> <ul> <li>金融交易中的实时欺诈检测</li> <li>物联网系统中的传感器数据实时监控</li> <li>动态内容推荐流</li> </ul> <h2 id="related-terms">Related Terms</h2> <ul> <li><a href="https://terms-en.ai-term-hub.com/en/terms/%E6%89%B9%E5%A4%84%E7%90%86-batch-processing-%E4%B8%80%E6%AC%A1%E6%80%A7%E5%A4%84%E7%90%86%E5%A4%A7%E9%87%8F%E9%9D%99%E6%80%81%E6%95%B0%E6%8D%AE/">批处理 (Batch processing，一次性处理大量静态数据)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/apache-kafka-apache-kafka-%E5%88%86%E5%B8%83%E5%BC%8F%E4%BA%8B%E4%BB%B6%E6%B5%81%E5%B9%B3%E5%8F%B0/">Apache Kafka (Apache Kafka，分布式事件流平台)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/%E4%BA%8B%E4%BB%B6%E9%A9%B1%E5%8A%A8%E6%9E%B6%E6%9E%84-event-driven-architecture-%E7%94%B1%E4%BA%8B%E4%BB%B6%E8%A7%A6%E5%8F%91%E6%93%8D%E4%BD%9C%E7%9A%84%E7%B3%BB%E7%BB%9F%E6%9E%B6%E6%9E%84/">事件驱动架构 (Event-driven architecture，由事件触发操作的系统架构)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/%E6%B5%81%E5%A4%84%E7%90%86-stream-processing-%E5%A4%84%E7%90%86%E6%97%A0%E9%99%90%E6%95%B0%E6%8D%AE%E5%BA%8F%E5%88%97%E7%9A%84%E8%AE%A1%E7%AE%97%E8%8C%83%E5%BC%8F/">流处理 (Stream processing，处理无限数据序列的计算范式)</a></li> </ul>https://terms-en.ai-term-hub.com/zh/terms/llamaindex/Sat, 18 Jul 2026 11:24:33 +0000https://terms-en.ai-term-hub.com/zh/terms/llamaindex/<h2 id="definition">Definition</h2> <p>LlamaIndex 原名 GPT Index，是一个强大的数据框架，使 LLM 能够摄入并与结构化和非结构化数据进行交互。它提供用于索引、查询和管理</p> <h3 id="summary">Summary</h3> <p>LlamaIndex 是一个旨在将自定义数据源连接到大型语言模型的框架，便于创建检索增强生成 (RAG) 应用程序。</p> <h2 id="key-concepts">Key Concepts</h2> <ul> <li>RAG (检索增强生成)</li> <li>数据索引</li> <li>向量数据库</li> <li>上下文注入</li> </ul> <h2 id="use-cases">Use Cases</h2> <ul> <li>构建基于私有数据的聊天机器人</li> <li>文档问答系统</li> <li>企业知识库</li> </ul> <h2 id="related-terms">Related Terms</h2> <ul> <li><a href="https://terms-en.ai-term-hub.com/en/terms/langchain-%E5%8F%A6%E4%B8%80%E6%AC%BE-llm-%E6%A1%86%E6%9E%B6/">LangChain (另一款 LLM 框架)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/vector-database-%E5%90%91%E9%87%8F%E6%95%B0%E6%8D%AE%E5%BA%93/">Vector Database (向量数据库)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/embeddings-%E5%B5%8C%E5%85%A5%E8%A1%A8%E7%A4%BA/">Embeddings (嵌入表示)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/retrieval-augmented-generation-%E6%A3%80%E7%B4%A2%E5%A2%9E%E5%BC%BA%E7%94%9F%E6%88%90/">Retrieval-Augmented Generation (检索增强生成)</a></li> </ul>https://terms-en.ai-term-hub.com/zh/terms/knowledge_integration/Sat, 18 Jul 2026 11:23:17 +0000https://terms-en.ai-term-hub.com/zh/terms/knowledge_integration/<h2 id="definition">Definition</h2> <p>知识集成涉及从不同来源（如数据库、本体和未结构化文本）合并数据，形成连贯的模式。它解决了语义异质性和不一致性问题。</p> <h3 id="summary">Summary</h3> <p>将异构知识源合并为统一、一致表示的过程，以增强推理能力。</p> <h2 id="key-concepts">Key Concepts</h2> <ul> <li>数据融合</li> <li>本体对齐</li> <li>语义互操作性</li> <li>模式映射</li> </ul> <h2 id="use-cases">Use Cases</h2> <ul> <li>企业数据仓库</li> <li>多源医疗诊断系统</li> <li>将物联网传感器数据与历史记录集成</li> </ul> <h2 id="related-terms">Related Terms</h2> <ul> <li><a href="https://terms-en.ai-term-hub.com/en/terms/data-fusion-%E6%95%B0%E6%8D%AE%E8%9E%8D%E5%90%88/">Data Fusion (数据融合)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/knowledge-graph-%E7%9F%A5%E8%AF%86%E5%9B%BE%E8%B0%B1/">Knowledge Graph (知识图谱)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/semantic-web-%E8%AF%AD%E4%B9%89%E7%BD%91/">Semantic Web (语义网)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/information-retrieval-%E4%BF%A1%E6%81%AF%E6%A3%80%E7%B4%A2/">Information Retrieval (信息检索)</a></li> </ul>https://terms-en.ai-term-hub.com/zh/terms/batch_processing/Sat, 18 Jul 2026 11:08:51 +0000https://terms-en.ai-term-hub.com/zh/terms/batch_processing/<h2 id="definition">Definition</h2> <p>批处理涉及在执行计算或模型推理之前，将数据输入聚合为一个组（即批次）。与实时流处理相比，这种方法允许对数据进行批量操作，从而提高效率。</p> <h3 id="summary">Summary</h3> <p>一种计算方法，数据随时间收集并以组（而非单个）为单位进行处理。</p> <h2 id="key-concepts">Key Concepts</h2> <ul> <li>吞吐量优化</li> <li>资源利用率</li> <li>离线计算</li> <li>分组执行</li> </ul> <h2 id="use-cases">Use Cases</h2> <ul> <li>在历史数据集上训练大型神经网络</li> <li>数据仓库中的计划ETL作业</li> <li>夜间报告生成</li> </ul> <h2 id="related-terms">Related Terms</h2> <ul> <li><a href="https://terms-en.ai-term-hub.com/en/terms/streaming_processing-%E6%B5%81%E5%A4%84%E7%90%86/">streaming_processing (流处理)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/throughput-%E5%90%9E%E5%90%90%E9%87%8F/">throughput (吞吐量)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/data_pipeline-%E6%95%B0%E6%8D%AE%E7%AE%A1%E9%81%93/">data_pipeline (数据管道)</a></li> <li><a href="https://terms-en.ai-term-hub.com/en/terms/offline_inference-%E7%A6%BB%E7%BA%BF%E6%8E%A8%E7%90%86/">offline_inference (离线推理)</a></li> </ul>