无论您代表哪个团队，都有一个共同的问题：数据处理。数据处理模式和工具正在不断变化和发展。在本文中，我将介绍Lambda和Kappa数据处理架构作为数据处理架构决策的基础。

如果你是开放数据的支持者，那么上周有关 Apache Iceberg 的新闻定会让你感到高兴。客户需要一种开放的存储格式，而 Snowflake 和 Databricks 正在大力提供这种格式。

目前大部份行业分析还聚焦在Open AI，Langchain这些和Generative AI直接相关的企业和产品上。实际上，企业软件市场的感知和行动已经非常迅速。在此项技术进入公众视野18个月后，我们来盘点一下领先的企业软件应用是如何利用Gen AI技术的。

按照“数据素养”中的路线图，汽车行业可以为信任、创新和道德诚信定义的未来铺平道路，使所有利益相关者受益，并创造一个更可持续、更公平的数据生态系统。

经济好的时候TP+CDC+AP，经济不好的时候，反正如果要保一个，我就保TP。总不能停止交易吧？那么就在TP上想办法怎么叠加AP。

日前，DuckDB发布1.0版本，承诺采用新的数据模型并提高稳定性，增强向后兼容性，从而成为一个成熟的数据库版本。

紧急故障发生的时候，及时止损是首要考虑的问题，不过很多朋友都会选择较为完美地解决问题，或者说在选择策略的时候忽略了某些方案的风险。一旦意识到风险存在，可能已经悔之晚矣。

IT168特别策划了《向量数据库选型指南》，笔者通过对话一线技术专家，全面剖析向量数据库的最新发展动态与核心技术优势，分享各个行业实际应用中遇到的挑战及成功案例，为用户在选型过程中提供有力支持。

当元数据以不同的形式存储在元数据孤岛中时，元数据访问困难（查找和访问元数据的问题）会变得更加复杂。从架构上讲，您可能需要考虑元数据注册表或元数据门户等解决方案来部分缓解这些困难。

​6月4日，Databricks 宣布收购 Apache Iceberg 表格式背后的商业机构 Tabular，Iceberg表格式与 Databricks 自己的 Delta 格式存在竞争关系，为 Databricks 客户在其Lakehouse环境中享受更多的统一性和更少的不兼容性铺平了道路。Databricks 证实，这笔交易的价值超过 10 亿美元。

在数字化转型这件事上，大部分企业管理者认为非常的容易，无非就是各种系统买买买，其实老杨认为这只是一种战术上的勤奋，企业真正做数字化需要的是战略。

Snowflake这次放大招，开源了Polaris Catalog，意图在数据云市场抢占核心地位，与Databricks的Unity Catalog展开正面竞争。

在日前举办的2024向星力·未来数据技术峰会上，星环科技创始人、CEO孙元浩宣布，星环科技的定位从Data Infra进一步延伸到AI Infra，为企业客户打造AI基础设施，打造从语料处理、模型训练、知识库建设等的一整套的工具链，帮助企业快速建立行业大模型，快速使用生成式AI(AIGC)。

在软件开发世界中有20或30种流行的编程语言。但在数据库世界中，只有1种。

机器学习、深度学习和大模型，经常傻傻的分不清，这里将结合图文跟大家讲清楚。假设我们有一个文本情感分析的任务,需要判断一段文本的情感是正面、负面还是中性。本文分别介绍了机器学习、深度学习和大模型的实现方式。

全球领先的管理咨询公司麦肯锡(McKinsey)的一项最新全球调查显示，对 GenAI 的投资正开始为企业创造价值。2023 年是投资 GenAI 的计划年，而 2024 年则是从这项新技术中获取商业价值的一年。

我觉得只有国产数据库也像Oracle那样，在自己的官网上公布上百万个BUG和补丁，那么我们的国产数据库才算真的成熟了，用户可以放心大胆地去购买了。Oracle上千万的BUG报告，是它最好的勋章。

数据所有者会将数据视为资产，因此会囤积和保护数据，以确保其价值不会丢失。他们将成为数据守护者或数据管理员，并保护谁可以使用数据以及用于什么目的。

用户已经习惯了低价高质量的服务。那么国产数据库厂商就卖不出高价格的服务，而没有高收入，真的会有大量的高水平DBA愿意投入到国产数据库服务中去吗?这个课题已经摆在了国产数据库厂商和正准备从事国产数据库第三方服务的厂商面前了。

5月，数据库圈较为热闹，开源数仓Greenplum突然404；国家数据局发布承担数据标注基地建设任务的城市名单;Gartner Peer Insights报告发布，PingCAP、OceanBase、腾讯云入选;矩阵起源近日完成千万美元 Pre A 轮融资，全面拥抱AIGC;Snowflake 收购 AI 观测平台 TruEra;达梦数据开启新股申购，发行价86.96元/股;星环科技全面战略升级，为企业高效构建AI Infra……