概述 本文主要是写Ubuntu22.04搭建MySQL8.0.26版本 环境信息 IP 系统 规格 10.0.0.10 Ubuntu22.04 2c4g 数据库服务安装步骤 下载前置依赖 # 下载libtinfo5、libnuma1依赖 [root@lb ~]# apt update -y && a ...

最近遇到一个mysql主备跨机房半同步设置导致主库插入性能慢的问题，由于一主一备跨机房设置了半同步复制，sql插入的执行时间在40ms，业务对数据落库性能又比较敏感，所以就导致了应用系统的性能问题。最后改成主备异步复制，关闭了rpl_semi_sync_slave_enabled参数，sql插入的执 ...

SQL Server 2025 中的改进 当我们接近 SQL Server 2025 的首次公开版本时，开始深入探究 Azure SQL DB 如今（已公布和未公布）但在 SQL Server 盒装产品版本中尚未出现的功能，这很有趣。 微软员工过去常说 Azure SQL DB 是盒装产品的 “下一 ...

1. 数据转换服务 1.1. 传统上业务逻辑通常遵循提取-转换-加载（ETL）或提取-加载-转换（ELT）的模式 1.2. 痛点 1.2.1. 数据用户是业务逻辑方面的专家，但是需要工程支持来大规模实现逻辑 1.2.1.1. 随着数据的指数级增长，需要分布式编程模型才能以可靠和高性能的方式实现逻辑 ...

4 月 26 日，端边云协同的新一代 AI 数据库技术沙龙在广州圆满结束。在 AIoT 爆发、智能制造数字化升级背景下，如何利用时序数据库的端边云协同、AI 深度分析等多项特性，构建自主可控的数据基础设施，7 位领域专家与线下和线上直播中数千人次的工业数字领域从业者与关注者进行了深度探讨。 感谢线下 ...

在学习过程中对MySQL的底层原理产生极大的兴趣，动手做一个轮子项目-简易数据库，做的过程中伴随着 小林Coding的相关文章一起学习，实际理论相结合，学习效果很显著，并且把小林Coding的MySQL整理摘抄了一份，具体内容如下： MySQL八股 目录MySQL八股一、基础篇二.索引篇1.什么是索 ...

2025年4月22日，由中国开源软件推进联盟PG分会主办，PostgreSQL ACE/PG分会北京&天津用户组负责人刘华阳联合发起的“PostgreSQL数据库技术峰会北京站”落幕。 本次活动以“PG与AI融合”为主题，结合当下AI大模型应用、国产化趋势，邀请社群技术专家围绕产品特性、应用案例、运 ...

用户表、商家表等一些需要展示给外部的人看的编号，从5位数开始，如16020 因为太短给人觉得用户数不多，且容易给人发现是自增id。 这样表用主键关键，后续查询数据的时候，不需要用编号转回id 同时预留了给领导设置好的编号空间 ...

1. 数据虚拟化服务 1.1. 趋势 1.1.1. 与数据集相关联的多语言数据模型 1.1.1.1. 多语言持久化既适用于数据湖，也适用于应用程序事务型数据 1.1.2. 查询引擎和数据存储持久化的解耦允许不同的查询引擎对数据湖中持久化的数据运行查询 1.1.2.1. 通常，为不同的查询工作负载组合 ...

在数据驱动的数字时代，企业正面临前所未有的数据增长与系统复杂性。数据分布在不同系统、格式与平台中，导致“信息孤岛”问题日益严重。打破这些孤岛，实现数据的高效整合与共享，成为推动企业智能决策与业务创新的关键。而 Apache SeaTunnel 正是在这样的需求下崭露头角，它以简洁的使用方式、强大的插 ...

在调研了 DolphinScheduler 之后，在项目上实际使用了一段时间，有了一些任务配置实际经验，分享如下。 封 一、资源中心任务组上限问题 【资源容量】: 允许任务实例并发的最大数量。 1.1、 现象 当我们部署方式是standalone时，资源容量默认值是 10，如下截图： 如果我们调整这 ...

本文将介绍在DolphinScheduler中使用ProcessBuilder执行Shell命令的方法。默认通过BashShellInterceptorBuilder封装Shell脚本并生成执行命令，支持普通模式和sudo模式运行。同时，结合Spring Boot应用示例，展示了如何配置工作目录、合 ...

1. 数据权限治理服务 1.1. 大部分用于提取洞察的数据都是直接或间接地从客户交互中收集的，所以如果数据集包含客户的详细信息，特别是PII（如姓名、地址、社保号等）​，则企业需要确保数据的使用符合用户的数据偏好 1.2. 数据权限法规越来越多 1.3. 收集数据的权限 1.3.1. 对收集个人数据 ...

1. 数据整理服务 1.1. 数据整理是一个迭代的过程，涉及处理错误值、异常值、缺失值、估算值、数据不平衡和数据编码 1.1.1. 包括结构化、清洗、丰富和验证数据 1.1.2. 流程中的每一步都隐含了可能“重新整理”数据的新方法，目的是整理出最健壮的数据以提取洞察 1.2. 痛点 1.2.1. 数 ...

1. 数据湖管理服务 1.1. 数据聚合在数据湖中，数据湖已经成为聚合PB级数据的中央数据存储库，这些数据包括结构化数据、半结构化数据和非结构化数据 1.2. 痛点 1.2.1. 原始的数据生命周期任务没有自动化的API，需要工程专家来实现可重复性和回滚、提供数据服务层等 1.2.2. 需要应用程序 ...

MySQL Router 安装 解压缩，修改路径名字 root@ubuntu06:/usr/local/mysql_install_package# tar xvf mysql-router-8.3.0-linux-glibc2.28-x86_64.tar.xz root@ubuntu06:/usr ...

使用 gt-checksum 分析迁移对象 背景 本文以从 ORACLE 迁移到 GreatSQL 为例讲述如何使用gt-checksum分析迁移对象。 关于gt-checksum gt-checksum 是 GreatSQL 社区开源的一款静态数据库校验修复工具，支持MySQL、Oracle等主流 ...

在昨日举办的2025亚马逊云科技合作伙伴峰会圆桌论坛上，白鲸开源创始人兼CEO郭炜作为嘉宾，与亚马逊云科技及其他行业领袖共同探讨了“AI-Ready的数据架构：ISV如何构建面向生成式AI的强大数据基座”这一重要话题。此次论坛由亚马逊云科技大中华区解决方案架构师高级经理Dickson Yue主持，吸 ...

1. 点击流跟踪服务 1.1. 在构建洞察的过程中，一项越来越重要的工作是收集、分析和聚合行为数据，即点击流数据 1.2. 点击流是代表用户在应用程序或网站中操作的事件序列，包括点击、浏览和相关的上下文，比如页面加载时间、访问者使用的浏览器或设备等 1.3. 点击流数据对于客户流量分析、营销活动管理 ...

本书是由MongoDB团队成员撰写的入门指南，涵盖从开发到部署的各个方面，内容适合MongoDB 4.2及以上版本。无论你是NoSQL新手还是有经验的MongoDB用户，都可以在查询、索引、聚合、事务、副本集、分片、监控和安全等方面收获新的知识。 ...