| 共 17 篇文章 |
|
7种系统设计中的数据库范式。·灵活性：关系数据库允许添加、修改和删除数据，而不会影响整体数据库结构或其他相关数据。在结构方面，列数据库介于关系数据库和键-值数据库之间。文档数据库，也称为面向文档的数据库或文档存储，是NoSQL数据库的一种，以半结构化或非结构化文档的形式存储和检索数据。搜索型数据库，也称为搜索驱动型数据库... 阅5 转0 评0 公众公开 23-09-18 21:29 |
星标1.4k，一款国产开源数据同步中间件，支持多种数据源和预警功能！DBSyncer是一款开源的数据同步中间件，提供MySQL、Oracle、SqlServer、PostgreSQL、Elasticsearch(ES)、Kafka、File、SQL等同步场景。支持上传插件自定义同步转换业务，提供监控全量和增量数据统计图、应用性能预警等。实时监控，驱动全量或增量实时同步运行状态、结果、同步... 阅12 转0 评0 公众公开 23-05-22 22:15 |
如何做好表结构设计？方便获取标签信息，方便把标签信息缓存处理方便根据标签筛选视频，方便我们写后续的业务逻辑设计思路综合标签可以写到配置文件中（或者写在前端），这些信息不需要灵活配置，所以不需要保存到数据库中类型、地区、年份、演员都设计单独的表视频表中设计标签表的外键，方便视频列表筛选取值标签信息写入缓存，提高接口响应... 阅263 转0 评0 公众公开 23-04-14 17:04 |
第三范式：3NF是对字段冗余性的约束，即任何字段不能由其他字段派生出来，它要求字段没有冗余。一个表中组合主键的字段个数越少越好。提倡“三少”原则的目的，是防止读者利用打补丁技术，不断地对数据库进行增删改，使企业数据库变成了随意设计数据库表的“垃圾堆”，或数据库表的“大杂院”，最后造成数据库中的基本表、代码表、中间表、临时... 阅22 转0 评0 公众公开 23-03-02 07:46 |
新建 Temp 中间表，将 MySQL 数据全量同步到 ClickHouse 内 Temp 表，再替换原 ClickHouse 中的表，适用数据量适度，增量和变量频繁的场景。总结通过 ClickHouse 实践，完美的解决了 MySQL 查询瓶颈，20 亿行以下数据量级查询，90% 都可以在 1s 内给到结果，随着数据量增加，ClickHouse 同样也支持集群，大家如果感兴趣，可以积极尝试！ClickHo... 阅18 转0 评0 公众公开 22-11-20 16:07 |
元数据可分为技术元数据和业务元数据。技术元数据为开发和管理数据仓库的IT人员使用，它描述了与数据仓库开发、管理和维护相关的数据，包括数据源信息、数据转换描述、数据仓库模型、数据清洗与更新规则、数据映射和访问权限等。而业务元数据为管理层和业务分析人员服务，从业务角度描述数据，包括商务术语、数据仓库中有什么数据、数据的位置... 阅16 转0 评0 公众公开 20-10-10 03:35 |
利用数据库存储数据是目前最为流行的方式，因为数据库拥有持久化存储、读写速度也很高，更关键的是数据库可以极大程度保证数据的有效性，而不像是Excel等文件极易容易产生修改错误。按照早期的数据库理论，比较流行的数据库模型有三种，分别为层次式数据库、网状数据库和关系型数据库。这个时候很多人就会把sql与数据库的概念搞混了，很多新人... 阅4 转0 评0 公众公开 20-10-10 03:21 |
数据百问系列：是一个宽表好还是多个维表好？若是机器学习模型的同学要数据的话,我们就只需要从维度表,度量表,事实表中抽取数据做成大宽表给他们了,由于模型做的比较少,对于大宽表的经验比较少,暂时只能来一个模型数据的需求,单独写sql语句去抽取。另外，数据仓库的设计，往往不能是以计算出几张表就结束了，我们更应该提供的是数据服务，让使... 阅593 转0 评0 公众公开 20-05-31 00:16 |
Cayley 图数据库的简介及使用。Cayley图数据库是 Google 的一个开源图(Graph)数据库，其灵感来自于 Freebase 和 Google 的知识图谱背后的图数据库。关于查询语句，它是图数据库的精华所在，而对于Cayley而言，它的查询语句相对来说就比较简单且好理解，具体的查询语句命令可以参考官网：https://github.com/cayleygraph/cayley/blob/master/doc... 阅594 转1 评0 公众公开 19-10-02 22:51 |
哈希结果0-255 -> 库1哈希结果256-511 -> 库2哈希结果512-767 -> 库3哈希结果768-1024 -> 库4.哈希结果0-511（513范围） -> 库1哈希结果512-767（256范围） -> 库2哈希结果768-895（128范围） -> 库3哈希结果896-1023（128范围） -> 库4.索引表的partition key：WHERE条件所在表的partition key，作为索引表的partitio... 阅34 转0 评0 公众公开 18-11-22 21:40 |
