欢迎光临
我们一直在努力
共 74 篇文章

标签:分析

史上最简单的数据抽取

史上最简单的数据抽取     做为一名全职DBA,在之前的工作中,常会收到这样的需求,需要我配合开发定时的从几张目标表取出他们需要的数据,并存放到临时表中,开发们再从临时表中取出数据展现给前端页面。 ...

云搜网云搜网聚合分类

如何分析及处理 Flink 反压?

反压(backpressure)是实时计算应用开发中,特别是流式计算中,十分常见的问题。反压意味着数据管道中某个节点成为瓶颈,处理速率跟不上上游发送数据的速率,而需要对上游进行限速。由于实时计算应用通常使用消息队列来进行生产端和消费端的解耦...

云搜网云搜网聚合分类

数据挖掘与分析(互联网行业)

互联网数据挖掘概览 互联网的数据挖掘典型需求 互联网数据采集的典型渠道 互联网数据存储特征 数据挖掘技术与工具 数据分析的工作模式 示例:数据挖掘在互联网行业中的应用 互联网相关的数据挖掘典型应用场景 数据流挖掘分析 文本挖掘分析 示例:文...

云搜网云搜网聚合分类

MYSQL 连接登录过程分析

  MYSQL 连接登录过程分析 在较新MYSQL版本中,默认没有开启线程池的功能,每个客户连接在服务器进程中都拥有自己的线程。 当客户端(应用)连接到MySQL服务器时,服务器要对其进行认证(Authenticate),认证方式...

云搜网云搜网聚合分类

mysqldump原理分析

今天学习了下mysqldump原理,具体的结论如下: 1、mysqldump在不加任何参数进行备份的时候: 如果单独备份一个表会对备份表上读锁,直到备份结束unlock,如果备份的整个库,那么会同时lock 这个库下的所有的表,最后在unl...

云搜网云搜网聚合分类

Oracle11g 密码延迟认证导致library cache lock的情况分析

在 Oracle 11g 中,为了提升安全性,Oracle 引入了『密码延迟验证』的新特性。这个特性的作用是,如果用户输入了错误的密码尝试登录,那么随着登录错误次数的增加,每次登录前验证的时间也会增加,以此减缓可能对于数据库重复的口令尝试攻...

云搜网云搜网聚合分类

MySQL · 答疑解惑 · 物理备份死锁分析

背景 本文对 5.6 主备场景下,在备库做物理备份遇到死锁的case进行分析,希望对大家有所帮助。 这里用的的物理备份工具是 Percona-XtraBackup(PXB),有的同学可能不清楚其备份流程,所以这里先简单说下,PXB的备份步骤...

云搜网云搜网聚合分类

SequoiaDB监控与开发实践分析

使用背景 公司近期上线了一个新应用,底层数据库采用了国产的分布式数据库 – SequoiaDB。 因为需要将 SequoiaDB 集群纳入到公司的整个监控体系中,所以需要对 SequoiaDB 的状态、性能指标等信息收集起来,然后提供监控系...

云搜网云搜网聚合分类

mongodb慢查询分析

1.用慢查询日志(system.profile)找到超过500ms的语句  mongos>db.setProfilingLevel(1,500) 2.然后再通过.explain()解析影响行数,分析为什么超过500ms【即看...

云搜网云搜网聚合分类

MySQL数据清理的需求分析和改进

昨天帮一个朋友看了MySQL数据清理的问题,感觉比较有意思,具体的实施这位朋友还在做,已经差不多了,我就发出来大家一起参考借鉴下。 为了保证信息的敏感,里面的问题描述可能和真实情况不符,但是问题的处理方式是真实的。 首先这位朋友在昨天下午反...

云搜网云搜网聚合分类