当前数据架构的挑战 大数据技术现在已经不算热门词汇了,在这个数据驱动的时代,数据驱动一直在不断改变我们的生活和工作方式,比如Google、Amazon等这些大公司拥有大量的用...
当前数据架构的挑战 大数据技术现在已经不算热门词汇了,在这个数据驱动的时代,数据驱动一直在不断改变我们的生活和工作方式,比如Google、Amazon等这些大公司拥有大量的用...
背景 作为一个IT技术人员,说实话,以前的我是很反对写PPT或者写设计材料的,总感觉写文档这种事情会浪费很多去写代码的机会。不过,随着对项目有了相对比较了解。在偶然的机会,项...
1. 背景 App1有一个很常用的功能,该功能被其它项目组B看中,App2想以最小的代价最快上线,就是那种页面功能直接复用,避免开发。 2. 方案 以iframe将App1中...
1. 背景 线上保障,上线运行了几天的SpringBoot应用,突然遇到问题:/tmp/tomcatXXX/work/Tomcat/localhost/XXX is not ...
ZUUL ZUUL功能如下: 认证 动态路由 安全 静态response处理 压力测试 流控 核心概念 type: 用于定义routing过程的各个阶段。 执行优先级:同一类...
1. 背景 String的split方法在项目中使用很广泛,但是这里面其实有些坑,截取的字段数目可能不是想要的,本文阐述这些内容,增加记性。 2. split方法介绍 首先可...
1. 背景 在开发es入库组件时,使用BulkProcessor处理大批量的数据,遇到了数据入不进es。分析后发现是Bulkprocessor的有些地方没有执行,为此分析了该...
在自己的两台虚拟机192.168.152.130,192.168.152.132进行配置 部署环境:centos7.8、mysql5.7.31,两台服务器的3306端口可以互...
1. 索引别名 在开发中,随着业务需求的迭代,较老的业务逻辑就要面临更新甚至是重构,而对于ES来说,为了适应新的业务逻辑,可能就要对原有的索引做一些修改,比如对某些字段做调整...
记录下ElasticSearch数据的备份与迁移过程 1.指定备份文件地址 由于这里使用docker安装的es,所以指定备份文件到挂载的宿主机目录中,如果不是docker安装...
语句执行过程1.MySQL的框架有几个组件, 各是什么作用?连接器:负责跟客户端建立连接、获取权限、维持和管理连接。查询缓存:查询请求先访问缓存(key 是查询的语句,val...
心态好,习惯好,睡眠好,适当的通过发型,着装,注重下仪表,就自然看起来特别年轻。 一、心态好 心态好的人,凡事看得开,想的开,不会过于的去纠结名和利,在他们看来,名利属身外之...
1、背景 java进程执行特定作业出现内存溢出,跑很多类似作业是正常的。 2、常见问题及原因分析 当然这个问题不难,主要是借助这个机会来一起整理下之前出现过的问题,希望能举一...
背景 某中型互联网公司的游戏业务,使用了腾讯云的Elasticsearch产品,采用ELK架构存储业务日志。因为游戏业务本身的日志数据量非常大(写入峰值在100w qps),...
现有一张表记录数已达到千万级别时,在建立索引的时候会出现时间很慢的问题,如何提高建索引的速度呢 比如表名称为tableA,要建立索引的字段名成为columnA 直接建立索引会...
今年7个月阅读了126本书,输出书评90多篇,从一天阅读一本书,到现在2小时左右阅读一本书。 当然,会有人质疑,你阅读这么快,能学到重点内容吗?能够内化知识吗? 其实,阅读方...
canal可以用来监控数据库数据的变化,从而获得新增数据,或者修改的数据。 原理: canal-server zk 进行多节点高可用部署 可以多节点监听cancal-serv...