最近在使用sqlite作为sql计算引擎,表数据量大小为4000万行,空间占用1.5G,计算为和一个小表做join并且group by:使用机器...
对于zk的原理等有了一定了解,希望能够通过项目来练手一下,都是一些简单的项目zk使用场景 数据发布与订阅(配置中心) 练手项目:对于多个机器实现...
1. elasticsearch 服务安全配置 目前主要通过插件的形式来控制:常用的插件主要包括:elasticsearch-http-basi...
个人在工作中逐渐认识到一些素养对程序员这个职业是非常重要的,后续会把这些素养罗列在这里,主要是提醒自己保持良好的状态,因为自己是主要后端数据处理...
新岗位需要用python,之前没写过python,用循环数组实现一个定长队列玩一下: 想说一下:1、python类中使用成员变量写self好麻烦...
HQL优化 1. HQL优化 一、避免or操作的不当。如果where子句中有多个条件,并且其中某个条件没有索引,使用or将导致全表扫描。假定在H...
IO优化 1、缓存、缓冲技术2、数据组织结构优化3、应用合理的RAID策略提升磁盘I/O。 WEB前端调优 减少网络交互的次数(多次请求合并)减...
预分区 在创建Hbase表的时候默认一张表只有一个region,所有的put操作都会往这一个region中填充数据,当这个一个region过大时...
Stream groupings Shuffle grouping: Tuples 随机分配到bolt中,可以保证bolt负载均匀。Fields...