一般选项 -#, --progress-bar显示进度条 -b, --cookie <name=data>使用cookie。如果没有 =, 则表示cookie文件路径 (参考...
发简信
IP属地：香港
-
Cassandra数据修复失败问题
背景 为了保证cassandra不同节点数据的一致性，需要定期进行repair操作。但是，当数据量达到一定规模时，repair操作并不简单，经常会遇到这样那样的问题，导致修复...
-
《用户思维+：好产品让用户为自己尖叫》读后感这本书一开始就抛出关于好产品的定义，观点非常明确：好产品就是要成就用户，让用户变得卓越。然后，深入剖析了具体如何操作来协助用户一步步成就卓越。 我带着“用户”的角色读完了这本...
-
SparkML预测PV背景 公司需要根据过去一段时间内每天网站的流量数据，预测未来一段时间每日流量，这样，在流量高峰到来前，可以提前警示相关的运营、运维提前准备。 这是个典型的“时序预测问题”，关...
-
SparkML预测PV
背景 公司需要根据过去一段时间内每天网站的流量数据，预测未来一段时间每日流量，这样，在流量高峰到来前，可以提前警示相关的运营、运维提前准备。 这是个典型的“时序预测问题”，关...
-
Spark参数调优之locality wait背景 工作中使用Spark Streaming处理实时数据流，发现所处理的数据量与所消耗的时间很不对等，如下图： 区区几KB的数据，简单的mapToPair操作，竟然耗时4~...
-
Clickhouse中update/delete的使用
从使用场景来说，Clickhouse是个分析型数据库。这种场景下，数据一般是不变的，因此Clickhouse对update、delete的支持是比较弱的，实际上并不支持标准的...
-
Mac Launchpad(启动台）图标大小调整Mac在采用高分辨率模式下，Launchpad会变超级大，占用过多空间不宜立刻寻找到App。 可以通过调整Launchpad每一行、和每一列图标的数量，来调整Launchpa...
-
Cassandra运维工具-Reaper安装与使用Reaper是什么 Reaper是专门用于执行Cassandra数据修复操作的可视化工具。 当然，除了核心功能外，也提供了其他一些功能，例如，快照管理，集群基本信息、状态等。...
-
MySQL远程访问权限
版本：5.6.43 授权： 说明：以上命令表示允许root用户在ip服务器上远程访问database库的table表；ip为%，表示不限ip；database.table可用...
-
Spark Dataframe 自增ID (Java版)
背景 用Spark作数据计算框架，将计算结果写入传统关系数据库，例如MySQL，供业务查询，这是工作中经常使用的模式。 在写入MySQL时，经常要加个自增的ID字段。 第一种...
-
Elasticsearch分页查询总结
使用 from / size 分页 from - 表示起始位置，size - 表示每页数量；类似与 MySQL 的 limit + offset。示例： 需要注意的是，fro...
-
Cassandra导出导入CSV
进入cqlsh命令行模式，可导出、导入数据表。 导出 可以指定导出某几列： 导入 如果csv文件的表头与table的列顺序不同怎么办？通过指定列名即可：
-
Couchbase 5.x错误代码12015解决
背景 我们的应用场景，Couchbase某个bucket的索引非常大，有2亿多个文档，我们需要把这所有数据迁移到hdfs中。 为此，需要先获取所有文档ID，然后，遍历ID，获...
-
@tasselmi 并存
Clickhouse集群应用、分片、复制
简介 通常生产环境我们会用集群代替单机，主要是解决两个问题： 效率 稳定 如何提升效率？一个大大大任务，让一个人干需要一年，拆解一下让12个人同时干，可能只需要1个月。对于数...
