240 发简信
IP属地:广西
  • influxdb字段双类型问题

    问题现象:开发环境上日志看到写数据失败异常:org.influxdb.InfluxDBException$FieldTypeConflictException: partia...

  • clickhouse和ES对比

    分布式结构clickhouse是multi-master结构,即所有节点均是数据操作节点,每个节点均知道所有的数据片存放的节点 ES是master-slave 结构,分mas...

  • clickhouse笔记

    1、向量化处理的计算引擎:基于数据存储模型,叠加批量处理模式,利用SIMD指令集,降低函数调用次数,降低硬件开销(比如各级硬件缓存),提升多核CPU利用率。再加上分布式架构,...

  • jvm调优记录

    设置堆和栈大小:-Xms64m -Xmx512m -Xss128k 设置malloc分区数启动脚本加:export MALLOC_ARENA_MAX=1 禁用分层编译,减少c...

  • 分页查询与游标查询

    PG数据库的一个表有几亿条数据,现在需要读取该表所有数据进行处理,直接一把查肯定是不行的 首先考虑的是分页查询。实测发现查询的很慢,因为查询虽然有分页,每次只查一批数据,但是...

  • 超大MQ消息重复消费问题

    昨天下午测试发了6条消息,今天发现还在消费中。从日志看,代码一直在正常处理中并非阻塞。 这几条消息特点是很大,一条消息里有8500条数据,一条数据处理耗时约300ms,那么一...

  • spring cache不生效问题

    最近数据库访问量太大,于是加了缓存同样的缓存配置,有一个工程缓存正常生效,但另一个工程里却不生效 在org.springframework.cache.interceptor...

  • influxdb写入整数类型冲突问题

    在写influxdb时发现一个诡异的现象: 同样的参数,Python代码写入整数是可以成功的,而且同一个参数写整数和浮点,都是可以的 但是java代码写整数则不行 org.i...

  • OffsetDateTime json 反序列化问题

    定义测试类: 编写测试用例,注册默认的JavaTimeModule 执行结果:反序列化失败 注册默认的时间模块:JavaTimeModule javaTimeModule =...

  • pg数据库保存本地时间时区丢失问题

    pg数据库有timestamptz字段类型可以用来保存带时区的时间在实体定义里采用OffsetDateTime 来定义字段dao层使用mybatis-plus框架 写入指定时...

  • float写influxdb问题

    问题1:float 1.1写入influx变成了1.1000000238418579// 构建并写入数据点Point.Builder build = Point.measur...

  • 生成摘要

    最近想做一个给文章生成摘要的功能,考虑3种方案: 方法一:基于抽取的文本摘要抽取式摘要方法直接从原始文章中提取关键句子或段落,作为文章的摘要。常见的实现步骤包括:1、句子分割...

  • 120
    maxKB+ollama搭建本地知识库

    原理:maxKB读取知识库时,会对文档进行分片,然后写入向量数据库。用户提问时,maxKB先从向量数据库进行相似查询,获取相关的片段,传给大模型,大模型执行阅读理解后输出答案...

  • 120
    虚拟机磁盘扩容

    首先在vmware上对磁盘进行扩容 然后用fdisk命令新增一个磁盘分区fdisk /dev/sda输入n,连续enter输入w 保存 fdisk -l 看到多出来一个分区/...

  • 记录一次现网服务起不来的问题

    前段时间现网某局点升级,告警服务出现 CPU跑满反复重启的问题运维人员分析后,给的结论是某个ID的告警数量太多导致告警服务cpu耗尽,于是给这个告警添加了屏蔽规则一周后再次升...

  • filebeat采集容器日志对接loki

    安装filebeat:curl -fsSL https://artifacts.elastic.co/GPG-KEY-elasticsearch[https://artifa...

  • 120
    ES倒排索引

    数据写入时,会进行分词处理ES 内置了许多分词器:Standard Analyzer - 默认分词器,按词切分,小写处理Simple Analyzer - 按照非字母切分(符...