事件背景 我在Spring boot服务里以local模式启动了一个Spark任务，在初始化SparkSession的时候报错： 这个事情很令人费解的有两点： 本地启动Spa...
发简信
IP属地：四川
-
你看到的并非全部真相：Spark的账户问题
-
Apache Sentry，看这篇就够啦！（三）接连上篇。上篇文章中，你可以清晰的了解到Sentry的组合拳（一堆plugins）是如何打通Hive和HDFS端的权限，并做统一管理的。正向信息流是完整的，那逆向的呢？中间涉...
-
Apache Sentry，看这篇就够了！（二）上篇文章[https://www.jianshu.com/p/e29520171fd3]我们详细的描述了有关Apache Sentry的元数据库表设计，基本上理解了库表，也就...
-
Apache Sentry，看这篇就够啦！CDH初始提供的权限组件就是Apache Sentry，经典的RBAC模型可以很好的支撑server、database、table等在用户的role和group之间的权限管控...
-
Solidity智能合约开发工具Atom及其插件安装
Atom Atom官方下载地址：https://atom.io/ 插件安装方法 进入Atom插件包目录 安装方法 插件 代码自动补齐 代码错误检查 支持Solidity代码高...
-
Solidity 的 remix IDE
写这篇文章的初心就是安装remix太慢了。。。反正也是等，那就整理记录一下吧 作为一个专业搞大数据的资深程序猿，最近打算开始看看区块链技术毕竟对技术的好奇心是我们的天性嘛 s...
-
MyBatis-Plus 代码生成器超详细讲解
前言 代码生成器顾名思义就是为我们生成一些代码，省去了我们一些时间。 MyBatis-Plus 的代码生成器可以生成 Entity、Mapper、Mapper XML、Ser...
-
Elasticsearch 集群分配多少分片合理Elasticsearch 是一个非常通用的平台，支持各种用户实例，并为组织数据和复制策略提供了极大的灵活性。但是，这种灵活性有时会使我们很难在早期确定如何很好地将数据组织成...
-
我觉得怎么类比都可以，作者应该是想表达最常用的是index的结构体，kabana里面展示也是按照index展示的，type甚至只是沦为了一个字段，type相比index利用率不高吧，但是在mysql里面，可能我们更关注table而不是database了。不同的存储结构使用场景的倾向性不同，只是记忆的话可以类比，但是实际使用的倾向还是要更明晰才好。
es 的分布式架构原理能说一下么（es 是如何实现分布式的啊）？
面试题 es 的分布式架构原理能说一下么（es 是如何实现分布式的啊）？ 面试官心理分析 在搜索这块，lucene 是最流行的搜索库。几年前业内一般都问，你了解 lucene...
-
es 的分布式架构原理能说一下么（es 是如何实现分布式的啊）？面试题 es 的分布式架构原理能说一下么（es 是如何实现分布式的啊）？ 面试官心理分析 在搜索这块，lucene 是最流行的搜索库。几年前业内一般都问，你了解 lucene...
-
Hadoop MapReduce 详细的shuffle过程（1）
之前工作的时候也只是了解个大概，现在找工作复习发现一些面试官会问的特别特别细，基本考验源码了，所以重新深入学习下 懒得总结了，以下是一些很好的博客，当作一个列表，全部看完啥都...
-
hadoop什么时候启动reduce
这是个很细节很细节的问题，没看过源码，但是偏偏遇到了 hadoop MapReduce在reduce阶段分为三步，即：shuffle，sort，reduce。当然也有说5步的...
-
Mac 终端报错error: invalid character '' in LSCOLORS env var
Mac终端切换到bash后，进行命令操作时报错： 解决方案：打开 ~/.bash_profile在设置LSCOLORS的地方将之前的设置删除，修改为以下的设置： 重新启用设置...
-
解决Mac能连上WIFI但无法上网的问题最近我的MBP在使用的过程中突然打不开网页了，无论是safari浏览器还是Chrome浏览器都不好使，但是电脑上的WI-FI标识仍然是出于链接状态，如下图所示： 经过测试，手...
-
Mac终端切换bash和zsh
昨晚上迁移GitLab的时候，在git命令操作时，遇到了卡顿。在zsh上敲击删除或者冒号时就卡死了。不论是升级zsh、还是按照网友说的关闭github配置啥之类的，重启电脑，...
-
Mac终端(terminal) bash和zsh切换方法
之前在mac上配置好的adb环境，今天开机使用adb命令的时候发现找不到adb,奇怪，去检查配置文件，发现没有问题，设置source ~/.bash_profile一下就好了...
-
macbook 终端使用 oh-my-zsh 主题后输入卡顿解决方案
表现形式： 终端 输入命令，超过5个字符就会有明显输入卡顿，粘贴一行长点的 install 命令需要等几分钟才能粘完，数秒才会蹦出一个字符，切换目录也很明显，导致命令行提交 ...
-
GitLab项目迁移我终于静下心来搞这个事儿了，这是个麻烦事儿。 一、60MB内的项目，可以直接页面操作导出和导入。 导出： 我已经导出了，所以这里的按钮是有“下载”和“再生成新的导出”，一般没...
-
忘了回来回复了，失败了，druid也不行，长时间不用，还是会报错，我都懒得管了，呵，人生😂
Spring mysql连接长时间断掉的问题
维护一个toB智能制造项目的时候，发现mysql偶尔会报错： 这个错误发生时，重新调用接口即可重新连接上，倒是没有特别大的阻碍，但是偶尔跳出还是烦人。所以我花了点时间研究了下...
-
Linux系统安装Gitlab
起因是我们租的一台服务器到期了，但是不想续租，服务器上面的git就需要挪到另一个服务器上。网上大神们说了，需要先在新服务器上安装一个，再挪，好吧，那我开始安装吧 安装 yum...
