面对爆炸式增长的数据，如何建设高效的数据模型和，对这些数据进行有序和有结构的分类和，避免和，保证数据的规范性，一直是大数据系统建设不断追求的方向。 如何快速上手工作： 从业务...
IP属地：四川
-
数据整合以及管理体系 -
Docker容器中添加中文字符的支持
使用docker -a 先查看下当前系统支持的字符集 其中zh前缀的为中文字符集 不支持可按照如下方法安装： 1. 安装locales 包 （PS.在apt-get inst...
-
启动hdfs的报错ssh: connect to host master port 22: Connection timed out
如果确定自己防火墙已经关闭，则看一看自己的ip有没有配错
-
电商项目（Hive实现）
外部表的使用 基于ETL的数据加载到数据仓库 使用Hive进行统计分析*对比 MR 和 Hive 查看表： MANAGED_TABLE:内部表删除内部表：HDFS上的数据被删...
-
-
MapReduce 在服务器上运行
代码首先在本地测试成功后 需要改写一些，首先把输入输出改成 args[0] args[1]如下： 如果遇到mvn commond not found执行 编写脚本
-
电商项目实战（大数据）用户行为日志 电商常用术语 项目需求 数据处理流程以及技术架构 需求实现 提交到服务器运行 扩展 用户行为日志 什么是用户行为日志每一次访问的行为（访问、搜索）产生的日志：历...
-
-
docker运行gpu使用以下命令即可 下述为在新的服务器上该如何配置docker运行gpu环境 在nvidia网址Repository configuration | nvidia-contai...
-
Docker 配环境（ubuntu+python3.6+pip）
拉取ubuntu20.04镜像 看到如图 安装python3.6 可根据自己的需要进行调整 然后应该是有了python3.8版本，可以用下述命令去查 安装python3.6【...
-
-
hadoop 配置文件说明在hadoop文件夹的etc/core-site.xml写入如下配置文件， 在 etc/hdfs-site.xml中,调整文件副本，因为现在是单机模拟 /home/hadoo...
-
Hadoop软件包常见目录说明bin ： hadoop : 命令行hadoop.cmd :运行在Windows上的 etc：etc/hadoop:hadoop相关的配置文件存放目录 其中hadoop文件夹...
-
springboot + vue 项目部署在云服务器上
有分开部署和一起部署两种方式，我这里采用的是一起部署一起部署 vue部分在vue.config.js中的publicPath改成 运行 npm run build (或者np...
