4.1 概述 Pentaho首席技术官James Dixon创造了“数据湖”一词。它把数据集市描述成一瓶水（清洗过的，包装过的和结构化易于使用的）。 而数据湖更像是在自然状态...
发简信
IP属地：四川
-
数据仓库、数据湖、数据中台一文读懂【2】 -
数据仓库、数据湖、数据中台一文读懂【1】
如今，随着诸如互联网以及物联网等技术的不断发展，越来越多的数据被生产出来-据统计，每天大约有超过2.5亿亿字节的各种各样数据产生。这些数据需要被存储起来并且能够被方便的分析和...
-
python在Excel中追加dataframe数据
对于有些已经存在的Excel，我们只需要添加新的数据即可，不需要overwrite.那么可以利用openpyxl实现这种需求。 首先，需要安装openpyxl 第一种方式： ...
-
在Windows中安装PySpark环境
安装Python 可以选择安装官方版本的Python，或是Anaconda，对应的地址如下。 下载地址Python：https://www.python.org/[https...
-
svn和git的区别，为什么使用git？git和svn是目前最常用的团队协作的版本控制系统。 本人起初用过git，后来用过svn。算是两个版本控制系统都用过了。夜深人静睡不着，特此来一发，论一论这两者。 下面我从版...
-
民谣专场 （一） | 民谣里没有车也没有房，只有那小尼姑与老方丈
不知道你有没有留意过，网易云音乐中，民谣歌曲的评论往往是最多的；因为民谣背后往往都有一段故事，或狂放、或香艳、或无病呻吟、或无疾而终；听民谣的时候，耳机连接的是两个平行时空，...
-
Impala更新元数据：invalidate metadata和refresh
摘要：Impala，Hive invalidate metadata 对于通过Hive创建，删除或者修改表等操作，Impala无法自动感知到Hive元数据的变化，想让Impa...
-
sql中列转行unpivot、行转列pivot详细讲解||Mysql Oracle sqlserv DB2数据库目录：一、sqlserver列转行、行转列详解二、Oracle列转行、行转列详解三、DB2列转行、行转列详解四、MYSQL列转行、行专列详解五、练习数据 练习数据在文末，使用...
-
中心极限定理通俗介绍
中心极限定理是统计学中比较重要的一个定理。 本文将通过实际模拟数据的形式，形象地展示中心极限定理是什么，是如何发挥作用的。 什么是中心极限定理（Central Limit T...
-
Python细节——MYSQL的to_sql的if_exists推荐使用append
前言 本篇文章主要探索一个很小细节，就是to_sql 到我们的mysql数据库时，你是使用追加，还是替换呢？这儿就推荐使用追加！append。接下来给大家贴代码比较演示。 代...
-
python虚拟环境virtualenv
一、使用虚拟环境的原因 在使用python开发的过程中，工程一多，难免会碰到不同的工程依赖不同版本的库的问题；亦或者是在开发过程中不想让物理环境里充斥各种各样的库，引发未来的...
-
一文读懂Python中的self神奇的self： 在Python类中规定，函数的第一个参数是实例对象本身，并且约定俗成，把其名字写为self。其作用相当于java中的this，表示当前类的对象，可以调用当前...
-
-
Pandas 中map, applymap and apply的区别https://codeday.me/bug/20170505/13290.html https://www.zhihu.com/question/20125256 注意： ...
-
-
设置双击直接打开.ipynb文件设置双击直接打开.ipynb文件 - 水冰月的style - 博客园 anaconda3安装好后，可在开始菜单下查看 (72 条消息)ipython notebook 如何打...
-
大师兄的Python机器学习笔记:数据重抽样大师兄的Python机器学习笔记:数据预处理大师兄的Python机器学习笔记:实现评估模型 一、重抽样方法 1. 关于重抽样方法（Resampling Methods） 重抽...
-
imblearn 使用笔记
在做机器学习相关项目时，通常会出现样本数据量不均衡操作，这时可以使用 imblearn 包进行重采样操作，可通过 pip install imbalanced-learn 命...
-
总结：Bootstrap(自助法)，Bagging，Boosting(提升)
前言 最近在理清一些很必要的也很基础的东西，记录一下，结合网上和文献，自己也有些易化使之更轻松理解，如有错误，请不吝赐教，多谢！ Bootstrap(自助法) Bootstr...
