我们经常看到伙伴问到这类问题:
我的PowerBI怎么这么慢,不是说好的可以算一个亿的数据嘛。
经过在社群交流,发现:
1、算法并非很细腻。
2、自己的电脑是5000元左右的笔记本,普通CPU,内存4G。
3、32位的软件版本,且Office也是盗版。
4、数据基本没有做预处理,简单粗暴放入。
...
Powerbi操作1000万行的数据的分析处理,需要几秒?
Powerbi好厉害啊,如果处理1亿行数据需要多久?
支付宝面对几亿的信息量,他们用的是什么数据软件啊?
Mysql能处理1亿行数据吗?
于是,这里有一些思考:
软件的能力是要和硬件结合的,不谈硬件只谈软件是不对的。一旦数据上了千万,都会用服务器和软件结合。这种指望1000元随便买个电脑能处理几个亿的数据,这种思维本身就不合理。
正如:
你生的孩子再聪明,你不花钱培养,他能干嘛。自生自灭啊。再好的软件,没有合适的硬件搭配都是浪费。
应该正视:
这个时代,最基本的是公平。技术可以降低门槛,但它无法抹杀公平,公平一直存在。指望 1000元 的妈妈 生个最强大脑 让他自生自灭 最后成才 是不理性的 如果实现 也是对所有人的不公,因此不会出现。如果你在自己机器上安装32G内存,配个i9的12核cpu,就可以试试几十亿的帕累托了,软件是免费的。
云端的好处是,自己不用购买硬件,而大家共享了云端硬件资源,按需收费。在基础数据少的时候,体现不出来差异,但数据量很大,就要软硬配合了。
我们的理性做法是 改变错误的习惯 尊重知识 不要指望一夜暴富 要遵守规则 维护秩序 当别人要超过你的时候 他也必须付出一样的代价 这才是良性的 大家才都会投资 而不是投机
下面这句最重要:微软的使命已经进一步明确,是对每个人或组织赋能 。
我们除了要知道工具,还要把知识内化成能力,驾驭工具。
因此:
商务智能方法论,是知识。
您工作了10年,是经验。
power bi,是新一代工具。
硬件和平台,是基础建设。
这就是我们每个人公平的门槛,别人无法投机超越。
对于我们:
不读书不看报,有空想没知识。
工作不思考,有经历没经验。
用excel,有工具没power。
不花钱买硬件,有地没房。
指望做出别人无法实现的工作,有多大可能呢~
所以:
大家应该有信心,大数据时代已到,但最初的窗口是给:
能玩数据的业务专家,以及懂业务的数据专家。
大家的心血投资必将得到回报。
powerbi已经遇到人才短缺瓶颈,上海的玩转pbi业务专家应该保守年薪xx万以上。说服公司用正版,能给用个好点的电脑,并处在一个不错的领域,就是个人当下最好的机会。其他要素可以主观努力完成。