20150918 A的精彩技术分享

今天某开源大牛来公司技术分享,很享受地度过了一个下午。

听真正的大牛(化名Xman)做技术分享,如同看一场精彩绝伦且能让人回味不绝的电影,非常满足。

在这里记录几件大牛分享的几件我比较感兴趣的事情

  • 拆解MVC

曾经把MVC(Model, View, Control)模型的VC模块拆开扔到客户端,服务端只负责M模块。这种纯天然的分布式架构极大地解放了服务端的压力,使得整个CS交互速度特别快。甚至快到当页面刷新后,用户都没反应过来页面已经刷新了,他们只能在代码里面加入了delay延时,让页面不要加载这么快,给用户一个意识缓冲时间。

整个分享过程既然人觉得满满的都是干货,又令人觉得新鲜有趣,这是因为Xman是个又能钻研又爱玩的人,他也鼓励程序员玩,玩出花样来,创造力就是玩出来的。
当Xman给我们讲这种拆解VC到客户端的时候,我的第一反应是“哇噻还可以这么玩!”,但是随之而来的是“咦,对啊,不正是应该这样吗”。是的,在某些场景下确实是可以吧VC或者MV放到客户端的,但为什么之前我完全没想到过呢?或许是因为我们都不会“玩”,没有“玩”的习惯,没有“玩”的信心。

  • DSL/抽象层次

    除了“玩”,Xman提到最多的就是“抽象层次”!他分享的很多精彩的点子到最后都
    总归为项能力:抽象层次。其中抽象层次的最酷的一件事情是DSL。

    数据业务是件很琐碎的东西,如果不将其抽象化,则容易钻进业务无底洞,那样更会痛不欲生。DSL(Domain Specific Langrage)在业务繁杂、容易出错的场景下尤能发挥其威力。

    • Xman在淘宝时面向的业务数据极为琐碎,而程序又要根据这些琐碎的数据去做琐碎的数据库查询,虽然数据都做了归一化处理,但整个查询/处理过程仍繁杂琐碎。他们之前是用php手写sql代码的方式去查询数据库,这种原始的硬编码方式的最大缺点是sql语句容易写错、难以做抽象优化、重复劳动力。于是他就把整个业务sql查询/处理整合成了一门dsl语言,使用者只要用dsl去查询sql就行了,整个查询变得抽象、不易出错,而且还可以在dsl内部针对每种查询做优化。

    • dsl生成测试数据

    新项目在未上线之前没有线上的测试数据集。一般我们开发都是手动造测试集来测,这种传统的造数据办法的缺陷就是数据单一、难以发掘极端数据,没有极端数据就暴露不了隐藏bug。
    Xman就又根据项目接受的数据格式写了一个dsl,dsl规则就是该项目接受的数据格式。以此来随机生成数据,咋一看,还有模有样的,同时这种数据生成方式有也能发现极端数据。

    • dsl做配置语言

    想在很多项目的配置文件都是建立在编程语言规范的,例如riemann的配置文件是要clojure写,erlang的配置文件要符合erlang语言规范。这种以编程语言作为配置规范极大地增强了配置文件的功能。
    如果我们的客户想要在我们的服务上自定义配置,而我们的配置也是在编程语言的规范下。但客户又不一定了解这款编程语言,或者客户有心hack你的项目,那他就可以在配置文件里写比如无限递归、alloc大内存之类的损事。
    想给予客户相应的自由度来自定义配置文件,又担心有潜在的危险,最好的办法就是造一个针对业务的有功能限制的dsl。

    总的来说我觉的Xman真是熟练把玩dsl,用dsl来做特别酷的事情。之前在微信公众平台上还看到一篇借组ast混淆js源代码的博文,先用工具生成js源代码的ast,再在这个ast上遍历,边遍历边乱写一些乱七八糟的东西,这些东西部影响源代码的逻辑,纯粹噪音而已。加噪为了防爬虫。

  • 测试

虽然Xman提测试没有提得比“玩”和“抽象层次”多,但讲测试的时间是最多的。他强调测试的重要性,不仅能保证程序的正确性,保证修改不带入新bug,还能推进项目的提升。对于测试,Xman讲得最多的是,“工具很重要”。
Xman对测试的重视程度和对工具的熟练运用,解释了我一直以来的心头之惑:这些大项目都是怎么测试的啊?这么复杂的逻辑怎么测啊?
那就是,想办法搞测试数据集,想办法模拟极端情况,想办法让测试发现bug,想办法复现,想办法获取事故现场的第一手资料,想办法跟踪查找真正的事发地点。
不过他介绍的工具都太深了,我都没听说过,systemtab是啥?可以吃吗?

跟测试靠边的一点,是报表分析。
Xman也写了好多报表分析,和结果评判工具。

"要把测试变得有趣,这样你才不会想要跳过它”!金玉良言!

后话

想起来蜀黍跟他好像,玩很多东西,都玩得很好,一些大家平常不注意的东西,一旦他们发现了这东西的好玩点,就有可能钻进去玩玩,就比如Xman在做ppt的时候竟然还自己画插图,虽说画得不怎样,但很有趣,感觉这个人的世界也都很有趣;讲东西的时候完全沉醉在自己的世界,很愉快地把己做的事情分享给其他人;讲话都很快,脑子转得也非常快,很活跃。天生爱玩..

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,033评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,725评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,473评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,846评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,848评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,691评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,053评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,700评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,856评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,676评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,787评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,430评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,034评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,990评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,218评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,174评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,526评论 2 343

推荐阅读更多精彩内容