2018.7.6【泛读】Unsupervised Deep Embedding for Clustering Analysis

这是一篇结合embedding和cluster任务的论文,具体模型分为两部分
1 使用DNN生成每个节点xi对应的embedding zi,然后计算zi属于每一个cluster center中心的概率(soft assignment)。这个相似度可以通过以下公式来计算:


2.png

其中,zi是通过f()这个神经网络计算出来的embedding,而qij可以表示节点i属于cluster j的概率(soft assignment)。
2 第二步是通过最小化第一步的q和一个辅助分布的KL散度,使用BP来达到优化DNN和重新调整cluster center的目的。
目标函数如下:


3.png

优化方法:
通过反向传播优化DNN,通过计算梯度来调整cluster的中心,公式如下:
4.png
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 远远的 我一路走来 跋山涉水 带着琐碎生活的 所有烦恼不堪和忍耐 我想在这里 寻找片刻安宁 于是 我来了 带着重重...
    三河散人阅读 2,849评论 11 5
  • 好久没写文章了。。 忙碌的工作,一不小心就让我把这个好习惯给抛弃了。 也是自己不够毅力坚持吧。有人跟我说,写这些...
    naruto_yuqin阅读 6,607评论 1 7

友情链接更多精彩内容