博海文思

SkyHigh

CS224d：DL&NLP学习笔记 Pset1题解推导

CS224d：DL&NLP学习笔记 Pset1题解推导 做这部分练习的时候，需要知道下神经网络的基础知识，以及BP的原理，word2vec的SG和CBOW的实现、负样本损失函数的作用等。 一、Softfmax (a) 这个不难推导，直接给出 二、Neural Net...

Posted by SkyHigh on October 13, 2016

Tensorflow学习笔记（一） 基础

注：前面的部分直接摘自参考1，并做了概括、修改和补充。 Tensorflow学习笔记（一） 基础 0.DeepLearning编程框架 用于参数配置： caffe提供了很便捷的神经网络搭建和命令行工具，加之model zoo里面大量预训练好的模型(主要是图像相关的)可以做fine-...

Posted by SkyHigh on October 10, 2016

《湄公河行动》——来自正义的审判

湄公河行动 张涵予与彭于晏 影评 《湄公河行动》于2016年9月30日在中国内地上映，到今天为第8天，票房累积到了5.5亿。 电影票房走势——来自猫眼 这部影片上映之前， 并没有看见多少宣传。从电影名字的角度来说，也没有任何引人入胜的点。在如今国产“大片”扎堆的时代，这样一部电...

Posted by SkyHigh on October 7, 2016

LRU cache原理和简单实现

LRU cache原理和简单实现 概念 LRU是Least Recently Used 近期最少使用算法。 内存管理的一种页面置换算法，对于在内存中但又不用的数据块（内存块）叫做LRU，操作系统会根据哪些数据属于LRU而将其移出内存而腾出空间来加载另外的数据。 什么是LRU算法？ L...

Posted by SkyHigh on October 7, 2016

树结构算法总结(5) 二叉查找树BST

Previous 树结构算法总结(1) 二叉树的遍历 树结构算法总结(2) 线段树Segment Tree 树结构算法总结(3) 字典树Trie Tree 树结构算法总结(4) 堆Heap 树结构算法总结(5) 二叉查找树BST 二叉查找树的概念 二叉查找树定义为： 空树或者具有如下特...

Posted by SkyHigh on October 6, 2016

信息论的可视化

信息论的可视化 最近看交叉熵和信息散度的时候看到了一篇关于可视化的信息论，感觉挺受启发。原文是英文，想边翻译边学习。篇幅较长，待以后有空补充。 后来发现已经有人翻译过了，就直接添加到参考了。 主要的收获： 交叉熵和KL散度 交叉熵给了我们一种表达两种分布差异的方法。p和q的差异有多大，...

Posted by SkyHigh on October 5, 2016

树结构算法总结(4) 堆Heap

Previous 树结构算法总结(1) 二叉树的遍历 树结构算法总结(2) 线段树Segment Tree 树结构算法总结(3) 字典树Trie Tree 树结构算法总结(4) 堆Heap 堆的概念和建立 概念 我们这里说的堆和内存机制里的堆（内存机制的堆更偏向于链表结构）不一样。数...

Posted by SkyHigh on October 5, 2016

树结构算法总结(3) 字典树Trie Tree

Previous 树结构算法总结(1) 二叉树的遍历 树结构算法总结(2) 线段树Segment Tree 树结构算法总结(3) 字典树Trie Tree 字典树的数据结构 定义 字典树，又称单词查找树，Trie树，是一种树形结构，是一种哈希树的变种。典型应用是用于统计，排序和保存大量...

Posted by SkyHigh on October 4, 2016