pytorch的优势 torch是动态计算图系统，不同于tensorflow 1.0的静态计算图（先构建好图再计算），torch是边构建图边计算，因此更加易用。 torch的代码风格更加python-style，api也更稳定，因此相比tf更加便于上手。 基本数据结构tensor使用方法 构造tensor123456# 法1：调用函数# 构造shape为(3,2)的全...

基础概念 Optimization：minimization or maximization of a function subject to constraints on its variables.优化问题的标准形式：变量x，目标函数f(x)——需要最大化or最小化的值（objective function），约束函数c_i(x)——x的等式或不等式（constr...

认知 观察世界智人为什么会胜出：不仅会观察世界，还会讲故事（来团结同伴）讲故事的三种方式：哲学（逻辑）、科学（证据）、宗教（神，不容置疑） 认知科学1975年，美国学者将哲学、心理学、语言学、人类学、计算机科学与神经科学整合在一起，研究“在认识过程中信息如何传递”。 科学：以可再现的观察事实为研究对象。 我们如何实现观察 有观察对象 有传播媒介（光、声、化学分子、场） ...

基本概念 多媒体的多关联性：不同模态之间数据的语义关联，社会关联（用户之间），网络行为需求之间的关联 语义间的关联：极可能是协同性（字母是图片的解释说明），也可能是互补性。 模式识别 & 机器学习：前者面向感知数据，可利用多种手段，机器学习只是其中之一；机器学习：解决分类和预测问题。 机器学习：数据-特征-学习-模型。 图像特征的传统表示核心目的：将非结构化数据...

本博客是国科大2019年春季刘洋老师自然语言处理课程的笔记。教材-《统计自然语言处理》。 预备知识语言学 vs 计算语言学：语言学指对语言的科学研究，语音和文字是语言的两个基本属性。计算语言学为建立形式化的计算模型来处理自然语言，自然语言理解：探索人类语言的思维本质。HLT（human language technology）：人类语言技术。 三大语系屈折语：用词的形态变...

数理逻辑：metamathes（研究数学学科的基础），离散数学：metaCS 两类推理： 演绎：一般性的前提到特殊性的结论，一般保证正确 归纳：特殊性的前提到一般性的结论，正确性不保证。 Modus Ponens(MP): 演绎推理 概念由内含和外延组成的，外延：概念包含的对象，内含：对象间具有的共同属性外延增加，内含会减少 概念的分类单独概念：外延中只有一个元素...

dijkstra算法 dijkstra算法核心：v_0~v_i的最短路，等于所有{v_0到v_i邻接点的最短路+邻接长度}中的最短值。 算法实现：数学归纳法的思想，由v_0逐渐向其邻接点外扩。

example是tensorflow官方定义的一种数据组织形式，本质就是字典，可以方便地进行序列化与反解析，与TFRecord存储格式相结合，可以最大限度地发挥数据的并行读写效率。 example分为普通example和sequence example两种Example tensorflow example是基于key-value对的存储方法，其中key是一个字符串，其...

常用Bash命令Bash命令适用于Linux和Mac下的terminal 创建空目录（在当前目录下）：mkdir xxx： 切换目录：cd <目录路径>（<目录路径>可以是绝对路径，也可以是当前目录的相对路径） 显示当前目录路径：pwd 查看当前文件夹下的文件：ls 删除文件：rm [文件名]；rm：remove；-r：recursive，递归删...

总结下python文件的文档写法，虽然针对是python的，但对大部分语言也都通用。