关于张量的一点点小思考

做毕设时被第一个张量的论文看的目瞪口呆，过了三四个月了，今天又重新捡起来看了看CP分解卷积核的项目代码，忽然有点感想。拿磨了我好久的张量神经网络为例，神经网络想必不陌生，不过神经网络要求的输入通常是二维的（这句话需要查证），可能有时候图片是三维的。不过我们现在网站、应用收集到的数据很多都是高维的多源异构数据，这种数据可以用张量进行表示。有时候我们想把他们直接输入到网络里，这就需要来修改原来的神经网络，比如说把全连接层的权重矩阵也变成张量（这个还是不知道怎么实现啊），全连接运算变成张量之间的运算。但是都变成张量会带来巨大的参数数量，那么就开始CP分解或者Tucker分解等等。感觉研究张量更重要的点在于：设计新的运算！！！ 这就需要大量的数学功底了，张量的运算方法就显得很重要了，这就可能导致很多已经写好的现成函数就不能用了，可能需要研究函数的源码然后进行修改（想想都痛苦）。在运用张量分解后，重要的点也是怎么把分解后的矩阵们与其他的东西和谐的计算在一起！！！

嗯，弃了两个月后的一点点感悟，可能在未来的研究生生涯中还会有更深的其他理解和体会

关于张量的一点点小思考相关推荐

【python】一道LeetCode搞懂递归算法！#131分割回文串 #以及刷LeetCode的一点点小心得 [数据结构与算法基础]
题目:给定一个字符串 s,将 s 分割成一些子串,使每个子串都是回文串.返回 s 所有可能的分割方案. # 示例输入: "aab" 输出: [["aa",&q ...
函数的傅立叶展开掐死我吧_关于文章《傅里叶分析之掐死教程》的再一点小思考...
封火星:关于文章<傅里叶分析之掐死教程>的一点小思考zhuanlan.zhihu.com 以前的文章,从原理上更好的理解了原文中的一点,不过因为公式不是完全一样,从而有一个新问题不能解决 ...
element table多选只能选中当前页数据_关于“列表多选”操作流的小思考
之前在工作的时候遇到一个问题,在设计列表多选的时候,产品执意要将多选操作的按钮放在列表顶部,但是按照设计规范,该按钮应该是隐藏的,在勾选列表某一行后才会触发显示该按钮,随之产品提出的问题是: &quo ...
Android记录5--关于Android云测试的小思考
Android记录5--关于Android云测试的小思考 2013年8月28日Android记录5 前言随着实习的时间不断推移,小巫遇到的新鲜事物也越来越多,当初选择Android着实是比较明智的选 ...
关于拖延症的一些小思考
关于拖延症的一些小思考今天看了TED短片"你有拖延症吗?",里面将有拖延症的大脑抽象为三个事物:及时行乐的猴子(来自于原始社会留下来的本能反应,是拖延症的罪魁祸首),理性决策人( ...
ad 画图时的一点点小技巧和BMS硬件调试
ad 画图时的一点点小技巧和BMS硬件调试最近把BMS的板子调试完毕,初步检测没什么问题.今天分享一下画BMS的原理图和PCB时的一点点小技巧.这个板子是32节电池检测,其中16节电池为一组,两组完 ...
［转］安装N卡驱动前的准备和一点点小建议
安装N卡驱动前的准备和一点点小建议: 1.购买N卡时,为了安装配制简单省事,请尽量购买做工出色,用料扎实且采用公版设计的N卡,谨慎购买做工用料缩水,并且兼容性不好的N卡,驱动安装不上也不排除与主机板 ...
《江南百景图》游戏设计小思考：留边占角“小烦恼”
<江南百景图>是一款模拟经营游戏,它解锁新的地块儿并不像其他"大规格"的游戏那么整齐有序,而是"留边占角",不甚规则,这是为啥呢? 游戏是以江南水乡 ...
51nod 1562 玻璃切割（STL map+一点点的思考）
1562 玻璃切割题目来源: CodeForces 基准时间限制:1.5 秒空间限制:131072 KB 分值: 20 难度:3级算法题现在有一块玻璃,是长方形的(w 毫米× h 毫米),现在要 ...

关于张量的一点点小思考

关于张量的一点点小思考相关推荐

最新文章

热门文章