A_Suozhang's Blog

六畳一间のドンキホーテ.

Personal Survey of Hardware Acceleration of Neural Network

个人总结一下认真写一个持续更新的post

Eff Deep Learning与Hardware Accel相关的一些自己不成熟的想法的梳理 工作的几个层面 1. 算法(软件)层的加速 我们熟悉的Pruning,Quantization,NAS等等都可以认为是该种方式,主要特征是:获得计算量或者存储的节省 例子:我们熟悉的几乎所有Paper 表现出来的指标: FLOPs,Pa...

FedML 联邦学习

Collaborative and Privacy

本page是从notion page转化而来,使用了原生的导出方式Export to Markdown&CSV,会导出一个zip,内部有md和图片文件,为了保持,可能需要手动将图片upload到图床 Learn FedML 📔 - White Paper by WeBank 联邦学习白皮书_v2.0.pdf (myqcloud.com) 定义: 各方面借助其他方...

Mac环境配置

我似果蛆 我似果蛆

初次接触Mac 配置过程参考了Ryushane的博客 以及 MacOS指南 关于Mac系统 实用知识 实用Tips Mac上投影Pad: 使用mac原生的(只有最新的Montery系统才有) 在mac上进行设置: 共享 - 隔空播放接收器 - 允许用户”所有人”,添加密码 在pad上利用”屏幕镜像”,发起邀请 快捷...

从PaperWritingPost中将Latex使用挤到了这个位面

Elegant Editing

LaTex Linux下安装sudo apt-get install texlive-full cjk-latex latex-cjk-chinese 使用姿势 一般flow是xelatex-bibtex-xelatex 用xelatex来创建(pdflatex几乎同等) 用bibtex xx.aux来建立ref 文件...

Sth. About Transformer

热度热度…

Transformers 由于Transformer在各个领域都十分火热,终于想起来要蹭这个热度 Basics https://www.youtube.com/watch?v=TrdevFK_am4 take in a set of points(tokens), do pair-wise inner product(has N^2 connections - ...

Contrastive Learning

怎么感觉好像曾经写过…

Contrastive learning ref the Blog-ContrastiveSelfSupervisedLearning这个post写的非常好…有机会要向他学习,目前自己的post确实都是随手记的 The Gelato’s Bet unsupervised method could beat R-CNN on PASCAL by 2015 (finally...

3D related

View things from another dimension

Codebase Minkowski by Nvidia SpatialTemporal contains scannet preprocess torch-point3d E3D - MIT HAN Lab torchsparse PVCNN SPVNAS ...

Docker的使用.

环境隔离.

隔了许久之后A-suozhang也开始用起了Docker Installation 公司的服务器上安装好了已经,之后再补充如何安装 WSL下的安装还有一些问题 一个很全面的教程 ubuntu下的安装流程,参考官方tutorial 还有一个可以参考的post Nvidia docker的配置 对于LXC的eva服务器,需要在主机上进...

Robustness相关

Strong!

Survey - A Survey of Privacy Attacks in Machine Learning Privacy Preserving NN model should be a black box with only input and output attack could be at the model itself / acqu...

Matrix Cheet Sheet

我一定得好好记一下…

Matrix Cheet Sheet 针对某个矩阵A,可能有以下的性质: 对称(Symmetric) - a_ij = a_ji 可逆/非奇异(Non-singular) - full rank Hermite/自伴随/共轭对称 - a_ij = a_ji^* related to 伴随矩阵 - 元素的共轭 正定(Posit...