Flamingo Flamingo的贡献 桥接预训练好的视觉模型和语言模型 可以处理任意交错的图文对数据 可以同时以图像和视频数据作为输入Flamingo实现了多模态领域的Few-shot learning(in-context learning)能力，即多模态领域的GPT-3。 Flamingo模型结构 通过Perceiver Resampler和Gated Xatten...

LLaVa LLaVa数据集的构建 根据COCO中的caption和bbox，可以利用language-only GPT-4，对其进行In-context learning来生成三种instruction data. Conversation: 多轮对话，根据caption中的每一部分，生成一个人不断提问某张图片的instruction数据。 Detailed description...

Qwen-VL Qwen-VL的模型架构 LLM：使用Qwen-7B初始化Vision Encoder：采用OpenCLIP-ViT-bigG-14Adapter：Position-aware VL Adapter。 该adapter包含一个随机初始化的单层cross-attention模块，该模块使用一组可训练的embedding作为query向量，使用视觉编码器输出的图像特征作为...

Consistency ModelLatent Consistency Model(LCM)

正在更新中……

秋招在即，用这篇博客记录一下算法岗求职过程中的一些必备知识汇总。

损失函数 常用损失函数 均方误差（MSE,L2）:L=(y−y^)2L=(y-\hat{y})^2L=(y−y^​)2 （回归任务常用，隐含的预设是数据误差符合高斯分布）绝对误差（MAE,L1）:L=∣y−y^∣L=|y-\hat{y}|L=∣y−y^​∣二值交叉熵（BCE）：L=1N∑i−[yi∗log(pi)+(1−yi)∗log(1−pi)]L=\frac{1}{N}\sum_i -...

正在更新中……

秋招在即，用这篇博客记录一下算法岗求职过程中的一些必备知识汇总。

正在更新中……

秋招在即，用这篇博客记录一下算法岗求职过程中的一些必备知识汇总。

尝试使用Selenium自动化测试库对Github中指定topic的所有库信息进行爬取！

在经过一晚上的折腾后，终于在自己电脑上成功装上了Node.js和Hexo，并通过Github Page搭建起了自己的小站！