极市直播回放第117期丨知识驱动的多模态表征学习

本次分享我们邀请到了上海交通大学长聘轨副教授谢伟迪，为大家介绍他们的一些探索工作：

OvarNet: Towards Open-vocabulary Object Attribute Recognition

“近年来，基础模型取得了巨大成功。从本质上讲，这些在网络数据上训练的模型已经显示出对大量人类知识的编码。例如，ChatGPT、GPT4能够就大多数主题与人类自由聊天。在这次演讲中，我想介绍我们最近在利用基础模型中的知识方面所做的一些工作，并将现有计算机视觉系统的能力扩展到开放词汇场景，例如动作识别、对象检测、分割、电影音频描述等。

最后，还会讨论我最近对AI4science研究的另一个重点，特别是医学领域的表征学习，这特别需要大量的人类知识参与，例如医学图像分析、疾病预测和临床决策等。”

➤论文

OvarNet: Towards Open-vocabulary Object Attribute Recognition

论文地址：https://arxiv.org/pdf/2301.09506.pdf

➤回放视频在这里☟

如果觉得有用，就请分享到朋友圈吧！

推荐阅读

• 极市直播回放第110期丨CVPR2023-张铂：自动驾驶场景下模型通用表征学习与泛化性的思考
  

• 极市直播回放第109期丨田柯宇：卷积网络上如何做BERT/MAE预训练，ResNet也能用
  

• 极市直播回放第108期丨潘梓正：模型部署新范式—可缝合神经网络（CVPR 2023）
  

• 极市直播回放第107期丨NeurIPS 2022 Oral-张博航：如何从模型层面获得对抗鲁棒性保证？
  

• 极市直播回放第106期丨阿里达摩院：兼顾速度与精度的高效目标检测框架DAMO-YOLO
  

• 极市直播回放第105期丨NeurIPS 2022 Spotlight-童湛：基于掩码和重建视频自监督预训练
  

• 极市直播回放第104期丨西北工业大学田春伟教授：基于结构信息的图像复原方法研究
  

• 极市直播回放第103期丨范琦-SSP: 自支持匹配的小样本分割任务新思想（ECCV2022）
  

• 极市直播回放第102期丨南京理工大学魏秀参、沈阳：大规模细粒度图像检索
  

• 极市直播回放第101期丨ECCV2022-李钢-PseCo：FPN错位对齐，实现高效半监督目标检测
  

• 极市直播回放第100期丨ECCV2022 Oral-吴俊峰：视频实例分割新SOTA：SeqFormer&IDOL
  

• 极市直播回放第99期丨ECCV2022-涂正中：让谷歌的骨干网络MaxViT治好你的科研内耗
  

• 极市直播回放第98期丨严彬-Unicorn：走向目标跟踪的大一统（ECCV2022 Oral）

# CV技术社群邀请函 #

△长按添加极市小助手

添加极市小助手微信（ID : cvmart2）

备注：姓名-学校/公司-研究方向-城市（如：小极-北大-目标检测-深圳）

即可申请加入极市目标检测/图像分割/工业检测/人脸/医学影像/3D/SLAM/自动驾驶/超分辨率/姿态估计/ReID/GAN/图像增强/OCR/视频理解等技术交流群

每月大咖直播分享、真实项目需求对接、求职内推、算法竞赛、干货资讯汇总、与 10000+来自港科大、北大、清华、中科院、CMU、腾讯、百度等名校名企视觉开发者互动交流~

觉得有用麻烦给个在看啦~