什么是微地图(Wemaps)?
融合社交性、传播性与可视化表达的新型地图形式
依托自媒体生态,将地图从静态载体转变为具有强交互性的"个人媒体"
实现"由大众生产、为大众传播"的信息流转路径
微地图推荐面临的三大挑战
模态信息不完整
图像由结构化图符组成,缺乏纹理细节;文本依赖空间语境,易导致语义不一致
结构抽象表达不清
图像符号简洁,文本注记稀疏,传统模型难以捕捉深层结构语义
偏好动态变化
不同场景(旅游、通勤、应急)对应不同关注要素,需任务驱动的适应能力
Wemaps多模态数据集
用户-地图交互记录
用户数量
地图项目
典型主题
四大主题分类
🏞️ 旅游(1,117张)
景区打卡、游玩路线
🚗 自驾游(967张)
驾车路线图、服务区分布
🍜 美食(1,272张)
美食地图、推荐店铺
🏫 校园(1,618张)
高校地图、建筑分布
SMWRec核心架构
主干网络:图神经网络(GNN)
采用LightGCN作为主干,构建ID、视觉、文本三类模态子图
• ID模态图:用户-地图基本交互行为
• 视觉模态图:ResNet提取的256维图像特征
• 文本模态图:词袋模型编码的128维语义嵌入
特征增强:模态无关的数据扰动
通过特征丢弃(FD)和特征掩码(FM)增强鲁棒性
特征丢弃(FD)
随机丢弃部分特征维度,模拟信息缺失
特征掩码(FM)
将部分特征置零,增强对噪声的抵抗
模态对齐:Align-Before-Fuse(ABF)
在融合前构建图文语义空间的一致性约束
ITC
图文对比学习
ITM
图文匹配任务
MLM
掩蔽语言建模