some question of dataset

[fahai-dd]

这个video 和文中哪个数据集对应？

[pmixer]

我无法确定(因为一般只跑 ml1m，这几个文件也是直接从作者的 tf 版本实现里搬过来的），这种处理过的数据只有 user/item id, 原始数据应该都在 https://cseweb.ucsd.edu/~jmcauley/datasets.html 可以去那里下载原始数据对对看(要是嫌麻烦，直接统计里面的 unique user/item id 数量去论文里看对应到哪个数据集也可以，我猜是 Amazon Video Games, 被简写成了 Video)。

但是，为啥关心这个？

[fahai-dd]

感谢您的回复！ 是这样 我想验证一下其他的指标，但是我发现这个video 数据集和论文中没有对应的（跑出来的指标也没有对应的），然后就想问一下这是哪个数据集 如果是game的话这个指标差的有点多，我再去跑一下其他的 孙继承 ***@***.***

[fahai-dd]

@pmixer 您好大佬 请问其他数据集跑出来的指标，我是哪里设置的不对嘛？ 这是我执行的命令 python main.py --dataset=Beauty --train_dir=default --maxlen=200 --dropout_rate=0.2 --device=cuda:0

[pmixer]

感谢回复。您再翻翻论文，印象中里面有讲调参的细节，每个 dataset 在 dropout 等值的设定上其实有区别，有的是 0.2 有的是 0.5 啥的。另外，实验中 negative sampling 带来了一定的随机性，复现出来的 NDCG 一般会有偏差。一切还是以论文作者的原 tf repo 为准。

[fahai-dd]

非常抱歉，我又回去看了论文，确实如您所说，我在次进行了实验，得到了合理得结果，我还有一个问题想问您，他论文中的指标 是只取1000轮时候的验证结果还是说他每隔20轮进行验证的结果（取一个最好的），我看论文中没有说明，期待您的回复！

[pmixer]

我在次进行了实验，得到了合理得结果

好呀。

他论文中的指标 是只取1000轮时候的验证结果还是说他每隔20轮进行验证的结果（取一个最好的

这得问他😂

[yiyangl24]

@fahai-dd Hello, I have encountered the same problem. I found that the NDCG metric on the beauty dataset consistently failed to achieve the expected results. Could you please tell me how you adjusted it? I would be very grateful if you could provide the information.

[fahai-dd]

每个 dataset 在 dropout 等值的设定上其实有区别，有的是 0.2 有的是 0.5 啥的 这个按照论文中的设置

[yiyangl24]

每个 dataset 在 dropout 等值的设定上其实有区别，有的是 0.2 有的是 0.5 啥的 这个按照论文中的设置
感谢您的回复，我确实注意到了这一点，我发现NDCG值难以突破0.3，请问您当时是取每次验证的最好结果吗

[fahai-dd]

很抱歉我后续没对这个进行研究了，转多模态推荐了

[yiyangl24]

仍然感谢您的回复

很抱歉我后续没对这个进行研究了，转多模态推荐了