现男友老是向我打听我与前男友的事

我跟前男友分手好多年了，有了现在的男友。我与现在的男友说好了要在一起就不要谈论彼此的过去。可是现在他老是向我打听前男友的各种事情，包括床上事情的细节
我觉得这样很不好，说好了不说的，可他说他不是在意，只是觉得好奇，而且了解这些也有利于我们关系的和谐。现在越来越频繁，基本上每次那个的时候都要问那些细节，我真有点恼火。请问，现男友这样到底是什么意思，我该怎么办？