такое чувство, что он не держит, но и не отпускает, либо это самовнушение

потому что очень хочется быть с ним

Так и скажите ему. Что хотите отношений с ним и только с ним. Что любите его. Если он скажет, что тоже хочет этого — прекрасно.
Если скажет, что он этого не хочет, то каковы причины не верить ему? Скорее всего, это так и есть. Тогда остается переживать это. Плачьте, грустите. Но не переживайте, что вы можете быть женой только этого человека. Если бы это было так, что каждому подходит только один партнер, то человечество уже давно прекратило свое существование. На самом деле вы можете быть счастливы и с другими мужчинами, просто пока сфокусированы на другом. Это нормально и это пройдет по мере проживания грусти. 

Удачи вам.