Тебе технически или на VB?
Если технически, то надо просто отрубать все попытки подключения к определенному порту. И на VB это не сделать, по крайней мере без извращений.
А на VB ты можешь просто подключиться к порту и другой к нему подключится не сможет.