J'ai une régle simple, les pays terminant en e en français et a en espagnol sont féminin, sauf Tunisie et les autres sont masculin. Pour ceux sans article, ce sont soit des pays assimilés à des ville, soit des iles. Après on le fait assez naturellement avec l'usage de (en, au, aux et à)

La Costa Rica ?