用JavaMail发送邮件的问题

我用的邮件服务器是James,用JavaMail写客户端,可是发邮件的效率偏低,我测试了一下.发2m的附件
要9秒,不带附件的情况下也要6秒左右.
  transport.sendMessage(message, message.getAllRecipients()); 这一行就花费了 5秒,请问有什么改进的方法?