courier-imapのサーバ証明書は、

$ sudo mkimapdcert
で作れる。
/usr/share/courier-imap/imapd.pemが存在したら作らないようなので、先にデリっとく。

証明書の設定は
/etc/courier-imap/imapd.cnf
この中身を読むみたいなので、ドメインとかの設定はここで。