各種届出が必要となります。

税務署…法人設立届出書、青色申告承認申請書等
地方公共団体…法人設立届出書（東京23区は都税事務所へ届出すれば不要）
年金事務所…健康保険・雇用年金保険の加入関係等
労働基準監督署（従業員いる場合）…適用事業報告、就業規則等
ハローワーク（従業員がいる場合）…雇用保険関係等
金融機関…法人口座開設手続等

業種、規模等により必要な手続は異なりますので、確認しましょう。