結論はバラバラで、特に共通していません。
面積の広い自治体の場合、おおむね本庁舎に限らず窓口が多いようです。

中には郵便局に窓口が設けられているケースもあります。

窓口の予約を義務付けている自治体は、筆者の近隣では見当たりませんでした。

更新の際に必要な番号

手続きの際、暗証番号が必要です。

・ 署名用電子証明書（6～16桁の英数字）

・ 利用者証明用電子証明書（4桁の数字）

・ 住民基本台帳用（4桁の数字）

筆者も恥ずかしながら以前6桁以上の番号を失念し、窓口に出かけて一度再設定してもらいました。