香港公司不进行审计可能会面临以下处罚：

1.香港税务局罚款：轻则处以3倍应缴纳税金的罚款，并强制补交过往年度的审计报告，而情节严重的，将被追究刑事责任。

2.银行账户被关闭：香港银行通常会即刻关闭违规进行税务零申报的香港公司账户。

3.公司业务受影响：如公司改股改董等事项将会受到影响。

4.无法参与境外项目：项目方通常会要求公司出示审计报告，以此来判断公司是否有财力、能力来参与项目。

因此，香港公司应按照香港法律法规和公司章程的要求，定期进行审计，以避免不必要的风险和损失。