如果香港的电话频繁打来骚扰您，可以采取以下措施应对。
1、阻止该号码的来电：可以通过手机设置中的拦截功能，将该号码添加到黑名单中，阻止其继续来电。
2、联系运营商投诉：可以向自己的手机运营商投诉，请求他们协助处理该号码的骚扰行为。
3、报警处理：如果骚扰行为严重，已经影响到了正常生活和工作，可以考虑向当地公安机关报案，请求警方介入处理。
请务必确认电话的来源和目的，避免接听来自未知号码的来电，特别是涉及财务、个人信息等方面的问题，不要轻易相信来电中提供的信息，特别是涉及金钱、投资等敏感问题，以免上当受骗。
仅供参考，请根据实际情况选择合适的方式应对，如果仍然感到困扰或担忧，可以咨询专业的法律机构或相关机构以获取更多帮助。
