拿到工作签证 visa stamp后反悔不去公司会对后面再用H1b申请美签有影响吗

请教一个冷门知识点：

人在国内，拿了A公司的offer，A公司办好了H1b然后在国内大使馆申请到了基于A公司的工作签证stamp。 但是后面因为各种各样的原因，反悔不去A公司入职，也就不入境美国。 以后拿了B公司的offer，B公司申请好了工作签证，这个时候去大使馆做H1b签证申请会有负面影响吗？ 相当于之前有一个valid visa stamp但是没有去。

太冷门了，网上完全没搜到类似的case，问了几个律师也不知道这种情况会不会有负面影响，都是官方回答。 按道理来说，领事馆签证是怕你去了不回来。

不晓得后续会不会有什么影响。

多谢多谢！