华阳夫人和吕不韦没有关系，如果非要扯上关系的话，那么吕不韦就是华阳夫人的合作伙伴。因为华阳夫人位高权重，吕不韦想要升官发财，所以就默默的接近了她，然后二人结盟干了一番大事。
一开始吕不韦只是一个商人，虽然没有什么权利但是生活还算富足，但是他并不满足于现在的生活，非常想当官，想进入朝堂之中参与政事。但他没权没势，就算是有钱也没有用，所以他就开始寻找能够帮他的目标。某一天他恰巧遇到了在赵国当质子的秦异人，看到一个皇子没落成这样心中非常同情，为了自己也是为了秦异人，所以就帮了他一把，告诉他自己能够帮他成大事。
一开始秦异人并不相信他。觉得他说的那些事情一点根据都没有，而且自己还在赵国当质子，想回去都难，何况是回到秦国当王呢？但是吕不韦一再劝说，而且每次都很诚恳，所以最终秦异人还是相信了。
吕不韦先是把他从赵国救了出来，让他安全的回到了秦国，然后又通过各种途径拉拢能够信任的人。但是想要继承王位对于秦异人来说还是很困难，因为当初异人非常不受宠，安国君有二十多个儿子，比他有才能，家世显赫的多的是。
所以这个时候吕不韦就想到了宫中的华阳夫人，她虽然比较受宠，但是膝下无子，正好能够把秦异人塞给她当干儿子，让她推举异人当太子。他先是通过各种渠道认识了华阳夫人的弟弟，然后又通过她弟弟买通宫中的人，终于见到了这位漂亮的嫔妃。
一开始华阳夫人并不想帮他，但是耐不住吕不韦会说，他告诉华阳夫人如果想在这偌大的宫廷之中生存下来，就一定要有自己的儿子，否则等到自己年老色衰了，自己的晚年生活很难过得安逸。经过他这一分析华阳夫人瞬间就被说动了，然后就收了异人为干儿子，推举他上位，自己成了王太后，吕不韦也当上了丞相。
至于坊间传闻吕不韦跟华阳夫人之间有暧昧关系，那都是乱说的。首先华阳夫人并不是赵姬那样的女人，其次她很爱安国君不可能背叛他，最后这件事情并没有史料记载，所以并不可信。