这要先解释“图”的造字。

“图”本来是一个会意字。古文写法：

由囗+啚组成。《说文解字》：画计难也。从囗从啚。啚，难意也。同都切〖注〗徐锴曰：“规画之也。故从囗。”

囗(wéi)，表示范围。啚(bǐ)，“鄙”的本字，表示艰难。合起来表示规划一件事，需慎重考虑，相当不容易。本义：谋划，反复考虑，谋求。（简体字看不出来会意）

共图大业：共同谋划大业。

现代汉语中，图财、不图名不图利、图谋、企图等，都是这个词义。