货车司机私自扣货的法律责任如下：
1、如果不在现场也不知道司机直接拉走的货物，且货物是托司机保管的或者是遗失在现场的，那么司机拒不返还货物就构成侵占罪；
2、如果在现场也知道司机拉走货物，但是司机是采用欺骗手段，拒不返还货物的行为就构成诈骗罪；
3、如果在现场也知道司机拉走货物，司机没有欺骗，司机直接踩油门把货物拉了就走的，构成抢夺罪。
侵占罪是指以非法占有为目的，实施将代为保管的他人财物、遗忘物或者埋藏物非法占为己有，数额较大，拒不交还，从而构成的犯罪。一般侵占罪数额较大,可处二年以下有期徒刑、拘役或者罚金;数额巨大或者有其他严重情节的,处二年以上五年以下有期徒刑,并处罚金。
诈骗罪是指以非法占有为目的，使用欺骗方法，骗取数额较大的公私财物的行为。诈骗罪一般处三年以下有期徒刑、拘役或者管制，并处或者单处罚金；数额巨大的，处三年以上十年以下有期徒刑，并处罚金
抢夺罪是指抢夺公私财物，数额较大的，或者多次抢夺。一般会处三年以下有期徒刑、拘役或者管制，并处或者单处罚金；数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。

《刑法》第二百六十六条
诈骗公私财物，数额较大的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金；数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。本法另有规定的，依照规定。