如何不着痕迹地避免同事“不经意间”地肢体接触

本人性格比较随和，和周围同事相处都挺愉快的。合作比较多的一位同事会偶尔开玩笑（举例，最近事儿多同事思考的时候会薅头发，我就会开完笑说 头发要被你薅完了之类），然后这位同事会笑着过来摸我的头。我不大习惯这样的接触，但当时的临场反应只是笑着躲开。这个摸头发还好解决，有躲的余地，其它的，比如突然拍肩膀抓手臂，我一贯比较淡定，表面上是不在意只是注意同事想跟我交代的事情，但还是觉得冒犯。这种要怎么解决啊。好像也找不到氛围单独认真地提这样的事。