我是做旧木材生意的，平时需要人工装车，按吨付费，平时工人不受我的管制，他们里面有个队长，结工资，安排活，我都是给队长直接安排，队伍十来个人，流动性很大，也不受我的管制。而且工资是一天一结的。
两个月前一个工人在车上装货的时候，不小心滑了下来，手腕着地，三处骨折，当时我带他去了医院拍片子检查，费用都是我出的，拍了片子查到是骨折后，我和队长就说让他回老家看病，在这边没人照顾，环境也不好！走的时候我给他拿了三百块钱，中间也没跟我联系过！前两天工人们放假，队长和他是亲戚，也是老乡，就告诉我说他在家里打了石膏，贴了膏药，花了800多，让我给他拿五百，我二话没说拿给他了！可是前两天这个受伤的工人给我打电话说他要动手术，两万多！问我怎么办？这都回家两个多月了没说动手术，现在说要动手术。请问我可以拒绝给他支付医药费吗？