称杆乡位于怒江州州府六库城北部，乡政府驻地距六库城有 55 公里，地跨高黎贡山东麓至碧罗雪山怒江两岸，南接大兴地乡，北接古登乡，东与兰坪县、云龙县相邻，西与缅甸接壤。
　　乡内