高い段丘の上に設けられている地平駅で、相対式ホーム2面2線から成り、西側（山側）にある駅本屋と東側の上りホームとの間は、豊橋方にある構内踏切で連絡しています。天竜川からはかなり高いところに位置しているため、ホームからは南北アルプスの山並みをまことに美しく眺めることができます。
駅舎は木造平屋建、ストレート葺のシンプルなものです。
駅前は道路がヘアピンカーブを描き、その前には崖がそびえているため、いささか圧迫感があります。集落や商店街はここから東側の低地に集まっています。
駅周辺はナシの産地で、かつてはここから貨物列車で搬出されていました。また、南アルプスの塩見岳、荒川岳、赤石岳の登山口でもあります。