牛島站

已拆卸的舊牛島站站房。（2004年）

現時使用中的站房為第2代，以鋼板、鋼筋所建成的新型簡易型無人化站房[1]，於2016年投入使用。出入口及改札口均採用無門及相對的設計，使乘客可以直接穿過站房出入。面積上比原有的舊站房縮細了很多，但四周均配上玻璃窗幕，一方面增加白天時的採光度，亦可增加站房的透明度，讓四周都可以看到站房內的狀況。雖然面積縮小了，但新站房仍然擁有候車室、簡易式自動售票機及回收箱。

至於第一代站房，則為木製單層站房1座，由開站起便開始使用，屬於小規模站房。左側為候車大堂，右側為原來的售票窗口及站務室，原來為有人站，2010年9月1日因應JR四國精簡人手編制，將本站降格為無人站[2]，但同時增加了自動售票機。由於為節省舊站房的保養成本，JR四國遂決定以新站房代替原有站房。

附有車站編號的牛島站站牌。

設有側式月台2座，提供2面2線的配置。1號月台為避線，2號月台為主線道，也是特急列車通過路段。基本上除非是交換或避車，大部份普通列車都會駛入1號月台上落客，由於本站普通列車交換次數甚多，上行往德島站使用2號月台的機會亦較多，另外，3班特急列車會在此站作運轉避車。

月台的有效長度為6輛，其中1號月台向麻植塚站方向有約半輛長度是後期新加設以符合6輛編成長度。月台之間以行人天橋接駁，設於向下浦站方向；另外2號月台上另設有半輛車廂長度的有蓋候車亭及座椅。