Barakamon bercerita tentang seorang penulis kaligrafi terkenal bernama Handa Seishuu yang pindah ke sebuah pulau kecil bernama Pulau Goto. Ia disuruh pindah ke pulau tersebut oleh ayahnya setelah ia memukul seorang kurator tua di sebuah acara pesta penghargaan. Di pulau ini dia bertemu (lebih tepatnya menemukan) anak perempuan kecil yang bernama Kotoishi Naru di rumah barunya. Sejak saat itu Naru bersama teman-temannya selalu bermain di rumahnya yang memang sebelum ditempati Handa sudah dijadikan markas oleh anak-anak pulau disana.