Segundo as autoridades, a explosão ocorreu na noite de segunda-feira na cidade de Wadi Nakhla e deixou ainda outras duas crianças feridas.
Todas as vítimas eram da mesma família.
As autoridades responsabilizaram os rebeldes Huthis, afirmando que espalharam minas terrestres e engenhos explosivos em áreas sob o seu controlo em Hodeida, para dificultar a pressão das forças do governo no ano passado.
Os responsáveis falaram sob condição de anonimato.
As recentes chuvas fortes e inundações na região expuseram minas terrestres, que não estão mapeadas e continuam a ser uma ameaça para os civis.
A guerra do Iémen opõe os Huthis, alinhados com o Irão, ao governo reconhecido internacionalmente, apoiado por uma coligação liderada pela Arábia Saudita.