Jihadisterna anföll till häst när männen befann sig ute på åkrar i byn Alau, enligt källorna.
Bönderna var bosatta i ett flyktingläger utanför Maiduguri, och odlade grödor på fälten utanför byn.
Fler än 36 000 människor har dödats och runt två miljoner människor har drivits på flykt i Nigeria på grund av den utdragna konflikten mellan Boko Haram och regeringen. Många av dem bor i läger och är beroende av humanitärt stöd från biståndsorganisationer för att överleva.
Oroligheterna har spridit sig till Niger, Tchad och Kamerun.
En regional militärkoalition med soldater från fyra länder strider mot Boko Haram för att bekämpa den militanta islamistiska rörelsen.