Деньги вернул, но на просрочку три дня мне накрутили %,а расписку и документы оставленные в залог не вернули.

Говорите, что претензию вы не получили, брат не передавал вам ее и не поставил вас о ней в известность (если брат подтвердит, что претензия была) или что претензии такой ни вы, ни ваш брат в глаза не видели (если так все и было), что касается самого долга, то соберите все доказательства того, что вы его уже уплатили (показания свидетелей, может платежка или еще что-нибудь), если в расписке нет уговора о процентах в случае просрочки, то так и говорите на суде, что о процентах вы со своим кредитором не договаривались, а потому проценты вы отказываетесь уплачивать, в таком случае если с вас и взыщут неустойку, то только ту, которую насчитает суд, если он вообще ее насчитает, так как ваш случай может быть тем, который не подпадает под действие т. н. законной неустойки (т. е. неустойки, на которую вы имеете право не смотря на отсутствие соглашения о неустойке, заключенного в письменной форме. ну и если сумма для вас ощутимая, то советую также проконсультироваться у юриста, тем более что доказать, что деньги вы выплачивали будет сложно так как вы не взяли с кредитора никакого подтверждения этому факту и вы вполне имеете возможно "влететь" на всю сумму долга еще раз.