будет равно сумме приложенных к материальной точке (то есть суммарно к вам обоим) внешних сил
внутренние процессы не могут повлиять на траекторию центра масс тела в целом, на это могут повлиять только внешние силы
зависимость движения центра масс системы от внешних по отношению к системе сил (внутренние силы между частями системы при тех же колебаниях никак на это не влияют по третьему закону ньютона)
вы внешними силами придаете системе доска-кирпич большой импульс в одну сторону и маленький в обратную
хоть вибрирует у вас на столе коробка, хоть банально катается на колесах с моторчиком, она прикладывает силу к столу и испытывает силу со стороны стола, которая и придает ей ускорение, стол (вместе с планетой если закреплен на ней) получает равное изменение импульса в обратном направлении. если сумма внешних сил приложенных к системе на равна нулю и меняет ее импульс то к внешнему миру со стороны коробки приложена такая же точно сумма сил и меняет его импульс на равную по модулю величину