Вы должны сообщить Excel, что часть формулы будет исправлена, а другая будет изменена при ее перетаскивании.
Часть формулы, которая движется, остается такой же, как вы ее написали, A4
Фиксированная часть формулы должна быть зафиксирована знаком доллара, как $A$1
Ваша новая первая формула будет выглядеть так:
= A4 * $ A $ 1
И когда вы перетаскиваете это, оно должно выглядеть правильно на каждой клетке.