Открываем меню (три черточки, правый верхний угол), клацнуть "Options" или ввести в строку адреса "about: preferences" (без пробела). Листаем вниз, находим "Allow Firefox to", выбираем "Check for updates but let you choose to install them". Потом вводим в строку адреса "about:config", в строку поиска вводим "auto", находим строку "app.update.auto.migrated", клацаем дважды по надписи "true" (должно изменится на false).
Если скопировать папку с FF портабл или ее переименовать, то это нужно все делать по новой.