Для более быстрой отправки файлов с помощью aiogram можно использовать метод send_document() или send_photo() с указанием параметра file_id вместо отправки самого файла. Это позволит обойти процесс загрузки файла на сервер Telegram и сразу отправить его пользователю.
Пример кода для отправки файла по file_id:
```python
await bot.send_document(chat_id=chat_id, document=file_id)
```
Однако, для использования параметра file_id необходимо предварительно загрузить файл на сервер Telegram и получить его file_id.
Если же вы хотите обеспечить моментальную отправку файла без ожидания его загрузки при нажатии на кнопку, возможно вам стоит рассмотреть другие способы оптимизации работы вашего бота, например, асинхронную обработку запросов или улучшение алгоритма обработки файлов.