dockerでWordPressのコンテナを作るときに、全てのファイルをマウントする方法

要は、/var/www/htmlフォルダそのものをvolumesでマウントする方法です。

volumes:
      - "$PWD:/var/www/html"

これでいけました。$PWDは、docker-composeしたディレクトリを指すようです。