できません。

TD-20 に搭載されているシーケンサーはパターン・シーケンサーと呼ばれるもので、ひとつのパターンにテンポ情報をひとつだけ記録することができます。
したがって、パターンの途中でテンポを変えることはできない仕様となっています。