ペアリングなど簡単だと書いてしまったが、苦労する羽目に。 ペアリング先を削除したり、設定をいじりまくっていると繋がらなくなってしまった。
 どうもラズパイ側がパスキーの認証に失敗しているようでどうにもならない。
 最終的には、以下のアナログなやり方でペアリングできたが原因不明、自分には解りそうにもない。

$ sudo bluetoothctl
Agent registered
[bluetooth]# power on
Changing power on succeeded
[CHG] Controller AA:AA:AA:AA:AA:AA Discoverable: no
[bluetooth]# discoverable on
Changing discoverable on succeeded
[CHG] Controller AA:AA:AA:AA:AA:AA Discoverable: yes
[bluetooth]# agent on
Agent is already registered
[bluetooth]# default-agent
Default agent request successful
[CHG] Device AA:AA:AA:AA:AA:AA Connected: yes
Request confirmation
[agent] Confirm passkey ****** (yes/no): yes