iPhone - Apple Music の自動再生をオフにしたいが「無限 (∞)」マークがない

♾マークは似たような傾向の曲をエンドレスに再生するという機能なので、Apple Musicに登録していないと利用できないかもしれませんね。ためしに、曲を全画面表示してから、右下の3本線のアイコンをタップしてみてください。それで「次に再生」の横に♾マークが出なければ、使えないのだと思います。

それより、♾マークの意味は上記の通りなので、「ワイヤレスイヤフォンがiPhoneに接続されると同時に勝手に再生される」という症状とは関係がありません。