这描述的语病真是多，实在很怪，先指出来再答。

「任务栏上第一个开始按钮」，这话说得真是奇怪，任务栏会出现第二个开始按钮？正常状态下，Windows 的任务栏（包括 Windows 11 ）就只有一个开始按钮。
这句话更适合的表述，要么是「 Windows 11 可以隐藏任务栏上的开始按钮吗？」
要么是「 Windows 11 可以隐藏任务栏上第一个按钮（开始按钮）吗？」
除非，实际状况是，想隐藏第一个屏幕的开始按钮，但其它屏幕继续显示。

「请问大家知道怎样隐藏开始按钮的方法吗？」
这是病句。首先删除第一个修饰词语，整句话就变成「请问大家知道怎样隐藏方法吗？」
「怎样隐藏方法」？显然不是 OP 要表达的意思吧。
更适合的表述是，「请问大家知道怎样隐藏开始按钮吗？」或者「请问大家知道隐藏开始按钮的方法吗？」


病句挑完，揭示答案：
可以用 Open-Shell：
https://github.com/Open-Shell/Open-Shell-Menu
在 ‘Replace Start button’ 那里，进入 ‘Advanced button options’ 可以选择不把开始按钮显示在任务栏。