我真的不知道为什么你要在代码中做所有的事情，但是为了从链接中获得该页面上的表，并为竞争对手的代码增加一列，我会这样做（在这个例子中，只是针对第一页，但显然你可以扩展它）：

import requests
import pandas as pd
from bs4 import BeautifulSoup as bs

url = "https://www.worldathletics.org/records/all-time-toplists/middle-long/one-mile/indoor/men/senior?regionType=world&page=1&bestResultsOnly=false&oversizedTrack=regular&firstDay=1899-12-31&lastDay=2023-02-17"
req =  requests.get(url)

#this gets you the whole table, as is:
sub_df = pd.read_html(req.text)[0]
#we need this to extract the codes:
soup = bs(req.text,"html.parser")
codes = [comp['href'].split('=')[1] for comp in soup.select('table.records-table td[data-th="Competitor"] a')]

#we then insert the codes as a new column in the df
sub_df.insert(3, 'Code', codes)

现在，在Competitor之后应该有了一个新列，您可以删除任何不需要的列，添加其他列等等。