Создайте новый проект в директории Multithreading и напишите приложение, которое в многопоточном режиме сформирует карту заданного сайта (список ссылок), и запишите её в файл. Ссылки на дочерние страницы должны располагаться в файле с отступами на одну табуляцию относительно родительских. В файле должны быть ссылки на страницы, размещённые на том же домене (в примере — skillbox.ru). В списке не должно быть: ссылок на другие сайты и поддомены, ссылок на внутренние элементы страниц (у таких ссылок есть символ # после адреса страницы).

import requests from bs4 import BeautifulSoup import concurrent.futures

def get_links(url): response = requests.get(url) soup = BeautifulSoup(response.content, 'html.parser') links = [] for link in soup.find_all('a'): href = link.get('href') if href and not href.startswith('#') and 'skillbox.ru' in href: links.append(href) return links

def write_links_to_file(url, level, max_level, file): if level > max_level: return links = get_links(url) with open(file, 'a') as f: for link in links: f.write('\t'*level + link + '\n') write_links_to_file(link, level+1, max_level, file)

if name == 'main': url = 'https://skillbox.ru' max_level = 2 file = 'links.txt'

with concurrent.futures.ThreadPoolExecutor() as executor:
    executor.submit(write_links_to_file, url, 0, max_level, file)