-
Notifications
You must be signed in to change notification settings - Fork 0
/
Copy pathparsing_category.py
51 lines (41 loc) · 1.63 KB
/
parsing_category.py
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
from bs4 import BeautifulSoup
from slugify import slugify
from dotenv import load_dotenv
import requests
import os
import random
import psycopg2
load_dotenv('.env')
url = "https://stroydvor.kg/"
response = requests.get(url)
soup = BeautifulSoup(response.text, 'lxml')
categories = soup.find_all('div', class_='dark_link')
# print(categories)
for category in categories:
print(category.text)
try:
# Подключение к существующей базе данных
connection = psycopg2.connect(user=os.environ.get("DB_USER"),
password=os.environ.get("DB_USER_PASSWORD"),
host=os.environ.get("DB_HOST"),
port=os.environ.get("DB_PORT"),
database=os.environ.get("DB_NAME"))
# Курсор для выполнения операций с базой данных
cursor = connection.cursor()
# Распечатать сведения о PostgreSQL
print("Информация о сервере PostgreSQL")
print(connection.get_dsn_parameters(), "\n")
# Выполнение SQL-запроса
cursor.execute("SELECT version();")
# Получить результат
record = cursor.fetchone()
print("Вы подключены к - ", record, "\n")
cursor.execute
connection.commit()
except (Exception, psycopg2.Error) as error:
print("Ошибка при работе с PostgreSQL", error)
finally:
if connection:
cursor.close()
connection.close()
print("Соединение с PostgreSQL закрыто")