Vysyr/opinie
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

sync

Browse Source
This commit is contained in:
Vysyr
2026-08-31 20:47:06 +02:00
parent 078fe5323f
commit 94fb6a8568
2 changed files with 16 additions and 1 deletions
Download Patch File Download Diff File Expand all files Collapse all files
README.md
+2
View File
@@ -31,6 +31,8 @@ Google może czasem pokazać niezalogowanej przeglądarce „ograniczony widok
Jeśli ograniczony widok pojawia się stale, można utworzyć osobny profil Chromium, zalogować go ręcznie i ustawić `CHROMIUM_PROFILE_PATH`. Profil przechowuje sesję przeglądarki; aplikacja nadal nie zapisuje opinii. Jeśli ograniczony widok pojawia się stale, można utworzyć osobny profil Chromium, zalogować go ręcznie i ustawić `CHROMIUM_PROFILE_PATH`. Profil przechowuje sesję przeglądarki; aplikacja nadal nie zapisuje opinii.
Jeśli Google ogranicza wyłącznie tryb bez okna, ustaw `CHROMIUM_HEADLESS=0` i uruchom proces na zwykłym albo wirtualnym ekranie (`xvfb-run`).
## Testy ## Testy
```bash ```bash
scraper.py
+14 -1
View File
@@ -102,7 +102,17 @@ def get_rating_distribution(url: str) -> dict:
"""Pobiera pięć zbiorczych liczników. Treści opinii nie są odczytywane ani zapisywane.""" """Pobiera pięć zbiorczych liczników. Treści opinii nie są odczytywane ani zapisywane."""
try: try:
with sync_playwright() as playwright: with sync_playwright() as playwright:
launch = {"headless": True, "args": ["--disable-dev-shm-usage", "--no-first-run", "--disable-gpu"]} headless = os.environ.get("CHROMIUM_HEADLESS", "1").lower() not in {"0", "false", "no"}
launch = {
"headless": headless,
"ignore_default_args": ["--enable-automation"],
"args": [
"--disable-dev-shm-usage",
"--no-first-run",
"--disable-gpu",
"--disable-blink-features=AutomationControlled",
],
}
if os.environ.get("CHROMIUM_PATH"): if os.environ.get("CHROMIUM_PATH"):
launch["executable_path"] = os.environ["CHROMIUM_PATH"] launch["executable_path"] = os.environ["CHROMIUM_PATH"]
profile_path = os.environ.get("CHROMIUM_PROFILE_PATH") profile_path = os.environ.get("CHROMIUM_PROFILE_PATH")
@@ -122,6 +132,9 @@ def get_rating_distribution(url: str) -> dict:
context = browser.new_context(locale="pl-PL", viewport={"width": 1100, "height": 800}) context = browser.new_context(locale="pl-PL", viewport={"width": 1100, "height": 800})
try: try:
page = context.pages[0] if context.pages else context.new_page() page = context.pages[0] if context.pages else context.new_page()
context.add_init_script(
"Object.defineProperty(navigator, 'webdriver', {get: () => undefined})"
)
page.goto(url, wait_until="domcontentloaded", timeout=30_000) page.goto(url, wait_until="domcontentloaded", timeout=30_000)
_accept_cookies(page) _accept_cookies(page)
_open_reviews(page) _open_reviews(page)