20 lines
4.1 KiB
Plaintext
20 lines
4.1 KiB
Plaintext
|
§
|
|||
|
|
ŸÏdiî ã ó> — d Z ddlZddlmZ e¦ « ej ej ej e¦ « ¦ « ¦ « Zej ed¦ « Z
|
|||
|
|
ej e
|
|||
|
|
d¦ « Z ej e
|
|||
|
|
d¬¦ « ej e d¬¦ « g d¢Z
|
|||
|
|
d Zd
|
|||
|
|
Zd Zd Zd
|
|||
|
|
ZdZdZdZdZdZdZdZg d¢ZdZe› d�Z ej dd¦ « ¦ « dk Z g d¢Z d Z!d Z"d Z#ej e
|
|||
|
|
d ¦ « Z$d Z% ej d!d"¦ « Z& e' ej d#d$¦ « ¦ « Z( ej d%d¦ « ¦ « dk Z) ej d&d¦ « ¦ « dk Z* ej d'd(¦ « Z+ ej d)d*¦ « Z, e' ej d+d,¦ « ¦ « Z-d-Z.d.Z/d/Z0d0Z1d1Z2d2Z3d3Z4d4Z5d5Z6d6Z7d7Z8e› d8�Z9ej e
|
|||
|
|
d9¦ « Z:dZ;dS ):u9
|
|||
|
|
XiaoHongShu Scraper Configuration
|
|||
|
|
采集器�置文件
|
|||
|
|
é N)Ú load_dotenvÚdataÚ screenshotsT)Úexist_ok)ÚtitleÚ publish_timeÚlocationÚ
|
|||
|
|
comment_countÚ
|
|||
|
|
like_countÚ
|
|||
|
|
collect_countÚnote_url)é é )é é )r é )é é< r r é
|
|||
|
|
éd i, g à?g @é2 )u 验è¯�ç �u 访问过于频ç¹�u 页é�¢ä¸�å˜åœ¨u 验è¯�u æµ�é‡�异常u 安全验è¯�u 人机验è¯�u 滑å�—验è¯�zhttps://www.xiaohongshu.comz/user/profile/{user_id}ÚHEADLESSÚfalseÚtrue)z --no-sandboxz--disable-setuid-sandboxz---disable-blink-features=AutomationControlledi€ i8 zoMozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36z logs.jsoni' ÚHOSTz0.0.0.0ÚPORTÚ18085ÚSCREENSHOT_ON_ERRORÚENABLE_GIT_PULLÚ GIT_REPO_URLÚ Ú
|
|||
|
|
GIT_BRANCHÚmainÚAUTO_PULL_INTERVALÚ3600zdiv.user-notesz/div[class*='note-item'], section[class*='note']za[href*='/explore/']z)span[class*='title'], div[class*='title']z*div[class*='content'], span[class*='desc']z)div[class*='title'], span[class*='title']z'span[class*='time'], div[class*='time']z/span[class*='location'], div[class*='location']z0span[class*='comment'], button[class*='comment']z*span[class*='like'], button[class*='like']z-span[class*='collect'], button[class*='star']z/loginzauth_state.json)<Ú__doc__ÚosÚdotenvr ÚpathÚdirnameÚabspathÚ__file__ÚBASE_DIRÚjoinÚDATA_DIRÚSCREENSHOT_DIRÚmakedirsÚFIELDSÚPAGE_LOAD_DELAYÚNOTE_READ_DELAYÚNOTE_INTERVAL_DELAYÚUSER_SWITCH_DELAYÚTHREAD_MIN_DELAYÚ
|
|||
|
|
THREAD_OFFSETÚMAX_CONCURRENT_THREADSÚSCROLL_STEP_MINÚSCROLL_STEP_MAXÚSCROLL_PAUSE_MINÚSCROLL_PAUSE_MAXÚMAX_SCROLL_COUNTÚ
|
|||
|
|
RISK_KEYWORDSÚXIAOHONGSHU_BASE_URLÚUSER_PROFILE_URL_TEMPLATEÚgetenvÚlowerr Ú BROWSER_ARGSÚVIEWPORT_WIDTHÚVIEWPORT_HEIGHTÚ
|