Предлагаем вам ознакомится с видео уроком по работе с программой a-parser - сбор форумов phpbb.
Не секрет, что собрать качественную базу не так то просто - и мы приготовили данный видео материал для того, чтобы вы смогли успешно собирать форумы, а точнее ссылки на главные страницы форумов. Для этого мы будем использовать фильтры и регулярные выражения.
Для особо ленивых само регулярное выражение прикрепляем ниже.
Для самых ленивых полностью настроенный пресер (код пресета) тоже прикрепляем ниже.
Видео урок:
Регулярка для сбора:
index\.php[^$]*
Текст запросов:
Powered by phpBB
Список форумов
Русская поддержка phpBB
Удалить cookies конференции
Board index
List of forums
ACTIVE TOPICS
Topics
phpBB Limited
phpBB Group
phpBB.pl
phpBB.com
Код пресета:
eyJwcmVzZXQiOiJhc2sgXHUwNDQzXHUwNDQwXHUwNDNlXHUwNDNhIiwidmFsdWUi
OnsicHJlc2V0IjoiYXNrIFx1MDQ0M1x1MDQ0MFx1MDQzZVx1MDQzYSIsInBhcnNl
cnMiOltbIlNFOjpBc2siLCJhc2sgcGhwYmIiLHsidHlwZSI6ImZpbHRlciIsInJl
c3VsdCI6WyJzZXJwIiwibGluayJdLCJmaWx0ZXJUeXBlIjoicmVtYXRjaCIsInZh
bHVlIjoiaW5kZXhcXC5waHAiLCJvcHRpb24iOiIifSx7InR5cGUiOiJ1bmlxdWUi
LCJyZXN1bHQiOlsic2VycCIsImxpbmsiXSwidW5pcXVlVHlwZSI6ImRvbWFpbiIs
InVuaXF1ZUdsb2JhbCI6dHJ1ZX1dXSwicmVzdWx0c0Zvcm1hdCI6IiRwMS5wcmVz
ZXQiLCJyZXN1bHRzU2F2ZVRvIjoiZmlsZSIsInJlc3VsdHNGaWxlTmFtZSI6ImFz
ay1waHBiYi0kZGF0ZWZpbGUuZm9ybWF0KCkudHh0IiwiYWRkaXRpb25hbEZvcm1h
dHMiOltdLCJyZXN1bHRzVW5pcXVlIjoibm8iLCJxdWVyaWVzRnJvbSI6InRleHQi
LCJxdWVyeUZvcm1hdCI6WyIkcXVlcnkge251bToxOjEwMDB9Il0sInVuaXF1ZVF1
ZXJpZXMiOmZhbHNlLCJzYXZlRmFpbGVkUXVlcmllcyI6ZmFsc2UsIml0ZXJhdG9y
T3B0aW9ucyI6eyJvbkFsbExldmVscyI6ZmFsc2UsInF1ZXJ5QnVpbGRlcnNBZnRl
ckl0ZXJhdG9yIjpmYWxzZSwicXVlcnlCdWlsZGVyc09uQWxsTGV2ZWxzIjpmYWxz
ZX0sInJlc3VsdHNPcHRpb25zIjp7Im92ZXJ3cml0ZSI6ZmFsc2UsIndyaXRlQk9N
IjpmYWxzZX0sImRvTG9nIjoibm8iLCJsaW1pdExvZ3NDb3VudCI6IjAiLCJrZWVw
VW5pcXVlIjoiTm8iLCJtb3JlT3B0aW9ucyI6ZmFsc2UsInJlc3VsdHNQcmVwZW5k
IjoiIiwicmVzdWx0c0FwcGVuZCI6IiIsInF1ZXJ5QnVpbGRlcnMiOltdLCJyZXN1
bHRzQnVpbGRlcnMiOlt7InNvdXJjZSI6WzAsWyJzZXJwIiwibGluayJdXSwidHlw
ZSI6InJlZ2V4UmVwbGFjZSIsImFycmF5Ijoic2VycCIsInJlZ2V4IjoiaW5kZXhc
XC5waHBbXiRdKiIsInJlZ2V4VHlwZSI6bnVsbCwicmVwbGFjZSI6ImluZGV4LnBo
cCIsInRvIjoibGluayJ9XSwiY29uZmlnT3ZlcnJpZGVzIjpbXSwicnVuVGFza09u
Q29tcGxldGUiOm51bGwsInVzZVJlc3VsdHNGaWxlQXNRdWVyaWVzRmlsZSI6ZmFs
c2UsInJ1blRhc2tPbkNvbXBsZXRlQ29uZmlnIjoiZGVmYXVsdCIsInRvb2xzSlMi
OiIiLCJwcmlvIjo1LCJyZW1vdmVPbkNvbXBsZXRlIjpmYWxzZSwiY2FsbFVSTE9u
Q29tcGxldGUiOiIiLCJxdWVyaWVzIjoiUG93ZXJlZCBieSBwaHBCQlxuXHUwNDIx
XHUwNDNmXHUwNDM4XHUwNDQxXHUwNDNlXHUwNDNhIFx1MDQ0NFx1MDQzZVx1MDQ0
MFx1MDQ0M1x1MDQzY1x1MDQzZVx1MDQzMlxuXHUwNDIwXHUwNDQzXHUwNDQxXHUw
NDQxXHUwNDNhXHUwNDMwXHUwNDRmIFx1MDQzZlx1MDQzZVx1MDQzNFx1MDQzNFx1
MDQzNVx1MDQ0MFx1MDQzNlx1MDQzYVx1MDQzMCBwaHBCQlxuXHUwNDIzXHUwNDM0
XHUwNDMwXHUwNDNiXHUwNDM4XHUwNDQyXHUwNDRjIGNvb2tpZXMgXHUwNDNhXHUw
NDNlXHUwNDNkXHUwNDQ0XHUwNDM1XHUwNDQwXHUwNDM1XHUwNDNkXHUwNDQ2XHUw
NDM4XHUwNDM4XG5Cb2FyZCBpbmRleFxuTGlzdCBvZiBmb3J1bXNcbkFDVElWRSBU
T1BJQ1NcblRvcGljc1xucGhwQkIgTGltaXRlZFxucGhwQkIgR3JvdXBcbnBocEJC
LnBsXG5waHBCQi5jb20iLCJjYXRlZ29yeSI6W119LCJwYXJzZXJzQ29uZlByZXNl
dHMiOnsiU0U6OkFzayI6eyJhc2sgcGhwYmIiOnsicHJveHlyZXRyaWVzIjoiMTAi
LCJ1c2Vwcm94eSI6ZmFsc2UsInF1ZXJ5Zm9ybWF0IjoiJHF1ZXJ5IiwiZm9ybWF0
cmVzdWx0IjoiJHNlcnAuZm9ybWF0KCckbGlua1xcbicpIiwicHJveHliYW5uZWRj
bGVhbnVwIjoiNjAwIiwidGltZW91dCI6IjYwIiwicmVxdWVzdGRlbGF5IjoiMCIs
InByb3h5Q2hlY2tlciI6IioiLCJwYWdlX2NvdW50IjoiMTAiLCJleHRyYXF1ZXJ5
IjoiIn19fX0=
Похожие новости
А-parser - Как последовательно собрать три разных..