Robots.txt (to admin)

Можно Robots.txt сайта скорpектировать чтобы он страницы сайта отдавал и не требовал скачать счётчики рекламные снизу страницы на top.rambler.ru, top.germany.ru.... etc.?????

хотел скинуть форум для чтения в off-лаине.
Что за странный робот. txt?? Я хочу только страницы по линкам внутри этого сайта скинуть - а этот гад не хочет их отдавать если я линки на рекламные счётчики не качаю. А у меня с этих линков под сотню мегов всякой лабуды ненужной сливается... мне места жалко на винте. Вместе c десятком мег форумных страниц ещё сотни мег всякой дряни идет.

то Админ.
плиз robots.txt подредактируйте что ли...

Комментарии (2)

Войдите или зарегистрируйтесь, чтобы отправлять комментарии

Administrator

09/11/2002, 10:04

[quote="o0o0o"]Можно Robots.txt сайта скорpектировать чтобы он страницы сайта отдавал и не требовал скачать счётчики рекламные снизу страницы на top.rambler.ru, top.germany.ru.... etc.?????

то Админ.
плиз robots.txt подредактируйте что ли...[/quote]

В robots.txt написано Disalow /forum, так что если бы программа, к-й ты качаешь форум следовала указаниям robots.txt, то ты ничего не смог бы скачать.

Так что сражайся со своей программой, ну или используй
wget -r --no-parent http://www.russianbelgium.com/forum/

o0o0o

10/11/2002, 11:36

эта програмка - пятый Интернет Эксплорер.
A с ним сражаться бесполезно - у него только 2-3 параметра менять можно при использовании этой фичи - глубину ссылок задавать, да зарезать/разрешать слив со внешних сайтов ;((

Вгетом или телепортом скачать не проблема... но задача именно в том и состоит чтобы использовать штатные средства винды для просмотра страниц в офлаине.

То есть просьба подредактировать этот robot.txt чтобы он позволял скачивать форум роботами. По моему это не сильно трафик увеличит, если ночью кто-то будет форум сливать. Кроме меня, да может ещё 2-3 врятли кто этим ещё заниматься будет...
Или какие-то принципиальные проблемы есть?

У меня даже бабочки в животе от этого обсуждения, честно. Такое ощущение, что реально что-то хорошее начинается. Я уже на выходных смогу подъехать, напишу в личку, договоримся. Спасибо тебе за открытость и инициативу, это редкость ❤️

Решилась уйти в свободное плавание. Ищу напарницу по бьюти-направлению в Бельгии 🌸

ValenSky

06/06/2025, 11:21

У нас соседка начинающий фотограф. Она недавно делала портреты моей дочке на выпускной. Хочешь спрошу, может ей будет интересно вас поснимать? Заодно и она портфолио пополнит и вы получите классные кадры.

Решилась уйти в свободное плавание. Ищу напарницу по бьюти-направлению в Бельгии 🌸

Robots.txt (to admin)

Комментарии (2)

Комментарии

Опросы