Картинки (загружаются в папку typo3temp)

[sever]

Добрый день всем!

Робот в любом случае проиндексирует контент, на который ссылаются открытые к индексированию страницы

а у меня вот не индексирует ... Страницы есть в поиске гугла и яндекса, а картинки проиндексированы только те, что лежат в папке www.my-site.com/uploads/.
БОльшая часть картинок лежит в папках typo3temp/pics/ и typo3temp/GB/
В robots.txt было указано Disallow: /typo3temp/

вчера добавил:
Аllow: /typo3temp/pics/
Аllow: /typo3temp/GB/

Как думаете - сработает?

Сообщение от sever

Добрый день всем!



а у меня вот не индексирует ... Страницы есть в поиске гугла и яндекса, а картинки проиндексированы только те, что лежат в папке www.my-site.com/uploads/.
БОльшая часть картинок лежит в папках typo3temp/pics/ и typo3temp/GB/
В robots.txt было указано Disallow: /typo3temp/

вчера добавил:
Аllow: /typo3temp/pics/
Аllow: /typo3temp/GB/

Как думаете - сработает?

Мой robots.txt
User-Agent: *
Disallow: /fileadmin/website/notimportant/
Disallow: /error-404-page/
Disallow: /t3lib/
Disallow: /typo3/
Disallow: /typo3_src/
Disallow: /typo3conf/
Disallow: /typo3temp/
Disallow: /*?id=*
Disallow: /*&type=98
Host: -------.ru
Sitemap: http://-------.ru/sitemap.xml


И тоже в индекс попадают не все картинки. Хотя их там много %70-80 от всех.
Думаю нужно смотреть в сторону того, как google и yandex индексируют картинки с точки зрения SEO и раскрутки...

[dmartynenko]

Очень много картинок будет из /typo3temp/, а Аllow кажется не все поисковики понимают (хотя 2012 год на дворе).

Попробуйте выборочно запретить из /typo3temp/
Disallow: /typo3temp/*.js
Disallow: /typo3temp/*.css
Disallow: /typo3temp/*.xml
Disallow: /typo3temp/*.html
Disallow: /typo3temp/*.txt
Disallow: /typo3temp/*.cache

[sever]

Сообщение от dmartynenko

... а Аllow кажется не все поисковики понимают (хотя 2012 год на дворе).
...

Яндекс точно должен понимать :

Новые правила обработки директив Allow и Disallow в файлах robots.txt 8.03.2012
Добрый день!

Уведомляем вас об изменениях в обработке директивы 'Allow' файла robots.txt, с помощью которого вы можете разрешить или запретить индексирование сайта поисковым роботом Яндекса.

По новым правилам, если страница сайта попадает под действие нескольких директив 'Allow' и/или 'Disallow', то будет применяться директива с наибольшей длиной префикса URL. При определении длины префикса спецсимвол '*' не учитывается.

Если на вашем сайте в robots.txt совместно используются директивы 'Allow' и 'Disallow', пожалуйста, проверьте их на соответствие новым стандартам. В этом вам поможет наша форма проверки robots.txt.

Подробнее об использовании директив вы можете прочитать в Помощи.

--
С уважением,
Яндекс.Вебмастер
http://webmaster.yandex.ru

Но похоже что у меня проблема в другом ...
На сайте есть страница с картинкой, предположим
http://mysite.com/page/
Картинка лежит по адресу
http://mysite.com/typo3temp/pics/1.jpg
Так вот когда поисковик обходит страницу, ему подставляется не правильный адрес картинки, а именно:
http://mysite.com/page/typo3temp/pics/1.jpg
Этот же неправильный путь я наблюдаю когда навожу мышью на ссылку в html коде страницы.

Подозреваю что проблема в RealUrl? Куда копать?

[dmartynenko]

Не в RealURL, и даже не в его настройке.

Нужно задать глобально в TS:
config.baseURL = http://example.com/
config.absRefPrefix = http://example.com/

Параметр absRefPrefix отвечает за то, что все пути генеряться полными, а не относительными. Сейчас у вас, скорее всего, в <img> src="typo3temp/pics/1.jpg", поэтому путь к картинке складывается из пути текущего URL+src.

[sever]

Спасибо!

Действительно, не было настройки absRefPrefix.
Установил - ссылки отображаются правильно

Посмотрим как на это отреагируют поисковики