трансляция чужих данных у себя на сайте

[skrudjmakdak]

ну а причем здесь роботы?

[skrudjmakdak]

на сколько мне говорили, robots.txt нужен для поисковиков. чтобы не индескировали не нужное.. не?? я не прав??

[Deff]

skrudjmakdak,
Тут просто нун реально поработать с живым примером, траблы всплывают,
Типично на первых страницах бирж и магазинов, таблиц спецификаций: какие-то ссылки или селекторы, или формы, которые либо уведут в никуда, либо не вызовут никаких действий

[рони]

skrudjmakdak,
например этому http://developer.yahoo.com/ сервису откажут

[skrudjmakdak]

т.е. ты хочешь сказать, что они могут закрыть сервис? именно для него

[рони]

skrudjmakdak,
это ответ если запросить как обычный файл c сервиса яхо

"error": "Redirected to a robots.txt restricted URL: http://www.otcmarkets.com/otciq/ajax/getTopWombatTrades.json"

это как json

"error": "Invalid JSON document http://www.otcmarkets.com/otciq/ajax/getTopWombatTrades.json",

[skrudjmakdak]

а как ты посм. http://www.otcmarkets.com/robots.tst не открывает.. или подругому?

[рони]

skrudjmakdak,
непонял ваш сокр.

[skrudjmakdak]

как посмотрел?

[рони]

skrudjmakdak,
так
это проверочная консоль - тестить возможности сервиса