питання про файл robots.txt

[inf4mi]

Можливо не в тему. - сорі за флуд.
питання про файл robots.txt
За умовченням там такий файл:
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /editor/
Disallow: /help/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /mambots/
Disallow: /media/
Disallow: /modules/
Disallow: /templates/
Disallow: /installation/

Як правильно приписать  - щоб дозволити роботам сканувати ту інформацію, що на сайті (контент).
"Содержание"  - воно зберігається в папці components

Дякую!!!

[mr.Z]

Тобто? Що значить знаходиться в папці components?
Взагалі-то, файл robots.txt показує які папки не сканувати роботу.

[Dutch]

Можливо не в тему. - сорі за флуд.
питання про файл robots.txt
За умовченням там такий файл:
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /editor/
Disallow: /help/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /mambots/
Disallow: /media/
Disallow: /modules/
Disallow: /templates/
Disallow: /installation/

Як правильно приписать  - щоб дозволити роботам сканувати ту інформацію, що на сайті (контент).
"Содержание"  - воно зберігається в папці components

Дякую!!!

Нічого не потрібно прописувати.
В index.php вже вписано що потрібно роботу сканувати все що він знайде по лінках.
Єдине, що в цьому файлі ми блокуємо доступ до якоїсь інформації.
Постараюсь на днях дати більше інформації про robots.txt

[inf4mi]

Тобто? Що значить знаходиться в папці components?
Взагалі-то, файл robots.txt показує які папки не сканувати роботу.

Це було припущення!!!
Тоді так в яку папку чи куди вписуються всі статті, матеріали, що розміщені на сайті, щоб цю папку випадково не закрити для сканування!!!???

[Dutch]

Всі папки, які вписані у роботі - по своїй суті і виконують роль своєрідного ядра, у якомі міститься вся інформація.
Інформація, яку ви бачите на сайті побудованого на джумлі у такому спрощеному собі та абстрагованому варіанті (не будемо зараз вдаватись в усі тонкощі), викликається через index.php та index2.php, останній виводить тільки контент без оформлення та модулів (використовується для принту чи інших завдань).

Тобто, що можна сказати:
те що все вас цікавить, вже все зроблено.

Дещо про структуру Joomla:
1. User_manual - Joomla.org (pdf)
2. Все про структуру Joomla для адміністратора  - Joomla.org
3. Термінологія Joomla -  - Joomla.org
4. Форум по питаннях із роботою системи - Документація - Joomla.org

Про robots.txt:
1. Все о файле robots.txt по-русски
2. Как использовать инструмент анализа файла robots.txt? - Google
3. Что неправильного в моем файле robots.txt? Почему Яндекс не подчиняется тому, что там написано? - Yandex

[mr.Z]

Це було припущення!!!
Тоді так в яку папку чи куди вписуються всі статті, матеріали, що розміщені на сайті, щоб цю папку випадково не закрити для сканування!!!???

Всі статті зберігають не в папках, а на SQL-сервері і справді видаються через ті два файли, що описані вище. Тобто, для зчитування роботом контенту достатньо відкрити доступ лише для кореневої папки.

[Kris]

дякую