LINUX.ORG.RU

Google реализовала фунциональность для запрета сканирования сайтов роботами нейросетей

 , ,


0

1

Компания Google сделала возможность запретить сканирование сайта роботами, использующимися для обучения нейросетей компании.

Скрыть содержимое сайта можно от роботов Bard и VertexAI, при этом такой запрет не повлияет на индексирование сайта самим поисковиком. Для этого нужно добавить в robots.txt соответствующую запись.

С расширением базы моделей ИИ Google планирует автоматически расширять и возможность запрета индексации сайта этими ИИ.

>>> Перечень всех ботов и способы их отключения

Ранее в августе этого года подобную функицональность представила компания OpenAI, реализовав запрет индексации сайта ботами ChatGPT.

>>> Подробности

★★★★★

Проверено: maxcom ()
Последнее исправление: maxcom (всего исправлений: 2)

Правда-правда, не будем сканировать. А вообще, интересно, зачем сканировать несколько раз для разных целей, если можно обучать уже на имеющихся данных для поисковика

Logopeft ★★
()
Ответ на: комментарий от Logopeft

Правда-правда, не будем сканировать.

Вставляешь в robots.txt запреты. Приходит робот. Видит

Disallow: /
... и такой
11010000 10010100 11010000 10110000 00100000 11010001 10000010 11010000 10110010 11010000 10111110 11010001 10001110 00100000 11010000 10110110 00100000 11010000 10111100 11010000 10110000 11010001 10000010 11010001 10001100 00101110 00101110 00100001

И весь опечаленный уходит восвояси.

Smacker ★★★★★
()
Последнее исправление: Smacker (всего исправлений: 2)
Ответ на: комментарий от Logopeft

Так в свой поисковик они запрет (от ‘чужих’ роботов) уже ввели. Но эту инфу они (чужие роботы) могут взять напрямую с сайта … вот и пытаються это насадить не посредственно на сайты.

Интересно если я это встрою в свой сайт гугл будет платить за это…

mx__ ★★★★★
()
Ответ на: комментарий от mx__

Верить в то, что всякие роботы будут добросовестно следовать инструкциям в robots.txt это всё равно как верить, что одинокий мужчина не будет писать в раковину.

Smacker ★★★★★
()
Ответ на: комментарий от Smacker

Я так понял Вы случайно написали мне так как обращались к Гуглу.

mx__ ★★★★★
()

Действительно - нафиг эту конкуренцию…

Nicklubert
()
Ответ на: комментарий от GAMer

А, интересно, как собиралась статистика?

Видел их поведение в сильно нетрезвом виде, когда очень хотелось в занятый туалет.

question4 ★★★★★
()
Ответ на: комментарий от alex1101

Полно. А еще мужики часто руки моют только тогда, когда кто-то еще в сортире есть, типа чтобы быдлом не казаться. А в обычном режиме не моют, ибо пох.

Zhbert ★★★★★
() автор топика
Ответ на: комментарий от alex1101

Меня еще знаешь что выбешивало всегда? Что они больные ходят и тянут свои потные ладошки все равно. Мало того, что ты сидишь локоть в локоть с сопливым чихающим дятлом, так еще и полапать тебя он тянется, когда приходит. А когда я отказывал — обижались, мол не уважаю что ли. Дебилы, пелять.

Хорошо, что я больше в офисе не работаю…

Zhbert ★★★★★
() автор топика
Ответ на: комментарий от Zhbert

типа чтобы быдлом не казаться

Я-то думал, что это квантовая физика и эффект наблюдателя, а тут вон оно чё.

ratvier ★★
()
Ответ на: комментарий от Zhbert

Оооо, потные руки это прям бесит.

Ещё бесит, когда пытаются произвести впечатление крепышей и пыжатся сдавить кисть до состояния фарша. Или наоборот, протягивают вялую безжизненную лапку.

Ну их нахрен, эти рукопожатия.

alex1101
()
Ответ на: комментарий от alex1101

У меня был такой знакомый — всегда руку жал со всей дури и долго. Секунд 5. Стоит, лыбится и жмет.

Zhbert ★★★★★
() автор топика
Ответ на: комментарий от alex1101

Я до этого момента даже не подозревал, что на свете существует такое быдло, что ссыт в раковины

Мля, по этому делу даже соцопросы проводят:

https://glazunov.am/blog/ssyte-li-vy-v-rakovinu

Сорок перцентов - это не мало!

Xintrea ★★★★★
()
Ответ на: комментарий от GAMer

«Поисковым роботам на сайте в раковину не ссать!»

Irma ★★
()
Ответ на: комментарий от Xintrea

Сорок перцентов - это не мало!

«Только покойник не ссыт в рукомойник!»
Народная мудрость.

GAMer ★★★★★
()

Лучше бы они запилили функционал, когда нейросеть запоминает откуда она взяла информацию и сопровождала свой текст ссылками на ресурсы. Это было бы честно и правильно.

Xintrea ★★★★★
()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.