#важнознать, что парсить чужие сайты можно, даже если владельцу это не нравится. Споры и скандалы на эту тему происходят чуть ли не с появления интернета, маятник гулял по-разному, но сейчас явно на стороне роботов.

В США осенью было решение суда hiQ против LinkedIn и, насколько я понимаю, оно прецедентно – защищаться нельзя, автоматически собирать информацию с сайта можно. На прошлой неделе в России ФАС встал на сторону Робота Веры против Headhunter, там всё сложнее, но направление мысли такое же.