BG Development


Страници: (2) 1 [2]   ( Първото ново мнение ) Reply to this topicStart new topicStart Poll

> Python HTML parser
Gamma Goblin
Публикувано на: 21-04-2018, 17:13
Quote Post



Име:
Група: Потребител
Ранг: Почетен член

Мнения: 2844
Регистриран на: 21.02.18



QUOTE (stewie @ 21-04-2018, 14:53)
QUOTE (samominavam @ 21-04-2018, 13:33)
QUOTE (CPPlus @ 21-04-2018, 12:13)
Offtopic: Точно днес се зачетох в колко е легално да scrape-ваш/crawl-ваш сайтове

При мен случая е - ми нямаме API, вземете си информацията от сайта ни.

Добре сайта като е ваш и данните се зареждат от някъде, не може ли да достъпите "някъдето" по-доста по-елегантен начин ? Скрейпването е като искаш да крадеш другите.

да де ама интелектуалната кражба не е кражба


--------------------
https://www.rust-lang.org/
---
" Не може да си на висок пост без да си подкупен. Ще те махнат." - SuN Трола
PMEmail PosterUsers Website
Top
stewie
Публикувано на: 21-04-2018, 17:40
Quote Post



Име:
Група: Потребител
Ранг: Почетен член

Мнения: 5653
Регистриран на: 14.07.16



QUOTE (Gamma Goblin @ 21-04-2018, 18:13)
QUOTE (stewie @ 21-04-2018, 14:53)
QUOTE (samominavam @ 21-04-2018, 13:33)
QUOTE (CPPlus @ 21-04-2018, 12:13)
Offtopic: Точно днес се зачетох в колко е легално да scrape-ваш/crawl-ваш сайтове

При мен случая е - ми нямаме API, вземете си информацията от сайта ни.

Добре сайта като е ваш и данните се зареждат от някъде, не може ли да достъпите "някъдето" по-доста по-елегантен начин ? Скрейпването е като искаш да крадеш другите.

да де ама интелектуалната кражба не е кражба

Дам прочетох го все едно те крадът сами от себе си.

Иначе да, няма понятие като интелектуална кражба, което би издържало в съда.
PM
Top
TrustHavic
Публикувано на: 21-04-2018, 22:12
Quote Post



Име: Станимир
Група: Потребител
Ранг: Редовен член

Мнения: 402
Регистриран на: 30.04.14



и каква е разликата дали го четеш ти, или "код", който анализира данните и спестява още една работна заплата?
PMEmail Poster
Top
gat3way
Публикувано на: 22-04-2018, 13:05
Quote Post



Име:
Група: Потребител
Ранг: Почетен член

Мнения: 4249
Регистриран на: 22.06.12



Защо да е кражба това което е така или иначе публично достъпно и предвидено всеки да може да го гледа свободно. Виж ако имаше автентикация, регистрации, платени или не, това вече е друг въпрос. Със скрейпърите драмата е единствено че обикновено са написани криво и нещадящо и товарят зловещо сървъра, ако има нещо неетично в цялата работа, това е именно тази им склонност.
PMEmail Poster
Top
SuN
Публикувано на: 22-04-2018, 13:19
Quote Post


Group Icon
Име:
Група: Администратор
Ранг: Почетен член

Мнения: 9340
Регистриран на: 27.01.05



На wget винаги му слагах 1 или повече секунди да чака между заявките. Ама това е било за лична употреба и не съм бързал.


--------------------
Само аз не троля.
PMEmail Poster
Top
dedal
Публикувано на: 23-05-2018, 15:47
Quote Post



Име: Григор Колев
Група: Потребител
Ранг: Посетител

Мнения: 109
Регистриран на: 17.11.10



beautifulsoup е мн. добър за парсване и извличане.
Но наистина приспиват го примерно да направи 100 цикала и да почине 10 минути.
Ползвал съм го за тест на сървър. И мн. може да натовари.
PMEmail Poster
Top
1 потребители преглеждат тази тема в момента (1 гости, 0 анонимни потребители)
Потребители, преглеждащи темата в момента:

Topic Options Страници: (2) 1 [2]  Reply to this topicStart new topicStart Poll

 


Copyright © 2003-2019 | BG Development | All Rights Reserved
RSS 2.0