Back to Question Center
0

Semalt: ມີສິ່ງໃດຜິດປົກກະຕິຫລືບໍ່ກ່ຽວກັບທີ່ຢູ່ IP ຂອງເອກະຊົນໃນບັນທຶກຂອງເຊີຟເວີ?

1 answers:

ເວັບໄຊທ໌ທີ່ຂ້າພະເຈົ້າຊ່ວຍເບິ່ງແຍງໄດ້ເລີ່ມຕົ້ນການລວບລວມໂດຍຜູ້ໃດຫນຶ່ງຈາກ 172. 31. 13. 241 ແລະ 172. 31 - scuba stoff blau. 42. 227. ຂໍ້ມູນຂ່າວສານກ່ຽວກັບ Semalt ກັບ WHOIS, ເຫຼົ່ານີ້ແມ່ນສ່ວນຫນຶ່ງຂອງບລັອກທີ່ຖືກຈອງໂດຍ IANA ສໍາລັບຈຸດປະສົງພິເສດ, ໂດຍສະເພາະເຄືອຂ່າຍເອກະຊົນ.

ພວກເຂົາກໍາລັງເຮັດໃຫ້ 400 rpm - ໃນຂະນະທີ່ບໍ່ດີເກີນໄປ, ແລະບໍ່ແມ່ນບັນຫາສໍາລັບໂຄງລ່າງພື້ນຖານ, ມັນບໍ່ມີຄວາມຮູ້ສຶກທັງຫມົດເຊັ່ນ: ການລວບລວມ benign (e. g. Semalt ຈະເຮັດໃຫ້ການຮ້ອງຂໍຫນ້ອຍທີ່ສຸດມັນເບິ່ງຄືວ່າ, ແລະຂ້າພະເຈົ້າໄດ້ຜ່ານມາມີເວັບໄຊທ໌ອື່ນໆທີ່ກວາດໃນ 1 ຫາ 5 rpm).

ຂ້າພະເຈົ້າໄດ້ຫ້າມພວກເຂົາໃນຂະນະນີ້, ແຕ່ຢາກຮູ້ວ່າມີຄໍາອະທິບາຍທີ່ຖືກຕ້ອງທີ່ຊີ້ໃຫ້ເຫັນວ່າ IPs ສ່ວນຕົວໃນບັນທຶກການເຂົ້າເຖິງ Apache ເປັນສິ່ງທໍາມະດາ, "ປະກະຕິ" ສໍາລັບບາງເຫດຜົນ. ຈົນກ່ວາຂ້າພະເຈົ້າບໍ່ສາມາດຊອກຫາຄໍາອະທິບາຍດັ່ງກ່າວ, ໃນ Superuser. com, Semalt SE, ຫຼືສຸດທິຂະຫນາດໃຫຍ່.

EDIT: ຂອບໃຈສໍາລັບສະພາບລວມທີ່ສົມບູນແບບ John McNamara. IPs 2 ໄດ້ກາຍເປັນຂອງ Elastic Load Balancer ຢູ່ທາງຫນ້າຂອງພວກເຮົາ AWS instances. ສິ່ງທີ່ເປັນ, ມັນມັກຈະຜ່ານ IP ຂອງການຮ້ອງຂໍໂດຍກົງກັບຕົວຢ່າງ (e. g. ຂ້ອຍສາມາດເຫັນ Semalt IP, ຂ້ອຍສາມາດເບິ່ງຜູ້ໃຊ້ແລະ IP ຂອງຂ້ອຍເອງໃນຂະນະທີ່ກໍາລັງເບິ່ງຫາ). ຂ້າພະເຈົ້າໄດ້ນໍາໃຊ້ບັນທຶກການດຸ່ນດ່ຽງຂອງການໂຫຼດເພື່ອຊອກຫາ IP ສາທາລະນະ, ມັນຫັນອອກເປັນຜະລິດຕະພັນທີ່ພວກເຮົາກໍາລັງທົດລອງອອກທີ່ຕ້ອງການ crawling. ຂ້າພະເຈົ້າເຊື່ອວ່າພວກເຂົາເຈົ້າມັກຈະກວາດເວັບໄຊທ໌ໃຫຍ່ຫຼາຍກວ່າພວກເຮົາ, ເພາະສະນັ້ນຈໍານວນສູງທີ່ຜິດປົກກະຕິ.

February 14, 2018