01/10/2018, 12:15
Lấy danh sách tất cả các link của một website (in guest role)
Hi, ace daynhauhoc
Em đang thắc mắc không biết có cách nào lấy danh sách tất cả link của một web site không? có anh chị nào biết góp ý với, ngôn ngữ gì cũng được…
Bài liên quan
sitemaps.xml
Google “site:xxx.com”
Bing
Crawler của python trên github có share
Tự viết crawler
Cách đơn giản nhất là đây http://www.convertcsv.com/url-extractor.htm
Có cách nào lấy tất cả các link của app của chính mình tạo ra, ví dụ như trong node js
lấy tất cả các link : app.get, app.post
Mục đích là để test security ấy mà
Bạn viết 1 script parse file router đó ra là được
Có thể dùng luôn regex của nodejs
Tương đối thôi, bởi vì có những link được tạo ra theo ngữ cảnh với những lệnh if hoặc case phức tạp. Cho nên cách test security là phải viết module làm test được nhúng vào ứng dụng của bạn trong quá trình dev, chứ không ai viết rời rồi dùng theo cách tiếp cận của các công ty bảo mật vì KHÔNG ĐỦ SỨC làm.