Hướng dẫn [v14.0.6 - 23/7/2019] HttpRequest cho người mới bắt đầu - Ví dụ, hình ảnh chi tiết

Thým inbox 4rum cho iêm cái URL domain cụ thể của thým iêm mới giúp được chứ úp mở thế kia thì sao mà làm để giúp thým được ? :v

 

Vấn đề này nếu thým search Google với từ khoá "get size file google drive" thì sẽ khó tìm ra câu trả lời nhoé bởi nếu làm theo phương pháp thông thường thì request trả về (request bởi bất cứ UDF hay hàm get file, get size nào) đều không có Content-Length → không lấy được size.

Nhưng iêm có một mẹo nhỏ rất hữu ích này là thým request với Header Range-Byte thì nó sẽ trả về một Content-Range có chứa size của file:

​

Dùng StringRegExp tách ra là xong, đơn giản hiệu quả

​

Code mẫu:

Mã (AutoIt):

#include <_HttpRequest.au3>
$url = "https://drive.google.com/uc?export=download&id=13LdcS7Y65rRp5G6wZmPxuufpe_lftSBS"
$rq = _HttpRequest(1, $url, '', '', '', 'Range: bytes=0-0')
MsgBox(4096, 'Response Header',  $rq)
$size = StringRegExp($rq, '(?m)Content-Range:.*?\/(\d+)$', 1)
If @error Then Exit MsgBox(4096, 'Lỗi', 'Không lấy được size')
MsgBox(4096, 'Size', $size[0] & ' bytes')

 

À, sorry thým nhoé, không phải do cookie mà là do cái hàm _HTMLDecode trong UDF iêm không hiểu sao iêm kiểm tra lại thì thấy thiếu hàm, đáng lẽ là: StringSplit(BinaryToString($sChrEnt)) mà khi iêm xem trong UDF thì chỉ có StringSplit($sChrEnt) nên nó ra sai => &amp; lẽ ra phải decode ra dấu & mà nó ra rỗng => cái link tải bị decode sai :v Thým tải UDF _HttpRequest iêm mới fix bên dưới xài đỡ nhoé. Cảm ơn thým, nhờ thým mà phát hiện ra cái bug nhảm này :p

Bên cạnh đó thằng 9soundclouddownloader.com nó mới nâng cấp lên https với nó yêu cầu phải có header Referer mới lấy link tải được nên code có chút thay đổi nhoé:



Code:

Mã (AutoIt):

#include <_HttpRequest.au3>

$URL = 'https://soundcloud.com/afkdubstep/afk-x-carbin-boss-ft-cody-ray-4'
;--------------------------------------------------------------
$rq1 = _HttpRequest(2, 'https://9soundclouddownloader.com/')
$csrfmiddlewaretoken = StringRegExp($rq1, "'csrfmiddlewaretoken' value='(.*?)'", 1)
$rq2 = _HttpRequest(2, 'https://9soundclouddownloader.com/download-sound-track', 'csrfmiddlewaretoken=' & $csrfmiddlewaretoken[0] & '&sound-url=' & $URL, '', 'https://9soundclouddownloader.com/')
;--------------------------------------------------------------
$InfoDownload = StringRegExp($rq2, '(?ism)<i>([^<]*?)</i>\h*\R\h*<a href="(.*?)".*?>Download Track', 3)
If @error Then Exit MsgBox(4096, 'Lỗi', 'Không lấy được link')
_ArrayDisplay($InfoDownload)

$Link = _HTMLDecode($InfoDownload[1])
$FileName = $InfoDownload[0]

ShellExecute($Link)

 

iêm check thử khi login từ chính trang chủ: https://www.linkedin.com
hoặc login từ: https://www.linkedin.com/m/login/
thì nó đều phải qua cái request POST https://www.linkedin.com/li/track
nên iêm có thể suy ra được phải request thêm thằng này nữa (có lẽ nó liên quan đến cái đoạn vệt sáng chạy qua chạy lại). Cơ mà data2send của nó khá phức tạp:

Mã (Text):

[{"eventInfo":{"topicName":"NavigationEvent","eventName":"NavigationEvent","appId":"com.linkedin.flagship3.d_web"},"eventBody":{"requestHeader":{"pageKey":"d_flagship3_login","path":"https://www.linkedin.com/m/login/","referer":null,"interfaceLocale":"en_US"},"header":{"clientApplicationInstance":{"applicationUrn":"urn:li:application:(voyager-web,voyager-web)","version":"1.1.1781","trackingId":[-50,-37,-34,-108,-95,-32,65,110,-123,-18,-51,98,-42,125,-26,124]},"pageInstance":{"pageUrn":"urn:li:page:d_flagship3_login","trackingId":"edeHFRGgR+26aHvz2Y2p6g=="},"time":1512892497414},"previousPageInstance":null,"triggerControlUrn":null,"triggerControlTrackingId":null}},{"eventInfo":{"topicName":"PageViewEvent","eventName":"PageViewEvent","appId":"com.linkedin.flagship3.d_web"},"eventBody":{"requestHeader":{"pageKey":"d_flagship3_login","path":"https://www.linkedin.com/m/login/","referer":null,"interfaceLocale":"en_US"},"header":{"pageInstance":{"pageUrn":"urn:li:page:d_flagship3_login","trackingId":"edeHFRGgR+26aHvz2Y2p6g=="},"time":1512892497418,"clientApplicationInstance":{"applicationUrn":"urn:li:application:(voyager-web,voyager-web)","version":"1.1.1781","trackingId":[-50,-37,-34,-108,-95,-32,65,110,-123,-18,-51,98,-42,125,-26,124]}},"pageType":"ajax","trackingInfo":{"0":"unknown","1":"phone_web","2":"1.1.1781","3":"UNK","4":"unknown","5":"en_US","10":"1512892497417","osVersion":"unknown","osName":"phone_web","appVersion":"1.1.1781","carrier":"UNK","deviceModel":"unknown","locale":"en_US","clientTimestamp":"1512892497417"}}},{"eventInfo":{"eventName":"ExternalTrackingPageViewEvent","appId":"com.linkedin.flagship3.d_web"},"eventBody":{"pageViewPageKey":"d_flagship3_login","pageViewPath":"/m/login/","initiator":"APP","providers":["COMSCORE"],"requestHeader":{"pageKey":"d_flagship3_login"},"samplingFraction":1}},{"eventInfo":{"topicName":"BPRClientRenderEvent","eventName":"BPRClientRenderEvent","appId":"com.linkedin.flagship3.d_web"},"eventBody":{"requestHeader":{"path":"https://www.linkedin.com/m/login/","pageKey":"d_flagship3_login","referer":null,"interfaceLocale":"en_US"},"header":{"pageInstance":{"pageUrn":"urn:li:page:d_flagship3_login","trackingId":"edeHFRGgR+26aHvz2Y2p6g=="},"time":1512892497422,"clientApplicationInstance":{"applicationUrn":"urn:li:application:(voyager-web,voyager-web)","version":"1.1.1781","trackingId":[-50,-37,-34,-108,-95,-32,65,110,-123,-18,-51,98,-42,125,-26,124]}},"bprPageInstance":{"pageUrn":"urn:li:page:bpr","trackingId":"GwwBDcahQrO49TCJXad1LQ=="},"clientPageInstance":{"pageUrn":"urn:li:page:d_flagship3_login","trackingId":"edeHFRGgR+26aHvz2Y2p6g=="}}},{"eventInfo":{"topicName":"LixTreatmentsEvent","eventName":"LixTreatmentsEvent","appId":"com.linkedin.flagship3.d_web"},"eventBody":{"requestHeader":{"path":"https://www.linkedin.com/m/login/","pageKey":"d_flagship3_login","referer":null,"interfaceLocale":"en_US"},"header":{"pageInstance":{"pageUrn":"urn:li:page:d_flagship3_login","trackingId":"edeHFRGgR+26aHvz2Y2p6g=="},"time":1512892497651,"clientApplicationInstance":{"applicationUrn":"urn:li:application:(voyager-web,voyager-web)","version":"1.1.1781","trackingId":[-50,-37,-34,-108,-95,-32,65,110,-123,-18,-51,98,-42,125,-26,124]}},"urns":[{"urnId":"","urnType":"guest","treatments":[{"experimentId":1717395,"treatmentIndex":0,"segmentIndex":1},{"experimentId":1708766,"treatmentIndex":0,"segmentIndex":2},{"experimentId":1718292,"treatmentIndex":4,"segmentIndex":1},{"experimentId":1715837,"treatmentIndex":0,"segmentIndex":1}]}]}}]

nên cần phải tốn nhiều thời gian để phân tích đây :v thým tìm hiểu thử đi chứ iêm nhìn vô là thấy đau não rồi

 

@htclub Vậy là đã ra nguyên nhân là do WinXP. iêm xoá bớt những cmt ở trên để tránh loãng bài nhoé. Nói tóm lại là WinHttp trên WinXP hiện giờ chỉ còn support khá ít trang https. Không chỉ WinHttp mà khi lướt web trên XP, những trang https thường cũng đều có báo lỗi: Https:MisMatch hay Https-NoRevo...gì đó, lâu quá iêm quên mất rồi :v Vấn đề WinXP iêm sẽ thêm một ghi chú ở đầu bài viết cho thým nào vẫn còn đang sử dụng.

 

Cấu trúc _HttpRequest:

Mã (AutoIt):

_HttpRequest($iReturn, $sURL, $sData2Send = '', $sCookie = '', ...)

Thým nạp cái Cookie thým đã lưu vào tham số $sCookie là xong, ví dụ:

Mã (AutoIt):

$Cookie = FileRead('cookie.txt')
$data = _HttpRequest('http://abc.com', '', $Cookie)

 

- Donotcache chẳng qua là timestamp thôi, để ý thế này: nếu 1 dãy số bắt đầu bằng 15 (hiện tại là 15, sau này có thể là 16), độ dài dãy số là 10 ký tự hoặc 13 ký tự thì khả năng rất cao nó chính là timestamp.

+ Độ dài dãy số là 10 thì là timestamp lấy đến Giây.
+ Độ dài là 13 thì là timestamp lấy đến mili Giây.
Trong UDF đã có sẵn hàm _TimeStampUNIX để lấy timestamp rồi.​

- Còn mã hoá mật khẩu thì liên quan đến javascript tí, có thể dùng hàm _JS_Execute trong UDF để giải.

Còn cụ thể thì thým có thể liên lạc với thým @duc https://www.facebook.com/vanducdmp, thým ấy đã làm full Steam rồi nè, bồi dưỡng vài ly cà phê thým ấy giúp cho