一区二区三区中文国产亚洲_另类视频区第一页_日韩精品免费视频_女人免费视频_国产综合精品久久亚洲

千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機構(gòu)

手機站
千鋒教育

千鋒學習站 | 隨時隨地免費學

千鋒教育

掃一掃進入千鋒手機站

領(lǐng)取全套視頻
千鋒教育

關(guān)注千鋒學習站小程序
隨時隨地免費學習課程

當前位置:首頁  >  技術(shù)干貨  > 教你用Python爬蟲自制有道翻譯詞典

教你用Python爬蟲自制有道翻譯詞典

來源:千鋒教育
發(fā)布人:小千
時間: 2021-02-04 09:00:00 1612400400

      Python爬蟲能夠?qū)崿F(xiàn)的功能有很多,就看你如何去使用它了,今天小千就來教大家如何去利用Python爬蟲自制一個有道翻譯詞典。

      首先打開有道翻譯頁面,嘗試輸入hello,就出現(xiàn)翻譯了,可以自動翻譯。有同學寫了爬蟲去請求上面的 的鏈接,宋姐姐要說錯啦。因為這個是通過ajax實現(xiàn)的。如何實現(xiàn)的呢?谷歌瀏覽器F12或者右鍵選擇->檢查.

1

      大家點開請求可以看到下圖 :

2

      接下來重點來了,難點來了?。?!salt,sign,ts,bv表示什么?如果不攜帶可不可以?

      其實這個是js中創(chuàng)建出來的并在每次請求的時候加載到這里的?怎么知道這個值是什么?這時我們就要查看源代碼了,右鍵--->查看源代碼:

3

      這個文件的js就是我們要找的,點開js文件看看是啥?

4

      哇塞這個是什么鬼?直接嚇跑大家。此時考驗到家耐心和信心的地方到啦 ,我們有工具可以直接格式化這些的,站長工具點開就可了,切記將所有的代碼復(fù)制粘貼到里面直接格式化就可以。將格式化好的拷貝到你的pycharm中,然后strl+f查找‘sign’。(切記按照步驟)

5

6

7

      可以分析出:

      ts:就是時間戳,而js的時間戳是13位如:1583934479084,python的time.time()是浮點型的如:1583934450.832445 ,要想得到j(luò)s的時間戳就要是: r= str(int(time.time() * 1000))

      bv:n.md5(navigator.appVersion) 表示瀏覽器版本進行md5加密

      salt:r + parseInt(10 * Math.random(), 10); 表示的是時間戳拼接一個0-9的隨機數(shù)

      python實現(xiàn)就是:f = r + str(random.randint(0, 9))

      sign:n.md5("fanyideskweb" + e + i + "Nw(nmmbP%A-r6U3EUn]Aj")

      其中e表示要查詢的內(nèi)容,此時如果我們要查詢長城則e=‘長城’

      i就是你的salt值,與前面的常量值 “fanyideskweb” 和后面的常量值“Nw(nmmbP%A-r6U3EUn]Aj” 進行拼接后使用md5加密

      補充python的md5加密:

8

      此時我們需要的內(nèi)容全部準備完畢!

      通過請求獲取的返回結(jié)果response是json格式的,此時可以使用bejson.com 進行格式化

9

      所以我們通過json就方便提取數(shù)據(jù)了,其中‘tgt’就是翻譯后的內(nèi)容。

10

      不說那么多了上代碼:

11

      大家將代碼運行一下看到:{“errorCode”:50} 的結(jié)果沒有翻譯成功!這是為啥呢?

      就是大家在爬取的時候?qū)㈡溄樱簎rl = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule'

      中的‘_o’務(wù)必切記去除掉,這個也是有道反扒的一種機制。(這個可能就是困擾很多同學的地方)

      學習Python,可以參考千鋒Python培訓班推出的Python開發(fā)學習路線,結(jié)合千鋒Python培訓機構(gòu)名師精心錄制的全套Python視頻教程,可以讓你對學習Python需要掌握的知識有個清晰的了解,并快速入門Python開發(fā)。千鋒Python培訓機構(gòu)視頻教程分為三個大塊:Python基礎(chǔ)視頻教程、Python高級視頻教程、Python高手晉級視頻教程。視頻講解通俗易懂,入門Python開發(fā)僅用此套視頻足矣。想要獲取免費Python學習路線和學習資料可以添加我們的Python技術(shù)交流qq群:790693323  加群找群管理領(lǐng)取即可,Python相關(guān)技術(shù)問題也可以加群解決,等你來哦~~~~

tags:
聲明:本站稿件版權(quán)均屬千鋒教育所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
10年以上業(yè)內(nèi)強師集結(jié),手把手帶你蛻變精英
請您保持通訊暢通,專屬學習老師24小時內(nèi)將與您1V1溝通
免費領(lǐng)取
今日已有369人領(lǐng)取成功
劉同學 138****2860 剛剛成功領(lǐng)取
王同學 131****2015 剛剛成功領(lǐng)取
張同學 133****4652 剛剛成功領(lǐng)取
李同學 135****8607 剛剛成功領(lǐng)取
楊同學 132****5667 剛剛成功領(lǐng)取
岳同學 134****6652 剛剛成功領(lǐng)取
梁同學 157****2950 剛剛成功領(lǐng)取
劉同學 189****1015 剛剛成功領(lǐng)取
張同學 155****4678 剛剛成功領(lǐng)取
鄒同學 139****2907 剛剛成功領(lǐng)取
董同學 138****2867 剛剛成功領(lǐng)取
周同學 136****3602 剛剛成功領(lǐng)取
相關(guān)推薦HOT
為什么sql語句不支持關(guān)系代數(shù)中的除法?

為什么SQL語句不支持關(guān)系代數(shù)中的除法1. SQL和關(guān)系代數(shù)的關(guān)系:SQL是一種基于關(guān)系代數(shù)的查詢語言,它的設(shè)計初衷是為了能夠以一種更接近自然語言...詳情>>

2023-10-14 04:07:35
sql 怎么根據(jù)父id查詢下三級子集?

一、概述處理樹形數(shù)據(jù)時,我們常常需要根據(jù)父ID查詢其下的子集。本文將引導(dǎo)您如何使用SQL進行這一操作,尤其是查詢下三級子集。二、查詢方法詳...詳情>>

2023-10-14 03:59:07
什么是分治算法,和遞歸有什么關(guān)系?

分治算法是什么分治算法是一種算法設(shè)計思想,其主要思想是將一個復(fù)雜的問題分解為兩個或更多相同或相似的子問題,直到子問題簡單到可以直接解決...詳情>>

2023-10-14 03:22:51
為什么微服務(wù)一定要上Docker?

為什么微服務(wù)一定要上Docker微服務(wù)作為一種軟件架構(gòu)模式,需要考慮的因素包括服務(wù)的獨立性、可擴展性、可維護性和可移植性等。這其中,Docker的...詳情>>

2023-10-14 03:15:33
C++的traits技術(shù)到底是什么?

在C++編程中,traits是一種編程技巧,其主要目的是在編譯時提供關(guān)于類型的額外信息。它可以將類型的一些特性(如其關(guān)聯(lián)類型、屬性、函數(shù)等)抽...詳情>>

2023-10-14 03:00:03