汪凱

摘要：超聲波焊接工藝以其生產(chǎn)效率高、結(jié)合強(qiáng)度好的特點(diǎn)，被廣泛地應(yīng)用在汽車(chē)、醫(yī)療、電子等方面。本文對(duì)超聲波焊接參數(shù)在電源連接器生產(chǎn)應(yīng)用中常見(jiàn)的保持力問(wèn)題進(jìn)行研究，利用理論分析及正交試驗(yàn)驗(yàn)證的方法，尋找適合該產(chǎn)品的最佳參數(shù)，使電源連接器在超聲波焊接后滿足了保持力要求與外觀要求。

關(guān)鍵詞：超聲波焊接;電源連接器;參數(shù);保持力

隨著互聯(lián)網(wǎng)的高速發(fā)展和大數(shù)據(jù)時(shí)代的來(lái)臨，網(wǎng)絡(luò)招聘已經(jīng) 成為企業(yè)之間人才競(jìng)爭(zhēng)的主要手段。相對(duì)于傳統(tǒng)的線下招聘而言， 網(wǎng)絡(luò)招聘成本低、覆蓋面廣、易于發(fā)布信息、招聘信息種類(lèi)眾多 [1]，通過(guò)網(wǎng)絡(luò)平臺(tái)求職者還可以更快地與招聘者進(jìn)行溝通聯(lián)系， 節(jié)約了彼此之間的時(shí)間成本。同時(shí)由于“互聯(lián)網(wǎng) +”經(jīng)濟(jì)的蓬勃 發(fā)展，使得網(wǎng)絡(luò)招聘成為我國(guó)招聘市場(chǎng)的主流趨勢(shì)[2]。招聘信 息本身存在不同時(shí)段的時(shí)效性，不同政策的工資變化不同，冗余 度大，成效低，讓求職者很難匹配到自己心儀的工作。 本文使用網(wǎng)絡(luò)爬蟲(chóng)技術(shù)爬取三個(gè)招聘網(wǎng)站的招聘信息，將爬 取下來(lái)的招聘數(shù)據(jù)進(jìn)行智能可視化分析，發(fā)掘數(shù)據(jù)中隱藏的價(jià)值， 摸索網(wǎng)站招聘規(guī)律。通過(guò)得出結(jié)論，可以更有效地幫助求職者找 到適合自己的工作。

一、網(wǎng)絡(luò)爬蟲(chóng)技術(shù)概述

隨著大數(shù)據(jù)時(shí)代的來(lái)臨，互聯(lián)網(wǎng)上的數(shù)據(jù)容量爆炸性地增長(zhǎng)， 高性能的網(wǎng)絡(luò)搜索引擎以及定向的信息獲取的需求，使得網(wǎng)絡(luò)爬 蟲(chóng)技術(shù)逐漸成為人們研究的對(duì)象。網(wǎng)絡(luò)爬蟲(chóng)就是通過(guò)模擬瀏覽器 發(fā)出網(wǎng)絡(luò)請(qǐng)求，獲取網(wǎng)站服務(wù)器返回的響應(yīng)，并按照一定需求爬 取數(shù)據(jù)的腳本程序。網(wǎng)絡(luò)爬蟲(chóng)可以分為兩類(lèi)：通用爬蟲(chóng)和聚焦爬 蟲(chóng)。

1.1 通用爬蟲(chóng)概述

通過(guò)用戶初始規(guī)定的一個(gè)待爬取 URL 地址列表，爬蟲(chóng)從中 按順序爬取URL地址，通過(guò)DNS解析獲得到主機(jī)網(wǎng)頁(yè)的ip地址， 然后交給下載器去下載網(wǎng)頁(yè)，將采集成功的網(wǎng)頁(yè)保存到本地磁盤(pán) 中，并且將已爬取的 URL 地址做出標(biāo)志防止二次爬取，保存到 磁盤(pán)中的網(wǎng)頁(yè)又存在許多鏈接信息，再?gòu)闹凶ト?URL 地址放入 待爬取列表中去進(jìn)行分析。如果發(fā)現(xiàn)有未下的 url 就放在待抓取 url 隊(duì)列的列尾，從而等待調(diào)度下載。如此循環(huán)下載，待抓取隊(duì)列 為空時(shí)，爬蟲(chóng)就完成了對(duì)網(wǎng)頁(yè)的下載。

1.2? 聚焦爬蟲(chóng)概述

通用網(wǎng)絡(luò)爬蟲(chóng)所采集的網(wǎng)頁(yè)數(shù)據(jù)和正常用戶在瀏覽器中訪問(wèn) 的數(shù)據(jù)是一樣的，而在大多數(shù)情況在，這些網(wǎng)頁(yè)數(shù)據(jù)中有 90% 是 對(duì)用戶來(lái)說(shuō)是不需要的。聚焦爬蟲(chóng)則可以根據(jù)用戶的需求而去爬 取特定的一些內(nèi)容，是一種面向主題、面向需求的爬蟲(chóng)。本次論 文所使用的爬蟲(chóng)就是聚焦爬蟲(chóng)。

二、搭建 Scrapy 框架

2.1 Scrapy 框架

Scrapy 框架是 Python 語(yǔ)言開(kāi)發(fā)的，基于 Twisted 異步網(wǎng)絡(luò)框 架的開(kāi)源爬蟲(chóng)框架。用戶可以根據(jù)需求在 Scrapy 框架各個(gè)模塊中 編寫(xiě)好要爬蟲(chóng)的規(guī)則、存儲(chǔ)的結(jié)構(gòu)，就能快速、靈活地爬取 web 網(wǎng)站的數(shù)據(jù)。其主要的框架組件有以下幾個(gè)：

（1）Scrapy Engine（引擎）組件：負(fù)責(zé)各個(gè)組件之間的連接、 信號(hào)傳遞和數(shù)據(jù)通信，是整個(gè)框架組件的核心。 （2）Spiders（爬蟲(chóng)）組件：用來(lái)定制爬取 web 網(wǎng)頁(yè)的規(guī)則， 發(fā)出 Request 請(qǐng)求到Schedule（調(diào)度器），同時(shí)也接收Downloader（下載器） 發(fā)送過(guò)來(lái)的 Response 響應(yīng)，并從中提取到 item 字段所需要的數(shù) 據(jù)由引擎發(fā)送到 Item 管道，如果有需要根據(jù)的 url 鏈接，就繼續(xù) 提交給調(diào)度器。

（3）Schedule（調(diào)度器）：接收到爬蟲(chóng)組件發(fā)送過(guò)來(lái)的 Request請(qǐng)求，將請(qǐng)求進(jìn)行入隊(duì)列處理，進(jìn)而交給Downloader下載。 Scrapy 架構(gòu)圖如下所示，其中綠線表示數(shù)據(jù)流向。

圖 2 為 Scrapy 框架的工作流程圖。

三、 基于網(wǎng)絡(luò)爬蟲(chóng)的數(shù)據(jù)采集實(shí)驗(yàn)

本研究的實(shí)驗(yàn)基于 Python 軟件進(jìn)行，對(duì)北京計(jì)算機(jī)崗位招 聘信息進(jìn)行爬蟲(chóng)實(shí)驗(yàn)，其中爬蟲(chóng)程序運(yùn)行過(guò)程如圖 3。

運(yùn)行完畢之后，打開(kāi) navicat 可視化工具查看下載的招聘數(shù) 據(jù)內(nèi)容，如圖 4。

三個(gè)爬蟲(chóng)項(xiàng)目最大的區(qū)別在于各自網(wǎng)站數(shù)據(jù)傳輸?shù)?URL， 這是各不相同的，通過(guò)抓包分析能獲取到網(wǎng)站數(shù)據(jù)傳輸?shù)?Json 地 址，將其包裝到爬蟲(chóng)模塊中去發(fā)送請(qǐng)求。前程無(wú)憂和拉鉤網(wǎng)爬蟲(chóng) 項(xiàng)目的反爬蟲(chóng)設(shè)置、數(shù)據(jù)庫(kù)連接、數(shù)據(jù)清洗都與智聯(lián)招聘網(wǎng)爬蟲(chóng) 項(xiàng)目一致。執(zhí)行各自的爬蟲(chóng)名即可完成對(duì)網(wǎng)站數(shù)據(jù)的抓取。

四、結(jié)論

本文實(shí)現(xiàn)了使用Python的Scrapy爬蟲(chóng)框架對(duì)三個(gè)招聘網(wǎng) 站的招聘信息采集，本文從求職者的角度去進(jìn)行數(shù)據(jù)分析，利 用 Flask 框架簡(jiǎn)單，靈活的特點(diǎn)，完成后臺(tái)服務(wù)器的搭建和使用

SQLAlchemy 模塊對(duì)采集的數(shù)據(jù)進(jìn)行操作，實(shí)現(xiàn)可對(duì)不同崗位進(jìn) 行搜索分析的網(wǎng)頁(yè)。求職者可以通過(guò)圖形的分析結(jié)果進(jìn)而判斷招 聘信息是否合理，有利于更好地選擇工作。

參考文獻(xiàn)：

[1]杜玉帆 ， 杜瑩瑩 .“互聯(lián)網(wǎng) +”時(shí)代下網(wǎng)絡(luò)招聘行業(yè)發(fā)展 探析 [J].中國(guó)市場(chǎng) ，2018（11）：180-181.

[2]耿玉德，張?jiān)?招聘網(wǎng)站求職滿意度影響因素分析 ——以高校大學(xué)學(xué)生為例 [J]. 工業(yè)經(jīng)濟(jì)論壇 ，2018，05（05）：82-89.

[3]杜玉帆，杜瑩瑩.如何應(yīng)對(duì)網(wǎng)絡(luò)招聘中的虛假信息[J]. 中國(guó)市場(chǎng) ，2018，（11）：180-181.

[4] 北京大學(xué)天網(wǎng)搜索引擎 [EB/OL].http： ∥ pku.edu. cn，2019-05-03 [

5]趙禹婷.我國(guó)網(wǎng)絡(luò)招聘市場(chǎng)的現(xiàn)狀及提升對(duì)策研究[J]. 現(xiàn)代交際 ，2019（05）：243-244.

[6]畢寧寧 . 移動(dòng)互聯(lián)網(wǎng)環(huán)境下企業(yè)招聘渠道研究 [D]. 東北 師范大學(xué) ，2018.

[7]郭越. 虛假網(wǎng)絡(luò)招聘中的法律問(wèn)題研究[D].山西大學(xué) ，2018.

[8]鄭毅 . 某公司招聘管理系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn) [D].電子科技大 學(xué) ，2018.

[9]趙丹. 網(wǎng)絡(luò)招聘信息的分析與挖掘[D].貴州財(cái)經(jīng)大學(xué) ，2017.

[10]彩廣畏 . 從網(wǎng)絡(luò)招聘信息看我國(guó)人才需求狀況 [D]. 湖 南師范大學(xué) ，2017.

作者簡(jiǎn)介：

張婷，（1982.08.29-），女，岳陽(yáng)職業(yè)技術(shù)學(xué)院，414000，漢族， 湖南省岳陽(yáng)市，碩士，講師，大數(shù)據(jù)。