課程詳情:
圍繞科研數據獲取、數據清洗和數據分析的編程技術培訓。和盈邀請你的參與。
本次培訓主要覆蓋了四部分內容。 Stata 編程、Python 爬蟲、 ArcGIS 應用和因果推斷計量經濟學與 Stata 實現。旨在讓學員熟練掌握 Stata 數據的讀取、數據的清洗和處理、網絡數據讀寫;掌握 Python 爬蟲,并能獨立編寫爬蟲程序,使用ArcGIS 進行地理信息數據管理、展示與分析等實用技術,了解應用計量經濟學中的因果推斷原理與 Stata 實現。
我們將采取實例教學,讓大家將所學技巧與科研過程中遇到的實際問題相結合,學了就能用!助您成為數據獲得、數據分析、數據管理和數據展示的達人!
李老師:
擅長 Python 編程、Stata 編程,熟悉 Python 與 ArcGIS 交互 ,具有豐富的程序設計經驗,負責業界公司多個百萬級爬蟲項目,參與多個實證研究項目,完成過多項高難度爬蟲任務,經驗豐富。
和盈編程培訓內容
第一部分、Stata
Stata 基礎
Stata 常用函數
Stata 數據清洗、整理
Stata 文本處理
Stata 宏與循環
Stata 讀寫網絡數據
-抓取谷歌地圖API獲取經緯度信息、百度地圖API
-抓取十八大以來落馬官員的數據
-抓取和訊網上市公司社會責任報告數據
-學員意向網站爬取(選講)
Stata Debugging
第二部分、Python
對于高效完成大規模爬蟲項目而言,Python是比Stata更為合適的編程語言。通過這部分的學習,你將了解到:Python的安裝和基礎語法;如何解析紛繁復雜的各類靜態、動態網站;如何利用多進程的優勢爬取數據并與數據庫交互;如何導入各類型本地數據,爬取網址對應所需數據,并保存為本地數據(Stata dta 、csv 等);如何解決基本的反爬蟲問題。學習Python,也有利于你進一步學習對大數據進行數值運算,統計分析,機器學習。
Anaconda 環境配置及IDE安裝
Python 語法及數據結構入門
網頁結構分析(HTML、CSS選擇器、Xpath定位)
網站協議,發送請求,解析網站
【實戰】:靜態網頁爬蟲
數據處理及存取(正則表達式、Pandas)
Python 與 MySQL 數據庫交互
反爬蟲初探
【實戰】:多進程爬蟲
Selenium 模擬瀏覽器爬蟲
【實戰】:動態網頁爬蟲
代碼穩健、json 數據處理(選講)
表單提交、網站登錄及 Cookie(選講)
【實戰】:學員意向網站爬取(選講)
第三部分、ArcGIS
地圖數據展示(基本畫圖展示)
地理信息數據管理、分析
Python 與 ArcGIS 交互
利用 OpenStreetMapAPI 獲取全球任意地點新行政邊界底圖
已知地址獲取經緯度、已知經緯度獲取地址、交通路線查詢等
第四部分、因果推斷與Stata實現
Difference-in-difference
Regression Discontinuity Design
其它事項
1、請學員自帶筆記本電腦,我們將協助您提前安裝好所需軟件。
2、提供午餐盒飯,培訓住宿安排。
3、本次培訓限額人數40人,即日起開始正式接受報名和付費,先到先得,招滿即止。
要不要學編程?什么時候學編程培訓不算晚?
這是一個數字化的世界,在這個世界里,有計算機科學。人們閱讀電子書而不是紙質書籍;課堂上使用的是數字顯示屏而不是粉筆與黑板;人們的相機和汽車都已經數字化;孩子們剛學打字就知道如何使用拼寫檢查,剛學算術就可以使用Excel,這些都是數字化工具,但我們仍要學習有關書寫和計數的知識。人們能夠熟練使用谷歌或Facebook,但不知道谷歌搜索背后復雜的算法和Fackbook是如何保護隱私的。
計算機和編程是數字世界的核心。信息科學開發出軟件來讓整個世界數字化成為可能。它是一種教育、一門科學和一門藝術——而不僅僅是賦予人們以工具和操作。人們一次又一次地將使用數字工具和編程相混淆,其實兩者毫無關系。
所以,信息科學有必要進入課堂,與物理、化學和數學平起平坐。但它又有很強的技術屬性,你必須學會自己編程、使用計算機來解決問題。這是必不可缺的一個方面。
教師簡介:浙江大學 碩士 公司職務: WEB/JAVA培訓講師; 開發經驗: 4年以上; 培訓經驗: 4年(指專職講師年限),加開發8年IT行業經驗; 技術專長: 精通html5、css3、javascript等,熟悉各行業web開發的特點、需求以及對應的業務;精通J2SE,J2EE,JSP/Servlet,Struts,Spring,Oracle, PHP,從事過各類網站開發。
教師簡介:李老師 蘭州大學 本科 公司職務: Python培訓講師; 開發經驗: 4年以上; 培訓經驗: 2年(指專職講師年限),加開發6年IT行業經驗; 技術專長: 多年軟件開發經驗和豐富的教學經驗,精通Python、PHP、Objective-C、Swift、MySQL等編程語言,條理清晰,注重培養學生的學習能力。
教師簡介:羅老師 江西師范大學 本科 公司職務: WEB/JAVA培訓講師; 開發經驗: 4年以上; 培訓經驗: 3年(指專職講師年限),加開發7年IT行業經驗; 技術專長: 精通html5、css3、javascript等,熟悉各行業web開發的特點、需求以及對應的業務;精通Java、J2SE、J2EE、JSP/Servlet、MySQL、Oracle、JS、C、Linux;熟悉Android。
杭州市西湖區體育場路580號昆侖大廈3號樓