摘要: 序言進入正題之前，先糾正一種誤解。有人覺得，基本圖表太簡單、太原始，不高端，不大氣，因此追求更複雜的圖表。但是，越簡單的圖表，越容易理解，而快速易懂地理解數據，不正是”數據可視化”的最重要目的和最高追...

摘要: 一直以來，作為人類我們都以擁有情感而自豪，這是我們和機器的一種本質上的區別。隨著計算機的發展，我們更期盼人機之間的溝通交流，尤其是一種帶有感情的溝通交流。計算機在情感方面的成長經歷也類似於我們每個人的...

摘要: 想入門機器學習、數據挖掘，我該怎麼做？我自己是本科數學出身，本科畢業的時候，我並不知道什麼是機器學習，也沒有寫過大型程序，更不要說去搞一個機器學習的算法和實踐了。這些本科時代就應該熟練掌握的東西包括： ...

雖然近年來流行將海量資料分析稱為是資料採礦(Data Mining)，但是對我來說，整個資料分析的過程也很像是幾年前很紅的漫畫"鋼之鍊金術師(簡稱鋼煉)"中的煉金術。

前面幾篇[Python][教學] 網路爬蟲（crawler）實務（上）–網頁元件解析和[Python][教學] 網路爬蟲（crawler）實務（下）–爬蟲策略以及設定介紹了撰寫爬蟲程式基本的觀察以及實作方式．這樣的方式爬一兩個小網站還可以，但是如果要爬比較複雜或是多個網站就比較難維護．因此實務上比較常使用Scrapy這個爬蟲框架來處理，這次將介紹更進階的使用方法給各位．

  在知道目標之後，接著就要決定如何達成。網路爬蟲的概念很簡單，就是進入網頁之後，將網站中的原始碼擷取下來，透過Xpath或是Html節點的方式來找到目標字串。

 今年部落格最受歡迎文章：[Python] 現學現賣之網路爬蟲(Crawler)--以抓本BLOG為例是我剛學python時寫的程式，內容其實也都是照著老師的課程講義來做，很多細節也是矇懞懂懂．至今過了半年，爬網的經驗也多了一點，比較有內容可以跟大家分享．爬網有很多種用途，對比起搜尋引擎的全頁抓取，更多時候是抓取特定網站的特定內容，這時候除了爬蟲程式本身之外，對於網站欄位的解析更為重要．

摘要: 概述数据可视化主要旨在借助于图形化手段，清晰有效地传达与沟通信息。但是，这并不就意味着，数据可视化就一定因为要实现其功能用途而令人感到枯燥乏味，或者是为了看上去绚丽多彩而显得极端复杂。为了有效地传达思 ...

在資訊爆炸的今天，以往的巨量資料大部分是拿數據型資料做分析，例如銷售及顧客資料分析出啤酒與尿布的關聯，數據型分析已經日趨成熟，接下來將會是非結構化資料，也就是自然語言處理以及機器學習的時代，相信在不久的將來，電腦與人類的真實對話將會出現在你我眼前。

         因為剛換工作，想趁記憶猶新的時候，把所有接觸資料庫到分析流程記錄下來，作為將來自己或是其他人的參考。

Scrapy是python上很受歡迎的爬網框架，官方網站為：http://doc.scrapy.org/en/latest/index.html．介紹Scrapy的網站很多，官網自己就寫得很清楚，一些中文化的資料可參考像是http://www.addbook.cn/book/scrapy中文手册等資料．今天主要介紹的是爬網之後的動作．爬網並不是單純爬文而已，而是為了提供之後進一步的分析，所以資料都必須儲存下來，儲存的方式有很多種，可以單純是個file，再由分析軟體來處理資料，或是把資料放在資料庫中，做進一步的分析．