爬蟲系統(tǒng)升級(jí)改造正式啟動(dòng)：
在第一篇文章，博主主要介紹了本次改造的爬蟲系統(tǒng)的業(yè)務(wù)背景與全局規(guī)劃構(gòu)思：
未來(lái)Support云系統(tǒng)，不僅僅是爬蟲系統(tǒng)，是集爬取數(shù)據(jù)、數(shù)據(jù)建模處理統(tǒng)計(jì)分析、支持全文檢索資源庫(kù)、其他業(yè)務(wù)部門和公司資訊系統(tǒng)重要數(shù)據(jù)來(lái)源、輔助決策等功能于一身的企業(yè)級(jí)Support系統(tǒng)。
介于好多園友對(duì)博主的任務(wù)排期表感興趣，便介紹一下博主當(dāng)時(shí)針對(duì)這個(gè)系統(tǒng)做的工作任務(wù)排期概要（排期表就是更加詳細(xì)細(xì)分外加估算工時(shí)的一份excel表格，就不貼出來(lái)了）：
1.總分四大階段，逐步上線，最終達(dá)到預(yù)期規(guī)劃
2.第一階段實(shí)現(xiàn)一個(gè)新的采集系統(tǒng)，自動(dòng)實(shí)時(shí)化爬取數(shù)據(jù)、初步規(guī)則引擎實(shí)現(xiàn)數(shù)據(jù)規(guī)則化、統(tǒng)計(jì)郵件自動(dòng)推送、開放數(shù)據(jù)檢索，并上線替換原有爬蟲系統(tǒng)
3.第二階段實(shí)現(xiàn)規(guī)則化引擎升級(jí)，擴(kuò)展成長(zhǎng)式規(guī)則引擎，并開放采集源提交、管理、規(guī)則配置、基礎(chǔ)數(shù)據(jù)服務(wù)等基本系統(tǒng)操作
4.第三階段引入全文檢索，針對(duì)規(guī)則化數(shù)據(jù)創(chuàng)建索引，提供數(shù)據(jù)全文搜索功能，開放工單申請(qǐng)，可定制數(shù)據(jù)報(bào)告
5.第四階段引入數(shù)據(jù)報(bào)表功能，開放統(tǒng)計(jì)分析結(jié)果，并向輿情監(jiān)控與決策支持方向擴(kuò)展
當(dāng)然，在博主未爭(zhēng)取到更多資源的情況下，第一階段的排期要求了一個(gè)月，后面各階段只做了功能規(guī)劃，并未做時(shí)間排期。
這也算是一個(gè)小手段吧，畢竟第一階段上線，boss們是可能提很多其他意見(jiàn)，或者遇到其他任務(wù)安排的，不能一開始就把時(shí)間節(jié)點(diǎn)寫死，不然最終受傷的可能是程序員自己。
你比他好一點(diǎn)，他不會(huì)承認(rèn)你，反而會(huì)嫉妒你，只有你比他好很多，他才會(huì)承認(rèn)你，然后還會(huì)很崇拜你，所以要做，就一定要比別人做得好很多。
代碼框架搭建：
雖然大家都對(duì)我的“SupportYun”命名頗有異議，但是我依然我行我素，哈哈~~~總感覺(jué)讀起來(lái)很和諧
先上一張截止今天，項(xiàng)目結(jié)構(gòu)的整體圖：
博主一直很喜愛(ài)DDD的設(shè)計(jì)模式，也在很多項(xiàng)目中引用了一些經(jīng)典DDD模式的框架，但是明顯這次的任務(wù)是不適合做DDD的。
引入了EF Code First做數(shù)據(jù)持久化，未引入相關(guān)的各種操作擴(kuò)展，這次打算純拉姆達(dá)表達(dá)式來(lái)寫，畢竟吃多了葷的，偶爾也想嘗幾口素，調(diào)劑調(diào)劑口味~
兩個(gè)
