淘寶開放平臺的遇到的技術問題(2)

　　5. 松散Master-Slave任務分治框架抽象(ISV應用監控，日志分析)

　　當前開放平臺分析日志采用松散模式的分布式任務分治框架，但由于將MapReduce的處理過多的融入到了分布式分治框架中，導致現在ISV應用監控集群在復用框架的時候不能很好地擴展，只能部分重用底層通信及部分的交互協議，因此了將來大量的分治協作處理場景，需要抽象出與任務處理不相關的框架，同時支持任務來源及工作者處理結果模式(也許本地就完成存儲，而不是到Master Reduce)，同時自身的容災及穩定性和任務分配算法需要有更多的優化和措施。

　　安全：

　　網站應用和桌面應用安全掃描

　　對網站應用的回調地址做釣魚掃描及對桌面應用作二進制掃描，是開放平臺對應用安全性的最基本的要求，但是實施難度很大。需要有對安全有較為深入的同事參與完成。

原文轉自：http://www.kjueaiud.com