题名

基於Apache HBase提供全球網路實體遍歷及信用評等計算之圖模型服務

作者

繆維武

关键词

Apache Hadoop ; Hadoop MapReduce ; Apache Hbase ; Apache Pig ; PageRank ; Graph model

期刊名称

資訊安全通訊

卷期/出版年月

20卷4期(2014 / 10 / 01)

页次

90 - 104

内容语文

繁體中文

中文摘要

近年來行動式電子裝置和社交網路的盛行,人們在享受現今資通訊技術和產品所帶來的生活便利的同時,也應當注意伴隨而來的安全性風險。根據AV-TEST組織的統計,從2007年開始,每年新產生惡意程式的數量開始顯著增加,近年來增加的趨勢更是跳躍式地提升;此外,網路攻擊的目的性,也從早期的技術狂熱分子現武藝到集團詐騙,更有甚者,甚至對國家安全造成威脅。而趨勢科技也早從在2008年起,為了因應如此大量並頻繁的網路威脅活動,開始採用大數據(Big Data)技術,以期能以已往不同的網路威脅分析手法,來提供客戶更快速、更安全的防護方案;本文將描述趨勢科技如何使用大數據技術,來儲存每天由全世界送回來的大量日誌檔案,接著把這些未經處理的資料加以關連和分析,再次轉換成圖模型並儲存在巨量資料的儲存庫;不但可以讓趨勢科技的客戶能以更快速、便利的方式來了解他們企業內部的網路威脅狀態;同時也對趨勢內部的資料科學家提供更快速、視覺化的方式來了解世界上網路威脅的狀態,目前也正嘗試利用圖形演算法,計算並推出更有效率的方式來找到世界上不斷新產生的網路威脅。

主题分类 基礎與應用科學 > 資訊科學
参考文献
  1. “virustotal”,https://www.virustotal.com/zh-tw/
  2. “最新手機/LINE 詐騙簡訊一覽表!”,2014,http://blog.trendmicro.com.tw/?p=6279.
  3. “New Malware,” 2014, http://www.av-test.org/en/statistics/malware/.
  4. “What is Apache Hadoop ? ,” 2014, http://hadoop.apache.org/#What+Is+Apache+Hadoop%3F
  5. “HBase Snapshots,” 2014, http://hbase.apache.org/book.html#ops.snapshots.
  6. “標準偏差”,2014,http://zh.wikipedia.org/wiki/%E6%AD%A3%E6%80%81%E5%88%86%E5%B8%83#.E6.A8.99.E6.BA.96.E5.81.8F.E5.B7.AE
  7. E. Baldeschwieler, “Hadoop Now, Next & Beyond,” 2013, http://www.slideshare.net/Hadoop_Summit/apache-hadoop-now-next-and-beyond
  8. “Database Sharding,” 2014, http://en.wikipedia.org/wiki/Database_sharding.
  9. “Domain generation algorithm,”2014, http://en.wikipedia.org/wiki/Domain_generation_algorithm
  10. “大數據”,2014,http://zh.wikipedia.org/wiki/%E5%A4%A7%E6%95%B8%E6%93%9A.
  11. J. Dorrier, “There Are 7 Billion Mobile Devices On Earth, Almost One For Each Person,”2014, http://singularityhub.com/2014/02/18/there-are-7-billion-mobile-devices-on-earth-almost-one-for-each-person/.
  12. 趙郁竹,“2020駭客風暴,密切注意!小心,病毒就在你身邊”,2014,http://www.bnext.com.tw/article/view/id/30679.
  13. “Who uses Hadoop ?,” 2014, http://wiki.apache.org/hadoop/PoweredBy.
  14. “PageRank,” 2014, http://zh.wikipedia.org/wiki/Pagerank.
  15. “《APT 攻擊》南韓爆發史上最大駭客攻擊 企業及個人用戶電腦皆停擺”,2013,http://blog.trendmicro.com.tw/?p=4524.
  16. “Chapter 4. The Apache HBase Shell,” 2014, https://hbase.apache.org/book/shell_tricks.html
  17. “Apache Pig,” 2014, http://pig.apache.org/.
  18. “什麼是 APT 進階持續性威脅 (Advanced Persistent Threat, APT)?”,2011,http://blog.trendmicro.com.tw/?p=123&apt/%E4%BB%80%E9%BA%B C%E6%98%AF-apt%E9%80%B2%E9%9A%8E%E6%8C%81%E7%BA%8C%E6%80%A7%E5%A8%81%E8%84%85-advanced-persistent-threat-apt%EF%BC%9F.
  19. “雲端運算防毒是趨勢:趨勢科技 Trend Micro Smart Protection Network 主動式雲端截毒服務-更加聰明的防護”, http://www.trendmicro.com.tw/spn/index.asp.
  20. M.A. Rodriguez, “Property Graph Model," 2012, https://github.com/tinkerpop/blueprints/wiki/Property-Graph-Model
  21. “Apache Hbase,” 2014, http://hbase.apache.org/.
  22. “Apache Pig User Defined Functions,” 2014, http://pig.apache.org/docs/r0.11.1/udf.html.
  23. “惡意程式-Stuxnet簡介”,臺灣電腦網路危機處理暨協調中心,http://www.cert.org.tw/docfile/Stuxnet.pdf