-
金融大資料「支招」,如何躲避現金貸「老賴」
作者:王柏勻不少現金貸後臺的貸款逾期資料持續所上升,監管風暴引發的“老賴”現象不在少數。那麼,金融大資料有效控制“老賴”行為呢?現金貸監管風暴終於“打板”。12月1日,互聯網金融風險專項整治、P2P網貸風險專項整治工作領導小組辦公室正式下
2017-12-05 0 -
從事大資料征信行業,你要知道這些
征信行業歷史起源征信機構始於19世紀30年代的美國。雛形是一些商業調研機構,服務民間或銀行借貸業務,獲取資訊途徑通過招募些調研人員去街巷走訪,然後逐漸形成規模及規範化。作為起源之地,美國有3大征信機構都有百年歷史,例如全國性3大個人征信機
2017-10-20 0 -
「大資料」這詞不火了 是不是因為沒當年說的那麼大
10月19日消息,國外媒體Slate刊文指出,“大資料(Big Data)”一詞已經變得沒有以往那麼紅火了,為什麼會這樣呢?“大資料”的問題並不在於資料或者大資料本身很糟糕,而是在於盲目迷戀資料,不加批判地使用,那會引發災難。資料也不一定
2017-10-20 0 -
基於YARN集群構建運行PySpark Application
作者:YanjunSpark Application可以直接運行在YARN集群上,這種運行模式,會將資源的管理與協調統一交給YARN集群去處理,這樣能夠實現構建于YARN集群之上Application的多樣性,比如可以運行MapReduc
2017-10-19 0 -
Dataset基於SQLAlchemy的便利工具
作者: w2n1ck資料集使得資料庫中的資料讀取和寫入資料就像閱讀和編寫JSON檔一樣簡單。dataset對於操作JSON、CSV檔、NoSQL非常好用。import dataset連接MySQL資料庫:db = dataset.conn
2017-10-19 0 -
資料科學面臨的共同挑戰
隨著我們進入2017年下半年,是時候看看那些使用資料科學和機器學習的公司面臨的共同挑戰。假設你的公司已經在大規模收集資料,需要用到分析工具,而且你已經認識到資料科學可以發揮重大作用(包括改善決策或企業經營、增加收入等等),並進行了優先排序
2017-10-18 0 -
當獲取資料不再是問題,公司需要關注資料背後的價值
作者:馮七七在當前這個大資料時代,海量資料噴薄而出,公司不再面臨缺乏資料的窘境,但是如何有效利用這些海量資料,抓住資料背後的商業價值是每個公司應該不斷思考的課題。本文作者法國大資料分析服務初創公司 Dataiku 的 Florian Do
2017-10-16 0 -
資料採擷中的十大實用分析方法
1.基於歷史的MBR分析基於歷史(Memory-Based Reasoning)的MBR分析方法最主要的概念是用已知的案例(case)來預測未來案例的一些屬性(attribute),通常找尋最相似的案例來做比較。MBR中有兩個主要的要素,
2017-10-13 0 -
阿裡新一代計算引擎Blink與SQL和機器學習的二三事
作者:蔡芳芳隨著大資料技術的不斷發展和成熟,無論是傳統企業還是互聯網公司都已經不再滿足於離線批次處理,即時流處理的需求和重要性日益增長。近年來業界一直在探索即時流計算引擎和API,比如這幾年火爆的Spark Streaming、Kafka
2017-10-13 1 -
領誠科技大資料日誌分析解決方案
日誌分析,並非大資料“雕蟲技”經過長期的資訊化建設,企業積攢了成百上千套系統,每天產生海量的日誌資訊資料。然而,大量的日誌資訊往往被遺棄、或存放歷史庫中,未能有效發揮其價值。部分企業逐步意識到日誌資訊的重要性,部署了Tivoli等管理系統
2017-10-13 2 -
騰訊面試經驗
作者:Christal_R2017年9月23日16:00參加一面女本科生,投遞移動端開發,後被推薦到後臺開發麵試。一面 騰訊大廈我提前了差不多兩個小時進了騰訊大樓,一樓大廳裡坐滿了前去霸面的同學。我拿了通行證便上了24樓,等候區裡也好多人
2017-10-11 2 -
IaaS市場份額新排名出爐:阿裡巴巴力壓穀歌,IBM出局
作者:楊昀煦根據Gartner公司對相關市場份額的首次核算,谷歌公司成為全球第四大基礎設施即服務(簡稱IaaS)供應商。近年來,基礎設施即服務市場的增長速度尤為可觀:自2015年的168億美元一路飆升至2016年初的221億美元。如下表所
2017-10-11 0 -
2017大資料產業鏈的大變化:資料應用仍在奮鬥 淘金路上見曙光
文|中關村老李 (本文為作者獨家投稿36大資料)2017年已過去大半,是時候該回顧一下大資料在半年中的發展了。只有清楚了現在的位置,清楚行業發展的環境,才好對未來的決策做出準確的判斷。(本文是針對一月份所寫的2017年的展望做出的進一步細
2017-10-11 3 -
大數據早報:阿裡雲與中科院宣佈合作發佈量子計算雲平臺 10.12
資料早知道,上36dsj看早報!來源36大資料,作者:奧蘭多『阿裡』雲棲大會開幕 阿裡巴巴成立達摩院 3年投入1000億10 月 11 日消息,今天阿裡巴巴雲棲大會正式召開。資料顯示,2013 年阿裡雲開發者大會正式更名為雲棲大會。歷經
2017-10-12 0 -
如何用深度學習進行CT影像肺結節探測
近期宜遠智慧參加阿裡天池醫療AI大賽,用3D Faster RCNN模型在CT影像的肺結節探測上,取得了較好的成績,特別是在計算資源充足的情況下,模型效果表現優異。這是他們的經驗分享(https://tianchi.aliyun.com/
2017-10-10 2 -
PB級海量資料服務平臺架構設計實踐
作者:Yanjun基於PB級海量資料實現資料服務平臺,需要從各個不同的角度去權衡,主要包括實踐背景、技術選型、架構設計,我們基於這三個方面進行了架構實踐,下面分別從這三個方面進行詳細分析討論:實踐背景該資料服務平臺架構設計之初,實踐的背景
2017-10-10 3 -
大數據早報:蘋果中國宣佈全新隱私保護(9.29)
資料早知道,上36dsj看早報!來源36大資料,作者:奧蘭多『資料安全』蘋果中國宣佈大招:全新隱私保護 國人這下放心了移動時代,手機已經成為大家最重要的工具,廠商除了做好設備的各項功能外,還要保護好設備的資料等隱私安全。今年的 iPhon
2017-09-29 0 -
用於構建優秀命令列的4個Python庫
作者:oschina在本文中,我將介紹如何在幾個庫的幫助下,在 Python 中實現這些功能。讀完後,讀者會瞭解到如何使用 Prompt Toolkit, Click(命令列介面創建工具包)、Pygments 和 Fuzzy Finder
2017-09-29 0 -
資料結構與演算法–關鍵路徑
作者:sunhaiyu關鍵路徑與無環加權有向圖的最長路徑現在考慮一個這樣的問題:你今天事情比較多,要洗衣服、做作業還要燒水洗澡,之後出去找朋友玩。假設洗衣服要20分鐘,燒水要30分鐘,做作業的話你把朋友做好的帶回來抄,只需要10分鐘。你想
2017-09-30 0 -
Yahoo開源即時大資料處理服務系統Vespa
作者:Jon Bratseth從2006年開源Hadoop開始,Yahoo(也就是現在的Oath)為廣大開發者社區的大資料基礎設施做出了不可磨滅的貢獻。現在,我們又賣出了堅實的一步,Yahoo的大資料處理和服務引擎Vespa正式在GitH
2017-09-30 0