“AI+大數據”推動數據挖掘走向數智化治理
5月20日，阿里巴巴副總裁、阿里云計算平臺負責人賈揚清在媒體溝通會上表示，經過近20年的發展，人們對大數據的利用已從早期的數據挖掘進化為集數據分析、數據管理、數據協同為一體的綜合治理，在這一進程中，大數據與人工智能（AI）技術的融合居功甚偉。 賈揚清提到，數字經濟迅猛發展，不斷豐富、增長的數智業務，對技術提出了更高的挑戰，數字化創新需要用好“大數據+AI”這個“核武器”。尤其對企業來說，業務創新要提高效率，僅僅把數據管理好、使用好還不夠，還需要AI技術的加持。 “大數據和AI密不可分，二者結合在一起，更能幫助企業在數字時代從容應對不確定性。”賈揚清說。 當前，大數據技術已經廣泛應用到各行各業的數字化轉型中。例如，隸屬建筑行業的中建三局一公司，就基于阿里云的數據管理平臺DataWorks和云數據倉庫MaxCompute構建了數智建造一站式服務平臺。該平臺覆蓋了建造領域生產場景全鏈路、核心管控全流......閱讀全文
壓縮算法為大語言模型“瘦身”
據美國科學促進會旗下網站19日報道，美國普林斯頓大學和斯坦福大學團隊開發出一種新壓縮算法CALDERA，能精簡大型語言模型（LLM）的海量數據，為LLM“瘦身”。這項算法不僅有助保護數據隱私、節約能源、降低成本，還能推動LLM在手機和筆記本電腦上高效使用。團隊舉例稱，當人們使用ChatGPT時，請求
單細胞數據挖掘算法方面取得新進展
圖 SEVtras高效識別單細胞轉錄組數據中的胞外小囊泡 在國家自然科學基金項目（批準號：32025009、32130020等）資助下，中國科學院北京生命科學研究院趙方慶團隊在單細胞數據挖掘算法方面取得新進展，研究成果以“SEVtras識別單細胞轉錄組中液滴分辨率的胞外小囊泡（SEVtras de
Benchmarker一種可靠的對GWAS數據進行挖掘的算法
全基因組關聯研究（GWAS）針對大量人群尋找有助于常見的多基因特征（如身高或肥胖）的基因。這些綜合性研究經常發現大量微小的遺傳變異，這些變異在高齡，肥胖等人群中更常發生。但這種相關性并不一定意味著因果關系的存在。 雖然有許多計算算法可用于幫助提取GWAS結果，但很難知道選擇哪一種。研究人員在《
注水算法
迭代注水算法是由Wei Yu提出的，它是一種多用戶功率分配算法。這是一種自私算法，當接收端和發送端沒有共享信道信息時，它的實現非常簡單，復雜度低。但是，當信道上有共享信 息，需要共享信道，這是網絡拓撲就會出現遠近效應，這就產生了非平衡狀態，引起用戶間信號干擾，信息傳輸效率下降。?????? 迭代注水
雙向掃描算法和電梯調度算法區別
雙向掃描算法和電梯調度算法區別：1、雙向掃描(SCAN)算法不僅考慮到欲訪問的磁道與當前磁道間的距離，更優先考慮的是磁頭，當前的移動方向。例如，當磁頭正在自里向外移動時，SCAN算法所考慮的下一個訪問對象應足其欲訪問的磁道既在當前磁道之外，又是距離最近的。這樣自里向外地訪問直至再無更外的磁道需要訪問
大數據成為反腐利器－新算法體系精準發現疑似問題線索
如何從碎片化、結構化的電子政務大數據中發現疑似問題線索？ 中科院計算所的研究團隊經過長期研究找到了答案。 “在不同電子政務系統產生的偶然數據中蘊含著具體人、具體事的必然章法和趨勢。”在中科院計算所研究員方金云看來，大數據具有使小惡小善振蕩放大的力量，有助于從電子政務數據中精準發現疑似問題線索
基于變體GRU預處理網絡數據包的入侵檢測優化算法
在網絡空間中，用入侵檢測（Intrusion Detection System，IDS）判斷網絡數據包是否包含攻擊對于防范網絡攻擊和保護信息安全具有重要意義。現有的IDS算法存在兩個問題，一是利用人工經驗大量提取的特征無法準確描述網絡數據包；二是神經網絡結構復雜、內存占用大、功耗大。 中國科學
大數據+智能算法有望治愈抑郁癥和精神類疾病
近幾年，多個大型而長期的腦研究項目問世，包括投資60億美元的“美國腦計劃（US BRAIN Initiative）”、歐盟投資10億歐元的“人類腦計劃（HBP）”；中國和日本也都在2016年初發布了重大的腦科學項目，希望能通過研究猴子來理解人腦。2016年，“腦科學與類腦研究”被“十三五”規劃綱
加速新藥研發！新算法助力質譜數據準確高效預測小分子
小分子的鑒定是生命科學一項關鍵任務。質譜（mass spectrometry，MS）可用于分析化合物成分，高通量質譜技術能夠從數十萬個環境中收集小分子的串聯質譜。然而，現有的方法是基于化學領域的知識，無法解釋小分子質譜中的許多峰。 卡內基梅隆大學和俄羅斯圣彼得堡國立大學的研究人員提出一種算法—
昆明動物所開發出適用于高通量異質性數據算法
挖掘腫瘤大數據有助于識別和總結腫瘤發生、發展過程的分子變化規律。然而，腫瘤組織高度異質性、批次效應等因素是腫瘤數據分析的重要難題，而目前常用的轉錄組數據分析方法對于腫瘤離群值極度敏感，容易產生假陰性結果。針對此，中國科學院昆明動物研究所科研人員開發了一種新的不依賴均一化、非參的高維大數據分析算法
高效的集合卡爾曼濾波熱層電離層數據同化算法
全球導航衛星系統、短波通信等無線電波在傳播過程中會受到地球的高層大氣（電離層/熱層）的折射、散射影響，因此對高層大氣的日常監測和預報具有重要意義。電離層是高層大氣的電離成分，受太陽輻射條件控制，這意味著它不能太長時間地“記住”過去，通常只有2-3小時的提前預報時間。熱層是高層大氣的中性成分，受太
二十世紀最偉大的十大算法及其意義
一、1946 蒙特卡洛方法 1946年，美國拉斯阿莫斯國家實驗室的三位科學家John von Neumann，Stan Ulam 和 Nick Metropolis共同發明，被稱為蒙特卡洛方法。 它的具體定義是： 在廣場上畫一個邊長一米的正方形，在正方形內部隨意用粉筆畫一個不規則的
麥穗圖像數據庫在于農業生產和研究現場的AI算法測試...
麥穗圖像數據庫在于農業生產和研究現場的AI算法測試的應用Plant Phenomics | 小麥麥穗自動檢測大規模圖像數據庫：為可用于農業生產和研究現場的AI算法測試奠基在國際協作下，來自7個國家、9個研究機構的十幾名研究人員創建了基于提高通用性的圖像來自動檢測小麥麥穗的大規模數據庫。構建了用于小麥
2014大數據與數據科學進展主題論壇在京舉行
12月27日，2014年大數據與數據科學進展主題論壇在京舉行。包括徐宗本等5位院士在內的來自學界、商界和政府部門的60多名專家學者參加了論壇，圍繞今年國際上大數據與數據科學的最新進展和面臨的挑戰展開了研討。 本次論壇由中國計算機學會主辦，中國計算機學會大數據專家委員會、中科院虛擬經濟與數據科學
三大數據展現南水北調工程效益
新華社北京8月25日電 題：三大數據展現南水北調工程效益新華社記者劉詩平8月25日，南水北調中線穿黃工程通過水利部主持的設計單元工程完工驗收。至此，南水北調東、中線155個設計單元工程全部通過水利部完工驗收。據統計，如今南水北調工程累計調水超過560億立方米、受益人口超過1.5億人，充分展現了這一工
2022大數據科技傳播獎揭曉
由中國科技新聞學會、湖南省科協、衡陽市人民政府聯合開展的2022年大數據科技傳播獎評選活動近日揭曉，共評出特殊貢獻獎7名，作品獎9件，團體獎13個，個人獎28名。本次評選活動經郭華東、李蘭娟、褚君浩等院士擔綱的大數據科技傳播獎評審委員會嚴格評選審定，依照《大數據科技傳播獎獎勵辦法》規定，評選中國工程
缺陷檢測算法
基本兩個步驟：1、缺陷檢出，算法較多，本人認為是不變矩陣法和主成分分析法；2、缺陷識別和分類,多數使用BP神經網絡進行訓練，提高識別率。
基質效應的算法
化學分析中，基質指的是樣品中被分析物以外的組分。基質常常對分析物的分析過程有顯著的干擾，并影響分析結果的準確性。例如，溶液的離子強度會對分析物活度系數有影響，這些影響和干擾被稱為基質效應（matrix effect）。去除方法 目前最常用的去除基質效應的方法是，通過已知分析物濃度的標準樣品，同時盡
兩大算法一大功能，關于數字渦街流量計這些你知道嗎？
渦街流量計具有壓力損失小，量程寬，精度高，構造簡單牢固，維護方便，安裝費用低，使用壽命長，適用范圍廣等優眾多優點，并在工業生產中得到廣泛的應用。但現有的渦街流量計仍存在一些問題，影響到它的進一步推廣應用。例如，渦街流量計下限量程高，抗機械振動干擾能力差，在線參數修改不便。因此，解決渦街流量計小流
周勇教授：“分塊集成算法為大數據分析提供可發展前景”
我們正處于數據呈現井噴式增長的時代，大數據已成為當前前沿研究和應用的熱點問題，隨著社會經濟與科技活動變得日益互聯多元，形成海量超高維的數據資源，這些資源與現代信息技術的結合極大地推動了大數據產業鏈的形成，科學技術的進步。在現代生活的各個領域，大數據的價值日益突顯，例如，越來越多的機構收集存儲并分
如何利用基準單細胞測序數據集來評估新的分析方法或算法？
利用基準單細胞測序數據集來評估新的分析方法或算法，可以按照以下步驟進行：數據獲取和預處理從公開的數據資源獲取選定的基準數據集。對數據進行必要的預處理，如質量控制、數據標準化、去除批次效應等，以確保數據的質量和可比性。定義評估指標根據具體的分析任務確定合適的評估指標。例如，對于細胞聚類任務，可以使用調
地面激光雷達數據為基礎的葉傾角和方位角提取算法研究
葉片角度分布（Leaf Angle Distribution，LAD）包括葉傾角分布和方位角分布，是描述植被冠層結構的一個重要參數。由于葉片角度分布對植被冠層中光線的傳輸過程和光合有效輻射的分布有著顯著的影響，因此它在陸地生態系統冠層生產力和碳循環研究中具有十分重要的作用。然而，傳統測量設備和方法往
3大遙感數據源接入“商湯地界”AI遙感大模型
原文地址：http://news.sciencenet.cn/htmlnews/2024/3/519533.shtm近日，商湯科技宣布攜手國內頭部遙感數據平臺“吉林一號網”、“四維地球”、“星圖地球”，升級了其“SenseEarth智能遙感云”平臺的數據源。用戶無需準備數據，即可通過“商湯地界”平臺
郭華東：大數據+大科學=大發現
中科院遙感與數字地球所所長 郭華東院士 “大數據是財富，是資源，是科研的戰略高地。大數據正在改變人們的研究方式，是人類認識自然和行星地球的新鑰匙。” 這是中國科學院院士、中科院遙感與數字地球所所長郭華東于日前在北京召開的大數據與科學發現國際研討會上做出的判斷。從數據發展歷史看，19世紀70年代
納米孔測序“僵尸數據”困境破局！復旦大學聯合新華醫院推出LongBow算法
納米孔測序技術憑借其長讀長、可直接檢測堿基修飾以及實時測序等優勢，正在深刻改變生命科學與醫學研究的格局。然而，在目前公開的超70萬組數據中，約85%因缺乏關鍵元數據——特別是測序芯片類型與堿基識別配置信息——而成為難以有效利用的"僵尸數據"。近日，上海交通大學醫學院附屬新華醫院與復旦大學合作開發的L
哈希算法原理和用途
哈希是一種加密算法，也稱為散列函數或雜湊函數。哈希函數是一個公開函數，可以將任意長度的消息M映射成為一個長度較短且長度固定的值H（M），稱H（M）為哈希值、散列值（Hash Value）、雜湊值或者消息摘要。它是一種單向密碼體制，即一個從明文到密文的不可逆映射，只有加密過程，沒有解密過程。
遺傳算法－的特點
（1）算法從問題解的串集開始搜索，而不是從單個解開始。這是遺傳算法與傳統優化算法的極大區別。傳統優化算法是從單個初始值迭代求最優解的；容易誤入局部最優解。遺傳算法從串集開始搜索，覆蓋面大，利于全局擇優。（2）遺傳算法同時處理群體中的多個個體，即對搜索空間中的多個解進行評估，減少了陷入局部最優解的風險
6大亮點！12所“雙一流”高校就業數據大起底
談起應屆畢業生就業的話題，雙一流人才的去向是其中一個備受矚目的風向標。 日前，清華、北大等12所雙一流高校陸續發布了《2021年畢業生就業質量報告》。在剛剛過去的一年，面對疫情形勢反復、行業政策調整等種種變局，應屆研究生的就業方向產生了一些刻著鮮明“時代烙印”的新變化。 而對大多數高校畢業生
6大亮點！12所“雙一流”高校就業數據大起底
談起應屆畢業生就業的話題，雙一流人才的去向是其中一個備受矚目的風向標。 日前，清華、北大等12所雙一流高校陸續發布了《2021年畢業生就業質量報告》。在剛剛過去的一年，面對疫情形勢反復、行業政策調整等種種變局，應屆研究生的就業方向產生了一些刻著鮮明“時代烙印”的新變化。 而對大多數高校畢業生
Nat－Comm|－張強鋒組利用人工智能算法分析單細胞ATACseq數據
近年來，深度學習等人工智能技術在圖像識別，自然語言處理等領域取得了令人矚目的成就。人工智能技術應用于生命科學，對生物信息多個領域產生了重大的影響。深度學習算法借助于生命科學大數據的飛速發展，從海量大數據中自動高效地提取特征進行學習，極大超越了依賴人工提取特征的傳統人工智能算法，在醫療圖像處理、結