chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

一些提升或加速日常數(shù)據(jù)分析工作的技巧

數(shù)據(jù)分析與開(kāi)發(fā) ? 來(lái)源:機(jī)器之心 ? 2020-08-27 15:08 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

本文列舉了一些提升或加速日常數(shù)據(jù)分析工作的技巧,包括:

1. Pandas Profiling 2. 使用 Cufflinks 和 Plotly 繪制 Pandas 數(shù)據(jù) 3. IPython 魔術(shù)命令 4. Jupyter 中的格式編排 5. Jupyter 快捷鍵 6. 在 Jupyter(或 IPython)中使一個(gè)單元同時(shí)有多個(gè)輸出 7. 為 Jupyter Notebook 即時(shí)創(chuàng)建幻燈片

1. Pandas Profiling

該工具效果明顯。下圖展示了調(diào)用 df.profile_report() 這一簡(jiǎn)單方法的結(jié)果:

使用該工具只需安裝和導(dǎo)入 Pandas Profiling 包。

本文不再詳述這一工具,如欲了解更多,請(qǐng)閱讀:https://towardsdatascience.com/exploring-your-data-with-just-1-line-of-python-4b35ce21a82d

2. 使用 Cufflinks 和 Plotly 繪制 Pandas 數(shù)據(jù)

「經(jīng)驗(yàn)豐富的」數(shù)據(jù)科學(xué)家或數(shù)據(jù)分析師大多對(duì) matplotlib 和 pandas 很熟悉。也就是說(shuō),你只需調(diào)用 .plot() 方法,即可快速繪制簡(jiǎn)單的 pd.DataFrame 或 pd.Series:

有點(diǎn)無(wú)聊?

這已經(jīng)很好了,不過(guò)是否可以繪制一個(gè)交互式、可縮放、可擴(kuò)展的全景圖呢?是時(shí)候讓 Cufflinks* *出馬了?。–ufflinks 基于 Plotly 做了進(jìn)一步的包裝。)

在環(huán)境中安裝 Cufflinks,只需在終端中運(yùn)行! pip install cufflinks --upgrade 即可。查看下圖:

效果好多了!

注意,上圖唯一改變的是 Cufflinks cf.go_offline() 的導(dǎo)入和設(shè)置,它將 .plot() 方法變?yōu)?.iplot()。

其他方法如 .scatter_matrix() 也可以提供非常棒的可視化結(jié)果:

需要做大量數(shù)據(jù)可視化工作的朋友,可以閱讀 Cufflinks 和 Plotly 的文檔,發(fā)現(xiàn)更多方法。

Cufflinks 文檔:https://plot.ly/ipython-notebooks/cufflinks/

Plotly 文檔:https://plot.ly/

3. IPython 魔術(shù)命令

IPython 的「魔術(shù)」是 IPython 基于 Python 標(biāo)準(zhǔn)語(yǔ)法的一系列提升。魔術(shù)命令包括兩種方法:行魔術(shù)命令(line magics):以 % 為前綴,在單個(gè)輸入行上運(yùn)行;單元格魔術(shù)命令(cell magics):以 %% 為前綴,在多個(gè)輸入行上運(yùn)行。下面列舉了 IPython 魔術(shù)命令提供的一些有用功能:

%lsmagic:找出全部命令

如果你只記得一個(gè)魔術(shù)命令,那必須得是這一個(gè)。執(zhí)行 %lsmagic 命令將提供所有可用魔術(shù)命令的列表:

%debug:交互式 debug

這可能是我最常使用的魔術(shù)命令了。

大部分?jǐn)?shù)據(jù)科學(xué)家都遇到過(guò)這種情況:執(zhí)行的代碼塊一直 break,你絕望地寫(xiě)了 20 個(gè) print() 語(yǔ)句,想輸出每個(gè)變量的內(nèi)容。然后,當(dāng)你最終修復(fù)問(wèn)題后,你還得返回并再次刪除所有 print() 語(yǔ)句。

不過(guò)以后再也不用這樣了。遇到問(wèn)題后只需執(zhí)行 %debug 命令,即可執(zhí)行想要運(yùn)行的任意代碼部分:

上圖中發(fā)生了什么?

我們有一個(gè)函數(shù),它以列表為輸入,并對(duì)所有的偶數(shù)取平方值。

我們運(yùn)行函數(shù),但是出了些問(wèn)題。但是我們并不知道怎么回事!

對(duì)該函數(shù)使用%debug 命令。

讓調(diào)試器告訴我們 x 和 type(x) 的值。

問(wèn)題顯而易見(jiàn):我們把 6 作為字符串輸入到函數(shù)中了!

這對(duì)于更復(fù)雜的函數(shù)非常有用。

%store:在 notebook 之間傳遞變量

這個(gè)命令也很酷。假設(shè)你花了一些時(shí)間清洗 notebook 中的數(shù)據(jù),現(xiàn)在你想在另一個(gè) notebook 中測(cè)試一些功能,那么你是在同一個(gè) notebook 中實(shí)現(xiàn)該功能,還是保存數(shù)據(jù)并在另一個(gè) notebook 中加載數(shù)據(jù)呢?使用%store 命令后,這些操作都不需要!該命令將存儲(chǔ)變量,你可以在其他任意 notebook 中檢索該變量:

%store [variable] 存儲(chǔ)變量。

%store -r [variable] 讀取/檢索存儲(chǔ)變量。

%who:列出所有全局變量。

你是否遇到過(guò),為變量賦值后卻忘記變量名的情況?或者不小心刪掉了負(fù)責(zé)為變量賦值的單元格?使用%who 命令,你可以得到所有全局變量的列表:

%%time:計(jì)時(shí)魔法命令

使用該命令可以獲取所有計(jì)時(shí)信息。只需對(duì)任意可執(zhí)行代碼應(yīng)用%%time 命令,你就可以得到如下輸出:

%%writefile:向文件寫(xiě)入單元格內(nèi)容

在 notebook 中寫(xiě)復(fù)雜函數(shù)或類,且想將其保存到專屬文件中時(shí),該魔法命令非常有用。只需為函數(shù)或類的單元格添加 %%writefile 前綴和想要保存到的文件名即可:

如上所示,我們可以將創(chuàng)建的函數(shù)保存到 utils.py 文件中,然后就可以隨意導(dǎo)入了。在其他 notebook 中也可以這樣,只要與 utils.py 文件屬于同一個(gè)目錄即可。

4. Jupyter 中的格式編排

這個(gè)工具很酷!Jupyter 考慮到 markdown 中存在 HTML / CSS 格式。以下是我最經(jīng)常使用的功能:

藍(lán)色、時(shí)尚:

Thisisfancy!
紅色、輕微慌張:

This is baaaaad!
綠色、平靜:

This is gooood!
下圖展示了它們的運(yùn)行過(guò)程:

當(dāng)你想以 Notebook 格式呈現(xiàn)一些發(fā)現(xiàn)時(shí),這非常有用!

5. Jupyter 快捷鍵

想了解和學(xué)習(xí)鍵盤(pán)快捷鍵,你可以使用命令面板:Ctrl + Shift + P,獲取 notebook 所有功能的列表。下面選取了幾個(gè)最基礎(chǔ)的命令:

Esc:進(jìn)入命令模式。在命令模式內(nèi),你可以使用方向鍵在 notebook 內(nèi)進(jìn)行導(dǎo)航。

在命令模式內(nèi):

A 和 B:在當(dāng)前單元格上方(Above)或下方(Below)插入新的單元格。

M:當(dāng)前單元格轉(zhuǎn)入 Markdown 狀態(tài)。

Y:當(dāng)前單元格轉(zhuǎn)入 code 狀態(tài)。

D,D:刪除當(dāng)前單元格。

Enter:當(dāng)前單元格回到編輯模式。

在編輯模式內(nèi):

Shift + Tab:為你在當(dāng)前單元格中鍵入的對(duì)象提供文檔字符串(文檔),持續(xù)使用該快捷鍵,可循環(huán)使用文檔模式。

Ctrl + Shift + -:在光標(biāo)所在處分割當(dāng)前單元格。

Esc + F:查找并替換代碼(不包括輸出)。

Esc + O:切換單元格輸出。

選擇多個(gè)單元格:

Shift + Down 和 Shift + Up:選中下方或上方的單元格。

Shift + M:合并選中單元格。

注意,選中多個(gè)單元格后,你可以批量執(zhí)行刪除/復(fù)制/剪切/粘貼/運(yùn)行操作。

6. 在 Jupyter(或 IPython)中使一個(gè)單元同時(shí)有多個(gè)輸出

想展示 pandas DataFrame 的 .head() 和 .tail(),但由于創(chuàng)建運(yùn)行 .tail() 方法的額外代碼單元過(guò)于麻煩而不得不中途放棄,你是否有過(guò)這樣的經(jīng)歷?現(xiàn)在不用怕了,你可以使用以下代碼行展示你想展示的輸出:

from IPython.core.interactiveshell import InteractiveShellInteractiveShell.ast_node_interactivity = "all" 下圖展現(xiàn)了多個(gè)輸出的結(jié)果:

7. 為 Jupyter Notebook 即時(shí)創(chuàng)建幻燈片

使用 RISE,你可以僅通過(guò)一次按鍵將 Jupyter Notebook 即時(shí)轉(zhuǎn)變?yōu)榛脽羝?。而?notebook 仍然處于活躍狀態(tài),你可以在展示幻燈片的同時(shí)執(zhí)行實(shí)時(shí)編碼! 要想使用該工具,你只需通過(guò) conda 或 pip 安裝 RISE 即可。

conda install -c conda-forge rise 或者

pip install RISE

現(xiàn)在,你可以點(diǎn)擊新按鈕,為 notebook 創(chuàng)建不錯(cuò)的幻燈片了:

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 可視化
    +關(guān)注

    關(guān)注

    1

    文章

    1365

    瀏覽量

    22909
  • 數(shù)據(jù)分析
    +關(guān)注

    關(guān)注

    2

    文章

    1523

    瀏覽量

    36366
  • python
    +關(guān)注

    關(guān)注

    58

    文章

    4888

    瀏覽量

    90320

原文標(biāo)題:掌握這 7 個(gè) Python 技巧,數(shù)據(jù)分析不怕!

文章出處:【微信號(hào):DBDevs,微信公眾號(hào):數(shù)據(jù)分析與開(kāi)發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    如何使用 powerquad 加速器中的一些功能以及 CMSIS 原始實(shí)現(xiàn)中的一些功能?

    )。 如何使用 powerquad 加速器中的一些功能以及 CMSIS 原始實(shí)現(xiàn)中的一些功能。 Example: I do not want to call arm_mat_trans_q15 powerquad
    發(fā)表于 04-03 06:37

    2026年度課程《壽命試驗(yàn)、高加速壽命試驗(yàn)及可靠性數(shù)據(jù)統(tǒng)計(jì)分析實(shí)操》公開(kāi)課,助您提升專業(yè)能力!

    的重要手段,壽命數(shù)據(jù)分析技術(shù)是質(zhì)量可靠性人員、檢驗(yàn)人員和設(shè)計(jì)師必備的技能,是開(kāi)展可靠性工作必須的手段,為滿足線技術(shù)人員對(duì)數(shù)據(jù)處理分析技術(shù)和
    的頭像 發(fā)表于 02-08 09:02 ?977次閱讀
    2026年度課程《壽命試驗(yàn)、高<b class='flag-5'>加速</b>壽命試驗(yàn)及可靠性<b class='flag-5'>數(shù)據(jù)統(tǒng)計(jì)分析</b>實(shí)操》公開(kāi)課,助您<b class='flag-5'>提升</b>專業(yè)能力!

    API數(shù)據(jù)分析:淘寶流量來(lái)源分析,渠道優(yōu)化!

    優(yōu)化渠道策略。我們將使用Python作為工具,結(jié)合數(shù)據(jù)分析和統(tǒng)計(jì)方法,確保過(guò)程真實(shí)可靠。 1. 理解淘寶流量來(lái)源 淘寶流量主要來(lái)自多個(gè)渠道,包括: 直接訪問(wèn) :用戶直接輸入淘寶網(wǎng)址從收藏夾訪問(wèn)。 搜索引擎 :如百度淘寶內(nèi)搜索
    的頭像 發(fā)表于 01-23 13:42 ?414次閱讀
    API<b class='flag-5'>數(shù)據(jù)分析</b>:淘寶流量來(lái)源<b class='flag-5'>分析</b>,渠道優(yōu)化!

    利用拼多多用戶API進(jìn)行粉絲數(shù)據(jù)分析,有效提升用戶粘性

    這些API進(jìn)行粉絲數(shù)據(jù)分析,并基于分析結(jié)果制定增強(qiáng)用戶粘性的策略。 、 拼多多用戶API概覽 拼多多開(kāi)放平臺(tái)提供了豐富的API接口,涵蓋商品、交易、用戶、物流等多個(gè)維度。對(duì)于粉絲數(shù)據(jù)分析
    的頭像 發(fā)表于 12-30 10:38 ?377次閱讀
    利用拼多多用戶API進(jìn)行粉絲<b class='flag-5'>數(shù)據(jù)分析</b>,有效<b class='flag-5'>提升</b>用戶粘性

    淘寶數(shù)據(jù)分析API:用戶行為洞察,精準(zhǔn)營(yíng)銷決策!

    。本文將探討如何利用這些API實(shí)現(xiàn)用戶行為的深度洞察,并轉(zhuǎn)化為實(shí)際的營(yíng)銷價(jià)值。 、用戶行為數(shù)據(jù)的價(jià)值:從流量到洞察 用戶進(jìn)入店鋪瀏覽商品的每個(gè)動(dòng)作,都蘊(yùn)含著豐富的信息。傳統(tǒng)的
    的頭像 發(fā)表于 12-25 14:12 ?422次閱讀
    淘寶<b class='flag-5'>數(shù)據(jù)分析</b>API:用戶行為洞察,精準(zhǔn)營(yíng)銷決策!

    經(jīng)營(yíng)數(shù)據(jù)分析可以通過(guò)哪些方式

    在數(shù)聚股份看來(lái),提起經(jīng)營(yíng)數(shù)據(jù)分析,大家往往會(huì)聯(lián)想到一些密密麻麻的數(shù)字表格,或是高級(jí)的數(shù)據(jù)建模手法,再或是華麗的數(shù)據(jù)報(bào)表。其實(shí),“ 分析 ”本
    的頭像 發(fā)表于 12-05 16:31 ?749次閱讀

    廣立微DE-G零斷檔重構(gòu)智能數(shù)據(jù)分析

    近日,數(shù)據(jù)分析領(lǐng)域被則消息推上風(fēng)口浪尖:家老牌軟件巨頭將撤出中國(guó)。在此背景下,其旗下以靈活著稱的數(shù)據(jù)分析軟件,在中國(guó)市場(chǎng)的未來(lái)將面臨極大的不確定性。
    的頭像 發(fā)表于 11-07 10:39 ?839次閱讀

    如何通過(guò)日常數(shù)據(jù)判斷電源紋波是否超標(biāo)?

    可觀測(cè)的異常表現(xiàn)。結(jié)合日常可獲取的數(shù)據(jù)(如設(shè)備運(yùn)行狀態(tài)、簡(jiǎn)單監(jiān)測(cè)值、故障日志),可通過(guò)以下 4 個(gè)維度間接判斷,覆蓋工業(yè)、消費(fèi)電子等常見(jiàn)場(chǎng)景: 、通過(guò) “設(shè)備運(yùn)行狀態(tài)的異常表現(xiàn)” 判斷(最直觀的
    的頭像 發(fā)表于 09-23 11:06 ?1462次閱讀
    如何通過(guò)<b class='flag-5'>日常數(shù)據(jù)</b>判斷電源紋波是否超標(biāo)?

    如何有效利用高光譜成像技術(shù)提升數(shù)據(jù)分析效率

    隨著人工智能和大數(shù)據(jù)技術(shù)的快速發(fā)展,高光譜成像技術(shù)作為種融合光譜信息與空間影像的新興技術(shù),正日益成為提升數(shù)據(jù)分析效率的重要工具。在農(nóng)業(yè)監(jiān)測(cè)、環(huán)境保護(hù)、礦產(chǎn)勘探等多個(gè)行業(yè)中,高光譜成像
    的頭像 發(fā)表于 09-11 16:13 ?999次閱讀
    如何有效利用高光譜成像技術(shù)<b class='flag-5'>提升</b><b class='flag-5'>數(shù)據(jù)分析</b>效率

    普迪飛 Exensio?數(shù)據(jù)分析平臺(tái) | 鑄就良率提升與量產(chǎn)加速之路

    ManufacturingAnalytics(M-A)是Exensio數(shù)據(jù)分析平臺(tái)中的四個(gè)核心模塊之。M-A模塊旨在幫助集成器件制造商(IDM)、代工廠(Foundry)和無(wú)晶圓廠半導(dǎo)體公司
    的頭像 發(fā)表于 08-19 13:53 ?1213次閱讀
    普迪飛 Exensio?<b class='flag-5'>數(shù)據(jù)分析</b>平臺(tái) | 鑄就良率<b class='flag-5'>提升</b>與量產(chǎn)<b class='flag-5'>加速</b>之路

    普迪飛 Exensio?數(shù)據(jù)分析平臺(tái) | Test Operations解鎖半導(dǎo)體測(cè)試新紀(jì)元

    TestOperations是Exensio數(shù)據(jù)分析平臺(tái)的四個(gè)主要模塊之。T-Ops模塊旨在幫助集成器件制造商(IDM)、無(wú)晶圓廠半導(dǎo)體公司(Fabless)和外包半導(dǎo)體(產(chǎn)品)封測(cè)廠(OSAT
    的頭像 發(fā)表于 08-19 13:53 ?1731次閱讀
    普迪飛 Exensio?<b class='flag-5'>數(shù)據(jù)分析</b>平臺(tái) | Test Operations解鎖半導(dǎo)體測(cè)試新紀(jì)元

    如何通過(guò)數(shù)據(jù)分析識(shí)別設(shè)備故障模式?

    通過(guò)數(shù)據(jù)分析識(shí)別設(shè)備故障模式,本質(zhì)是從聲振溫等多維數(shù)據(jù)中提取故障特征,建立 “數(shù)據(jù)特征 - 故障類型” 的映射關(guān)系,核心可通過(guò)特征提取、模式匹配、趨勢(shì)分析三步實(shí)現(xiàn),精準(zhǔn)定位故障根源與發(fā)
    的頭像 發(fā)表于 08-19 11:14 ?1138次閱讀
    如何通過(guò)<b class='flag-5'>數(shù)據(jù)分析</b>識(shí)別設(shè)備故障模式?

    構(gòu)建自定義電商數(shù)據(jù)分析API

    ? 在電商業(yè)務(wù)中,數(shù)據(jù)是驅(qū)動(dòng)決策的核心。隨著數(shù)據(jù)量的增長(zhǎng),企業(yè)需要實(shí)時(shí)、靈活的分析工具來(lái)監(jiān)控銷售、用戶行為和庫(kù)存等指標(biāo)。個(gè)自定義電商數(shù)據(jù)分析
    的頭像 發(fā)表于 07-17 14:44 ?733次閱讀
    構(gòu)建自定義電商<b class='flag-5'>數(shù)據(jù)分析</b>API

    AI數(shù)據(jù)分析儀設(shè)計(jì)原理圖:RapidIO信號(hào)接入 平板AI數(shù)據(jù)分析

    AI數(shù)據(jù)分析儀, 平板數(shù)據(jù)分析儀, 數(shù)據(jù)分析儀, AI邊緣計(jì)算, 高帶寬數(shù)據(jù)輸入
    的頭像 發(fā)表于 07-17 09:20 ?891次閱讀
    AI<b class='flag-5'>數(shù)據(jù)分析</b>儀設(shè)計(jì)原理圖:RapidIO信號(hào)接入 平板AI<b class='flag-5'>數(shù)據(jù)分析</b>儀

    如何使用協(xié)議分析儀進(jìn)行數(shù)據(jù)分析與可視化

    使用協(xié)議分析儀進(jìn)行數(shù)據(jù)分析與可視化,需結(jié)合數(shù)據(jù)捕獲、協(xié)議解碼、統(tǒng)計(jì)分析及可視化工具,將原始數(shù)據(jù)轉(zhuǎn)化為可解讀的圖表和報(bào)告。以下是詳細(xì)步驟及關(guān)鍵
    發(fā)表于 07-16 14:16