chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Python中三個json組件的安裝方式

馬哥Linux運維 ? 來源:博客 ? 作者:隔葉黃鶯 ? 2021-09-23 14:35 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

Python 使用用 json.dumps(data) 時突然發(fā)現(xiàn)特別慢,data 本身不大,但是一個包含很多元素的列表,所以促使本人尋找一個替代的 JSON 處理庫。大概對比了一個 ujson(UtltraJSON), python-rapidjson(RapidJSON) 和 Python 自帶的 json 庫。還有一個 simplejson 是為兼容 Python 2.6 以前用的(json 是 Python 2.6 新加入的 API),性能有些差?;旧辖€是老的辣,想要收獲更好的性能,還得仰賴傳統(tǒng)的 C/C++ 語言,ujson 是用純 C 寫的,RapidJSON 是 C++ 寫的,后者還是十美分的開源產品。json, ujson, rapidjson 三者 loads() 方法的性能差別不太明顯,但 dumps() 大對象時 Python 自帶的 json 庫就要考驗用戶的耐心了。注:最開始本來認定了 ujson 為最佳選擇, 所以先從 usjon 和 rapidjson 切入的,后來寫作本文的過程中,從 usjon 的自我介紹中發(fā)現(xiàn)了 Rust 寫的 orjson 很顯眼,才加入了 orjson 的測試,看來 orjson 更值得擁有。以上三個 json 組件的安裝方式分別為

pip install python-rapidjson

$ pip install simplejson

自己測試了一個 ujson 和 rapidjson 與 Python json 庫的 dumps() 的性能,simpejson 不太考慮了。測試代碼如下

# test.py

from time import timeimport sysimport string

num = int(sys.argv[1])lib = sys.argv[2]

items = []for i in range(num): items.append({c:c for c in string.ascii_letters})start = time()if lib == ‘ujson’: import ujson ujson.dumps(items)elif lib == ‘rapidjson’: import rapidjson rapidjson.dumps(items)else: import json json.dumps(items)

print(time() - start)

執(zhí)行 python 1000|10000|100000|1000000 json|ujson|rapidjson, 試結果統(tǒng)計如下(數(shù)字為不同情況下的耗時):

31709712-0fb2-11ec-8fb8-12bb97331649.png

基本上測試的性能和 Benchmark of Python JSON libraries 中的是一致的。從原文中截取了兩張圖如下:

317e661c-0fb2-11ec-8fb8-12bb97331649.png

在 UltraJSON 的 Github 項目頁面中也有對比 ujson, nujson, orjson, simplejson, json 的 Benchmarks。其中列出的 orjson(pip install orjson) 和 nujson(pip install nujson, Fork 了 UltraJSON 來支持 Numpy 序列化的) 性能表現(xiàn)上不錯,orjson 表現(xiàn)上比 ujson 還更為卓越。

看到了 orjson 后,趕緊做個對比測試,在上面的 test.py 代碼中再加上

elif lib == ‘orjson’: import orjson orjson.dumps(items)

再列出完整的對比數(shù)據(jù)

319ddc4a-0fb2-11ec-8fb8-12bb97331649.png

繼續(xù)翻看 orjson 的 Github 主頁面 ijl/orjson, 它既非用 C 也不是用 C++ 寫的,而是 Rust 語言,真是讓我眼前一亮,Rust 程序運行速度真的能與 C/C++ 相媲美的。寫到這里我要開始改變當初只認 ujson 的主意了,orjson 或許是更佳的選擇, 本文的標題也由最初擬定的 “Python 處理 JSON 必要時我選擇 ujson(UltraJSON)” 變成了 “Python 處理 JSON 必要時我選擇 ujson 和 orjson”。這也是寫博客時,盡可能收集更多的素材多的魅力。

補充一下,orjson 的 dumps() 函數(shù)使用略有不同,不再用 indent 參數(shù),并且返回值是 bytes,所以格式化成字符串的寫法如下

import orjson

json_str = orjson.dumps(record, option=orjson.OPT_INDENT_2).decode()

另外,在使用 ujson 時碰到的一個 bug 也順便記錄在此,就不立新篇了,反正現(xiàn)在找東西都不太看標題,而是 Google 到其中的內容。ujson 3.0.0 和 3.1.0 版本的 dumps() 的 indent 參數(shù)工作不正常,有個未關閉的 ticket ‘indent’ parameter for dumps doesn‘t indent properly in 3.0.0 #415。比如使用 ujson 3.1.0 時的現(xiàn)像是

》》》 import ujson》》》 ujson.dumps({’a‘: 1, ’b‘: 2})’{“a”:1,“b”:2}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=0)’{“a”:1,“b”:2}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=1)’{

“a”: 1,

“b”: 2

}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=2)’{

“a”: 1,

“b”: 2

}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=8)’{

“a”: 1,

“b”: 2

}‘

indent 大于 1 時都當作 1。

換回到 ujson 2.0.3 版本時沒問題

》》》 import ujson》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=2)’{

“a”: 1,

“b”: 2

}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=8)’{

“a”: 1,

“b”: 2

}‘

在這個問題未解決之前就暫時用 pip install ujson==2.0.3 安裝 ujson 2.0.3 吧,但是這個版本無法序列化 datetime 類型。

原文鏈接:https://yanbin.blog/python-json-choose-ujson-if-necessary/

責任編輯:haq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • python
    +關注

    關注

    57

    文章

    4856

    瀏覽量

    89524
  • JSON
    +關注

    關注

    0

    文章

    125

    瀏覽量

    7695

原文標題:Python 處理 JSON 我選擇 ujson 和 orjson

文章出處:【微信號:magedu-Linux,微信公眾號:馬哥Linux運維】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    未來工業(yè)AI發(fā)展的三個必然階段

    與優(yōu)化 能力的深層革命。 未來十年,工業(yè)AI的發(fā)展將經歷三個清晰的階段:? 智能輔助 → 智能決策 → 自主優(yōu)化 。這次進化,構成了工業(yè)從“人控機器”到“機器共智”的核心路徑。 一、第一階段:智能輔助(AI for Assistance) 時間窗口:
    的頭像 發(fā)表于 10-27 15:47 ?204次閱讀
    未來工業(yè)AI發(fā)展的<b class='flag-5'>三個</b>必然階段

    MA35-RTT如何安裝 Python 和 Libusb (Windows) ?

    MA35-RTT:如何安裝 Python 和 Libusb (Windows) ?
    發(fā)表于 09-03 08:30

    termux如何搭建python游戲

    模擬器,支持通過APT包管理器安裝軟件。搭建Python游戲開發(fā)環(huán)境前需完成以下基礎配置: 1. 更換國內源 為提升下載速度,需替換Termux默認源為清華源,執(zhí)行以下命令: ```bash
    發(fā)表于 08-29 07:06

    鴻蒙NEXT-鴻蒙老版本遷移最新版本(API19,modelVersion5.1.1)

    摘要:本文介紹鴻蒙(HarmonyOS)最新API19的遷移更新教程。首先需修改三個配置文件(hvigor-config.json5、build-profile.json
    的頭像 發(fā)表于 06-30 22:15 ?781次閱讀
    鴻蒙NEXT-鴻蒙老版本遷移最新版本(API19,modelVersion5.1.1)

    迅為RK3568開發(fā)板編寫bundle.json文件

    :led_test\"] - 構建時包含的子組件路徑,這里指定了一具體的構建目標。 這個 JSON 配置文件提供了關于如何構建、部署和管理這個名為\"demos\"的組件的詳細信息。
    發(fā)表于 06-05 15:38

    python入門圣經-高清電子書(建議下載)

    和Pygal 等強大的Python 庫和工具介紹,以及列表、字典、if 語句、類、文件與異常、代碼測試等內容; 第二部分將理論付諸實踐,講解如何開發(fā)三個項目,包括簡單的Python 2D 游戲開發(fā)如何利用數(shù)據(jù)
    發(fā)表于 04-10 16:53

    ?如何在虛擬環(huán)境中使用 Python,提升你的開發(fā)體驗~

    。RaspberryPiOS預裝了Python3。干擾系統(tǒng)Python安裝可能會給你的操作系統(tǒng)帶來問題。安裝
    的頭像 發(fā)表于 03-25 09:34 ?622次閱讀
    ?如何在虛擬環(huán)境中使用 <b class='flag-5'>Python</b>,提升你的開發(fā)體驗~

    如何檢測極管的三個

    可以用萬用表來初步確定極管的好壞及類型 (NPN 型還是 PNP 型 ),并辨別出e(發(fā)射極)、b(基極)、c(集電極)三個電極。
    發(fā)表于 03-08 16:40

    如何區(qū)分場效應管mos管三個引腳

    場效應管mos管三個引腳怎么區(qū)分
    發(fā)表于 03-07 09:20 ?0次下載

    Linux系統(tǒng)中最重要的三個命令

    Linux劍客是Linux系統(tǒng)中最重要的三個命令,它們以其強大的功能和廣泛的應用場景而聞名。這三個工具的組合使用幾乎可以完美應對Shell中的數(shù)據(jù)分析場景,因此被統(tǒng)稱為Linux
    的頭像 發(fā)表于 03-03 10:37 ?792次閱讀

    使用DDS生成三個信號并在Vivado中實現(xiàn)低通濾波器

    本文使用 DDS 生成三個信號,并在 Vivado 中實現(xiàn)低通濾波器。低通濾波器將濾除相關信號。
    的頭像 發(fā)表于 03-01 14:31 ?2417次閱讀
    使用DDS生成<b class='flag-5'>三個</b>信號并在Vivado中實現(xiàn)低通濾波器

    ADS828的GND引腳有三個,這三個引腳的接地是哪個接數(shù)字地,哪個接模擬地?

    在貴公司的這款AD轉換芯片ADS828的GND引腳有三個(1、16、26)想咨詢一下這三個引腳的接地是哪個接數(shù)字地,哪個接模擬地,還是不用考慮這方面;還有就是在輸出偏置電壓的時候,在為2.5V的時候,是用CM輸出端好,還是用REFT和REFB電阻分壓好?
    發(fā)表于 02-14 08:27

    使用Python實現(xiàn)xgboost教程

    使用Python實現(xiàn)XGBoost模型通常涉及以下幾個步驟:數(shù)據(jù)準備、模型訓練、模型評估和模型預測。以下是一詳細的教程,指導你如何在Python中使用XGBoost。 1. 安裝XG
    的頭像 發(fā)表于 01-19 11:21 ?2191次閱讀

    永磁同步電機FOC控制策略中三相相電流采樣思路分析

    做FOC控制時,需要進行相電流的采樣,而采樣的方式有很多,比較常見的低成本采樣方案是放置三個檢流電阻在逆變橋下管下方,也就是我們常說的電阻采樣,那么電阻采樣的思路是什么呢?大家可以
    發(fā)表于 01-17 19:40

    think-cell——使用JSON數(shù)據(jù)實現(xiàn)自動化(一)

    think-cell 安裝目錄的子文件夾中的文件中找到。JSON 指定要從模板串聯(lián)創(chuàng)建的演示文稿。它符合 的架構 。sample.ppttcppttcppttc/ppttc-schema.json
    的頭像 發(fā)表于 01-02 13:37 ?706次閱讀
    think-cell——使用<b class='flag-5'>JSON</b>數(shù)據(jù)實現(xiàn)自動化(一)