磚運行時的10.1(不支持)
以下版本注釋提供信息數據磚運行10.1和10.1磚運行時的光子,由Apache 3.2.0火花。2021年11月磚發布這些圖片。光子是在公共預覽。
新特性和改進
新的增量表設置壓實小的文件
三角洲表屬性delta.autoOptimize.autoCompact現在接受的新值汽車和遺產除了現有的值真正的和假。當設置為汽車(推薦),汽車壓實使用更好的違約,如設置32 MB作為目標文件大小(盡管違約行為是受變化在未來)。當設置為遺產或真正的、自動壓實使用128 MB作為目標文件大小。
為一個單獨的表,而不是設置這個屬性可以設置spark.databricks.delta.autoCompact.enabled配置汽車,遺產,或真正的為所有三角洲表啟用自動壓實。這個配置優先於相關表屬性在當前會話。
的目標文件的大小可以控製汽車壓實spark.databricks.delta.autoCompact.maxFileSize配置。
Trigger.AvailableNow為Delta source streaming queries
這種變化支持一種新的觸發δ源Scala中的流查詢:Trigger.AvailableNow。這就像Trigger.Once過程中所有可用的數據然後停止查詢。然而,Trigger.AvailableNow提供了更好的可伸縮性,因為可以處理多個批次的數據而不是一個。這種變化也不會引入新的接口;它實現了現有火花API。這個觸發器也支持所有的速率限製選項已經由三角洲作為源。
例子:
火花。readStream。格式(“δ”)。選項(“maxFilesPerTrigger”,“1”)。負載(inputDir)。writeStream。觸發(觸發。AvailableNow)。選項(“checkpointLocation”,checkpointDir)。開始()
看到的報道Trigger.AvailableNow在自動加載器是什麼?。
Trigger.AvailableNow為Auto Loader
Trigger.AvailableNow是一個新的流觸發模式相似嗎Trigger.Once。Trigger.Once查詢過程中所有可用的數據,然後停止。Trigger.AvailableNow具有更好的可伸縮性,因為可以處理多個批次的數據而不是一個。自動加載器現在支持Trigger.AvailableNow在這兩個目錄清單和文件通知Scala的模式。看到的報道Trigger.AvailableNow在自動加載器是什麼?。
三角洲支持Hadoop文件係統配置是通過DataFrame選項
類似於拚花,三角洲現在支持閱讀Hadoop文件係統配置從DataFrameReader和DataFrameWriter選擇表被讀取或寫入時,通過使用DataFrameReader.load(路徑)或DataFrameWriter.save(路徑)。看到為三角洲湖配置存儲憑證。
現在支持異步狀態檢查點狀態流工作(公共預覽版)
異步狀態檢查點是一個潛在的新特性可以減少端到端microbatch延遲與大型國有更新狀態流工作。看到異步狀態檢查點結構化流。
與憑證Sparklyr透傳
現在可以使用sparklyr api來讀取和寫入數據雲存儲通過使用憑據透傳。這個功能是有限的標準與單用戶訪問集群。看到訪問S3與SCIM我憑證透傳(遺留)。
磚實用程序的數據總結精密控製(公共預覽版)
一個新的精確的參數dbutils.data.summarize控製彙總結果的精度。當精確的設置為false(默認),總結返回近似結果不同的計數,百分比,和頻繁項。當精確的被設置為true,總結現在完全不同的計數和頻繁項計數,計算更精確的百分比的估計。看到總結命令(dbutils.data.summarize)。
磚公用事業為R憑證的API
您現在可以使用dbutils.credentials在R筆記本憑據透傳。看到證書效用(dbutils.credentials)。
磚的筆記本現在可以使用IPython內核
現在您可以配置一個磚集群使用IPython內核執行Python代碼。磚上使用IPython內核添加了支持IPython的顯示和輸出的工具。同時,IPython內核捕獲的stdout和stderr輸出子進程創建的一個筆記本,允許輸出包含在筆記本的命令的結果。
有關更多信息,請參見IPython內核。
庫升級
升級的Python庫:
filelock 3.0.12 3.3.1
考拉從1.8.1 1.8.2
情節5.1.0 5.3.0
升級R庫:
bslib 0.3.0 0.3.1
脫字符號從6.0 -88 6.0 -90
cpp11 0.3.1 0.4.0
data.table從1.14.0 to 1.14.2
desc 1.3.0從版本1.4.0
diffobj 0.3.4 0.3.5
摘要從0.6.27 0.6.28
泛型0.1.0 0.1.1
hms 1.1.0 1.1.1
knitr從1.34到1.36
格從0.20 -44 0.20 -45
生命周期從1.0.0 1.0.1
lubridate 1.7.10 1.8.0
mgcv從1.8 -37 1.8 -38
mime從0.11到0.12
從1.2.2 pkgload 1.2.3
progressr 0.8.0 0.9.0
rcmdcheck 1.3.3 1.4.0
readr 2.0.2 2.0.1
食譜0.1.16 0.1.17
2.4.1遙控器從測試盒框
rlang 0.4.11 0.4.12
房車1.0.1 1.0.2中
閃亮的1.6.0 1.7.1上
stringi 1.7.4 1.7.5
testthat 3.0.4 3.1.0
tidyr 1.1.3 1.1.4
tinytex從0.33到0.34
2.1.2 usethis從2.0.1
xfun從0.26到0.27
升級Java庫:
com.zaxxer。HikariCP從3.1.0to 4.0.3
Apache火花
磚10.1運行時包含Apache 3.2.0火花。這個版本包括所有火花修複和改進中磚運行時的10.0(不支持)以及以下額外的bug修複和改進了火花:
(火花- 37037)[SQL]提高字節數組排序統一compareTo UTF8String和中ByteArray的函數
(火花- 37091)[R] SystemRequirements包括Java < 18歲
(火花- 37041)[SQL]補丁蜂巢- 15025:安全套接字層(SSL)對HMS的支持
(火花- 37098)[SQL] Alter table屬性應該緩存失效
(火花- 36992)[SQL]提高字節數組排序性能統一getPrefix UTF8String和中ByteArray的函數
(火花- 37047)[SQL]為二進製字符串添加lpad和rpad功能
(火花- 37076)實現StructType [SQL]。Scala 2.13 toString明確
(火花- 37075)[SQL] UDAF表達建築從SQL / SQL /核心催化劑
(火花- 37084)[SQL] spark.sql.files設置。openCostInBytes, bytesConf
(火花- 37088)[PYSPARK] [SQL]寫線程不能訪問輸入任務完成後偵聽器返回
(火花- 37069)[SQL]蜂巢時適當的回退。getWithoutRegisterFns不可用
(火花- 37050)(PYTHON)更新Conda安裝說明
(火花- 37067)[SQL]使用ZoneId.of()來處理時區DatetimeUtils字符串
(火花- 35925)[SQL]支持DayTimeIntervalType width-bucket函數
(火花- 35926)[SQL]添加支持width_bucket YearMonthIntervalType
(火花- 35973)[SQL]添加命令
顯示目錄(火花- 36922)[SQL]符號/符號函數應該支持ANSI間隔
(火花- 37078)(核心)支持舊水池3參數的構造函數
(火花- 37061)[SQL]修複CustomMetrics當使用內部類
(火花- 35918)(AVRO)統一為讀/寫模式不匹配處理,提高錯誤消息
(火花- 36871)[SQL] CreateViewStatement遷移到v2命令
(火花- 36898)[SQL]使洗牌散列連接因素可配置
(火花- 36921)[SQL]支持ANSI間隔
DIV(火花- 36794)[SQL]忽略重複的連接鍵在構建半/反洗好的散列連接關係
(火花- 36867)[SQL]修複錯誤消息組的別名
(火花- 36914)[SQL]實現dropIndex和listIndexes JDBC (MySQL方言)
(火花- 35531)[SQL]直接通過蜂巢表HiveClient當調用getPartitions來避免不必要的轉換從HiveTable - > CatalogTable - - > HiveTable
(火花- 36718)[SQL]隻有崩潰項目如果我們不重複的昂貴的表達式
(火花- 37046)[SQL]:不保存列情況下改變視圖
(火花- 36978)[SQL] InferConstraints規則應該創建嵌套IsNotNull限製訪問字段,而不是根嵌套類型
(火花- 37052)(核心)火花隻能通過- verbose參數主類是sql時殼
(火花- 37017)[SQL]減少了同步的範圍防止潛在的死鎖
(火花- 37032)[SQL]修複破碎的SQL語法在SQL參考頁麵的鏈接
(火花- 36905)[SQL]解決閱讀蜂巢的觀點不明確的列名
(火花- 36678)默認顯示表遷移到使用V2命令
(火花- 36943)[SQL]改善可讀性失蹤專欄的錯誤消息
(火花- 36980)[SQL]和CTE插入支持查詢
(火花- 37001)[SQL]禁用兩個級別的地圖最後散列默認聚合
(火花- 36970)[SQL]手動禁用格式
B的date_format函數讓Java 17兼容Java 8(火花- 36546)[SQL]添加數組支持聯盟的名字
(火花- 36979)[SQL] RewriteLateralSubquery規則添加到nonExcludableRules
(火花- 36949)[SQL]不允許蜂巢提供者與ANSI間隔表
(火花- 36849)[SQL] UseStatement遷移到v2命令框架
(火花- 36868)[SQL] CreateFunctionStatement遷移到v2命令框架
(火花- 36841)[SQL]添加ansi語法
集目錄xxx改變當前目錄(火花- 36821)[SQL]使類ColumnarBatch可擴展——附錄
(火花- 36963)[SQL]添加max_by / min_by sql.functions
(火花- 36913)[SQL]實現方法createIndex和IndexExists DS V2 JDBC (MySQL方言)
(火花- 36848)[SQL] ShowCurrentNamespaceStatement遷移到v2命令框架
(火花- 36526)[SQL] DSV2索引支持:添加supportsIndex接口
(火花- 36960)[SQL]疊加過濾器與獸人ANSI區間值
(火花- 36929)EliminateSubqueryAliasesSuite # assertEquivalent [SQL]刪除未使用的方法
(火花- 36931)閱讀和寫作[SQL]支持ANSI間隔從/到獸人數據源
(火花- 34980)[SQL] AQE合並分區通過聯盟的支持
(火花- 36809)[SQL]刪除廣播InSubqueryExec用於民進黨
(火花- 36813)[SQL] [PYTHON)提出的基礎設施的連接和imlement ps.merge_asof
(火花- 36918)[SQL]忽視unionByName類型比較的結構
(火花- 36891)[SQL]重構SpecificParquetRecordReaderBase矢量化鋪解碼和添加更多的報道
(火花- 36920)[SQL]支持ANSI間隔
ABS ()(火花- 36888)[SQL]用戶添加測試用例sha2函數
(火花- 36889)[SQL]尊重
spark.sql.parquet.filterPushdown通過v2鋪掃描建設者(火花- 36830)[SQL]支持閱讀和寫作ANSI間隔從/到JSON數據源
(火花- 36870)[SQL]介紹INTERNAL_ERROR錯誤類
(火花- 36831)[SQL]支持閱讀和寫作ANSI間隔從/到CSV數據源。
(火花- 36550)[SQL]傳播導致UDF反射失敗時
(火花- 36866)[SQL]疊加過濾器與ANSI區間值拚花
(火花- 33832)[SQL]力斜加入代碼簡化和改進
(火花- 36642)[SQL]添加df。withMetadata pyspark API
(火花- 35765)[SQL]不同的gg不重複的敏感
(火花- 36825)[SQL]讀/寫dataframes鋪文件從/ ANSI間隔
(火花- 36829)[SQL]零檢查collectionOperators重構
(火花- 32712)[SQL]支持寫蜂巢桶表(蜂巢與蜂巢散列文件格式)
(火花- 36797)[SQL]聯盟應該解決嵌套列作為頂級列
(火花- 36838)[SQL]提高嵌入生成的代碼性能
(火花- 36683)[SQL]添加新的內置的SQL函數:證券交易委員會和CSC
(火花- 36721)[SQL]簡化布爾平等如果一方是文字
(火花- 36760)[SQL] SupportsPushDownV2Filters添加界麵
(火花- 36652)[SQL] AQE動態加入選擇不應適用於non-equi加入
(火花- 36745)[SQL] ExtractEquiJoinKeys應該返回原來的連接鍵上的謂詞
(火花- 36107)[SQL]重構第一套20查詢執行錯誤使用錯誤類
(火花- 32709)[SQL]支持寫蜂巢桶表(拚花與蜂巢散列/獸人格式)
(火花- 36735)[SQL]調整緩存的關係對民進黨的開銷
(火花- 33832)[SQL]支持優化傾斜加入即使引入額外的洗牌
(火花- 36822)[SQL] BroadcastNestedLoopJoinExec應該使用條件而不是non-equi條件
(火花- 35221)[SQL]添加支持的加入檢查提示
(火花- 36814)[SQL]使類ColumnarBatch可擴展
(火花- 36663)[SQL]支持頭號列名在獸人的數據源
(火花- 36751)PYTHON [SQL] [] [R]添加位/ octet_length Scala api, PYTHON和R
(火花- 36733)[SQL]解決性能問題在SchemaPruning結構有許多領域
(火花- 36724)[SQL]支持SessionWindow timestamp_ntz作為時間類型的列
(火花- 36556)[SQL]添加DSV2過濾器
(火花- 36687)[SQL](核心)重命名與_ERROR後綴錯誤類
(火花- 35803)[SQL]支持數據源V2 CreateTempViewUsing
(火花- 36642)[SQL]添加df。withMetadata:語法蘇格dataframe更新元數據
係統環境
操作係統:Ubuntu 20.04.3 LTS
Java:祖魯8.56.0.21-CA-linux64
Scala:2.12.14
Python:3.8.10
R:以下4.4.1
三角洲湖:1.0.0
安裝Python庫
圖書館 |
版本 |
圖書館 |
版本 |
圖書館 |
版本 |
|---|---|---|---|---|---|
Antergos Linux |
2015.10 (ISO-Rolling) |
appdirs |
1.4.4 |
argon2-cffi |
20.1.0 |
async-generator |
1.10 |
attrs |
20.3.0 |
backcall |
0.2.0 |
漂白劑 |
3.3.0 |
boto3 |
1.16.7 |
botocore |
1.19.7 |
certifi |
2020.12.5 |
cffi |
1.14.5 |
chardet |
4.0.0 |
周期計 |
0.10.0 |
Cython |
0.29.23 |
dbus-python |
1.2.16 |
裝飾 |
5.0.6 |
defusedxml |
是0.7.1 |
distlib |
0.3.3 |
distro-info |
0.23 ubuntu1 |
entrypoints |
0.3 |
facets-overview |
1.0.0 |
filelock |
3.3.1 |
idna |
2.10 |
ipykernel |
5.3.4 |
ipython |
7.22.0 |
ipython-genutils |
0.2.0 |
ipywidgets |
7.6.3 |
絕地武士 |
0.17.2 |
Jinja2 |
14 |
jmespath |
0.10.0 |
joblib |
1.0.1 |
jsonschema |
3.2.0 |
jupyter-client |
6.1.12 |
jupyter-core |
4.7.1 |
jupyterlab-pygments |
0.1.2 |
jupyterlab-widgets |
1.0.0 |
kiwisolver |
1.3.1 |
考拉 |
1.8.2 |
MarkupSafe |
2.0.1 |
matplotlib |
3.4.2 |
使走調 |
0.8.4 |
nbclient |
0.5.3 |
nbconvert |
6.0.7 |
nbformat |
5.1.3 |
nest-asyncio |
1.5.1 |
筆記本 |
6.3.0 |
numpy |
1.19.2 |
包裝 |
20.9 |
熊貓 |
1.2.4 |
pandocfilters |
3 |
parso |
0.7.0 |
容易受騙的人 |
0.5.1 |
pexpect |
4.8.0 |
pickleshare |
0.7.5 |
枕頭 |
8.2.0 |
皮普 |
21.0.1 |
情節 |
5.3.0 |
prometheus-client |
0.10.1 |
prompt-toolkit |
3.0.17 |
protobuf |
3.17.2 |
psycopg2 |
2.8.5 |
ptyprocess |
0.7.0 |
pyarrow |
4.0.0 |
pycparser |
2.20 |
Pygments |
2.8.1發布 |
PyGObject |
3.36.0 |
pyparsing |
2.4.7 |
pyrsistent |
0.17.3 |
python-apt |
2.0.0 + ubuntu0.20.4.6 |
python-dateutil |
2.8.1發布 |
pytz |
2020.5 |
pyzmq |
20.0.0 |
請求 |
2.25.1 |
requests-unixsocket |
0.2.0 |
s3transfer |
0.3.7 |
scikit-learn |
0.24.1 |
scipy |
1.6.2 |
seaborn |
0.11.1 |
Send2Trash |
1.5.0 |
setuptools |
52.0.0 |
六個 |
1.15.0 |
ssh-import-id |
5.10 |
statsmodels |
0.12.2 |
韌性 |
8.0.1 |
terminado |
0.9.4 |
testpath |
0.4.4 |
threadpoolctl |
魅惑 |
龍卷風 |
6.1 |
traitlets |
5.0.5 |
unattended-upgrades |
0.1 |
urllib3 |
1.25.11 |
virtualenv |
20.4.1 |
wcwidth |
0.2.5 |
webencodings |
0.5.1 |
輪 |
0.36.2 |
widgetsnbextension |
3.5.1 |
安裝R庫
R庫的安裝微軟在2021-10-26凹口快照。
圖書館 |
版本 |
圖書館 |
版本 |
圖書館 |
版本 |
|---|---|---|---|---|---|
askpass |
1.1 |
為了 |
0.2.1 |
補丁 |
1.2.1 " |
基地 |
以下4.4.1 |
base64enc |
0.1 - 3 |
位 |
4.0.4 |
bit64 |
你 |
團 |
1.2.2 |
引導 |
-28 - 1.3 |
釀造 |
1.0 6 |
生動 |
1.1.2 |
掃帚 |
0.7.9 |
bslib |
0.3.1 |
cachem |
1.0.6 |
callr |
3.7.0 |
脫字符號 |
-90 - 6.0 |
cellranger |
1.1.0 |
時間 |
-56 - 2.3 |
類 |
-19 - 7.3 |
cli |
3.0.1 |
clipr |
是0.7.1 |
集群 |
2.1.2 |
codetools |
-18 - 0.2 |
色彩 |
2.0 - 2 |
commonmark |
1.7 |
編譯器 |
以下4.4.1 |
配置 |
0.3.1 |
cpp11 |
0.4.0 |
蠟筆 |
1.4.1 |
憑證 |
1.3.1 |
旋度 |
4.3.2 |
data.table |
1.14.2 |
數據集 |
以下4.4.1 |
DBI |
1.1.1 |
dbplyr |
2.1.1 |
desc |
1.4.0 |
devtools |
2.4.2 |
diffobj |
0.3.5 |
消化 |
0.6.28 |
dplyr |
1.0.7 |
dtplyr |
1.1.0 |
e1071 |
1.7 9 |
省略 |
0.3.2 |
評估 |
0.14 |
fansi |
0.5.0 |
farver |
魅惑 |
fastmap |
1.1.0 |
fontawesome |
0.2.2 |
forcats |
0.5.1 |
foreach |
1.5.1 |
外國 |
-81 - 0.8 |
打造 |
0.2.0 |
fs |
1.5.0 |
未來 |
1.22.1 |
future.apply |
1.8.1 |
含漱劑 |
1.2.0 |
泛型 |
0.1.1 |
哥特 |
1.4.1 |
ggplot2 |
3.3.5 |
“大酒店” |
1.3.0 |
gitcreds |
0.1.1 |
glmnet |
4.1 - 2 |
全局變量 |
0.14.0 |
膠水 |
1.4.2 |
googledrive |
2.0.0 |
googlesheets4 |
1.0.0 |
高爾 |
0.2.2 |
圖形 |
以下4.4.1 |
grDevices |
以下4.4.1 |
網格 |
以下4.4.1 |
gridExtra |
2.3 |
gsubfn |
0.7 |
gtable |
0.3.0 |
還 |
2.4.3 |
highr |
0.9 |
hms |
1.1.1 |
htmltools |
0.5.2 |
htmlwidgets |
1.5.4 |
httpuv |
1.6.3 |
httr |
1.4.2 |
hwriter |
1.3.2 |
hwriterPlus |
1.0 - 3 |
id |
1.0.1 |
ini |
0.3.1 |
不小 |
-12 - 0.9 |
isoband |
0.2.5 |
迭代器 |
1.0.13 |
jquerylib |
0.1.4 |
jsonlite |
1.7.2 |
KernSmooth |
-20 - 2.23 |
knitr |
1.36 |
標簽 |
0.4.2 |
晚些時候 |
1.3.0 |
晶格 |
-45 - 0.20 |
熔岩 |
1.6.10 |
生命周期 |
1.0.1 |
listenv |
0.8.0 |
lubridate |
1.8.0 |
magrittr |
2.0.1 |
減價 |
1.1 |
質量 |
-54 - 7.3 |
矩陣 |
1.3 - 4 |
memoise |
2.0.0 |
方法 |
以下4.4.1 |
mgcv |
-38 - 1.8 |
mime |
0.12 |
ModelMetrics |
1.2.2.2 |
modelr |
0.1.8 |
孟塞爾 |
0.5.0 |
nlme |
-152 - 3.1 |
nnet |
-16 - 7.3 |
numDeriv |
2016.8 - -1.1 |
openssl |
1.4.5 |
平行 |
以下4.4.1 |
平行 |
1.28.1 |
支柱 |
1.6.4, |
pkgbuild |
1.2.0 |
pkgconfig |
2.0.3 |
pkgload |
1.2.3 |
plogr |
0.2.0 |
plyr |
1.8.6 |
讚美 |
1.0.0 |
prettyunits |
1.1.1 |
pROC |
1.18.0 |
processx |
3.5.2 |
prodlim |
2019.11.13 |
進步 |
1.2.2 |
progressr |
0.9.0 |
承諾 |
1.2.0.1 |
原型 |
1.0.0 |
代理 |
-26 - 0.4 |
ps |
1.6.0 |
purrr |
0.3.4 |
r2d3 |
0.2.5 |
R6 |
2.5.1 |
randomForest |
-14 - 4.6 |
rappdirs |
0.3.3 |
rcmdcheck |
1.4.0 |
RColorBrewer |
1.1 - 2 |
Rcpp |
1.0.7 |
readr |
2.0.2 |
readxl |
1.3.1 |
食譜 |
0.1.17 |
複賽 |
1.0.1 |
rematch2 |
2.1.2 |
遙控器 |
2.4.1 |
reprex |
2.0.1 |
reshape2 |
1.4.4 |
rlang |
0.4.12 |
rmarkdown |
2.11 |
RODBC |
-19 - 1.3 |
roxygen2 |
7.1.2 |
rpart |
-15 - 4.1 |
rprojroot |
2.0.2 |
Rserve |
1.8 8 |
RSQLite |
2.2.8 |
rstudioapi |
0.13 |
rversions |
2.1.1 |
房車 |
1.0.2中 |
薩斯 |
0.4.0 |
尺度 |
1.1.1 |
selectr |
0.4 - 2 |
sessioninfo |
1.1.1 |
形狀 |
1.4.6 |
閃亮的 |
1.7.1上 |
sourcetools |
0.1.7 |
sparklyr |
1.7.2 |
SparkR |
3.2.0 |
空間 |
-11 - 7.3 |
樣條函數 |
以下4.4.1 |
sqldf |
-11 - 0.4 |
SQUAREM |
2021.1 |
統計數據 |
以下4.4.1 |
stats4 |
以下4.4.1 |
stringi |
1.7.5 |
stringr |
1.4.0 |
生存 |
-13 - 3.2 |
sys |
3.4 |
tcltk |
以下4.4.1 |
TeachingDemos |
2.10 |
testthat |
3.1.0 |
寵物貓 |
3.1.5 |
tidyr |
1.1.4 |
tidyselect |
1.1.1 |
tidyverse |
1.3.1 |
timeDate |
3043.102 |
tinytex |
0.34 |
工具 |
以下4.4.1 |
tzdb |
0.1.2 |
usethis |
2.1.2 |
use utf8 |
1.2.2 |
跑龍套 |
以下4.4.1 |
uuid |
0.1 - 4 |
vctrs |
0.3.8 |
viridisLite |
0.4.0 |
發嗚嗚聲 |
1.5.5 |
沃爾多 |
0.3.1 |
晶須 |
0.4 |
withr |
2.4.2 |
xfun |
0.27 |
xml2 |
1.3.2 |
xopen |
1.0.0 |
xtable |
1.8 - 4 |
yaml |
2.2.1 |
郵政編碼 |
2.2.0 |
安裝了Java和Scala庫(Scala 2.12集群版)
組ID |
工件ID |
版本 |
|---|---|---|
antlr |
antlr |
2.7.7 |
com.amazonaws |
amazon-kinesis-client |
1.12.0 |
com.amazonaws |
aws-java-sdk-autoscaling |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudformation |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudfront |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudhsm |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudsearch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudtrail |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatch |
1.11.655 |
com.amazonaws |
aws-java-sdk-cloudwatchmetrics |
1.11.655 |
com.amazonaws |
aws-java-sdk-codedeploy |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitoidentity |
1.11.655 |
com.amazonaws |
aws-java-sdk-cognitosync |
1.11.655 |
com.amazonaws |
aws-java-sdk-config |
1.11.655 |
com.amazonaws |
aws-java-sdk-core |
1.11.655 |
com.amazonaws |
aws-java-sdk-datapipeline |
1.11.655 |
com.amazonaws |
aws-java-sdk-directconnect |
1.11.655 |
com.amazonaws |
aws-java-sdk-directory |
1.11.655 |
com.amazonaws |
aws-java-sdk-dynamodb |
1.11.655 |
com.amazonaws |
aws-java-sdk-ec2 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ecs |
1.11.655 |
com.amazonaws |
aws-java-sdk-efs |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticache |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticbeanstalk |
1.11.655 |
com.amazonaws |
aws-java-sdk-elasticloadbalancing |
1.11.655 |
com.amazonaws |
aws-java-sdk-elastictranscoder |
1.11.655 |
com.amazonaws |
aws-java-sdk-emr |
1.11.655 |
com.amazonaws |
aws-java-sdk-glacier |
1.11.655 |
com.amazonaws |
aws-java-sdk-glue |
1.11.655 |
com.amazonaws |
aws-java-sdk-iam |
1.11.655 |
com.amazonaws |
aws-java-sdk-importexport |
1.11.655 |
com.amazonaws |
aws-java-sdk-kinesis |
1.11.655 |
com.amazonaws |
aws-java-sdk-kms |
1.11.655 |
com.amazonaws |
aws-java-sdk-lambda |
1.11.655 |
com.amazonaws |
aws-java-sdk-logs |
1.11.655 |
com.amazonaws |
aws-java-sdk-machinelearning |
1.11.655 |
com.amazonaws |
aws-java-sdk-opsworks |
1.11.655 |
com.amazonaws |
aws-java-sdk-rds |
1.11.655 |
com.amazonaws |
aws-java-sdk-redshift |
1.11.655 |
com.amazonaws |
aws-java-sdk-route53 |
1.11.655 |
com.amazonaws |
aws-java-sdk-s3 |
1.11.655 |
com.amazonaws |
aws-java-sdk-ses |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpledb |
1.11.655 |
com.amazonaws |
aws-java-sdk-simpleworkflow |
1.11.655 |
com.amazonaws |
aws-java-sdk-sns |
1.11.655 |
com.amazonaws |
aws-java-sdk-sqs |
1.11.655 |
com.amazonaws |
aws-java-sdk-ssm |
1.11.655 |
com.amazonaws |
aws-java-sdk-storagegateway |
1.11.655 |
com.amazonaws |
aws-java-sdk-sts |
1.11.655 |
com.amazonaws |
aws-java-sdk-support |
1.11.655 |
com.amazonaws |
aws-java-sdk-swf-libraries |
1.11.22 |
com.amazonaws |
aws-java-sdk-workspaces |
1.11.655 |
com.amazonaws |
jmespath-java |
1.11.655 |
com.chuusai |
shapeless_2.12 |
2.3.3 |
com.clearspring.analytics |
流 |
2.9.6 |
com.databricks |
Rserve |
1.8 - 3 |
com.databricks |
jets3t |
0.7.1-0 |
com.databricks.scalapb |
compilerplugin_2.12 |
0.4.15-10 |
com.databricks.scalapb |
scalapb-runtime_2.12 |
0.4.15-10 |
com.esotericsoftware |
kryo-shaded |
4.0.2 |
com.esotericsoftware |
minlog |
1.3.0 |
com.fasterxml |
同學 |
1.3.4 |
com.fasterxml.jackson.core |
jackson-annotations |
2.12.2 |
com.fasterxml.jackson.core |
jackson-core |
2.12.2 |
com.fasterxml.jackson.core |
jackson-databind |
2.12.2 |
com.fasterxml.jackson.dataformat |
jackson-dataformat-cbor |
2.12.2 |
com.fasterxml.jackson.datatype |
jackson-datatype-joda |
2.12.2 |
com.fasterxml.jackson.module |
jackson-module-paranamer |
2.12.2 |
com.fasterxml.jackson.module |
jackson-module-scala_2.12 |
2.12.2 |
com.github.ben-manes.caffeine |
咖啡因 |
2.3.4 |
com.github.fommil |
jniloader |
1.1 |
com.github.fommil.netlib |
核心 |
1.1.2 |
com.github.fommil.netlib |
native_ref-java |
1.1 |
com.github.fommil.netlib |
native_ref-java-natives |
1.1 |
com.github.fommil.netlib |
native_system-java |
1.1 |
com.github.fommil.netlib |
native_system-java-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_ref-linux-x86_64-natives |
1.1 |
com.github.fommil.netlib |
netlib-native_system-linux-x86_64-natives |
1.1 |
com.github.luben |
zstd-jni |
1.5.0-4 |
com.github.wendykierp |
JTransforms |
3.1 |
com.google.code.findbugs |
jsr305 |
3.0.0 |
com.google.code.gson |
gson |
2.8.6 |
com.google.crypto.tink |
叮叮鈴 |
1.6.0 |
com.google.flatbuffers |
flatbuffers-java |
1.9.0 |
com.google.guava |
番石榴 |
15.0 |
com.google.protobuf |
protobuf-java |
2.6.1 |
com.h2database |
h2 |
1.4.195 |
com.helger |
分析器 |
1.1.1 |
com.jcraft |
jsch |
0.1.50 |
com.jolbox |
bonecp |
0.8.0.RELEASE |
com.lihaoyi |
sourcecode_2.12 |
0.1.9 |
com.microsoft.azure |
azure-data-lake-store-sdk |
2.3.9 |
com.microsoft.sqlserver |
mssql-jdbc |
9.2.1.jre8 |
com.ning |
compress-lzf |
1.0.3 |
com.sun.istack |
istack-commons-runtime |
3.0.8 |
com.sun.mail |
javax.mail |
1.5.2 |
com.tdunning |
json |
1.8 |
com.thoughtworks.paranamer |
paranamer |
2.8 |
com.trueaccord.lenses |
lenses_2.12 |
0.4.12 |
com.twitter |
chill-java |
0.10.0 |
com.twitter |
chill_2.12 |
0.10.0 |
com.twitter |
util-app_2.12 |
7.1.0 |
com.twitter |
util-core_2.12 |
7.1.0 |
com.twitter |
util-function_2.12 |
7.1.0 |
com.twitter |
util-jvm_2.12 |
7.1.0 |
com.twitter |
util-lint_2.12 |
7.1.0 |
com.twitter |
util-registry_2.12 |
7.1.0 |
com.twitter |
util-stats_2.12 |
7.1.0 |
com.typesafe |
配置 |
1.2.1 " |
com.typesafe.scala-logging |
scala-logging_2.12 |
3.7.2章 |
com.univocity |
univocity-parsers |
2.9.1 |
com.zaxxer |
HikariCP |
4.0.3 |
commons-cli |
commons-cli |
1.2 |
commons-codec |
commons-codec |
1.15 |
commons-collections |
commons-collections |
3.2.2 |
commons-dbcp |
commons-dbcp |
1.4 |
commons-fileupload |
commons-fileupload |
1.3.3 |
commons-httpclient |
commons-httpclient |
3.1 |
commons-io |
commons-io |
2.8.0 |
commons lang |
commons lang |
2.6 |
通用日誌 |
通用日誌 |
1.1.3 |
commons net |
commons net |
3.1 |
commons-pool |
commons-pool |
1.5.4 |
dev.ludovic.netlib |
arpack |
1.3.2 |
dev.ludovic.netlib |
布拉斯特區 |
1.3.2 |
dev.ludovic.netlib |
lapack |
1.3.2 |
蜂巢3.2 - 2.3 - __hadoop - |
jets3t - 0.7 |
liball_deps_2.12 |
info.ganglia.gmetric4j |
gmetric4j |
1.0.10 |
io.airlift |
aircompressor |
0.19 |
io.delta |
delta-sharing-spark_2.12 |
0.2.0 |
io.dropwizard.metrics |
metrics-core |
以下4.4.1 |
io.dropwizard.metrics |
metrics-graphite |
以下4.4.1 |
io.dropwizard.metrics |
metrics-healthchecks |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jetty9 |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jmx |
以下4.4.1 |
io.dropwizard.metrics |
metrics-json |
以下4.4.1 |
io.dropwizard.metrics |
metrics-jvm |
以下4.4.1 |
io.dropwizard.metrics |
metrics-servlets |
以下4.4.1 |
io.netty |
netty-all |
4.1.63.Final |
io.prometheus |
simpleclient |
0.7.0 |
io.prometheus |
simpleclient_common |
0.7.0 |
io.prometheus |
simpleclient_dropwizard |
0.7.0 |
io.prometheus |
simpleclient_pushgateway |
0.7.0 |
io.prometheus |
simpleclient_servlet |
0.7.0 |
io.prometheus.jmx |
收集器 |
0.12.0 |
jakarta.annotation |
jakarta.annotation-api |
1.3.5 |
jakarta.servlet |
jakarta.servlet-api |
4.0.3 |
jakarta.validation |
jakarta.validation-api |
2.0.2 |
jakarta.ws.rs |
jakarta.ws.rs-api |
2.1.6 |
javax.activation |
激活 |
1.1.1 |
javax.annotation |
javax.annotation-api |
1.3.2 |
javax.el |
javax.el-api |
2.2.4 |
javax.jdo |
jdo api |
3.0.1 |
javax.transaction |
jta |
1.1 |
javax.transaction |
事務api |
1.1 |
javax.xml.bind |
jaxb-api |
2.2.2 |
javax.xml.stream |
stax-api |
1.0 - 2 |
javolution |
javolution |
5.5.1 |
jline |
jline |
2.14.6 |
joda-time |
joda-time |
2.10.5 |
log4j |
apache-log4j-extras |
1.2.17 |
log4j |
log4j |
1.2.17 |
maven-trees |
蜂巢3.2 - 2.3 - __hadoop - |
liball_deps_2.12 |
net.java.dev.jna |
jna |
5.8.0 |
net.razorvine |
地幔岩 |
4.30 |
net.sf.jpam |
jpam |
1.1 |
net.sf.opencsv |
opencsv |
2.3 |
net.sf.supercsv |
super-csv |
2.2.0 |
net.snowflake |
snowflake-ingest-sdk |
0.9.6 |
net.snowflake |
snowflake-jdbc |
3.13.3 |
net.snowflake |
spark-snowflake_2.12 |
2.9.0-spark_3.1 |
net.sourceforge.f2j |
arpack_combined_all |
0.1 |
org.acplt.remotetea |
remotetea-oncrpc |
1.1.2 |
org.antlr |
ST4 |
4.0.4 |
org.antlr |
antlr-runtime |
3.5.2 |
org.antlr |
antlr4-runtime |
4.8 |
org.antlr |
stringtemplate |
3.2.1之上 |
org.apache.ant |
螞蟻 |
1.9.2 |
org.apache.ant |
ant-jsch |
1.9.2 |
org.apache.ant |
ant-launcher |
1.9.2 |
org.apache.arrow |
arrow-format |
2.0.0 |
org.apache.arrow |
arrow-memory-core |
2.0.0 |
org.apache.arrow |
arrow-memory-netty |
2.0.0 |
org.apache.arrow |
arrow-vector |
2.0.0 |
org.apache.avro |
avro |
1.10.2 |
org.apache.avro |
avro-ipc |
1.10.2 |
org.apache.avro |
avro-mapred |
1.10.2 |
org.apache.commons |
commons-compress |
1.20 |
org.apache.commons |
commons-crypto |
1.1.0 |
org.apache.commons |
commons-lang3 |
3.12.0 |
org.apache.commons |
commons-math3 |
3.4.1 |
org.apache.commons |
commons-text |
1.6 |
org.apache.curator |
curator-client |
2.13.0 |
org.apache.curator |
curator-framework |
2.13.0 |
org.apache.curator |
curator-recipes |
2.13.0 |
org.apache.derby |
德比 |
10.14.2.0 |
org.apache.hadoop |
hadoop-client-api |
3.3.1-databricks |
org.apache.hadoop |
hadoop-client-runtime |
3.3.1 |
org.apache.hive |
hive-beeline |
2.3.9 |
org.apache.hive |
hive-cli |
2.3.9 |
org.apache.hive |
hive-jdbc |
2.3.9 |
org.apache.hive |
hive-llap-client |
2.3.9 |
org.apache.hive |
hive-llap-common |
2.3.9 |
org.apache.hive |
hive-serde |
2.3.9 |
org.apache.hive |
hive-shims |
2.3.9 |
org.apache.hive |
hive-storage-api |
2.7.2 |
org.apache.hive.shims |
蜂巢0.23 -墊片 |
2.3.9 |
org.apache.hive.shims |
hive-shims-common |
2.3.9 |
org.apache.hive.shims |
hive-shims-scheduler |
2.3.9 |
org.apache.htrace |
htrace-core4 |
4.1.0-incubating |
org.apache.httpcomponents |
httpclient |
4.5.13 |
org.apache.httpcomponents |
httpcore |
4.4.12 |
org.apache.ivy |
艾薇 |
2.5.0 |
org.apache.mesos |
mesos-shaded-protobuf |
1.4.0 |
org.apache.orc |
orc-core |
1.6.10 |
org.apache.orc |
orc-mapreduce |
1.6.10 |
org.apache.orc |
orc-shims |
1.6.10 |
org.apache.parquet |
parquet-column |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-common |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-encoding |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-format-structures |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-hadoop |
1.12.0-databricks-0003 |
org.apache.parquet |
parquet-jackson |
1.12.0-databricks-0003 |
org.apache.thrift |
libfb303 |
0.9.3 |
org.apache.thrift |
libthrift |
0.12.0 |
org.apache.xbean |
xbean-asm9-shaded |
4.20 |
org.apache.yetus |
audience-annotations |
0.5.0 |
org.apache.zookeeper |
動物園管理員 |
操作 |
org.apache.zookeeper |
zookeeper-jute |
操作 |
org.checkerframework |
checker-qual |
3.5.0 |
org.codehaus.jackson |
jackson-core-asl |
1.9.13 |
org.codehaus.jackson |
jackson-mapper-asl |
1.9.13 |
org.codehaus.janino |
commons-compiler |
3.0.16 |
org.codehaus.janino |
janino |
3.0.16 |
org.datanucleus |
datanucleus-api-jdo |
4.2.4 |
org.datanucleus |
datanucleus-core |
4.1.17 |
org.datanucleus |
datanucleus-rdbms |
4.1.19 |
org.datanucleus |
javax.jdo |
3.2.0-m3 |
org.eclipse.jetty |
jetty-client |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-continuation |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-http |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-io |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-jndi |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-plus |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-proxy |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-security |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty服務器 |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty servlet |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-servlets |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-util |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-util-ajax |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-webapp |
9.4.40.v20210413 |
org.eclipse.jetty |
jetty-xml |
9.4.40.v20210413 |
org.eclipse.jetty.websocket |
websocket-api |
9.4.40.v20210413 |
org.eclipse.jetty.websocket |
websocket-client |
9.4.40.v20210413 |
org.eclipse.jetty.websocket |
websocket-common |
9.4.40.v20210413 |
org.eclipse.jetty.websocket |
websocket服務器 |
9.4.40.v20210413 |
org.eclipse.jetty.websocket |
websocket-servlet |
9.4.40.v20210413 |
org.fusesource.leveldbjni |
leveldbjni-all |
1.8 |
org.glassfish.hk2 |
hk2-api |
2.6.1 |
org.glassfish.hk2 |
hk2-locator |
2.6.1 |
org.glassfish.hk2 |
hk2-utils |
2.6.1 |
org.glassfish.hk2 |
osgi-resource-locator |
1.0.3 |
org.glassfish.hk2.external |
aopalliance-repackaged |
2.6.1 |
org.glassfish.hk2.external |
jakarta.inject |
2.6.1 |
org.glassfish.jaxb |
jaxb運行時 |
2.3.2 |
org.glassfish.jersey.containers |
jersey-container-servlet |
2.34 |
org.glassfish.jersey.containers |
jersey-container-servlet-core |
2.34 |
org.glassfish.jersey.core |
jersey客戶端 |
2.34 |
org.glassfish.jersey.core |
jersey-common |
2.34 |
org.glassfish.jersey.core |
jersey-server |
2.34 |
org.glassfish.jersey.inject |
jersey-hk2 |
2.34 |
org.hibernate.validator |
hibernate驗證框架 |
6.1.0.Final |
org.javassist |
javassist |
3.25.0-GA |
org.jboss.logging |
jboss-logging |
3.3.2.Final |
org.jdbi |
jdbi |
2.63.1 |
org.jetbrains |
注釋 |
17.0.0 |
org.joda |
joda-convert |
1.7 |
org.jodd |
jodd-core |
3.5.2 |
org.json4s |
json4s-ast_2.12 |
3.7.0-M11 |
org.json4s |
json4s-core_2.12 |
3.7.0-M11 |
org.json4s |
json4s-jackson_2.12 |
3.7.0-M11 |
org.json4s |
json4s-scalap_2.12 |
3.7.0-M11 |
org.lz4 |
lz4-java |
1.7.1上 |
org.mariadb.jdbc |
mariadb-java-client |
2.2.5 |
org.objenesis |
objenesis |
2.5.1 |
org.postgresql |
postgresql |
42.2.19 |
org.roaringbitmap |
RoaringBitmap |
0.9.14 |
org.roaringbitmap |
墊片 |
0.9.14 |
org.rocksdb |
rocksdbjni |
6.20.3 |
org.rosuda.REngine |
REngine |
魅惑 |
org.scala-lang |
scala-compiler_2.12 |
2.12.14 |
org.scala-lang |
scala-library_2.12 |
2.12.14 |
org.scala-lang |
scala-reflect_2.12 |
2.12.14 |
org.scala-lang.modules |
scala-collection-compat_2.12 |
2.4.3 |
org.scala-lang.modules |
scala-parser-combinators_2.12 |
1.1.2 |
org.scala-lang.modules |
scala-xml_2.12 |
1.2.0 |
org.scala-sbt |
測試界麵 |
1.0 |
org.scalacheck |
scalacheck_2.12 |
1.14.2 |
org.scalactic |
scalactic_2.12 |
3.0.8 |
org.scalanlp |
breeze-macros_2.12 |
1.0 |
org.scalanlp |
breeze_2.12 |
1.0 |
org.scalatest |
scalatest_2.12 |
3.0.8 |
org.slf4j |
jcl-over-slf4j |
1.7.30 |
org.slf4j |
jul-to-slf4j |
1.7.30 |
org.slf4j |
slf4j-api |
1.7.30 |
org.slf4j |
slf4j-log4j12 |
1.7.30 |
org.spark-project.spark |
未使用的 |
1.0.0 |
org.springframework |
spring核心 |
4.1.4.RELEASE |
org.springframework |
spring測試 |
4.1.4.RELEASE |
org.threeten |
threeten-extra |
1.5.0 |
org.tukaani |
xz |
1.8 |
org.typelevel |
algebra_2.12 |
2.0.0-M2 |
org.typelevel |
cats-kernel_2.12 |
2.0.0-M4 |
org.typelevel |
machinist_2.12 |
0.6.8 |
org.typelevel |
macro-compat_2.12 |
1.1.1 |
org.typelevel |
spire-macros_2.12 |
0.17.0-M1 |
org.typelevel |
spire-Beplay体育安卓版本platform_2.12 |
0.17.0-M1 |
org.typelevel |
spire-util_2.12 |
0.17.0-M1 |
org.typelevel |
spire_2.12 |
0.17.0-M1 |
org.wildfly.openssl |
wildfly-openssl |
1.0.7.Final |
org.xerial |
sqlite-jdbc |
3.8.11.2 |
org.xerial.snappy |
snappy-java |
1.1.8.4 |
org.yaml |
snakeyaml |
1.24 |
奧羅 |
奧羅 |
2.0.8 |
pl.edu.icm |
JLargeArrays |
1.5 |
software.amazon.ion |
ion-java |
1.0.2中 |
stax |
stax-api |
1.0.1 |