一、HDFS多目錄存盤1.1 生產環境服務器磁盤情況1.2 在hdfs-site.xml檔案中配置多個目錄，需要注意新掛載磁盤的訪問權限問題。 HDFS中DataNode節點保存資料的路徑由dfs.datanode.data.dir引數決定，其默認值為file://${hadoop.tmp.dir}/dfs/data，若服務器中有多個磁盤，必須對改引數進行修改。如服務器磁盤如上圖所示，則該引數應修改為如下的值。<property> <name&g......
2021-08-23 more現在有很多人參加Python培訓學習Python開發技術，但是參加Python培訓真的那么好嗎?學習Python開發在將來就業的時候有什么優勢呢?今天，小編就以上問題探討一下。學習Python開發有什么優勢？1、如果想成為一名程式員的話，那就快點學會Python吧!相對于Java、C語言等，Python簡單易學，更適合沒有編程基礎的小白入門。Python 的語言沒有多少儀式化的東西，所以就算不是一個 Python 專家，你也能讀懂它的代碼。Python撰寫代碼的速度非常的快，而且非常注重代碼的可...
2021-08-23 more筆者在某大型國企從事大資料架構、資料治理與可視化作業，在完成大資料架構搭建的基礎上，對于有條件的大型國企、央企，可在進行資料治理的同時進行資料的可視化作業。資料可視化可通過開源的工具如SuperSet，也可通過一系列商用的工具如DataV、FineBI等。由于筆者單位屬于涉密性質，要求能提供可視化工具的廠商有對應的涉密資質。因此綜合多個維度，在于各家廠商談判的基礎上，進行了產品的比對的分析。共分為三擋。 一檔產品：性價比高，對航天支持力度大，技術過關，報價優惠1.億信2.美林資料（Tempo BI....
2021-08-23 moreRabbitMQMQ全稱為Message Queue,即訊息佇列，RabbitMQ是由erlang語言開發，基于AMQP(Advanced Message Queue高級訊息佇列協議)協議實作的訊息佇列，它是一種應用程式之間的通訊方式，訊息佇列在分布式系統應用非常廣泛。應用場景任務異步處理將不需要同步處理的并且消耗時長的操作由訊息佇列接收進行異步處理，可以提高程式的回應時間應用程式解耦合MQ相當于一個中介，生產方式通過MQ與消費方互動，它將應用程式進行解耦合常用的訊息佇列Act...
2021-08-23 more這一塊的內容主要是有關死鎖、執行緒間通信、執行緒組、執行緒池以及定時器的內容。這一部分的內容，如果想搞得比較明白，最好先看一下上一篇大資料進階25的內容。地址如下：大資料進階25-多執行緒Lock在上一篇大資料 進階25-多執行緒 里面，雖然我們可以理解同步代碼塊和同步方法的鎖物件問題，但是我們并沒有直接看到在哪里上了鎖，在哪里釋放了鎖，為了更清晰的表達如何加鎖和釋放鎖，JDK5之后提供了一個新的鎖物件LockLock（介面）：void lock() 獲得鎖，加鎖void unlock() 釋放鎖子...
2021-08-23 more1.在Kafka的設計中，選擇了使用Zookeeper來進行所有Broker的管理，體現在zookeeper上會有一個專門用來進行Broker服務器串列記錄的點，節點路徑為/brokers/ids每個Broker服務器在啟動時，都會到Zookeeper上進行注冊，即創建/brokers/ids/[0-N]的節點，然后寫入IP，埠等資訊，Broker創建的是臨時節點，所有一旦Broker上線或者下線，對應Broker節點也就被洗掉了，因此我們可以通過zookeeper上Broker節點的變化來動態表征B...
2021-08-23 more區別：內部表--如果創建的表為內部表，在進行洗掉表的時候，元資料（mysql中的）和真實的資料（HDFS中存盤的）都會被洗掉 外部表-- 在Hive中洗掉表的時候，只會把自己當前Mysql中所存的元資料洗掉掉，而真實的資料依然存在HDFS中，不會影響；轉換：----外部表轉換成內部表alter table 外部表 set tblproperties ('EXTERNAL'='False');----內部表轉換成外部表alter table 內部表 ......
2021-08-23 more1、安裝Kafka使用brew安裝Kafkabrew install kafka安裝完之后，會在/usr/local/Cellar目錄下生成kafka和zookeeper兩個檔案夾kafka安裝目錄與組態檔路徑如下所示，Kafka的默認埠號是9092Kafka的集群管理依賴于ZooKeeper，ZooKeeper的默認埠號是2182# kafka安裝目錄/usr/local/Cellar/kafka/2.8.0?# kafka組態檔目錄/usr/local/etc...
2021-08-23 moreSpark廣播變數實作原理及基礎編程實作原理廣播變數用來高效分發較大的物件。向所有作業節點發送一個較大的只讀值，以供一個或多個 Spark 操作使用。比如，如果你的應用需要向所有節點發送一個較大的只讀查詢表，廣播變數用起來都很順手。在多個并行操作中使用同一個變數，但是 Spark 會為每個任務分別發送。基礎編程pom<properties> <maven.compiler.source>8</maven.compiler.source> &l...
2021-08-23 more文章目錄題目思路AC代碼識訓題目描述的很簡單，注意系數有可能是浮點數要用double存。思路其實思路很簡單，不需要使用map與vector。用一個結構體存盤每一項，有系數還有冪指數，然后第一次全部輸入，第二次輸入判斷這個結構體陣列中有沒有這個數，有的話就加上，沒有的話就在后面繼續接上即可。AC代碼#include <iostream>#include <algorithm>using namespace std;struct num_I { int c_num...
2021-08-23 more如何從xshell上傳檔案到centos linux虛擬機里及：虛擬機CentOs下執行 yum -y install lrzsz命令，出現錯誤：鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示：其實很簡單，往虛擬機上安裝一個上傳檔案的工具 ......
uj5u.com 2020-09-10 02:00:47 more一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號， sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求，SQLMAP可以從一個文本檔案中 ......
uj5u.com 2020-09-10 02:00:50 moremetasploit 簡單使用教程 浩先生， 2020-08-28 16:18:25 分類專欄： kail 網路安全 linux 文章標簽： linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么？ 二、準備作業 三、具體步驟 前言 Msfconsole ......
uj5u.com 2020-09-10 02:00:53 more驅動層代碼： #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......
uj5u.com 2020-09-10 02:00:56 more北斗電力時鐘（北斗授時服務器）讓網路資料更精準 北斗電力時鐘（北斗授時服務器）讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年，資訊技術的得了快速發展，互聯網在逐漸普及，其在人們生活和生產中都得到了廣泛應用，并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用，一方面使電力系統的運行 ......
uj5u.com 2020-09-10 02:01:03 more?碎碎念 CTFHub：https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺，后來才有了CTFHub。 感覺不論是網頁UI設計，還是題目質量，賽事跟蹤，工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......
uj5u.com 2020-09-10 02:04:05 more我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解（net user / type /md /rd/ dir /cd /net use copy、批處理 等） 利用dos命令制作 ......
uj5u.com 2020-09-10 02:04:18 more我學到了以下幾點 01Linux系統介紹02系統安裝，密碼啊破解03Linux常用命令04LAMP 01LINUX windows： win03 8 12 16 19 配置不繁瑣 Linux：redhat,centos(紅帽社區版)，Ubuntu server,suse unix:金融機構，證券，銀 ......
uj5u.com 2020-09-10 02:04:30 more信管通低代碼開發工具包括兩個大部分，一部分是公司內部使用的設計工具，負責業務系統的研發設計，另一部分是終端客戶使用的應用工具，是由公司內部業務系統開發人員使用的設計工具設計好的業務系統在終端客戶的一個交換處理軟體平臺，從而滿足用戶的不同業務要求，終端客戶應用工具又分為單機版和網路版，適應用戶的不同應用環境。信管通低代碼開發工具總體結構圖如圖所示。信管通低代碼快速開發平臺就是公司內部使用的設計系統，信管通綜合協辦公資訊管理系統就是終端用戶使用的業務系統互動資訊處理的平臺，信管通低代碼開發工具設計....
uj5u.com 2021-08-23 09:50:11 more虛擬機linux密碼忘記，通過但用戶模式修改密碼第一步：重新啟動虛擬機，再出現進度條時按e鍵（啟動編輯器），進入到以下界面，再次按下e鍵第二步：進入以下界面后，通過上下鍵選擇第二項，按下e鍵第三步：進入以下界面后，在quiet 后面輸入空格和s，然后按回車確認第四步：進入以下界面后，按b鍵（boot啟動）第五步：進入單用戶模式，輸入passwd root (root表示的是需要重置密碼的用戶名)和新密碼，按回車鍵確認第六步：輸入reboot重啟系統第七步：重新啟動后，使用新密碼登陸...
uj5u.com 2021-08-23 09:10:00 more這里寫自定義目錄標題歡迎使用Markdown編輯器新的改變功能快捷鍵合理的創建標題，有助于目錄的生成如何改變文本的樣式插入鏈接與圖片如何插入一段漂亮的代碼片生成一個適合你的串列創建一個表格設定內容居中、居左、居右SmartyPants創建一個自定義串列如何創建一個注腳注釋也是必不可少的KaTeX數學公式新的甘特圖功能，豐富你的文章UML 圖表FLowchart流程圖匯出與匯入匯出匯入歡迎使用Markdown編輯器你好！ 這是你第一次使用 Markdown編輯器 所展示的歡迎頁。如果你想學習如何使用Mar...
uj5u.com 2021-08-23 09:09:45 more1、運行時資料區域JVM虛擬機在執行Java程式時，會把它所管理的記憶體劃分為若干個不同的記憶體區域，如下圖所示。這些區域有著各自的用途，它們的生命周期也各不相同。其中，方法區和堆的生命周期與JVM虛擬機相同，隨著虛擬機行程的啟動而存在，因此，它們也是所有Java執行緒共享的資料區域；而虛擬機堆疊、本地方法堆疊和程式計數器，它們的生命周期與用戶執行緒相互依賴，隨著用戶執行緒的啟動和結束而對應地創建和銷毀，因此，它們也是執行緒私有的資料區域，也就是每個執行緒都有各自的虛擬機堆疊、本地方法堆疊和程式計數器。各...
uj5u.com 2021-08-23 09:09:31 morewindows安裝和使用nginx1、下載官網下載【nginx/Windows-1.20.1】下載成功后解壓，檔案如下：2、啟動nginx方式一：直接雙擊nginx.exe方式二：打開cmd命令視窗，切換到nginx解壓目錄下，輸入命令 nginx.exe 或者 start nginx ，回車即可驗證是否啟動成功：在瀏覽器輸入 http://localhost，看到以下界面則說明啟動成功：通過cmd查看nginx運行情況：打開cmd，執行：tasklist /fi "image...
uj5u.com 2021-08-23 09:09:08 more一.簡介1.什么是ansible? ansible的官方標題為:"Ansible is Simple IT Automation",也就是說ansible是一種簡單的自動化IT工具. 工具目標:1.自動化部署APP 2.自動化管理配置項 3.自動化的持續交付 4.自動化的云服務管理2.ansible特性 模塊化：呼叫特定的模塊，完成特定的任務 Paramiko (Python對ssh的實作)，PyYaml，Jinja2(模板語言)三個關鍵模塊......
uj5u.com 2021-08-23 09:08:40 more文章目錄：1.容器資料卷是什么？2.容器資料卷能干嘛？3.容器內添加資料卷3.1 直接使用命令添加3.2 使用DockerFile添加4.資料卷容器1.容器資料卷是什么？先來看看Docker的理念：* 將運用與運行的環境打包形成容器運行 ，運行可以伴隨著容器，但是我們對資料的要求希望是持久化的。* 容器之間希望有可能共享資料。Docker容器產生的資料，如果不通過docker commit生成新的鏡像，使得資料做為鏡像的一部分保存下來，那么當容器洗掉后，資料自.....
uj5u.com 2021-08-23 09:08:04 more實驗步驟一根據實驗環境，本實驗的步驟如下：1、測驗環境中獲取DNS資料包。2、分析DNS資料包。任務描述：獲取兩種型別的DNS資料包（1）通過瀏覽器訪問域名（www.baidu.com）來獲取DNS資料雖然合天實驗室環境下，無法抓取此部分資料包（其實也可以自己搭建服務器，配置DNS服務器，但設計者比較懶，就將就下吧），但設計者希望學習的人能根據例子在自己的筆記本上抓取，然后分析。我們以登錄www.baidu.com來獲取DNS資料，啟動Wireshark，在Filter中輸入dns。打開瀏覽器...
uj5u.com 2021-08-23 09:07:06 more