병렬 처리 #eg39로 대용량 csv 파일 처리
2024-11-02에 게시됨
검색:802
CSV 파일에는 대량 주문 데이터가 저장됩니다.
Java를 사용하여 이 파일을 처리합니다. 금액이 3,000~5,000 사이인 주문을 찾아 고객별로 그룹화하고 주문 금액을 합산하고 주문을 계산합니다.
다음 SPL 문을 작성합니다.
=file("d:/OrdersBig.csv").cursor@mtc(;8).select(Amount>=3000 && Amount
cursor() 함수는 메모리에 맞지 않는 대용량 파일을 구문 분석합니다. 기본적으로 직렬 계산을 수행합니다. @m 옵션을 사용하면 다중 스레드 데이터 검색이 가능합니다. 8은 병렬 스레드의 수입니다. @t 옵션을 사용하면 첫 번째 줄을 열 제목으로 가져올 수 있습니다. @c 옵션을 사용하면 쉼표를 구분 기호로 사용할 수 있습니다.
SPL을 Java 애플리케이션에 통합하는 방법을 알아보려면 Java에서 SPL 스크립트를 호출하는 방법을 읽어보세요.
이것은 StackOverflow의 문제 중 하나입니다. 클릭하면 기존 솔루션이 상당히 복잡하다는 것을 알 수 있지만 SPL 접근 방식은 정말 간단하고 효율적입니다.
SPL 오픈 소스 주소
릴리스 선언문
이 기사는 https://dev.to/esproc_spl/process-a-large-csv-file-with-parallel-processing-eg38-40mo?1에서 복제됩니다.1 침해가 있는 경우, [email protected]으로 문의해 주십시오. 그것을 삭제하려면
최신 튜토리얼
더>
-
GraalVM 네이티브 이미지의 메모리 관리메모리 관리는 응용 프로그램에서 메모리를 효과적으로 할당, 활용 및 해제하는 작업을 담당하는 컴퓨터 소프트웨어 개발의 중요한 구성 요소입니다. 그 중요성은 소프트웨어 성능을 향상시키고 시스템 안정성을 보장하는 데 있습니다. 쓰레기 수거 가비지 수집(GC)...프로그램 작성 2024-11-07에 게시됨 -
## C++에서 참조를 함수 매개변수로 사용해야 하는 경우는 언제입니까?C에서 인수 전달: 참조 이해C에서 함수 매개변수의 동작은 해당 유형에 따라 결정됩니다. 한 가지 중요한 차이점은 "값에 의한 전달"과 "참조에 의한 전달"입니다.함수 매개변수에서 참조를 사용하는 이유는 무엇입니까?참조는 두 가지 매...프로그램 작성 2024-11-07에 게시됨
-
\"getaddrinfo 실패\"가 발생하는 이유는 무엇이며 어떻게 해결할 수 있습니까?"getaddrinfo failed" 오류 탐색호스트 이름이 변환되는 이름 확인 프로세스 중에 "getaddrinfo failed" 오류가 발생합니다. IP 주소로. 제공된 호스트 이름의 해결에 문제가 있음을 나타냅니다.오류 컨텍스트...프로그램 작성 2024-11-07에 게시됨
-
단일 명령줄에서 여러 줄 명령을 실행하는 방법은 무엇입니까?한 줄 명령줄에서 여러 줄 문을 실행하는 방법Python의 -c 옵션을 사용하여 한 줄 루프를 실행할 때 , 루프 전에 모듈을 가져오면 구문 오류가 발생합니다. 이는 Python 인터프리터가 코드 블록을 단일 명령문으로 처리하기 때문입니다.이 문제를 해결하려면 다음과 ...프로그램 작성 2024-11-07에 게시됨
-
PHP에서 MySQL에서 MySQLi로 어떻게 마이그레이션합니까?MySQL에서 MySQLi로 마이그레이션웹사이트를 MySQL에서 MySQLi로 마이그레이션하려면 PHP 코드를 수정해야 하지만 데이터베이스 자체는 크게 영향을 받지 않습니다. . MySQL 확장의 개선된 버전인 MySQLi는 향상된 기능과 보안을 제공합니다.PHP 코드...프로그램 작성 2024-11-07에 게시됨
-
CSS에서 배경 및 하위 요소에 대해 서로 다른 불투명도를 달성하는 방법은 무엇입니까?CSS 배경 불투명도 이해CSS에서 불투명도는 요소의 투명도를 제어합니다. 컨테이너에 적용하면 자연스럽게 배경과 하위 요소 모두에 영향을 미칩니다.상속 문제배경과 하위 요소에 대해 서로 다른 불투명도를 달성하려면, CSS 상속은 문제를 야기합니다. 하위 요소는 상위 컨...프로그램 작성 2024-11-07에 게시됨
-
[개인 홈페이지] Next에서 Notion Database를 통합하는 방법To integrate a Notion database into a Next.js project, you can use Notion as a content management system (CMS) and display its content on your website...프로그램 작성 2024-11-07에 게시됨
-
Ubuntu 12.04에서 PhpMyAdmin이 \"MySQLi Extension Missing\" 오류를 표시하는 이유는 무엇입니까?PhpMyAdmin 오류: MySQLi 확장 기능 누락Ubuntu 12.04에서 PhpMyAdmin에 문제가 있습니까? Apache2, PHP5, MySQL 및 PhpMyAdmin을 설치했음에도 불구하고 "mysqli 확장 기능이 없습니다." 오류가 ...프로그램 작성 2024-11-07에 게시됨
-
java.net.URLConnection을 사용하여 파일 및 추가 매개변수를 HTTP 서버에 업로드하는 방법은 무엇입니까?Java의 추가 매개변수를 사용하여 HTTP 서버에 파일 업로드HTTP 서버에 파일을 업로드하는 것은 많은 애플리케이션에서 공통적으로 필요합니다. 그러나 때로는 파일과 함께 추가 매개변수를 전달해야 하는 경우도 있습니다. 다음은 외부 라이브러리를 사용하지 않고 파일과 ...프로그램 작성 2024-11-07에 게시됨
-
PHP에서 텍스트 파일을 한 줄씩 읽고 처리하는 방법은 무엇입니까?PHP에서 텍스트 파일 읽기: 단계별 가이드많은 웹 개발 시나리오에는 텍스트 파일에서 데이터를 읽는 작업이 포함됩니다. PHP에서 파일 처리 함수는 일반 텍스트 파일을 한 줄씩 읽는 편리한 방법을 제공합니다. PHP를 사용하여 텍스트 파일을 읽는 프로세스를 분석해 보겠...프로그램 작성 2024-11-07에 게시됨
-
없이는 살 수 없는 생산성 도구(보너스)안녕하세요 여러분, 여러분의 아들 Nomadev가 또 다른 게시물로 돌아왔습니다! 오늘은 제가 매일 사용하는 매우 멋진 AI 도구를 공유하게 되어 기쁩니다. 이러한 도구는 내 일상의 핵심 부분이 되어 체계적이고 효율적인 상태를 유지하며 더 많은 작업을 수행하는 데 도움...프로그램 작성 2024-11-07에 게시됨
-
Go/Templ에서 깨끗하고 친숙한 Spinner 만들기도움이 되지 않는 HTML 일관되고 깨끗하며 전문적인 스핀박스를 만드는 것이 HTML에서 간단한 작업이라고 생각할 수도 있습니다... 하지만 안타깝게도 입력에 정수 또는 소수 값만 허용해야 한다고 알려주는 표준 속성이 없습니다. , 모든 입력 필터링은 ...프로그램 작성 2024-11-07에 게시됨
-
DB 연결 없이 데이터베이스 보안을 위해 문자열을 이스케이프할 수 있나요?DB 연결 없이 데이터베이스 보안을 위해 문자열 이스케이프데이터베이스와 상호 작용하는 코드를 테스트할 때는 사용자 입력을 적절하게 이스케이프하여 SQL 삽입 공격을 방지하는 것이 중요합니다. 그러나 모든 테스트를 위해 데이터베이스에 연결하는 것은 비효율적일 수 있습니다...프로그램 작성 2024-11-07에 게시됨
-
Entropix: 추론 성능 극대화를 위한 샘플링 기법Entropix: 추론 성능 극대화를 위한 샘플링 기법 Entropix README에 따르면 Entropix는 엔트로피 기반 샘플링 방법을 사용합니다. 이 글에서는 엔트로피와 바렌트로피를 기반으로 한 구체적인 샘플링 기법을 설명합니다. 엔...프로그램 작성 2024-11-07에 게시됨
-
중첩 방법은 다형성을 지원합니다.메서드 재정의: 단순한 이름 지정의 문제가 아니라 Java의 기본 기능입니다. 동적 메소드 디스패치 개념을 기반으로 합니다. 동적 메서드 디스패치: 겹치는 메서드에 대한 호출을 컴파일 타임이 아닌 런타임에 해결하는 메커니즘입니다. Java에서 다형성 구현을 허용합니다....프로그램 작성 2024-11-07에 게시됨
![[개인 홈페이지] Next에서 Notion Database를 통합하는 방법](http://www.luping.net/uploads/20241018/17292344526712061483e0b.png)
중국어 공부
- 1 "걷다"를 중국어로 어떻게 말하나요? 走路 중국어 발음, 走路 중국어 학습
- 2 "비행기를 타다"를 중국어로 어떻게 말하나요? 坐飞机 중국어 발음, 坐飞机 중국어 학습
- 3 "기차를 타다"를 중국어로 어떻게 말하나요? 坐火车 중국어 발음, 坐火车 중국어 학습
- 4 "버스를 타다"를 중국어로 어떻게 말하나요? 坐车 중국어 발음, 坐车 중국어 학습
- 5 운전을 중국어로 어떻게 말하나요? 开车 중국어 발음, 开车 중국어 학습
- 6 수영을 중국어로 뭐라고 하나요? 游泳 중국어 발음, 游泳 중국어 학습
- 7 자전거를 타다 중국어로 뭐라고 하나요? 骑自行车 중국어 발음, 骑自行车 중국어 학습
- 8 중국어로 안녕하세요를 어떻게 말해요? 你好중국어 발음, 你好중국어 학습
- 9 감사합니다를 중국어로 어떻게 말하나요? 谢谢중국어 발음, 谢谢중국어 학습
- 10 How to say goodbye in Chinese? 再见Chinese pronunciation, 再见Chinese learning
