4.6K posts

뭇 banner
뭇

@sum1sum28

IT 인프라 신입

انضم Nisan 2024
149 يتبع204 المتابعون
뭇 أُعيد تغريده
皓樂芒
皓樂芒@howlemont·
微软,总算出了个好东西。 开发了一款工具, 可以将几乎任何格式pdfs,word,docs,excel,PowerPoint,Audio,YouTube 网址 转换为Markdown文件, 众所周知Markdown 是AI 大语言模型最青睐的格式。 没有自定义解析器。没有损坏的布局。没有混乱的文本。 只是干净、结构化的标记, 只需一次安装 github.com/microsoft/mark…
中文
146
1.7K
10.1K
1.2M
뭇 أُعيد تغريده
ラマダン
ラマダン@nani_mono_nan·
就活を適当にやりすぎているため、選考を通った時の喜びの種類が、努力が報われたと言うよりも、ギャンブルに勝った時に近い
日本語
61
3.2K
77.1K
2.1M
뭇 أُعيد تغريده
Joan of Arc
Joan of Arc@ralralbral·
CPU만으로 1초에 100장의 PDF를 마크다운으로 변환하는 무료 오픈소스가 공개되었습니다. RAG 시스템을 만들 때마다 PDF 문서 파싱이 가장 번거로운 작업이었습니다. 마침 깃허브 트렌딩 1위에 OpenDataLoader PDF가 올라와 있어서 바로 로컬 환경에서 테스트해 보았습니다. 벤치마크 점수가 0.907로 1위라고 적혀 있었는데, 실제로 실행해 보니 복잡한 2단 구성 논문과 표까지 정확하게 텍스트로 분리해 냅니다. ✅사용법도 아주 단순합니다. 파이썬 환경에서 명령어 한 줄만 터미널에 입력하세요. • pip install opendataloader-pdf 설치 후 파이썬 코드 단 3줄이면 데이터 변환이 끝납니다. 출력 결과물은 마크다운뿐만 아니라, 데이터 출처 표기를 위한 바운딩 박스가 포함된 JSON, 그리고 HTML 형식으로도 받을 수 있습니다. ✅하지만 공식 문서만 보고 바로 실무에 적용하기 전에 알아두셔야 할 점이 있습니다. 기본 설정인 결정론적 로컬 모드(Deterministic local mode)는 텍스트 위주 문서에서 매우 빠르지만, 테두리가 없는 표나 복잡한 수식이 섞인 페이지에서는 문서 구조가 어긋나는 현상이 발생합니다. 이런 복잡한 페이지나 화질이 낮은 스캔본을 처리할 때는 반드시 AI 하이브리드 모드를 활성화해야 합니다. 이 모드를 켜면 80개 이상의 언어를 지원하는 내장 OCR이 작동하여 300 DPI 이상의 스캔본이나 복잡한 차트 설명까지 텍스트로 추출해 냅니다. 제가 실무에 적용하면서 찾은 가장 효율적인 활용법은 랭체인(LangChain) 통합 기능을 사용하는 것입니다. OpenDataLoader가 출력한 구조화된 마크다운 문서를 랭체인으로 바로 넘겨서 데이터를 분할(Chunking)하면 RAG 파이프라인 구축이 매우 간결해집니다. 실제로 기존 파싱 도구로 5시간 넘게 걸리던 3,000장 분량의 사내 문서 전처리 작업을 단 10분 만에 서버 비용 추가 없이 완료했습니다. 지금까지 AI 서비스 개발에서 가장 시간과 비용이 많이 들었던 구간은 PDF 같은 비정형 데이터를 AI가 읽을 수 있게 가공하는 과정이었습니다. 이 도구는 값비싼 GPU 리소스 없이 오직 CPU 환경만으로 그 전처리 문제를 무료로 해결했습니다. 앞으로 기업들의 내부 데이터를 활용한 AI 구축 속도가 이전과 다르게 빨라질 것입니다. 지금 RAG 시스템을 기획하고 있다면 바로 깃허브 저장소에서 코드를 다운로드하여 확인해 보세요.
How To AI@HowToAI_

🚨 Someone just open-sourced a tool that converts pdfs to markdown at 100 pages per second. It's called OpenDataLoader. It runs entirely on CPU and handles complex layouts, tables, and nested structures like a senior dev 100% Free.

한국어
6
119
335
24.8K
뭇 أُعيد تغريده
404
404@4gong4_2·
스트레스 상황에 1-2주만 놓여도 바로 시야가 좁아지고 미래를 부정적으로 확정하면서 이런게 인생이구나 지금하고 있는일을 그만둬도 인생은 이런식으로 흘러가겠지 퇴사나 자퇴가아니라 죾어야 끝나겠구나 이 사고방식에서 벗어나질못함
한국어
7
2.8K
7.4K
295.5K
뭇 أُعيد تغريده
Suuu…..
Suuu…..@ranoti88·
나도 누군가에겐 씹새키였겠지…….. 맞아 사실 난 똑똑히 기억해 난 확실히 씹새끼였어
한국어
18
18.6K
24.9K
1.5M
뭇 أُعيد تغريده
뭇 أُعيد تغريده
なにゃん 대리봇
@이거 ㄹㅇ 이룬 거 없고 자아만 비대할 때 하게 되는 생각인데 압도적인 재능을 가진 사람은 거의 없음 다들 그 애매한 재능 가지고 그만두지만 말자는 마음으로 꾸준히 해서 뭔가를 이루는 거임
부랄냥돼머리@giyommigirl

애매한재능은 축복이 아니라 저주임 애매한재능 가진 사람들 특징이 뭘 하든 평타 이상으로 잘하지만 특출나게 잘하는 분야는 없고 조금만 더하면 될 것 같은데 결과는 안나와서 포기도 못함 내가 가진 재능이 진짜 재능 천재들의 발가락 근처에도 못간다는 사실을 깨달을때 우울증이오는듯。。

한국어
3
5.6K
11.2K
881.2K
뭇
@sum1sum28·
취준근황 신입공채 칼바람나서 다떨어지고 자아비대로 집어넣은 경력직만 면접잡힘 ㅋㅋㅋㅋ
한국어
0
0
5
63
뭇 أُعيد تغريده
거실랒팡이
거실랒팡이@raxunew·
회사다녀보면 지인소개로 뽑는 이유 알게됨... 면접 오백개를 다 통과한 우수한 능력의 또라이보다 적당히 일하고 성격무난한 사람아 더 나음...
한국어
1
2.4K
7.4K
614.8K
뭇 أُعيد تغريده
아구밍 아커만
아구밍 아커만@aguming_·
이거 써봣는데 친구 전세사기 대처법 도와줮서요 감사합니다
아구밍 아커만 tweet media
Jihyeon Kim (김지현)@simnalamburt

legalize.kr @junghwan 님께서 한국 법을 모두 git repo로 옮겨주셨다! 한국법령정보 MCP보다 얘가 훨씬 빠르고 편하다!!!! 코드 : github.com/9bow/legalize-… 이거 예전부터 하고싶었지만 은근히 까다로운 처리가 필요해서 미뤘던건데, 시간지나니 다 해주셨다 와와와와

한국어
3
491
993
98.5K
뭇 أُعيد تغريده
6월 29일
6월 29일@0629lan·
친구한테 받은건데 개욱김ㅋㅋㅋㅋㅋ 저같은 자취생 거지에게 꼭 필요해요,,, 📌고물가 시대 극가성비 음식점 모음 거지맵 거지맵.com
6월 29일 tweet media6월 29일 tweet media
한국어
44
6.9K
12.2K
1.2M
뭇 أُعيد تغريده
햄메론
햄메론@area_689·
컴공 가면 좋은점: 4년내내 게임회사 가지말라고 교수님&선배님&먼저취업한 친구들이 말려줌
한국어
7
678
1.8K
261.7K
뭇 أُعيد تغريده
돌아온지지
돌아온지지@return_J_J·
흔한 반도 회사원들의 속마음
돌아온지지 tweet media
한국어
9
430
995
41.2K
뭇 أُعيد تغريده
HANA
HANA@Adhd_Hana·
미쳤다 갑자기 생각남 이 마감직전제출 도파민 중독 조심해야함.. 한번 크~~게 망하는 수가 있음. 야생의 adhd였을 적, 나 이것때문에 삼성 원서 못냄.. 인적사항 입력을 마감 30분전까지 입력 미루고 미루다 홈페이지에 이슈가 생겨서 결국 사고침. 이때 내가 너무 실망스러워 울었다 ㅋㅋㅋㅋ그리고 친구들한테도 정신차리라고 욕 많이먹음 ..,,
HANA@Adhd_Hana

ADHD들 뭐 신청할 때 진짜 환장하는 루트: 1. 미루고 미루다 마감일 1시간 전에 겨우 시작 2. 순조롭게하다 첨부파일 요런거땜시 흐름 끊김 3. 그거 찾으려 했는데 낄낄거리며 릴스 보는중 4. 정신 차리고 다시 들갔는데 세션 만료 5. 텅 빈 입력창 처음부터 다 다시 입력함. 빡침 6. 결국 마감 5분 전에 다시 시작,, 7. 10초 남기고 세이프로 신청완료. .. 짜릿함 8. 성공경험이 쌓이며 더 무모히 도전하기 시작 …

한국어
8
279
1.2K
196.5K
뭇 أُعيد تغريده
호두아빠($TSLA$)
호두아빠($TSLA$)@wonla23·
심리학과 학생이 쓴 회피형에 대한 분석.
호두아빠($TSLA$) tweet media
한국어
3
941
3.2K
332.6K
뭇 أُعيد تغريده
뭇 أُعيد تغريده
4WL🔠
4WL🔠@4_wonderfullife·
레딧 보다보니 보다보니 성인 ADHD 치료를 권장하는 주요 이유 중 하나가 번아웃 예방이라고 하네... 특히 여성들 중에 어려움을 극복하기 위해 지나치게 노력하다가 결국 소진되는 악순환에 빠지는 경우가 많다고 함 ㅠㅠ
4WL🔠 tweet media
한국어
2
615
1.4K
50.7K
뭇 أُعيد تغريده
無別事
無別事@ilikesomeday·
인터뷰 매우 좋다. “이 시기를 보내며 제가 배운 게 있습니다. ‘좋아하는 일을 꼭 하나만 고집하지 않아도 괜찮다.’ 어디에서 일하든, 내가 품은 마음에 따라 좋아하는 분야로 길이 열릴 수 있다는 깨달음이었어요.”
REDBUSBAGMAN@juneLeee

요즘은 공무원 중에서 자기만의 길을 걸어가시는 분들의 삶에 경외감을 느끼곤 한다. 97년 임용되어 30년 가까이 공무원 생활을 하면서 49살에 취미로 시작한 사진으로 세계 4대 사진전, TIFA 금상을 수상한 김남국 안산시청 건설도로행정팀장. "아마추어라서 더 할 수 있는 게 있다" longblack.co/note/1922?tick…

한국어
0
436
932
73.6K