DB, ORM/🍃mongoose, pymongo 검색 결과

해당 글 12건

mongoDB를 사용한 데이터의 Pagination 효율성 개선법

현재 best 게시물을 가져오는 로직입니다. page를 분할하기 위한 skip, limit를 사용했습니다. apiRouter.post("/post/request/best", (req, res) => { const { page } = req.body; Post.find({ liked: { $gte: BestHuddle } }, null, { skip: (page - 1) * 20, limit: 20, }) .sort({ createdAt: -1 }) .populate("author") .populate("comments") .exec(function (err, post) { if (err) { console.log(err); return res.json({ postFound: false, err: err...
DB, ORM/🍃mongoose, pymongo 2020. 9. 14. 13:30

text 인덱스를 활용한 mongoDB 검색 기능 구현

만약 MySQL과 같은 SQL이었다면 검색을 위해 스핑크스나 엘라스틱서치를 사용하는 것이 필수였을 것입니다. mongoDB도 마찬가지로 고급 검색 시스템을 적용하기 위해서는 검색엔진을 사용해야하는 것이 필수지만 간단한 기능을 구현하는 앱에서는 별다른 외부 서비스없이 text 인덱스만을 활용해서 검색 기능을 구현할 수 있습니다. (오타 수정, 유의어 검색 등의 기술은 외부 서비스를 사용해야 합니다) 과거 인덱스를 다룬 포스트(https://darrengwon.tistory.com/671?category=870801)에서 text 인덱스를 살펴본 바가 있습니다. text 인덱스 https://docs.mongodb.com/manual/core/index-text/ 문자열 검색에 최적화된 인덱스입니다. 예를 ..
DB, ORM/🍃mongoose, pymongo 2020. 8. 11. 07:43

mongoose populate를 통해 관계 Objectid를 통한 실제 객체를 추출하기

Mongoose v5.9.25: Query Population Populate MongoDB has the join-like $lookup aggregation operator in versions >= 3.2. Mongoose has a more powerful alternative called populate(), which lets you reference documents in other collections. Population is the process of automatically replacing th mongoosejs.com 관계가 설정된 속성에는 대개 해당 모델의 식별자인 Id를 넣습니다. (레퍼런스 방식의 연결) const UserSchema = mongoose.Schema({ na..
DB, ORM/🍃mongoose, pymongo 2020. 7. 25. 03:19

mongoose Schema option 이용하기

https://mongoosejs.com/docs/guide.html#options 스키마를 정의함에 있어 다음과 같이 옵션을 줄 수 있습니다. new Schema({..}, options); // or var schema = new Schema({..}); schema.set(option, value); 모든 옵션은 위 공식 문서에서 살펴보시고, 저는 이번에 사용할 것만 추려내보겠습니다. (나중에 shardkey나 writeconcern은 이용해야 할 때 추가로 작성하기로 합니다...) id mongodb에서는 각 도큐먼트에 식별자인 _id를 자동으로 붙이는데 option에서 id를 false로 주면 주지 않습니다. // default behavior var schema = new Schema({ na..
DB, ORM/🍃mongoose, pymongo 2020. 7. 23. 18:28

모델과의 관계 설정 (임베디드 방식/레퍼런스 방식)

👨‍🏫 임베디드 방식 관계가 설정된 도큐먼트를 직접 넣는 방식입니다. { _id: ObjectId(...), boardaName: ..., posts: [ {title: "asdf", contents: "aaaa"}, {title: "asdf", contents: "aaaa"}, {title: "asdf", contents: "aaaa"}, {title: "asdf", contents: "aaaa"}, ] } 👨‍🏫 임베디드 방식 vs 레퍼런스 방식 프로그래밍의 기본 규칙이 divide and conquer임을 고려해볼때 임베디드 방식은 별로 좋은 방식이 아니다. 1️⃣ 우선, 도큐먼트의 크기가 무한히 커질 수 있다. 한 Board 도큐먼트에 임베디드 방식으로 Post 도큐먼트를 넣는다고 생각해보자. B..
DB, ORM/🍃mongoose, pymongo 2020. 6. 17. 17:55

mongodb 기본 메서드 외 다른 살펴보기

일반 mongoDB의 shell 명령어와 크게 다르지 않습니다만, 옵션을 좀 살펴볼 필요가 있습니다. 우선 간단히 shell, pymongo, mongoose의 메서드를 살펴보면, 유사하다는 것을 알 수 있습니다. 그러니까 어떠한 메서드를 하나 배우면 다른 mongodb 연결 패키지를 사용해도 쓸 수 있습니다. mongodb shell pymongo mongoose C : insertOne, insertMany R : find, findOne U : updateOne, updateMany D : deleteOne, deleteMany C : insert_one, insert_many R : find_one, find U : update_one, update_many D : delete_one, delet..
DB, ORM/🍃mongoose, pymongo 2020. 6. 10. 20:56

검색을 빠르게 해주는 mongoDB 인덱스 (pymongo로 작업)

https://velopert.com/560 https://blog.ull.im/engineering/2019/04/05/mongodb-indexing-strategy.html 키를 이용한 검색 최적화 https://www.zerocho.com/category/MongoDB/post/57a6faddc90c5815005babc3 내용 이해를 위해 위 게시물을 확인해 봅시다. 인덱스? 자주 조회되는 필드를 따로 저장해서 조회 및 정렬 시의 속도를 빠르게 하는 기법입니다. 검색을 더 빠르게 수행하고자 데이터를 추가하기 때문에 용량을 희생하고(그래봐야 속성 하나일 뿐이긴 합니다), 속도를 올리는 결과를 가져오게 됩니다. DB 사용에 있어 인덱스 사용은 필수입니다. index가 없으면 컬렉션에 있는 도큐먼트를 컴..
DB, ORM/🍃mongoose, pymongo 2020. 6. 9. 17:59

pymongo/mongoose 쿼리 작성하기

pymongo 기준으로 썼지만 mongoose도 그렇게 다르지 않다. 여기서 참고하고 mongoose 문서 보면 뚝딱! 컬럼명 변경 $rename actor_collection.update_many({}, {'$rename': {'다른 이름': '다른이름'}}) sort sort의 문제점 중 하나는 해당 값이 없는 값도 가져온다는 점입니다. 아래 코드의 경우 생년월일이 낮은 순서대로 가져오게 되는에 이 경우 생년월일이 없는 경우가 가장 낮은 도큐먼트가 먼저 불러져오게 됩니다. for i in actor_collection.find({}).sort('생년월일').limit(5): print(i) 이를 방지하기 위해서는 정렬 기준을 명시해주면 됩니다. 내림차순(높은 값이 가장 먼저 나옵니다)으로 정렬해보았습..
DB, ORM/🍃mongoose, pymongo 2020. 6. 9. 16:11

pymongo 라이브러리를 통해 python으로 mongodb 조작하기

mongodb/mongo-python-driver PyMongo - the Python driver for MongoDB. Contribute to mongodb/mongo-python-driver development by creating an account on GitHub. github.com 설치 jupyter notebook에 설치 후 실습해보도록하자. (https://jakevdp.github.io/blog/2017/12/05/installing-python-packages-from-jupyter/) import sys !{sys.executable} -m pip install pymongo connect 아무것도 적지 않으면 로컬로 연결됩니다. 저는 몽고DB를 설치한 EC2에 연결해보았습니다..
DB, ORM/🍃mongoose, pymongo 2020. 6. 8. 23:09

mongoose 미들웨어, Instance methods, Statics 사용하기

https://mongoosejs.com/docs/guide.html#methods https://mongoosejs.com/docs/guide.html#statics https://mongoosejs.com/docs/middleware.html 지금까지 mongoose를 이용하는 데에 있어 다음과 같이 스키마를 정의하고, 모델을 만든 다음 export하여 사용했을 것이다. 저장하는 값에 조작(해시 암호화, 난독화 등등...)은 node의 컨트롤러 단에서 처리했을 것인데 사실 mongoose를 이용하여 먼저 전에 처리할 수도 있다. 왜 이렇게 하냐면 라우터, 컨트롤러 단을 깔끔하게 처리하여 코드의 가독성을 높일 수 있기 때문이다. // 지금까지의 사용법 const mongoose = require("mo..
DB, ORM/🍃mongoose, pymongo 2020. 5. 28. 17:47