❓
물음표살인마 블로그
  • README
  • ALGORITHM
    • Sieve of Eratosthenes
    • Round Up
    • Binary Search
    • Union Find
    • Sorting Array
    • Lcm, Gcd
  • TechTalk Review
    • Template
  • Books
    • CS Note for Interview
      • Ch1. Design Pattern & Programming paradigm
        • 1.1.1 Singleton Pattern
        • 1.1.2 Factory Pattern
        • 1.1.4 Observer Pattern
        • 1.1.5 Proxty Pattern & Proxy Server
        • 1.1.8 Model-View-Controller Pattern
        • 1.2.1 Declarative and Functional Programming
        • 1.2.2 Object Oriented Programming
      • Ch2. Network
        • 2.2.1 TCP/IP Four-Layer Model
        • 2.2.1-1 TCP 3, 4 way handshake
        • 2.3 Network Devices L4, L7
        • 2.4.1 ARP, RARP
        • 2.4.2 Hop By Hop Communication
        • 2.4.3 IP Addressing Scheme
      • Ch3. Operating System
        • 3.1.1 Roles and Structure of Operating Systems
        • 3.2.1 Memory Hierarchy
        • 3.2.2 Memory Management
        • 3.3.1 Processes and Compilation Process
        • 3.3.3 Memory Structure of a Process
        • 3.3.4 Process Control Block (PCB)
        • 3.3.5 Multiprocessing
        • 3.3.6 Threads and Multithreading
        • 3.3.7 Shared Resources and Critical Sections
        • 3.3.8 Deadlock
        • 3.4 CPU Scheduling Algorithm
      • Ch4. Database
        • 4.1 Database Basic
        • 4.2 Normalization
        • 4.3 Transaction and Integrity
        • 4.4 Types of Databases
        • 4.5 Indexes
        • 4.6 Types of Joins
        • 4.7 Principles of Joins
      • Ch5. Data Structure
    • Learning the Basics of Large-Scale System Design through Virtual Interview Cases
      • 1. Scalability based on user counts(1/2)
      • 1. Scalability based on user counts(2/2)
      • 2.Back-of-the-envelope estimation
      • 3. Strategies for System Design Interviews
      • 4. Rate Limiter
      • 5. Consistent Hashing
      • 6. Key-Value System Design
      • 7. Designing a Unique ID Generator for Distributed Systems
      • 8. Designing a URL Shortener
      • 9. Designing a Web Crawler
      • 10. Notification System Design
      • 11. Designing a News Feed System
      • 12. Chat System Design
      • 13. AutoComplete
      • 14. Design YouTube
      • 15. Design Google Drive
      • Loadbalancer Algorithms
      • Cache tier
      • CDN, Content Delivery Network
      • Stateless Web tier
    • Computer System A programmer's perspective
    • Effective Java
      • Item 1. Consider Static Factory Methods Instead of Constructors
      • Item 2. Consider a Builder When Faced with Many Constructor Parameters
      • Item 3. Ensure Singleton with Private Constructor or Enum Type
      • Item 4. Enforce Noninstantiability with a Private Constructor
      • Item 5. Prefer Dependency Injection to Hardwiring Resources
      • Item 6. Avoid Creating Unnecessary Objects
      • Item 7. Eliminate Obsolete Object References
      • Item 8. Avoid Finalizers and Cleaners
      • Item 9.Prefer try-with-resources to try-finally
      • Item10. Adhering to General Rules When Overriding equals
        • Handling Transitivity Issues
        • Ensuring Consistency
      • Item11. Override hashCode When You Override equals
      • Item12. Always Override toString
        • Always Override toString
      • Item13. Override Clone Judiciously
      • Item14. Consider Implementing Comparable
      • Item15. Minimize the Accessibility of Classes and Members
      • Item16. Accessor Methods Over Public Fields
      • Item17. Minimize Mutability
      • Item18. Composition over inherentance
      • Item19. Design and Document for Inheritance, or Else Prohibit It
      • Item20. Prefer Interfaces to Abstract Classes
      • Item21. Design Interfaces with Implementations in Mind
      • Item22. Use Interfaces Only to define Types
      • Item23. Prefer Class Hierarchies to Tagged Classes
      • Item24. Favor Static Member Classes Over Non-Static
      • Item28. Use Lists Instead of Arrays
      • Item29. Prefer Generic Types
      • Item30. Favor Generic Methods
    • Head First Design Patterns
      • Ch1. Strategy Pattern
      • Ch2. Observer Pattern
        • Ver1. Ch2. Observer Pattern
      • Ch3. Decorator Pattern
        • Ch3. Decorator Pattern
      • Ch4. Factory Pattern
      • Ch5. Singleton Pattern
      • Ch6. Command Pattern
      • Ch7. Adapter and Facade Pattern
      • Ch8. Template Method Pattern
    • Digging Deep into JVM
      • Chapter 2. Java Memory Area & Memory Overflow
      • Chapter 3. Garbage Collector & Memory Allocation Strategy (1/2)
      • Chapter 3. Garbage Collector & Memory Allocation Strategy (2/2)
      • Chapter 5. Optimization Practice
      • Chapter 6. Class file structure
      • Chapter 8. Bytecode Executor Engine (1/2)
  • Interview Practices
    • Restful API Practices
      • Url Shortener API
      • Event Ticket Reservation API
      • Course Management API
      • Search posts by tags API
      • Online Code platform API
      • Simple Task Management API
      • Event Participation API
      • Review System API
      • Car management API
      • Online Library
    • Tech Review
      • if(kakao)
        • Kakao Account Cache Migration / if(kakao)2022
        • Improving the Anomaly Detection System for KakaoTalk Messaging Metrics / if(kakao) 2022
        • Standardizing API Case Handling Without Redeployment / if(kakaoAI)2024
        • JVM warm up / if(kakao)2022
    • Naver Computer Science
      • Process & Thread
      • TCP & UDP
      • Spring & Servlet
      • Filter & Interceptor & AOP
      • Equals() & ==
      • Dependency Injection
      • Object Oriented Programming
  • F-Lab
    • Week1
      • Client & Server
      • HTTP
      • TCP/UDP
      • REST API
      • Questions
        • Object Oriented Programming
        • HTTP
        • Process & Thread
        • Data Structure
    • Week2
      • OSI 7 layer
      • Web vs WAS
    • Week3
      • RDB vs NoSQL
      • RDB Index
      • Cache
      • Redis
      • Messaging Queue
    • Week4
      • Project - Ecommerce
    • Week5
      • ERD - 1
    • Week6
      • Ecommerce - 2
      • Role
      • pw hashing && Salt
      • CreatedAt, ModifiedAt
      • JWT
      • Copy of ERD - 1
    • Week7
      • Vault (HashiCorp Vault)
    • Week 8
      • Api Endpoints
    • Week10
      • Product Create Workflow
  • TOY Project
    • CodeMentor
      • Implementation of Kafka
      • Project Improvement (Architectural Enhancements)
      • Communication between servers in msa
  • JAVA
    • MESI protocol in CAS
    • CAS (Compare and Set)
    • BlockingQueue
    • Producer & Consumer
    • Synchronized && ReentrantLock
    • Memory Visibility
    • Checked vs Unchecked Exception
    • Thread
    • Batch delete instead of Cascade
    • Java Questions
      • Week 1(1/2) - Basic Java
      • Week 1(2/2) - OOP
      • Week 2(1/2) - String, Exception, Generic
      • Week2(2/2) Lambda, Stream, Annotation, Reflection
      • Week3(1/2) Collections
      • Week3(2/2) Threads
      • Week4 Java Concurrency Programming
      • Week5 JVM & GC
    • Java 101
      • JVM Structure
      • Java Compiles and Execution Method
      • Override, Overload
      • Interface vs Abstract Class
      • Primitive vs Object Type
      • Identity and equality
      • String, StringBuilder, StringBuffer
      • Checked Exceptions and Unchecked Exceptions
      • Java 8 methods
      • Try-with-reources
      • Strong Coupling and Loose Coupling
      • Serialization and Deserialization
      • Concurrency Programming in Java
      • Mutable vs Immutable
      • JDK vs JRE
  • SPRING
    • DIP. Dependency Inversion Principal
    • Ioc container, di practice
    • @Transactional
    • Proxy Pattern
    • Strategy Pattern
    • Template Method Pattern
    • using profile name as variable
    • Spring Questions
      • Spring Framework
      • Spring MVC & Web Request
      • AOP (Aspect-Oriented Programming)
      • Spring Boot
      • ORM & Data Access
      • Security
      • ETC
  • DATABASE
    • Enhancing Query Performance & Stability - User list
    • Ensuring Data Consistency, Atomicity and UX Optimization (feat.Firebase)
    • Redis: Remote Dictionary Server
    • Database Questions
      • Week1 DBMS, RDBMS basics
      • Week2 SQL
      • Week3 Index
      • Week4 Anomaly, Functional Dependency, Normalization
      • Week5 DB Transaction, Recovery
    • Normalization
      • 1st Normal Form
      • 2nd Normal Form
      • 3rd Normal Form
  • NETWORK
    • HTTP & TCP head of line blocking
    • HTTP 0.9-3.0
    • Blocking, NonBlocking and Sync, Async
    • Network Questions
      • Week1 Computer Network Basic
      • Week2(1/3) Application Layer Protocol - HTTP
      • Week2(2/3) Application Layer Protocol - HTTPS
      • Week2(3/3) Application Layer Protocol - DNS
      • Week3 Application Layer
      • Week4 Transport Layer - UDP, TCP
      • Week5 Network Layer - IP Protocol
    • Network 101
      • https://www.google.com
      • TCP vs UDP
      • Http vs Https
      • TLS Handshake 1.2
      • HTTP Method
      • CORS & SOP
      • Web Server Software
  • OS
    • Operating System Questions
      • Week1 OS & How Computer Systems Work
      • Week2(1/2) Process
      • Week2(2/2) Thread
      • Week3 CPU Scheduling
      • Week4 Process Synchronize
      • Week5 Virtual Memory
    • Operating System 101
      • Operating system
        • The role of the operating system
        • The composition of the operating system.
      • Process
        • In Linux, are all processes except the initial process child processes?
        • Zombie process, orphan process
        • (Linux) Daemon process
        • Process address space
        • Where are uninitialized variables stored?
        • Determination of the size of the Stack and Heap
        • Access speed of Stack vs Heap
        • Reason for memory space partitioning
        • Process of compiling a process
        • sudo kill -9 $CURRENT_PID
      • Thread
        • Composition of a thread's address space
      • Process vs Thread
        • Creation of processes and threads in Linux
      • Multiprocessing
        • Web Browser
        • Implementation of multiprocessing
        • Application areas of multiprocessing
      • Multithreading
        • Application areas of multithreading
      • Interrupt
        • HW / SW Interrupt
        • Method of handling interrupts
        • Occurrence of two or more interrupts simultaneously
      • Polling
      • Dual Mode
        • Reason for distinguishing between user mode and kernel mode
      • System call
        • Differentiation between system calls
        • Types of system calls
        • Execution process of a system call
      • Process Control Block (PCB)
        • PCB의 구조
        • 쓰레드는 PCB를 갖고 있을까?
        • 프로세스 메모리 구조
      • Context switching
        • Timing of context switching
        • Registers saved during context switching
        • Context switching in processes
        • Context switching in threads
        • Difference between context switching in processes and threads
        • Information of the current process during context switching
      • Interprocess Communication (IPC)
        • Cases where IPC is used
        • Process address space in IPC Shared Memory technique
        • Types of IPC
  • COMPUTER SCIENCE
    • Computer Architecture 101
      • 3 components of a computer
      • RAM vs ROM
      • CPU vs GPU
      • SIMD
      • Two's complement
      • Harvard Architecture vs. von Neumann Architecture
      • The structure of a CPU.
      • Instruction cycle (CPU operation method)
      • Instruction pipelining
      • Bus
      • Memory area
      • Memory hierarchy structure
        • Reason for using memory hierarchy structure
      • Cache memory
      • L1, L2, L3 Cache
      • Locality of reference (cache)
      • Fixed-point vs Floating-point
        • epresentation of infinity and NaN (Not a Number) in floating-point
      • RISC vs CISC
      • Hamming code
      • Compiler
      • Linking
      • Compiler vs Interpreter
      • Mutex vs Semaphore
      • 32bit CPU and 64bit CPU
      • Local vs Static Variable
      • Page
  • Programming Paradigm
    • Declarative vs Imperative
  • JPA, QueryDsl
    • why fetchResults() is deprecated
  • PYTHON
    • Icecream
  • FASTAPI
    • Template Page
  • LINUX
    • Template Page
  • DATA STRUCTURE
    • Counting Sort
    • Array vs Linked List
  • GIT, Github
    • git clone, invalid path error
  • INFRA
    • Template Page
  • AWS
    • Server Log Archive Pipeline
    • Image Processing using Lambda
  • DOCKER
    • Docker and VM
    • Python Executable Environment
    • Docker commands
  • docker-compose
    • Kafka, Multi Broker
  • KUBERNATES
    • !Encountered Errors
      • my-sql restarts
      • kafka producer: disconnected
    • Kubernetes Components
    • Helm
      • Helm commands
    • Pod network
    • Service network
      • deployment.yaml
      • services.yaml
    • Service type
      • Cluster IP
      • NodePort
    • service-name-headless?
    • kube-proxy
  • GraphQL
    • Template Page
  • WEB
    • Template Page
  • Reviews
    • Graphic Intern Review
    • Kakao Brain Pathfinder Review
    • JSCODE 자바 1기 Review
  • 😁Dev Jokes
    • Image
      • Plot twist
      • Priorities
      • SQL join guide
      • Google is generous
      • Genie dislikes cloud
      • buggy bugs
      • last day of unpaid internship
      • what if clients know how to inspect
      • its just game
      • how i wrote my achievement on resume
      • self explanatory
      • chr(sum(range(ord(min(str(not))))))
Powered by GitBook
On this page
  • 가상 메모리(Virtual Memory)
  • 가상 메모리의 동작 원리
  • TLB(Translation Lookaside Buffer)
  • 스와핑(Swapping)
  • 페이지 폴트(Page Fault)
  • 스레싱(Thrashing)
  • 메모리 할당
  • 고정 분할 방식(Fixed Partition Allocation)
  • 가변 분할 방식(Variable Partition Allocation)
  • 단편화(Fragmentation)
  • 메모리 분할
  • 페이지 교체 알고리즘
  • 결론
  1. Books
  2. CS Note for Interview
  3. Ch3. Operating System

3.2.2 Memory Management

메모리 관리

가상 메모리(Virtual Memory)

가상 메모리(Virtual Memory)는 메모리 관리 기법의 하나로, 컴퓨터가 실제로 이용 가능한 메모리 자원을 추상화하여 이를 사용자들에게 매우 큰 메모리로 보이게 만드는 것을 말합니다. 가상 메모리를 통해 프로세스는 물리적 메모리보다 더 많은 메모리를 사용할 수 있게 되며, 이를 통해 시스템 자원을 효율적으로 관리할 수 있습니다.

가상 메모리의 동작 원리

가상 주소와 실제 주소로 구분되는 두 가지 주소 체계를 사용합니다. 가상 주소는 프로그램이 사용하는 주소이며, 실제 주소는 메모리 관리 장치(Memory Management Unit, MMU)에 의해 가상 주소가 변환된 후 하드웨어에 전달되는 주소입니다. 이는 프로세스가 실제 물리적 메모리 크기를 신경 쓰지 않고 메모리를 사용할 수 있게 합니다.

  • 가상 주소(Logical Address): 프로그램이 참조하는 주소

  • 실제 주소(Physical Address): 메모리 관리 장치에 의해 변환된 주소

TLB(Translation Lookaside Buffer)

가상 주소를 실제 주소로 변환하는 과정에서 속도를 높이기 위해 TLB를 사용합니다. TLB는 자주 사용하는 페이지 테이블 항목을 캐싱하여, 변환 속도를 높입니다.

스와핑(Swapping)

스와핑은 가상 메모리에 존재하지만 실제 메모리인 RAM에는 현재 없는 데이터를 하드 디스크와 같은 보조 기억장치에 저장하고, 필요할 때 다시 메모리로 불러오는 기법입니다. 스와핑은 주로 시스템의 메모리가 부족할 때 발생하며, 이를 통해 시스템은 제한된 메모리 자원을 효율적으로 사용할 수 있습니다.

페이지 폴트(Page Fault)

페이지 폴트는 프로세스가 참조한 주소가 실제 메모리에 존재하지 않을 때 발생하는 현상입니다. 페이지 폴트가 발생하면 운영체제는 다음과 같은 과정을 통해 문제를 해결합니다.

  1. 운영체제는 해당 주소가 실제 디스크에 있는지 확인합니다.

  2. 만약 있다면, 해당 페이지를 메모리에 로드합니다.

  3. 페이지 테이블을 갱신합니다.

  4. 프로세스를 다시 실행합니다.

스레싱(Thrashing)

스레싱은 시스템의 메모리 관리에서 중요한 개념입니다. 메모리에 너무 많은 프로세스가 동시에 존재하여 페이지 폴트가 자주 발생하고, 그로 인해 시스템 성능이 급격히 저하되는 현상을 의미합니다. 스레싱이 발생하면 CPU는 유휴 상태로 돌아가게 되며, 전체 시스템 성능이 떨어지게 됩니다. 이를 해결하기 위해 운영체제는 다음과 같은 방법을 사용합니다.

  • 메모리 할당량 조정: 현재 실행 중인 프로세스의 메모리 할당량을 조절하여, 페이지 폴트를 줄이는 방법입니다.

  • 작업 세트 관리: 프로세스가 일정 시간 동안 자주 사용하는 페이지의 집합인 작업 세트를 관리하여, 필요한 페이지가 메모리에 상주하도록 합니다.

  • PFF(Page Fault Frequency): 페이지 폴트 빈도를 조절하여, 스레싱을 방지합니다.

메모리 할당

메모리 할당은 프로그램이 실행될 때 필요한 메모리 공간을 할당하는 과정입니다. 메모리 할당 방식은 다음과 같이 나뉩니다.

고정 분할 방식(Fixed Partition Allocation)

고정 분할 방식은 메모리를 미리 나누어 관리하는 방식으로, 메모리 공간을 미리 고정된 크기로 분할하여 프로그램을 할당합니다. 이는 간단한 구현이 가능하지만, 내부 단편화 문제가 발생할 수 있습니다.

가변 분할 방식(Variable Partition Allocation)

가변 분할 방식은 프로그램의 크기에 맞춰 동적으로 메모리 공간을 할당하는 방식입니다. 이는 메모리 사용의 효율성을 높일 수 있지만, 외부 단편화 문제가 발생할 수 있습니다.

  • 최초 적합(First Fit): 빈 메모리 공간 중 가장 먼저 맞는 곳에 할당합니다.

  • 최적 적합(Best Fit): 빈 메모리 공간 중 가장 적합한 곳에 할당합니다.

  • 최악 적합(Worst Fit): 빈 메모리 공간 중 가장 큰 곳에 할당합니다.

단편화(Fragmentation)

메모리 단편화는 메모리를 할당하고 해제하는 과정에서 발생하는 메모리 조각 현상입니다. 단편화는 내부 단편화와 외부 단편화로 나뉩니다.

  • 내부 단편화(Internal Fragmentation): 할당된 메모리 블록 내에 사용되지 않는 공간이 발생하는 현상입니다.

  • 외부 단편화(External Fragmentation): 할당되지 않은 메모리 공간이 여러 개의 작은 조각으로 나뉘어 사용되지 못하는 현상입니다.

단편화를 해결하기 위해 메모리를 재배치하는 압축 기법을 사용할 수 있으며, 페이지 단위로 메모리를 관리하는 페이징 기법도 단편화 문제를 해결하는 데 효과적입니다.

메모리 분할 및 페이지 교체 알고리즘

메모리 분할

  • 페이징(Paging): 메모리를 고정된 크기의 페이지로 나누어 관리하는 방식으로, 외부 단편화 문제를 해결할 수 있습니다. 페이징은 페이지 테이블을 통해 메모리를 관리하며, 페이지 테이블은 각 페이지의 위치를 저장합니다.

  • 세그멘테이션(Segmentation): 메모리를 의미 단위로 나누어 관리하는 방식으로, 프로그램의 논리적 구조를 반영합니다. 세그멘테이션은 코드, 데이터, 스택 등을 별도로 관리할 수 있습니다.

  • 페이징 세그멘테이션(Paged Segmentation): 페이징과 세그멘테이션을 결합한 방식으로, 세그먼트를 다시 페이지 단위로 나누어 관리합니다. 이는 세그멘테이션의 장점을 유지하면서도, 페이징의 효율성을 높일 수 있습니다.

페이지 교체 알고리즘

페이지 교체 알고리즘은 메모리에 빈 공간이 없을 때 어떤 페이지를 교체할지 결정하는 방법입니다. 대표적인 페이지 교체 알고리즘으로는 다음과 같은 것들이 있습니다.

  • FIFO(First In First Out): 가장 먼저 들어온 페이지를 가장 먼저 교체하는 방식입니다. 단순하지만, 성능이 떨어질 수 있습니다.

  • LRU(Least Recently Used): 가장 오랫동안 사용되지 않은 페이지를 교체하는 방식입니다. 시간 지역성을 반영하여 성능이 좋지만, 구현이 복잡할 수 있습니다.

  • LFU(Least Frequently Used): 사용 빈도가 가장 낮은 페이지를 교체하는 방식입니다. 단순하지만, 최근 사용 여부를 반영하지 않아 성능이 떨어질 수 있습니다.

  • NUR(Not Used Recently): LRU에서 발전된 방식으로, 최근에 사용되지 않은 페이지를 교체하는 방식입니다. 주기적으로 비트를 검사하여 교체할 페이지를 결정합니다.

결론

메모리 관리 기법은 컴퓨터 시스템의 성능을 극대화하고, 자원을 효율적으로 사용하는 데 필수적입니다. 가상 메모리, 스와핑, 페이지 폴트, 단편화, 페이지 교체 알고리즘 등 다양한 기법을 통해 메모리를 효과적으로 관리할 수 있습니다. 이러한 기법을 이해하고 활용하면 시스템 성능을 최적화하고, 안정적인 운영을 보장할 수 있습니다.

Previous3.2.1 Memory HierarchyNext3.3.1 Processes and Compilation Process

Last updated 10 months ago