问题现象最近在测试环境遇到了一个问题, 这两天收到了无缘无故的收到了大批测试短信, 而且都是几天前已经收到过的短信. 经过追踪日志发现, 短息发送是通过Kafka Consumer执行, 而Kafka Consumer把之前的消费了的消息, 又重新消费了一遍.经过资料, 最终在Kafka官文发现了点 ...
Kafka使用中遇到的问题
Hostname问题在Kafka的启动的时候遇到以下报错(包括kafka Test启动):java.lang.NoClassDefFoundError: Could not initialize class kafka.network.RequestChannel$ at kafka.network ...
DynamoDB集成EMR
配置 DynamoDB权限配置 本地测试需要给当前用户的group配置DynamoDB的访问权限, Lamdba和EC2可以通过VPC来访问 配置AWS Token AWS.config.update({ accessKeyId: 'xxx', secretAccess ...
Amazon ElastiCache for Redis in Lambda
Configure VPCAs there is no auth to connect to Redis server, all security policy are based on VPC‘s Security Group, so before setup Redis server, we h ...
Amazon ElastiCache for Redis
Amazon ElastiCache is a web service that makes it easy to set up, manage, and scale a distributed in-memory data store or cache environment in the clo ...
DynamoDB 待续
待完善及确认的地方: 全局二级索引 & 本地二级索引 区别生存时间自动删除过期的项,从而帮助您降低存储用量,减少用于存储不相关数据的成本 吞吐量: 消耗, 设置, 优化读取和写入吞吐容量 在 Amazon DynamoDB 中创建表或索引时,必须指定读写活动的容量要求。通过提前定义您的吞吐 ...
Dynamoose 使用
Dynamoose 是一个DynamoDB的建模工具. 安装npm install dynamoose 使用配置 环境变量 # Set environment variablesexport AWS_ACCESS_KEY_ID="Your AWS Access Key ID"ex ...
DynamoDB 开发 - JS
DynamoDB in ‘node.js’DynamoDB Local本地运行DynamoDB作为开发环境, 下载后本地解压运行:java -Djava.library.path=./DynamoDBLocal_lib -jar DynamoDBLocal.jar -sharedDb aws-sdk ...
AWS DynamoDB 学习
DynamoDB 的按需备份和还https://docs.aws.amazon.com/zh_cn/amazondynamodb/latest/developerguide/BackupRestore.html 生存时间https://docs.aws.amazon.com/zh_cn/amazon ...